AI数据专业企业Selectstar于20日宣布,推出韩国首个生成式AI服务可信性验证自动化解决方案"DATUMO Eval"。该解决方案将可信性验证流程自动化,支持事先识别并应对AI服务运营中可能出现的各种错误与风险。
Selectstar拥有面向新韩银行等多家企业开展可信性验证咨询的经验,以及运营韩国首个、最大规模"生成式AI红队挑战赛"的经验。公司运用相关经验开发了DATUMO Eval。
DATUMO Eval在推出的同时,已确定被包括金融业在内的多家企业引入。主要功能包括:△根据企业AI服务类型与使用目的设定评价标准;△自动生成符合领域与服务的定制化评价用问题;△自动评价AI服务的回答并分析结果;△挖掘AI服务漏洞的红队功能等。
特别是,DATUMO Eval可自动生成100万个以上评价用问题,支持全面评价AI模型需处理的各种用户话语模式。由此大幅削减了以往由领域专家人工设计评价用问题所产生的高昂成本与时间。自动生成的评价用问题基于Selectstar自有AI智能体技术生成,并反映企业的评价目的、需求、难度、与实际客户数据的相似性等多种要素,可实现贴近现实的评价。
代表金世烨表示:"AI商业化中最重要的是'可信性'。我们将通过DATUMO Eval帮助企业更准确、更安全地运营AI服务","Selectstar不仅要引领韩国AI可信性验证市场,还将在全球市场扩大影响力"。






