2021-08-02 | 김동현 기자

Upstage公开韩语AI模型评测平台“KLUE排行榜”

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

人工智能(AI)专业初创企业Upstage 2日表示,已公开可对韩语AI模型进行评价的KLUE排行榜。

KLUE是Upstage与韩语自然语言处理相关产学界专家历时7个月共同开发的首个“韩语自然语言理解评价”公开数据集。此前,作为自然语言理解研究基础的数据集和排行榜均以英语为基础,且使用限制较多,研究推进并不容易。Upstage方面解释称:“可评价AI韩语理解能力的KLUE允许再分发、再加工和商业性利用,预计将引领韩语自然语言处理领域的发展。”

若想使用KLUE接受AI模型评价,只需访问KLUE项目主页安装数据集,对想测试的AI模型进行训练后提交至排行榜即可。评价项目分为8个部分,提升了公信力。分别是句子主题分类、句子相似度比较、自然语言推理、实体名识别、关系抽取、形态素及依存句法分析、机器阅读理解、对话状态追踪等。

AI模型开发者可通过客观指标评价自己开发的模型是否具备对韩语的准确理解和推理能力。尤其是以公开讨论区为中心,参与者之间可交换信息和意见,从而在公平竞争中不断升级AI语言模型,这被视为其优点。

Upstage代表金圣勋表示:“期待以KLUE排行榜公开为契机,形成为各类韩语AI模型评价及研究而活跃交流的平台”,“今后也将基于Upstage独有的技术实力,拓展韩语AI研究生态,努力为国内AI产业发展贡献力量”。

阅读韩文原文