2018-11-30 | 권경원 기자

Kakao集团公开学习85万个句子的词素分析器“Khaiii”开源

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

Kakao集团(035720)30日表示,将以开源方式提供基于人工智能(AI)深度学习技术开发的词素分析器“khaiii”。

词素分析技术是指在输入由两个以上文字构成的单词或句子时,自动将其切分为具有意义的最小语言单位——词素的技术。该技术主要用作自然语言处理应用服务的基础技术,可用于信息检索、机器翻译、智能音箱等多种服务。

khaiii是利用通过深度学习所学数据来分析词素的模型。它采用深度学习技术之一的CNN(卷积神经网络)技术,以音节为基础分析词素。特别是以国立国语院发布的世宗语料库数据为基础修正数据错误,并追加Kakao集团自主构建的数据,共学习了85万个句子、1003万个词节的数据。

khaiii可在GitHub上查看,任何人均可免费使用。

Kakao集团表示:“通过开源公开,在韩语研究、聊天机器人处理应用技术开发等运用韩语的各个领域,都能够减少词素分析所需的成本和时间。”

阅读韩文原文