2025-06-16 | 김성태 기자

AI智能体的游戏水平如何?蓝洞公开基准测试

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

蓝洞(259960)16日表示,已公开可评估基于大规模语言模型(LLM)的AI智能体游戏执行能力的基准测试“Orak”。

Orak是可在游戏环境中对AI的情境认知、判断及行为决策过程进行定量分析的评估体系。该体系基于动作、冒险、角色扮演游戏(RPG)、模拟、策略、解谜等共6个类型的大众游戏设计。由于可反复验证包括CPC在内的AI智能体的游戏能力,预计将有助于提升与AI共同游玩的全新游戏体验质量。该基准名称取自在休息时间以各种方式愉悦心情之意的“娱乐”一词。

该体系反映了蓝洞与英伟达共同开发的“CPC”(Co-Playable Character)所积累的AI设计经验。

蓝洞的目标是通过Orak为AI技术研究提出新标准。今后将把研究从游戏产业扩展至各类产业领域。此外还一并提供用于LLM微调的数据集。研究人员可借此将预训练LLM适配并优化至实际游戏环境。

蓝洞深度学习本部长이강욱表示:“Orak是集中了蓝洞前瞻研究与经验的游戏专用型LLM基准,我们还在以此为基础筹划比拼LLM智能体设计能力的大赛”,“今后也将持续升级面向游戏领域优化的LLM技术,主导通过AI实现游戏体验创新”。

另一方面,蓝洞今年提交的10篇论文被全球最权威的AI学会ICLR和ICML录用。其中3篇入选ICLR聚光灯论文,在全球AI研究生态中受到关注。

阅读韩文原文