2024-07-24 | 실리콘밸리=윤민혁 특파원

小型AI领跑者Meta以“Llama 3.1”反击OpenAI、谷歌“大模型”

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

Meta公开了开源人工智能(AI)“Llama”系列的最新版本“Llama3.1”。距4月公开“Llama3”仅3个月,Meta放弃了此前专注于参数700亿个以下小型AI的方针,推出4050亿个参数的超大型模型,正式与OpenAI、谷歌、Anthropic等竞争对手展开竞争。

23日(当地时间),Meta公开了最新AI模型Llama3.1共3款。Llama3.1推出参数80亿个的8B、700亿个的70B和4050亿个的405B三种版本。参数指用于AI训练的数据。参数越大,AI性能越好,但容量增大,运行会消耗更多资源。

Llama3.1 405B性能为Llama系列历代最强。在AI性能评价指标之一的大规模多任务语言理解(MMLU)测试中,Llama3.1 405B正确率达88.6%,超过OpenAI GPT-4的85.4%和Anthropic Claude3.5 Sonnet的88.3%。不过略低于OpenAI最新模型GPT-4o的88.7%。中小型模型性能也比Llama3有所提升。在MMLU中,Llama3 8B和70B分别为68.4%、82.0%,而Llama3.1 8B和70B分别为73.0%、86.0%。

Meta以Llama3.1推出参数4000亿个以上的大型模型,改变了此前专注于70B以下小型模型的方针。事实上,Meta在今年4月公开Llama3时曾表示将推出4000亿个以上参数的模型。如今以仅3个月的短间隔公开了此前承诺的4000亿个以上大型模型,同时改进原有小型、中型模型,并命名为Llama3.1。

Meta提前更新AI并公开“巨型模型”,被解读为明显是针对竞争对手的举动。今年4月Llama3公开后,竞争对手接连发布AI,使其必须迅速应对。实际上,在Llama3公开一个月后的5月,OpenAI发布了GPT-4o,谷歌公开了小型模型Gemini 1.5 Flash。随后OpenAI近期推出超小型模型GPT-4o mini,Anthropic也将Claude3.0升级至3.5并优先推出小型的Sonnet。此前专注于超大规模AI的竞争对手开始进攻Meta的主场——小型AI市场,Meta则反向推出大型AI予以反击。

其中也可看出巩固开源AI阵营领军地位的战略。与其他超大规模AI不同,Meta的Llama系列是公开设计图的开源模型,任何人都可免费使用,成为众多“变形AI”的基本框架。作为基础的Llama系列性能越高,整个开源AI生态都能受益,Meta在开源AI阵营内的影响力也会增强。实际上,Meta首席执行官(CEO)马克·扎克伯格也强调开源的优点,牵制“封闭式”AI开发商。扎克伯格在与Llama3.1一同公开的信中强调:“计算机发展初期,各方在开发封闭式Unix上投入了巨额资金,但如今开源的Linux成为产业标准,AI也将以类似方式发展”,“Llama3.1不仅在成本和性能上优于封闭式模型,而且作为开放模型,最适合对其他模型进行微调和蒸馏。”

阅读韩文原文