2025-01-08 | 김성태 기자

“英伟达、SKT也投资…将成AI影像分析独角兽”[规模化报告]

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

“我们要在视频领域打造‘ChatGPT时刻’。”

Twelve Labs首席执行官李在成近日在首尔龙山区亚太(APAC)分公司接受Seoul Economic Daily采访时表示:“我们正在开发世界上还没有人做出来的人工智能(AI)模型。”

2021年在美国旧金山成立的Twelve Labs是一家专注开发视频理解AI模型的初创公司。在韩国国内尚属未开垦领域的视频理解AI方面,该公司扮演着先驱者角色。自成立初期便开发出视频理解AI模型“Marengo”和视频语言生成AI模型“Pegasus”,备受关注。由于宣告动态影像时代开端的第一个拍摄对象是马,公司怀着开启视频理解时代新格局的抱负,为AI模型取了与马相关的名字。Marengo是能够将视频内容识别为文本并检索视频信息的AI。Pegasus则是具备视频摘要、亮点生成等基于视频的文本生成功能的超大规模AI视频语言生成模型。它首次公开了此前并不存在的基于视频的生成功能,例如像人一样准确精细地把长视频总结成文本,或像使用ChatGPT那样就视频自由问答。

Twelve Labs以视频AI模型为基础,已获得体育、媒体、娱乐、国防等领域的客户。加拿大体育娱乐公司Maple Leaf Sports & Entertainment(MLSE)是其代表性客户。在韩国国内,公司与世宗特别自治市、韩国科学技术情报通信部、韩国互联网振兴院共同推进下一代智能视频监控示范项目。利用能够理解视频的Twelve Labs模型,可以开发出具备视频检索、场景分类、摘要、视频片段章节划分功能的应用。内容创作者还可通过自然语言检索,直接在视频中找到想要的瞬间。

Twelve Labs自认在视频理解领域实力最为出众。OpenAI、谷歌等大型科技公司也在提升视频相关AI水平,但Twelve Labs开发的是专注于视频的AI。李在成表示:“我们是一家有近100人专注于视频理解AI的企业”,“因为专注视频,所以在性能和成本方面都更有优势”。

大型科技公司看中Twelve Labs的技术实力,接连投资,引发热议。迄今获得的投资额达1.07亿美元(约1530亿韩元)。2023年10月,英伟达与Samsung Electronics的企业风险投资(CVC)Samsung Next、韩国投资伙伴等进行了约130亿韩元规模的战略投资。去年6月,英伟达的子公司NVentures与New Enterprise Associates(NEA)作为领投方投资约5000万美元(约700亿韩元)。同年12月,Snowflake、Databricks、SK电讯(017670)、HubSpot Ventures、In-Q-Tel等新加入投资者行列,进行了3000万美元(约430亿韩元)规模的战略投资。种子轮投资时,被视为世界级AI权威的斯坦福大学教授李飞飞和Cohere首席执行官(CEO)艾丹·戈麦斯等也曾参与。李在成表示:“我认为投资机构和投资者判断视频理解领域非常重要,想与做得最好的企业合作,因此选择了Twelve Labs。”

今年Twelve Labs计划加快与约30家合作伙伴的协作。除投资方英伟达、SK电讯、Databricks、Snowflake外,亚马逊云科技(AWS)和甲骨文等也是主要合作伙伴。SK电讯将利用Twelve Labs的模型提升AI助手的视频分析功能和AI监控系统水平。上月进行投资的Databricks将利用Twelve Labs的AI模型,提升自有数据平台内视频分析服务的水平。Snowflake则利用Twelve Labs技术提高现有视频分析解决方案的效率。李在成表示:“目标是在各个产业中打造成功案例。”

客户所属产业范围也在扩大。公司已获得欧洲自动驾驶汽车开发商和美国机器人开发商作为客户,并与部分企业进行技术验证(PoC)。李在成表示:“客户正利用Marengo和Pegasus等构建开发自动驾驶汽车所需的数据集”,“也被用作处理AI智能体(助手)视觉信息等的大脑模块”。

Twelve Labs设定的目标是,10年后成为处理全球全部视频数据中两位数比例的企业。即在带摄像头的设备上搭载自家AI模型,支持实时视频理解。公司也在提升实时视频理解能力。李在成强调:“我们要成为为韩国确保AI主权作出贡献的企业”,“既然在全球市场证明了技术实力,成为独角兽(企业价值1万亿韩元以上的非上市公司)也不会太远”。

为达成目标,Twelve Labs也在全力吸引优秀人才。去年初约40人的团队,到今年初已增至80多人。这是因为需求在增加。人员中七成以上是研发人员。去年11月,公司引入了曾任SK电讯首席技术官(CTO)并参与苹果“Siri”服务开发的김윤担任首席战略官(CSO)。Twelve Labs今年计划再招聘40余人。李在成本人每天也花1小时以上面试应聘者,专注于选拔优秀人才。他表示:“近期通过战略投资募集的资金将用于人才引进等方面。”

阅读韩文原文