仅凭一张照片就能复原狗的三维形状、甚至制作动画的人工智能技术被开发出来。与自家爱犬一模一样的虚拟形象,如今可以在虚拟现实(VR)、增强现实(AR)和元宇宙中见到。
蔚山科学技术院(UNIST)人工智能研究生院朱京敦教授团队24日表示,已开发出可凭一张狗的照片生成可动三维虚拟形象(3D Avatar)的人工智能模型“DogRecon”。
狗因品种不同体型各异,加之四足行走的特性导致关节常被遮挡,是三维(3D)复原较为棘手的动物。特别是仅凭一张平面(2D)照片复原三维形状时,由于信息不足,常出现部分部位生成不准确或形态失真的情况。
DogRecon应用犬类专用统计模型,可捕捉不同品种的体型与姿态差异,并通过生成式人工智能自动生成多角度图像,从而将被遮挡部分也如实复原。此外,该模型基于高斯泼溅(Gaussian Splatting)模型,可精确再现狗的曲线体型乃至毛发质感。
在使用数据集进行的性能测试中,DogRecon仅凭一张照片就以接近既有视频类技术的水准,自然、准确地生成了狗的三维虚拟形象。既有模型常出现狗在弯腿姿态下躯干却伸直、关节弯折生硬、耳朵、尾巴和毛发结块等与实际形态相去甚远的再现结果。
此外,DogRecon在仅凭文本输入即可生成虚拟形象动作的“基于文本的动画生成”以及VR、AR等应用领域也展现出卓越的扩展性。
本次研究由UNIST研究员赵京洙作为第一作者主导,共同作者包括研究员姜昌佑(UNIST)、研究员孙东贤(DGIST)。赵京洙研究员表示:“在超过四分之一的家庭养宠物的时代,我们希望把此前以人为中心开发的3D复原技术扩展到宠物身上”,“DogRecon将成为任何人都能在数字空间中实现自己的爱犬并让其动起来的工具。”
朱京敦教授表示:“本次研究将生成式AI与3D复原技术结合,实现了与真实相似的宠物模型,是一项有意义的成果”,“今后还有望扩展到各种动物或个人定制虚拟形象。”
本次研究已于6月2日发表在计算机视觉领域全球最权威的期刊《国际计算机视觉杂志》(International Journal of Computer Vision)上,并得到韩国科学技术情报通信部与信息通信规划评价院(IITP)的“基于日常生活所需常识推断并理解新事实的人工智能技术开发项目”以及“UNIST人工智能研究生院支援项目”的支持。
? “皇帝股头号候选”…Hanwha Aerospace净买入居首[股市高手现在]






