当“悟空”遇上空间计算:一场科技与艺术的碰撞

图片

作者|参商

编辑|星奈

媒体|AI大模型工场

黑神话:悟空》已上线两周时间,热度依然不减。

作为国内首款自主研发的3A级大作,《黑神话:悟空》已经掀起一阵“悟空热”,从品牌联名到“悟空”同款旅游爆火,《黑神话:悟空》以世界级水准的游戏技术和极具禅意的东方美学为玩家打造了一个宏大的西游世界。

图片

主角悟空的形象设计,完美再现了“头戴凤翅紫金冠,身披黄金锁子甲,脚踏藕丝步云履,手持如意金箍棒”的飒爽英姿。

《黑神话:悟空》出圈背后是一场科技与艺术的碰撞。其中利亚德·虚拟动点利用空间计算-OptiTrack光学定位捕捉技术,为悟空等诸多角色赋予了鲜活的生命力和灵魂。

一、当“悟空”遇上空间计算

在游戏制作中,为了还原游戏角色逼真的神态、流畅的动作,使用了大量的动作捕捉技术。

动作捕捉技术的完成是一个涵盖多个环节的复杂过程。首先,动捕演员需要身穿专业动捕服,由几十台动捕摄像机识别采集演员身上的标记点的动态信息,并将其转换成骨骼数据

图片

接下来还需要对捕捉到的数据进行清洗、烘焙和优化。最后,在后期制作与合成阶段,将处理后的动作数据应用于动画制作,添加特效,并完成最终的视觉合成。

其中,动捕演员在其中扮演至关重要的角色。扮演悟空的动捕演员殷凯向AI大模型工场表示:“在塑造游戏角色的时候,通常由动捕演员和动画师共同创作完成,演员去演绎一部分内容创作,后期给到动画师进行数据处理。”

除了前期需要动捕演员的加持,后期的数据处理及游戏角色建造更是重中之重。

《黑神话:悟空》的动捕技术采用了由虚拟动点提供的OptiTrack光学动作捕捉系统。

利亚德·虚拟动点CEO刘耀东向AI大模型工场表示,“在游戏制作过程中,虚拟动点通过动捕方式1:1记录真实人物的神态、身体姿势及行动细节,实时捕捉演员动作,并对2D图像进行快速3D重建。同时,通过准确识别标记点,运算输出标记点质心数据,反馈系统再通过算法计算实时驱动游戏中的动画形象,保证了虚拟形象的实时交互性。”

图片

虚拟动点OptiTrack光学动作捕捉系统具有高精度与低延时特性,其精度误差小于+/-0.1mm,旋转误差+/-0.1度,延时最低可达2.8ms。超高的精度参数加持下,虚拟动点的动捕技术能够精准捕捉演员的每一个动作,并转化为游戏角色的动画,无论是基本的走、跑、跳、攻击、防御,还是复杂的攀爬、游泳等特殊技能动作,都呈现出极高的真实感和流畅度。

据官方介绍,虚拟动点自研的这套动作捕捉系统让整部游戏动作制作效率提升超过30%。

作为一个成立仅有5年的年轻公司,虚拟动点专注于AI和空间计算领域,已经参与制作了多部影视和游戏作品,从《三体》《流浪地球》到《使命召唤》、《巫师》等都采用了业内领先的动作捕捉技术。

二、大模型时代,空间计算迎来爆发期

说到空间计算,我们可能会联想到苹果的Vision Pro,通过模拟三维空间打造混合现实体验。

实际上,空间计算并不是一个新概念,早在2003年,麻省理工学院媒体实验室西蒙·格林沃尔德(Simon Greenwold) 在他的论文中首次提出“空间计算”这个术语,将其定义为:“人类与机器的交互,其中机器保留并操纵真实物体和空间的参照物。”

近两年随着大模型的横空出世,空间计算这一前沿领域再度吸引了全球的目光。

特别是7月末,“AI教母”李飞飞所创立的空间智能企业World Labs一跃成为全球成长速度最快的独角兽公司之一。该公司已完成了两轮融资,其中最新一轮融资额高达约1亿美元,进一步推动了其估值飙升至10亿美元(折合人民币约72.6亿元),显示出市场对空间智能技术的巨大信心与期待。

高质量的数据是虚拟动点的重要优势,可以说谁掌握了数据,谁就掌握了空间计算的未来。

目前,虚拟动点在空间计算领域已经沉淀了OptiTrack 光学识别计算、Lydcap 无标记点识别计算、LYDIA 动作大模型三种核心算法技术,解决方案已经覆盖包括影视、游戏、体育、文化艺术等九大行业,数字人交互、无人驾驶、机器人具身智能等数十种场景应用。

刘耀东向AI大模型工场表示,“数据问题对于虚拟动点来说并不是问题,反而是优势。2023年年底,利亚德·虚拟动点正式发布自主研发的专业能力动作大模型LYDIA,LYDIA专注于空间计算中动作数据的生成与理解,生成的是动作的三维数据。

图片

同时,LYDIA的核心动作参数源于三维空间下的OptiTrack动作捕捉数据,随着OptiTrack动捕设备的广泛应用,虚拟动点可以获得源源不断的3D动作数据,从而推动LYDIA大模型的技术和能力的不断迭代升级。”

空间计算相关技术渐趋成熟,正快速赋能相关传统行业,越来越多面向B端和C端的场景已经得到了空间计算的加成,新技术的红利正在逐步显现。

目前相关空间计算技术已经应用于影视、游戏、动画、电商、教育、体育、文艺等有空间计算内容生成需求的各种行业场景。

但面向未来,如何将空间计算技术赋能千行百业,解锁更多应用场景和变现路径,并最终形成产业生态环境,仍是行业需要共同探索的课题。