普罗米修斯视觉体积视频为虚拟演艺和在线教育带来了新的可能性。这一数字孪生技术不但大大降低了体积视频的制作成本,还使得 3D 重建更精确、传输效率更高,而且支持从移动端到 PC 再到 VR/AR 头显的全平台渲染显示。该技术在FMIF 2022 未来元宇宙创新论坛上获得了“元宇宙技术创新奖”。
传统视频由每秒 30 帧的静态画面构成,而体积视频则由每秒 30 个 3D 静态模型构成,可以精确还原人物的表情、动作,是现阶段唯一能够完整和有效记录现实世界动态三维影像的方法。体积视频在各行各业中均有广阔的应用前景,近年来以微软、英特尔为首的多家世界顶级的科技公司都在争相入局。
由清华大学张煜博士创建并领导的普罗米修斯视觉(全称“珠海普罗米修斯视觉技术有限公司”)技术团队已在这一领域探索了近 10 年。该团队由中国工程院倪光南院士担任首席科学家,核心成员均为国内外顶尖院校的高精尖人才。团队打造的体积视频相关技术和产品两次荣获工信部评选的世界 VR 应业大会 VR/ AR 创新奖。
普罗米修斯视觉体积视频技术已在虚拟演艺和在线教育领域得到应用。快手与普罗米修斯视觉合作,采用体积视频技术打造了人气主播陈逗逗的线上演唱会。这是国内首个元宇宙真人虚拟直播演唱会,也是首次将真人形象应用至元宇宙的创新尝试。和此前大多虚拟演唱会不同的是,直播中的陈逗逗看起来完全是真人模样,但实际上她并不是真人实时出镜,也不是通过数字建模、动作捕捉生成的虚拟形象,而是普罗米修斯视觉利用体积视频采集技术,高效捕捉陈逗逗在真实世界中的三维动态数据,生成体积视频,精确还原她的动作神情。
普罗米修斯视觉还推出了支持体积视频的元宇宙教育平台。该平台在常用教学平台所提供的全部主要功能的基础上,增加了对通过数字孪生还原整个教学与实训过程的支持:
- 写实的全息老师教学,使用体积视频记录,支持 6DOF 自由视角观看;
- 教师可以持实物模型或展示数字高清 3D 模型,每个学生均可以自由视角观看,以更清楚的观看实验动手和教师展示的实物或数字模型;
- 在沉浸式的数字孪生的校园或教室中授课实习;
- 教学过程中教师把学生实时无缝地带入到真实的沉浸式现场环境中完成实习实训。
普罗米修斯视觉体积视频技术可提供的新功能为元宇宙教育平台的构建带来了新的超越常规想象的可能性。【数字叙事 毕昂】