复制成功

分享至

主页 > 数字货币 >

全新虚拟人技术发布,苹果原来还握着这么多元宇宙大招

2023.12.28

原文来源:元宇宙新声

全新虚拟人技术发布,苹果原来还握着这么多元宇宙大招

图片来源:由无界 AI‌生成

随着年末的到来,半年前苹果在头显领域的大招Vision Pro距离正式发售也越来越近。

虽然半年来,大家的目光都聚焦在Vision Pro可能带来的全新沉浸式体验上,但潜藏在其中关于虚拟人的探索亦有不少:

从五年前引领3D面部动捕的Animoji,到上周发布的可以生成真人数字分身的HUGS技术,都展露出苹果想探索出一条与众不同虚拟人道路的决心。

而这些多年积累的技术,也都将在Vision Pro上迎来高光时刻——不得不说,在为元宇宙续命这块苹果是会拿捏的,以半年为周期稳定为元宇宙注入新的可能性。


1 全新技术 让虚拟人无限趋近现实


苹果最新发布的 "HUGS"虚拟人技术,全称为Human Gaussian Splats,即人类高斯合成,这项技术基于3D Gaussian Splatting(3DGS)和SMPL身体模型,通过两种先进技术融合来创造出更加生动和真实的数字人物。

较之传统的虚拟人生成技术,HUGS的一个关键优势在于其高效的数据处理能力,其仅需大约2到4秒的视频(50-100帧),就能生成一个完整的数字分身,大大减少了创建虚拟人所需要的原始素材。

当然目前HUGS在捕捉细节方面还有局限,不过通过算法,HUGS能够自动填充未被捕捉到的元素,确保了数字分身的整体质量。

此外,HUGS的生成速度是其另一个优势:苹果发布的相关论文宣称,HUGS能在约30分钟内完成数字人的生成,速度比当前市场上的其他同类产品快约100倍。

而在所需素材较少,生成速度较快的基础上,HUGS在渲染质量和速度上也有显著提高:HUGS能够以60 FPS的速度实现高质量渲染,同时还能处理动态场景中的复杂挑战,如避免伪影并协调动画过程中的运动。

虽然动作设计有些鬼畜,但通过演示视频可以看出,当前利用 HUGS"技术生成的数字人在动作流畅性、人物拟真性上都已经趋近完成体。

这也宣示着苹果在数字渲染领域的一个显著进步,特别是在动态场景中创建和渲染人类数字分身的能力上。因此在拥有Vinsion Pro后,通过相关技术快速生成数字人并在此基础上开展多样化应用也成为了可能。

除了潜在的与Vinsion Pro结合的可能性,HUGS的这些特性也使其成为电影制作、游戏开发、虚拟现实等领域的一个有价值的工具,特别是在需要快速且高质量地渲染动态人类角色的场景中。

通过HUGS技术,创作者和开发者能够更自由地实现新颖姿势和视图的合成,开辟数字创作的新可能性。

当然突破并非一蹴而就——近几年,苹果在虚拟人相关技术上进行的诸多探索,都一个个成为Vinsion Pro未来图景的基石。


2 逐步积淀 空间计算稳健前行


回顾苹果的虚拟人相关的动作,2017年的Animoji无疑是其中的关键一步。

Animoji首次亮相于2017年的苹果秋季发布会,与iPhone X一同亮相的Animoji在彼时展示出了一种全新的交互方式:

这一技术通过iPhone的前置TrueDepth相机系统精确捕捉用户的面部动作,如嘴巴、眉毛和眼睛的运动,从而实时地将这些表情映射到独角兽、机器人或猫头鹰等各种动画角色上。用户可以选择不同的动画角色来录制和发送含有语音的动画消息,这些角色能够精准地模拟并反映用户的表情和声音。

全新虚拟人技术发布,苹果原来还握着这么多元宇宙大招

而后来发生的故事,我们已经很熟悉:随着技术的不断进步,Animoji也被运用到更广泛的场景,如社交媒体和视频制作上。同时其他同类产品也开始疯狂涌现,通过面部捕捉生成自己虚拟形象的热潮,每隔一段时间就会重复一次。

同时随着时间的推进,苹果在虚拟人相关技术的探索上也更进一步——其中的许多技术细节中,都不乏Animoji的影子。

据目前的消息,在Vision Pro上苹果会提前录入使用者的 3D 面孔数据,生成出一个 3D 建模渲染的自己,也就是接近一比一还原的虚拟人,而为了让虚拟人更加逼真,苹果将采用一项名为“情绪识别”的新技术。

该技术旨在通过摄像头,来分析用户的面部表情和情绪。根据专利内容,在这套系统中,需要使用面部识别技术来识别用户身份,以便提供定制化的操作,而这一技术其实也源自苹果早年的积淀。

免责声明:数字资产交易涉及重大风险,本资料不应作为投资决策依据,亦不应被解释为从事投资交易的建议。请确保充分了解所涉及的风险并谨慎投资。OKEx学院仅提供信息参考,不构成任何投资建议,用户一切投资行为与本站无关。

加⼊OKEx全球社群

和全球数字资产投资者交流讨论

扫码加入OKEx社群

相关推荐

industry-frontier