Meta Codec Avatar 研究负责人 Yaser Sheikh 在 NVIDIA GTC 大会上介绍了化身技术。

打开网易新闻 查看精彩图片

去年 9 月，Meta 在 Lex Fridman 播客中展示了其 Codec Avatars 技术。在其中，科技博主 Lex Fridman 和马克·扎克伯格就 Codec Avatars 进行了长达一个小时的交谈。在谈话中，他们戴着 Meta Quest Pro，该头显使用五个传感器进行眼睛和面部追踪。

在演讲中，Yaser Sheikh 表示每个工作站都配备了 4 个 GeForce RTX 4090 显卡，用于渲染双方的化身。因此，这意味着该技术距离在像 Meta Quest 3 这样的独立头显上以这种质量运行化身还有很长的路要走，Quest 3 只能提供一小部分渲染处理。

打开网易新闻 查看精彩图片

根据 Sheikh 的说法，播客中使用了 Codec Avatars 2.0。Sheikh 后来在问答环节中表示，实验室已经让 Codec Avatars 1.0 适用于 VR 一体机，这些化身可以通过智能手机面部扫描来创建。

Sheikh 还展示了新一代技术 Codec Avatars 3.0，该技术使用高斯飞溅技术，使人物渲染得更加逼真，甚至包括一根头发丝。

Meta 多年来一直在研究 Codec Avatars，并于 2019 年首次对这项研究进行了深入研究，长期目标是在经济实惠的头显上实现逼真的远程呈现。

打开网易新闻 查看精彩图片

与此同时，Meta 打造逼真化身的压力越来越大：Apple Vision Pro 已经通过 Personas 提供了功能良好的远程呈现解决方案。虽然数字角色仅在窗口内以二维方式显示，但我们可以期待苹果在未来几个月和几年内大大改进这项技术。

根据泄露的硬件路线图，Meta Codec Avatars 可能会应用于新的高端头显，这可能是 Meta 正在与 LG 合作开发的头显，据报道将于 2025 年发布。