阿里巴巴淘宝Meta团队开源MNN-TaoAvatar，手机端即可实现3D真人数字人实时交互
阿里巴巴淘宝 Meta 团队推出 3D 真人数字人技术 TaoAvatar，基于 3D 高斯泼溅算法，可在普通手机或 XR 设备上实现实时渲染与 AI 对话。该技术不仅能还原细腻的表情、动作与服饰细节，还大幅降低建模成本。配套开源应用 MNN-TaoAvatar 整合了语音识别、大语言模型、语音合成与神经渲染等模块，具备端侧实时对话与渲染能力。测试显示其 ASR、TTS 和 A2BS 模型的实时因子分别达 0.18、0.58 和 0.34，NNR 渲染器可流畅输出 60 FPS 的 25 万点云模型。通过多项深度优化，系统可在单机环境下高效运行，推荐搭载骁龙 8 Gen 3 或以上设备使用。目前项目已开源，开发者可通过 GitHub 获取并部署体验。来源：https://mp.weixin.qq.com/s/YW9ASa_bPDdwQ2nANqPKEw
页:
[1]