XR Animator是一款基于视频/摄像头的AI动态捕捉软件，专为VTuber和元宇宙时代量身打造。利用MediaPipe和TensorFlow.js的机器学习（ML）技术，它能够从实时摄像头视频中捕捉3D姿态，并实时驱动3D角色（MMD/VRM模型），仿佛你正用自己的身体来控制这个虚拟角色。无论是用于VTuber创作还是其他XR/3D应用场景，它都能发挥出色的作用。该应用提供了多种灵活的运动追踪选项，你可以根据需求选择追踪面部、全身或者部分身体（包括面部、身体、手部的任意组合）。
XR Animator的网页版兼容所有主流的桌面和智能手机浏览器。在支持Web Worker和OffscreenCanvas的浏览器（如Chrome）上，它能在性能中等的电脑上实现流畅的60fps视觉渲染和30fps的身体姿态检测。对于处理能力有限的智能手机，建议主要使用其面部追踪功能，以确保流畅的体验。
0条评论