+
37
-

回答

目前(2026年初)比较好的单目(monocular)动作捕获(MoCap)开源项目,主要聚焦于从单个摄像头视频中实现无标记3D人体姿态估计、跟踪和重建。这些项目多基于深度学习(如SMPL模型、2D关键点到3D抬升),支持实时或离线处理,适用于VTuber、动画、生物力学等场景。 以下按GitHub stars排序推荐顶级项目(数据基于最新搜索),均支持单目输入,易上手(Python/C++基底)。

推荐开源项目

MediaPipe (BlazePose)Google跨平台ML框架,提供实时单目3D人体姿态跟踪(33个关键点世界坐标)。支持视频/直播,输出BVH兼容格式。超实时(手机级30+ FPS),手/脸/姿势一体;Android/iOS/Web/Desktop。32.8k / 5.7k活跃GitHub
EasyMocap无标记人体MoCap工具箱,从RGB视频拟合SMPL-X(身/手/脸)。支持互联网视频单目重建。多目扩展、实时3D可视化、新视图合成;集成MediaPipe/OpenPose。4.4k / 5322022(但稳定)GitHub
freemocap免费MoCap平台,GUI驱动,从视频录制到3D数据导出(Blender插件)。硬件无关,支持单目。研究级精度、低成本;教程丰富,Discord社区。4k / 3112025.12GitHub
SysMocap实时视频驱动MoCap,专为3D虚拟角色动画(VTuber/AR/VR)。全身体/脸捕获。美观GUI、跨平台(Win/macOS/Linux)、OBS直播集成;MediaPipe基底。2.8k / 4362025.03GitHub
MocapNET从单目2D关键点(OpenPose/MediaPipe)实时抬升到3D BVH。支持遮挡/个性化肢体。70 FPS CPU实时、IK精炼;Blender/ROS集成,手/脸扩展(v4)。917 / 1412025.06GitHub
pose2sim无标记运动学分析,从2D姿态到3D OpenSim运动。单目模式via Sports2D。生物力学强(关节角/肌力)、多滤波/多人体;GPU加速。543 / 922025.12GitHub

新兴/学术项目(2024-2025)

PoseMamba:AAAI 2025单目3D姿态,时空状态空间模型,高精度视频序列。 GitHub

MoCapDeform:单目可变形场景MoCap(3DV 2022最佳学生论文),处理沙发等交互。 GitHub

注意事项

精度:单目易受深度歧义影响,推荐正面/侧面运动+相机标定(焦距/畸变)。多项目用SMPL模型,MPJPE误差<100mm(Human3.6M基准)。

依赖:PyTorch/TensorFlow/OpenCV/MediaPipe常见;GPU(NVIDIA)提速10x。安装多用Conda/pip。

起步建议:MediaPipe(最易实时)→ EasyMocap(全面)→ freemocap(GUI友好)。结合YOLO跟踪多人体。

资源:Awesome列表如visonpon/human-motion-capture,跟踪SOTA。

这些项目活跃维护,商用友好(MIT/Apache许可为主)。如需特定场景(如手部),可扩展MediaPipe Holistic。

网友回复

我知道答案,我要回答