由AI驱动的无标记动作捕捉技术,从标准视频录制中提取3D身体运动数据——使用深度学习来分析和重建人类运动,无需特殊服装、标记或专用捕捉体积。
什么是 Move.ai?
Move.ai 是一种基于人工智能的动作捕捉技术,它能从普通视频录制中提取运动数据。该系统不需要标记点、特殊服装或捕捉空间——只需要摄像机录制。
基本原理
| 方面 | 描述 |
|---|---|
| 技术 | 深度学习 |
| 输入 | 标准视频 |
| 输出 | 3D 运动数据 |
| 标记点 | 无需 |
技术
| 元素 | 描述 |
|---|---|
| 神经网络 | 姿态估计 |
| 计算机视觉 | 图像分析 |
| 3D 重建 | 身体几何 |
| 时间性 | 帧到帧 |
优点
| 优点 | 描述 |
|---|---|
| 无空间限制 | 任意地点动作捕捉 |
| 无标记点 | 自然表演 |
| 后期处理 | 从现有素材 |
| 成本效益高 | 设备更少 |
局限性
| 方面 | 描述 |
|---|---|
| 精度 | 低于光学动作捕捉 |
| 遮挡 | 存在问题 |
| 手指/面部 | 受限 |
| 质量 | 取决于视频 |
输入要求
| 方面 | 建议 |
|---|---|
| 视频 | 高清或更高 |
| 帧率 | 24-60 fps |
| 摄像机 | 1-8+ 台 |
| 角度 | 多样 |
多摄像机
| 配置 | 描述 |
|---|---|
| 单摄像机 | 可行,但有限 |
| 2 台摄像机 | 更好 |
| 4+ 台摄像机 | 最佳 |
| 同步 | 推荐 |
输出格式
| 格式 | 用途 |
|---|---|
| FBX | 标准 |
| BVH | 动画 |
| USD | 管线 |
| 自定义 | API |
工作流程
| 步骤 | 描述 |
|---|---|
| 1 | 录制视频 |
| 2 | 上传至 Move.ai |
| 3 | AI 处理 |
| 4 | 导出数据 |
处理
| 方面 | 描述 |
|---|---|
| 云端 | 远程处理 |
| 时间 | 每分钟处理时间 |
| 质量 | 可调 |
| 迭代 | 可行 |
应用
| 领域 | 示例 |
|---|---|
| 影视特效 | 动画参考 |
| 游戏 | 角色动作 |
| 虚拟制作 | 实时选项 |
| 健身 | 动作分析 |
与传统动作捕捉对比
| 方面 | Move.ai | 光学 |
|---|---|---|
| 精度 | 良好 | 优秀 |
| 设置 | 极简 | 繁琐 |
| 成本 | 较低 | 较高 |
| 灵活性 | 高 | 有限 |
集成
| 软件 | 描述 |
|---|---|
| Maya | 导入 FBX |
| Unreal | 直接/FBX |
| Unity | FBX/BVH |
| Blender | 导入 |
定价模型
| 级别 | 描述 |
|---|---|
| 免费 | 有限分钟数 |
| 订阅 | 月度套餐 |
| 企业版 | 定制 |
| 按分钟计费 | 按需付费 |
竞争对手
| 服务 | 描述 |
|---|---|
| Rokoko Video | 类似概念 |
| DeepMotion | AI 动作捕捉 |
| Plask | 基于网页 |
| RADiCAL | 移动端优先 |
质量因素
| 因素 | 影响 |
|---|---|
| 光照 | 均匀更好 |
| 对比度 | 表演者 vs. 背景 |
| 遮挡 | 避免 |
| 动作 | 清晰可见 |
最佳实践
| 实践 | 原因 |
|---|---|
| 高质量视频 | 输入质量 = 输出质量 |
| 多角度 | 3D 重建 |
| 干净的背景 | 更好的识别 |
| 先测试 | 验证工作流程 |
在制作中的应用
| 阶段 | 应用 |
|---|---|
| 前期制作 | 参考动作捕捉 |
| 制作中 | 并行捕捉 |
| 后期制作 | 后期提取 |
| 预可视化 | 快速动画 |
未来
| 发展 | 描述 |
|---|---|
| 手指追踪 | 改进中 |
| 面部 | 集成 |
| 实时性 | 更多选项 |
| 精度 | 持续提升 |
现状
Move.ai 代表了通过人工智能实现易于获取的动作捕捉的趋势。虽然其精度尚未达到高端光学系统水平,但该技术使得在传统方法不切实际的情况下进行动作捕捉成为可能。对于参考动画和低预算项目,Move.ai 是一个具有颠覆性的选择。
继续浏览词典
相关术语
视觉特效 · 技术
Motion Capture / MoCap
用于捕获和数字记录演员或对象身体运动的技术。在动画或VFX中使用。
视觉特效 · 设备
Rokoko Motion Capture
摄影 · 技术
Performance Capture
视觉特效 · 技术
Camera Solve / Camera Tracking / Match Moving
视觉特效 · 技术
LiDAR / Light Detection and Ranging / Laser Scanning
Light Detection and Ranging - 一种遥感技术,使用激光脉冲进行距离测量和物理空间的精确3D表示,现已成为电影制作中VFX数据捕获、自动对焦系统、集合测量…
导演
previs