摄影指导
LiveLink Face demokratisiert Facial Mocap. Ein iPhone genügt für überzeugende Gesichtsanimation – ideal für Previz oder sogar finale Animation bei kleineren Projekten.
Epic Games的免费iOS应用程序，可从iPhone TrueDepth摄像头捕获面部运动数据，并通过Live Link实时传输到Unreal Engine——允许MetaHumans、数字角色和虚拟制作的可访问面部性能捕捉，无需昂贵的专用硬件。
什么是 LiveLink Face？
LiveLink Face 是 Epic Games 免费的 iOS 应用，它利用苹果的 TrueDepth 摄像头实时捕捉面部动作，并通过 Live Link 流式传输到 Unreal Engine。它让专业的面部动作捕捉对每个人都触手可及。
基本原理
| 方面 | 描述 |
|---|---|
| 技术 | Apple ARKit TrueDepth |
| Blendshapes | 52 个 ARKit 形状 |
| 传输 | Live Link 协议 |
| 接收器 | Unreal Engine |
硬件要求
| 组件 | 规格 |
|---|---|
| iPhone | X 或更新机型（TrueDepth） |
| iPad Pro | 带 Face ID |
| iOS | 14.0 或更高版本 |
| 网络 | WiFi，同一局域网 |
ARKit Blendshapes
| 类别 | 示例 |
|---|---|
| 眼睛 | eyeBlinkLeft, eyeLookUp |
| 眉毛 | browInnerUp, browDownLeft |
| 嘴巴 | mouthSmileLeft, jawOpen |
| 鼻子/脸颊 | noseSneerLeft, cheekPuff |
应用功能
| 功能 | 描述 |
|---|---|
| 预览 | 实时面部可视化 |
| 时间码 | 同步选项 |
| 录制 | 本地录制 |
| 多源 | 多个设备 |
设置工作流程
| 步骤 | 描述 |
|---|---|
| 1 | 安装应用 |
| 2 | 启用 UE Live Link |
| 3 | 建立 IP 连接 |
| 4 | 分配角色 |
Unreal Engine 设置
| 步骤 | 操作 |
|---|---|
| 插件 | 启用 Live Link |
| 源 | 添加 Apple ARKit |
| 主体 | 选择设备名称 |
| 动画蓝图 | 处理 Blendshapes |
MetaHuman 集成
| 方面 | 描述 |
|---|---|
| 直接驱动 | 自动映射 |
| 重定向 | 基本无需 |
| 质量 | 非常好 |
| 设置 | 快速 |
动画蓝图
| 节点 | 功能 |
|---|---|
| Live Link Pose | 接收数据 |
| Blend Poses | 混合 |
| Morph Target | 变形网格 |
| Post Process | 后处理 |
校准
| 方面 | 描述 |
|---|---|
| 中性姿势 | 面部放松 |
| 头部姿势 | 可选校准 |
| 偏移 | 调整 |
| 重置 | 会话期间 |
录制选项
| 方法 | 描述 |
|---|---|
| 应用内 | 本地录制 |
| Take Recorder | 在 UE 中录制 |
| Sequencer | 直接到关卡序列 |
| 外部 | 与时间码同步 |
时间码同步
| 方面 | 描述 |
|---|---|
| NTP | 网络时间 |
| Tentacle | 外部设备 |
| 手动 | 基于打板 |
| 精度 | 帧精确 |
头部追踪
| 功能 | 描述 |
|---|---|
| 位置 | XYZ 偏移 |
| 旋转 | 头部转动 |
| 组合 | 与 Blendshapes 结合 |
| 应用 | 角色移动 |
优化
| 措施 | 描述 |
|---|---|
| 灯光 | 均匀、明亮 |
| 距离 | 30-60cm 最佳 |
| 稳定性 | 固定 iPhone |
| 网络 | 5GHz WiFi |
多表演者
| 设置 | 描述 |
|---|---|
| 多个 iPhone | 可并行使用 |
| 主体 | 按设备命名 |
| 分配 | 分配给不同角色 |
| 同步 | 通过时间码 |
与专业动作捕捉对比
| 方面 | LiveLink Face | 专业系统 |
|---|---|---|
| 成本 | 已有 iPhone | $$$$ |
| 质量 | 非常好 | 最佳 |
| 标记点 | 无 | 常需 |
| 设置 | 几分钟 | 几小时 |
局限性
| 方面 | 描述 |
|---|---|
| 分辨率 | 52 个 Blendshapes |
| 精度 | 好，但不完美 |
| 遮挡 | 手会干扰 |
| 延迟 | 存在，但很小 |
用例
| 应用 | 描述 |
|---|---|
| 预演 | 快速动画 |
| 独立游戏 | 经济实惠的解决方案 |
| 虚拟制作 | 实时角色 |
| 培训 | 学习动作捕捉 |
故障排除
| 问题 | 解决方案 |
|---|---|
| 无连接 | 防火墙，同一局域网 |
| 追踪丢失 | 检查灯光、距离 |
| 抖动 | 蓝图中的平滑处理 |
| 延迟 | 5GHz WiFi |
音频录制
| 方面 | 描述 |
|---|---|
| 应用内 | 同时录制音频 |
| 同步 | 与 Blendshapes 同步 |
| 导出 | 随动画一起导出 |
| 唇语同步 | 后期处理 |
导出格式
| 格式 | 应用 |
|---|---|
| CSV | 原始 Blendshape 数据 |
| Take | UE Sequencer |
| USD | 管线导出 |
| FBX | 通过 UE 烘焙 |
最佳实践
| 实践 | 原因 |
|---|---|
| 良好的照明 | 追踪质量 |
| 稳定的安装 | 减少漂移 |
| 中性校准 | 干净的起始点 |
| 测试录制 | 重要录制前 |
今天
LiveLink Face 已经让面部动作捕捉民主化。过去需要昂贵的基于标记的系统或球形棚设置，现在只需一部 iPhone 即可实现。对于独立开发者、预演甚至许多专业应用，该应用都能以极低的成本提供令人印象深刻的结果。
来自各工种
视角
导演
Mit LiveLink Face sehe ich sofort die Emotion des Darstellers auf dem digitalen Charakter. Das verändert, wie ich Performance-Capture-Sessions leite.
制片人
Ein iPhone als Facial-Mocap-System ist ein Game-Changer. Für viele Projekte ersetzt es teure Dome-Setups und macht Character-Animation erschwinglich.
继续浏览词典
相关术语
视觉特效 · 技术
Live Link / Unreal Live Link / UE Live Link
Epic Games的插件框架，用于从外部源将实时数据流传输到虚幻引擎——包括动作捕捉系统、虚拟摄像机、面部追踪、控制表面和其他动画数据，允许在虚拟制作环境中进行即时预览和性能捕捉…
视觉特效 · 技术
Face Scan / Facial Scan / 3D Face Capture / Photogrammetry Scan
视觉特效 · 技术
Faceware Technologies
视觉特效 · 技术
Look Development / Lookdev / Surface Development / Surfacing
视觉特效 · 技术
Lidar Scan / LiDAR Scanning / Laser Scanning / 3D Survey
Light Detection and Ranging扫描 - 使用激光脉冲的测量技术，用于创建物理环境的精确3D点云数据，在电影制作中用于VFX集合扩展、虚拟制作预览、精确CG环…
视觉特效 · 技术
Matchmove / Match Moving / Camera Tracking / 3D Tracking
检验你的知识
测验
1. Was beschreibt „LiveLink Face / Gesichts-Mocap-App" am besten?
2. Zu welchem Department gehört „LiveLink Face / Gesichts-Mocap-App"?
3. Wie viele verschiedene Fachperspektiven bietet dieser Eintrag?