LiveLink Face

live link face scan faceware look dev lidar scan matchmove

Epic Games的免费iOS应用程序，可从iPhone TrueDepth摄像头捕获面部运动数据，并通过Live Link实时传输到Unreal Engine——允许MetaHumans、数字角色和虚拟制作的可访问面部性能捕捉，无需昂贵的专用硬件。

什么是 LiveLink Face？

LiveLink Face 是 Epic Games 免费的 iOS 应用，它利用苹果的 TrueDepth 摄像头实时捕捉面部动作，并通过 Live Link 流式传输到 Unreal Engine。它让专业的面部动作捕捉对每个人都触手可及。

基本原理

方面	描述
技术	Apple ARKit TrueDepth
Blendshapes	52 个 ARKit 形状
传输	Live Link 协议
接收器	Unreal Engine

硬件要求

组件	规格
iPhone	X 或更新机型（TrueDepth）
iPad Pro	带 Face ID
iOS	14.0 或更高版本
网络	WiFi，同一局域网

ARKit Blendshapes

类别	示例
眼睛	eyeBlinkLeft, eyeLookUp
眉毛	browInnerUp, browDownLeft
嘴巴	mouthSmileLeft, jawOpen
鼻子/脸颊	noseSneerLeft, cheekPuff

应用功能

功能	描述
预览	实时面部可视化
时间码	同步选项
录制	本地录制
多源	多个设备

设置工作流程

步骤	描述
1	安装应用
2	启用 UE Live Link
3	建立 IP 连接
4	分配角色

Unreal Engine 设置

步骤	操作
插件	启用 Live Link
源	添加 Apple ARKit
主体	选择设备名称
动画蓝图	处理 Blendshapes

MetaHuman 集成

方面	描述
直接驱动	自动映射
重定向	基本无需
质量	非常好
设置	快速

动画蓝图

节点	功能
Live Link Pose	接收数据
Blend Poses	混合
Morph Target	变形网格
Post Process	后处理

校准

方面	描述
中性姿势	面部放松
头部姿势	可选校准
偏移	调整
重置	会话期间

录制选项

方法	描述
应用内	本地录制
Take Recorder	在 UE 中录制
Sequencer	直接到关卡序列
外部	与时间码同步

时间码同步

方面	描述
NTP	网络时间
Tentacle	外部设备
手动	基于打板
精度	帧精确

头部追踪

功能	描述
位置	XYZ 偏移
旋转	头部转动
组合	与 Blendshapes 结合
应用	角色移动

优化

措施	描述
灯光	均匀、明亮
距离	30-60cm 最佳
稳定性	固定 iPhone
网络	5GHz WiFi

多表演者

设置	描述
多个 iPhone	可并行使用
主体	按设备命名
分配	分配给不同角色
同步	通过时间码

与专业动作捕捉对比

方面	LiveLink Face	专业系统
成本	已有 iPhone	$$$$
质量	非常好	最佳
标记点	无	常需
设置	几分钟	几小时

局限性

方面	描述
分辨率	52 个 Blendshapes
精度	好，但不完美
遮挡	手会干扰
延迟	存在，但很小

用例

应用	描述
预演	快速动画
独立游戏	经济实惠的解决方案
虚拟制作	实时角色
培训	学习动作捕捉

故障排除

问题	解决方案
无连接	防火墙，同一局域网
追踪丢失	检查灯光、距离
抖动	蓝图中的平滑处理
延迟	5GHz WiFi

音频录制

方面	描述
应用内	同时录制音频
同步	与 Blendshapes 同步
导出	随动画一起导出
唇语同步	后期处理

导出格式

格式	应用
CSV	原始 Blendshape 数据
Take	UE Sequencer
USD	管线导出
FBX	通过 UE 烘焙

最佳实践

实践	原因
良好的照明	追踪质量
稳定的安装	减少漂移
中性校准	干净的起始点
测试录制	重要录制前

今天

LiveLink Face 已经让面部动作捕捉民主化。过去需要昂贵的基于标记的系统或球形棚设置，现在只需一部 iPhone 即可实现。对于独立开发者、预演甚至许多专业应用，该应用都能以极低的成本提供令人印象深刻的结果。

继续浏览词典