给已有视频换口型
Lipsync on existing video · 各家还叫它：lipsync / 对口型 / 唇形同步
一段已有的人物视频+一段新的音频→口型对上新音频的视频
3
家能做这件事
厂商官方文档写明支持
2
处权重可自部署
自己的 GPU 上跑，不受平台限制
0
个能跑起来的 workflow
其中官方 0 个
谁能做
自己部署权重公开的，拿去自己 GPU 上跑
MuseTalk（腾讯音乐）「Real-Time High Quality Lip Synchronization with Latent Space Inpainting」（30fps+ on V100） · HF · 腾讯音乐 MuseTalk
video-retalking「[SIGGRAPH Asia 2022] VideoReTalking: Audio-based Lip Synchronization」（★7,278） · OpenTalker/video-retalking 仓库
平台上的成品功能不用自己搭，平台已经封成一个按钮
· HeyGen · Lipsync（分两档）原文：「官方把 Lipsync 做成 Speed 与 Precision 两个端点；另有 Batch Lipsyncs」