MuseTalk 1.0
腾讯音乐天琴实验室 · 该版本 2026-08-14 · avatar轨
14 项能力里 5 项支持、1 项不支持、8 项官方没说
逐项能力
Photo avatar
单图起形象
查过、这份 README 里没有：2026-08-14 全文检索「单图起形象」相关的英文与中文说法，零命中。⚠️ 研究仓库不是功能清单，所以不升级成 ❌ —— 但「查过没找到」和「还没查」是两回事，这一格现在是前者。
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Digital twin
本人分身
查过、这份 README 里没有：2026-08-14 全文检索「本人分身」相关的英文与中文说法，零命中。⚠️ 研究仓库不是功能清单，所以不升级成 ❌ —— 但「查过没找到」和「还没查」是两回事，这一格现在是前者。
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Identity consistency
形象一致
⚠️ 官方自己在「已知限制」里写了不行：「Identity preservation: Some details of the original face are not well preserved, such as mustache, lip shape and color」。厂商自述做不到的，就该记 ❌ —— 这种坦白比我们自己推断可靠得多
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Full-body / multi-scale
全身与多尺度
查过、这份 README 里没有：2026-08-14 全文检索「全身与多尺度」相关的英文与中文说法，零命中。⚠️ 研究仓库不是功能清单，所以不升级成 ❌ —— 但「查过没找到」和「还没查」是两回事，这一格现在是前者。
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Audio-driven
音频驱动形象
概述：「real-time high quality audio-driven lip-syncing model trained in the latent space of ft-mse-vae」
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Text-driven (script to video)
文本驱动
查过、没有：唯一的 `script` 是 `inference script`（推理脚本），prompt 零命中。它的输入是视频 + 音频。⚠️ 研究仓库不是功能清单，按站上口径不升级成 ❌
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Video-driven / retargeting
视频驱动与重定向
它改的是已有视频里的口型（「can be applied with input videos, e.g., generated by MuseV」），属于视频驱动那一路
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Lipsync on existing video
给已有视频对口型
标题：「MuseTalk: Real-Time High Quality Lip Synchronization with Latent Space Inpainting」；概述「a real-time high quality audio-driven lip-syncing model」
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Video translation with lipsync
多语种口型翻译
⚠️ 半个假命中：README 里确有「Video dubbing」一节，但那演示的是给已有视频换口型（已记在对口型那一格），不是换语言。多语种翻译这一格仍然没有依据 （研究仓库不是功能清单，不升级成 ❌）
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Emotion control
情绪与表情控制
查过、这份 README 里没有：2026-08-14 全文检索「情绪与表情控制」相关的英文与中文说法，零命中。⚠️ 研究仓库不是功能清单，所以不升级成 ❌ —— 但「查过没找到」和「还没查」是两回事，这一格现在是前者。
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Multi-character
多人同框
查过、这份 README 里没有：2026-08-14 全文检索「多人同框」相关的英文与中文说法，零命中。⚠️ 研究仓库不是功能清单，所以不升级成 ❌ —— 但「查过没找到」和「还没查」是两回事，这一格现在是前者。
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Live / realtime avatar
实时驱动
「real-time high quality lip-syncing model（30fps+ on an NVIDIA Tesla V100）」—— 有明确帧率，不是宣传语
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Transparent background
透明背景输出
查过、这份 README 里没有：2026-08-14 全文检索「透明背景输出」相关的英文与中文说法，零命中。⚠️ 研究仓库不是功能清单，所以不升级成 ❌ —— 但「查过没找到」和「还没查」是两回事，这一格现在是前者。
HF · 腾讯音乐 MuseTalk官方来源核验版本 1.0核验于 2026-08-14机器录入
Open weights
开源权重