正在加载视频...

视频加载失败

返回首页

请问这个视频的中文配音都是AI翻译的吗？如果是的话用的是哪家的TTS技术呀？ 来源：

dotey's profile picture

宝玉

235,885 subscribers

924,840 次观看 • 2 年前 •via X (Twitter)

科学技术教育
LIVE

Anya Rossi• Live Now

Private livecam show

12 条评论

宝玉 的头像
宝玉2 年前

把部分答案整理一下： 来自原作者评论：翻译+克隆语音+换嘴型 但没有具体模型

宝玉 的头像
宝玉2 年前

Whisper识别 tortoise-tts 合成带原始说话人音色的语音 wav2lip 换嘴型

宝玉 的头像
宝玉2 年前

付费方案：HeyGen 开源方案： 语音转文字：whisper 文字翻译：GPT 声音克隆+生成音频：so-vits-svc 嘴型视频：GeneFace++

宝玉 的头像
宝玉2 年前

ElevenLabs

宝玉 的头像
宝玉2 年前

Rask AI

宝玉 的头像
宝玉2 年前

HeyGen

Solar Heavy 的头像
Solar Heavy1 年前

these vocals are something else

Rainier 的头像
Rainier2 年前

这个工作量应该不小的。这个里面大概经过了语音识别，这个应该是Whisper。 然后是做了一部分都voice clone，提取语音的音色等参数，然后再把数据给 tortoise-tts 合成带原始说话人音色的语音。然后还要做一部分的 lipsync。这个估计是拿wav2lip做的。 整个工作需要大量的算力，很难做到实时，但是随着算力提高，可以做到实时，成本也会大幅降低，这个东西危害性极大。可以说是搞电诈，造假消息的利器。

Axton 的头像
Axton2 年前

Heygen 差不多吧？以下是我以前做过的一个测试片段，效果还是很不错的，除了口型（和脖子🤣）稍微有点僵硬。 原始视频是：

海拉鲁编程客 的头像
海拉鲁编程客2 年前

好像是 MockingBird, 我等会试一下.

Colintheballing 的头像
Colintheballing2 年前

伯明翰刀哥，用的

宝玉 的头像
宝玉2 年前

赞，这个视频和语音对齐似乎还不够好，可能和视频也有关系

相关视频

苹果去年画的饼反而被谷歌实现了：将最先进的Gemini翻译能力引入自家的翻译应用，戴着任意一款耳机就能做到实时音频翻译，具体效果看下方视频。我觉得这种翻译能力要比人们意识的大很多：以前是需要音频-文字-翻译-音频，现在是直接音频-音频，靠AI的理解去翻译，不仅速度快到接近同传水平，甚至连你的“阴阳怪气”他都能翻译。一场突如其来的科技革命，使得本就不景气的翻译专业更是雪上加霜。
2:50

苹果去年画的饼反而被谷歌实现了：将最先进的Gemini翻译能力引入自家的翻译应用，戴着任意一款耳机就能做到实时音频翻译，具体效果看下方视频。我觉得这种翻译能力要比人们意识的大很多：以前是需要音频-文字-翻译-音频，现在是直接音频-音频，靠AI的理解去翻译，不仅速度快到接近同传水平，甚至连你的“阴阳怪气”他都能翻译。一场突如其来的科技革命，使得本就不景气的翻译专业更是雪上加霜。

傅盛

133,813 次观看 • 8 个月前

嘎啦game里不是这样！ 我录这个视频的时候是自己开着麦念配个文案的，我配这个文案的时候我自己都想笑，剪视频的时候把原声去掉了，用的ai小瞬的语音配音的这个文案
0:27

嘎啦game里不是这样！ 我录这个视频的时候是自己开着麦念配个文案的，我配这个文案的时候我自己都想笑，剪视频的时候把原声去掉了，用的ai小瞬的语音配音的这个文案

咲咲

13,463 次观看 • 9 个月前

这个视频是咋看出来这辆车是宝马的？ 又是咋看出来这车是在中国？ 又是咋看出来泼的是油？ 又是咋看出来泼油的是中国人？ 又是咋看出来着火那辆车就是这辆车的？ 用这个造谣的反贼们，请问你们的眼睛是长在裤裆吗？
0:26

这个视频是咋看出来这辆车是宝马的？ 又是咋看出来这车是在中国？ 又是咋看出来泼的是油？ 又是咋看出来泼油的是中国人？ 又是咋看出来着火那辆车就是这辆车的？ 用这个造谣的反贼们，请问你们的眼睛是长在裤裆吗？

迷人的小红

33,783 次观看 • 3 年前

配音的是个天才，做这个视频的是疯子。
2:11

配音的是个天才，做这个视频的是疯子。

芙宁娜娜💙Furinana (王者归来版）

287,444 次观看 • 4 个月前

这翻译不知是不是真的。如果是真的，那印度真是从上到下都充满了幽默。 收音机，手表，缝纫机那是中国约五十年前中国高生活水平的标配。现在基本都是不用了。
1:54

这翻译不知是不是真的。如果是真的，那印度真是从上到下都充满了幽默。 收音机，手表，缝纫机那是中国约五十年前中国高生活水平的标配。现在基本都是不用了。

yanguoliusheng

17,401 次观看 • 2 个月前

Prad Bitt 再来一个美联社视角的视频以及未经美化的中文翻译，看完这视频你还能觉得贝森特是在承认美国🇺🇸有 #斩杀线 的话，那我只能说你是这个👍🏻🐸！
2:18

Prad Bitt 再来一个美联社视角的视频以及未经美化的中文翻译，看完这视频你还能觉得贝森特是在承认美国🇺🇸有 #斩杀线 的话，那我只能说你是这个👍🏻🐸！

墙国蛙哈哈🐸

11,463 次观看 • 6 个月前

#カル渚 做了英文字幕版！希望大家都能吃得开心☺️🫶💖因为是直接用翻译器翻译的，如果有不对的地方请见谅！
0:27

#カル渚 做了英文字幕版！希望大家都能吃得开心☺️🫶💖因为是直接用翻译器翻译的，如果有不对的地方请见谅！

葉樹樹Baki

22,555 次观看 • 1 年前

这视频里说的事情是真的吗？？？ 说的这个神秘的中国人是谁呀？ 哈哈哈😄😄😄😂😂😂 如果说的是真的，那就只能是那个人了，因为根本没有其他人的可能性！ 大家说这人是谁呢！😄😄😄👇
0:49

这视频里说的事情是真的吗？？？ 说的这个神秘的中国人是谁呀？ 哈哈哈😄😄😄😂😂😂 如果说的是真的，那就只能是那个人了，因为根本没有其他人的可能性！ 大家说这人是谁呢！😄😄😄👇

无王无帝（澳喜特战旅）🔥

22,143 次观看 • 1 年前

肚子里那么多的器官，如果不舒服的话，到底是哪里的问题呢？来，您看这条视频就一清二楚了
1:37

肚子里那么多的器官，如果不舒服的话，到底是哪里的问题呢？来，您看这条视频就一清二楚了

西时珍🌎

221,108 次观看 • 1 年前

扑克如飞刀， 我唯一的疑问：这是神技还是科技？ 这是不是AI的制作？
0:40

扑克如飞刀， 我唯一的疑问：这是神技还是科技？ 这是不是AI的制作？

吴建民

32,651 次观看 • 5 个月前

日本网右 ： 中国政府在新疆在屠杀 我想问问中国人 这是真的吗？ 注意 ： 这个视频中的城市是新疆 这是屠杀的城市吗？ ...不可信的
0:20

日本网右 ： 中国政府在新疆在屠杀 我想问问中国人 这是真的吗？ 注意 ： 这个视频中的城市是新疆 这是屠杀的城市吗？ ...不可信的

海外脱出ネオニート / Tomo-Taro

27,121 次观看 • 3 个月前

最近忙着研究新的数字人技术 因为minimax h3开源了 可以做到跟seedance一样的效果 这个视频是我采用remotion框架做的 之前的视频主要是采用Hyperframe框架 skill已经开源：
1:07

最近忙着研究新的数字人技术 因为minimax h3开源了 可以做到跟seedance一样的效果 这个视频是我采用remotion框架做的 之前的视频主要是采用Hyperframe框架 skill已经开源：

kanvis

18,758 次观看 • 12 天前

所以这到底是车的问题？ 还是技术的问题？
1:03

所以这到底是车的问题？ 还是技术的问题？

Stanley

114,447 次观看 • 5 个月前

这可能是我用过最牛的开源视频翻译工具了！ 完全自动化的工作流，从下载视频到生成字幕、配音，全搞定！ 不管是 YouTube 还是本地视频，都能一键制作出专业级字幕，连配音都可以个性化！ 链接：
1:00

这可能是我用过最牛的开源视频翻译工具了！ 完全自动化的工作流，从下载视频到生成字幕、配音，全搞定！ 不管是 YouTube 还是本地视频，都能一键制作出专业级字幕，连配音都可以个性化！ 链接：

露西的百宝箱

87,447 次观看 • 1 年前

这是Tucker Carlson的第二个推特视频，我们询经问道翻译成中文再跟大家分享。题目是：守住你的禁忌！ Tucker Carlson 加油！言论自由加油！
12:37

这是Tucker Carlson的第二个推特视频，我们询经问道翻译成中文再跟大家分享。题目是：守住你的禁忌！ Tucker Carlson 加油！言论自由加油！

Elaine Yu

13,988 次观看 • 3 年前

最近看了很多世界杯的切片，我那是看得激情澎湃 特别是佛得角的40岁门将7次扑救逼平西班牙！！ 我心血来潮专门找了他的赛后采访，还给采访做了个多语种的翻译。 做翻译的过程中我觉得最大的痛点是如果有一种原样保留语气，节奏，情绪的语音翻译就好了。 经过调研，我终于找到一种开源免费的翻译视频的方式，效果不错大家都可以试试！👇 #有道TTS
1:37

最近看了很多世界杯的切片，我那是看得激情澎湃 特别是佛得角的40岁门将7次扑救逼平西班牙！！ 我心血来潮专门找了他的赛后采访，还给采访做了个多语种的翻译。 做翻译的过程中我觉得最大的痛点是如果有一种原样保留语气，节奏，情绪的语音翻译就好了。 经过调研，我终于找到一种开源免费的翻译视频的方式，效果不错大家都可以试试！👇 #有道TTS

铁锤人

52,997 次观看 • 1 个月前