国语视界

 找回密码
 立即注册
查看: 944|回复: 19

[音频技术] [教程]利用语音克隆工具给喜欢的影片制作中文配音

[复制链接]

50

主题

1234

帖子

1万

积分

师长

大洋
194137
阅读权限
80

论坛元老灌水之王热心会员悍匪之王

发表于 26-7-16 19:19 | 显示全部楼层 |阅读模式
这是一份AI制作国语配音的心得,希望能够抛砖引玉。也许这个方法不是最好的,但也算目前比较适合新手操作的。
前期准备:首先需要至少16GB内存的电脑和配备8G显存的显卡以及最好是高速硬盘。

以下是文字内容介绍,如果不想看也可以直接看这两个视频
1.我录制了一份视频教程,跟着做很快就能上手
【利用语音克隆工具给影片配音教程】 https://www.bilibili.com/video/B ... de0bd6d819025169c6f
2.这段视频可以对比AI生成的效果和真人配音的差距,差距还是有的,目前替代不了真人。
【英雄无归毒液彩蛋和毒液3开头对比AI配音对比真人配音效果演示】 https://www.bilibili.com/video/B ... de0bd6d819025169c6f
3.教程中涉及到的工具
通过网盘分享的文件:千问3
链接: https://pan.baidu.com/s/11gkKm1UQhZb2zxvRwdl3YA 提取码: sju4


软件上1.Qwen3TTS语音克隆软件、2.剪映,建议使用6.0.1版本,懂的都懂。下面分别讲解一下两款软件的使用方法,然后结合来看就知道怎么制作AI配音了。
Qwen3TTS用来克隆和生成语音,剪映用来分离音频、分别分离背景音和人物对话声音以及设置声音场景音效果,最后智能识别字幕再人工调整字幕。
1.首先启动Qwen3TTS的启动程序。



2.每次开机首次生成需要启动模型库,需要等待的时间比较长。
我们在普通模式下可以上传参考音频,在要合成的目标文本中输入台词。点击“开始生成”等待片刻就会在右侧生成结果中试听音频,如果不满意再重新生成,直到符合你的所需就可以通过“固化到音色库”保存这个音色。






3.剧本工坊这个功能也是十分好用,我们可以通过把台词整理好粘贴到剧本内容中一键生成对白。



可以提前整理好相关的对白,可以按照示例的效果去预设对白进行生成,下面文本文档是我用来预设对白用的。有时生成的效果不满意再一条一条的重新生成,剪辑的时候保留适合的部分就可以了。





4.再说一下我生成的音频,为了方便我第一天生成的配音每一段就以01开头,第二天就以02开头方便我在剪映中使用。



5.说一下剪映中如何分离音频:
导入一段需要配音的视频,右键点击视频轨道-选择分离音频




导入一段需要配音的视频,右键点击视频轨道-选择分离音频。原本音量较小,为我们可以选中音轨,在音轨中的横线上用鼠标上下调节或者在右上角的音量中调节音量



调节好音量后,我们需要复制一条音轨,一条音轨保留背景音,另外一条音轨只保留人物对白



放大音轨,我们就可以看到每一句对白都是分开的



6.然后我们把生成的声音文件直接拖拽到下方轨道,对应去替换每一句对白就可以了。

评分

参与人数 1威望 +30 大洋 +500 收起 理由
cnlang + 30 + 500 厉害了我的神!

查看全部评分

5

主题

2183

帖子

1105

积分

营长

大洋
335
阅读权限
50
发表于 26-7-16 20:36 | 显示全部楼层
这是一份辛苦细致的工作,需要好设备和耐心。学习了

点评

小破站上面说中文的懂王和霉霉也是用这个软件做的吗?连口型都改了  发表于 26-7-17 02:53
回复 支持 反对

使用道具 举报

258

主题

9391

帖子

6058

积分

团长

大洋
37442
阅读权限
60
发表于 26-7-16 21:19 | 显示全部楼层
硬件跟不上啊,不然得试一试了恶
回复 支持 反对

使用道具 举报

0

主题

1万

帖子

1462

积分

营长

大洋
9434
阅读权限
50
发表于 26-7-16 21:24 | 显示全部楼层
未来趋势吧
回复 支持 反对

使用道具 举报

2

主题

2746

帖子

521

积分

连长

大洋
20668
阅读权限
40
发表于 26-7-16 22:28 | 显示全部楼层
学习一下,有空试试
回复 支持 反对

使用道具 举报

1

主题

2990

帖子

455

积分

排长

大洋
6686
阅读权限
30
发表于 26-7-17 06:21 | 显示全部楼层
不错的教程,学习一下,感谢分享。
回复 支持 反对

使用道具 举报

72

主题

6326

帖子

7152

积分

旅长

大洋
13236
阅读权限
70
发表于 26-7-17 08:51 | 显示全部楼层
这个厉害呀
回复 支持 反对

使用道具 举报

1

主题

356

帖子

233

积分

排长

大洋
1914
阅读权限
30
发表于 26-7-17 16:39 | 显示全部楼层
明天周末学习一下,感谢分享!
回复 支持 反对

使用道具 举报

45

主题

4414

帖子

3709

积分

团长

大洋
9383
阅读权限
60
发表于 26-7-17 17:04 | 显示全部楼层
很厉害!点赞!
回复 支持 反对

使用道具 举报

107

主题

2013

帖子

9363

积分

旅长

大洋
10579
阅读权限
70
发表于 26-7-18 06:04 | 显示全部楼层
我通常只是用AI修复一些音轨缺损的地方,像楼主这样直接用来做全片配音,以前也只是想想,未敢尝试。制作辛苦,致敬!
影片看过了,最满意的配音是奇异博士,最生硬的是女主MG,总之能把一部影片做出来,付出的辛苦是不可想像的,牛逼!
回复 支持 反对

使用道具 举报

50

主题

1234

帖子

1万

积分

师长

大洋
194137
阅读权限
80

论坛元老灌水之王热心会员悍匪之王

 楼主| 发表于 26-7-18 09:25 | 显示全部楼层
太阳之火 发表于 26-7-18 06:04
我通常只是用AI修复一些音轨缺损的地方,像楼主这样直接用来做全片配音,以前也只是想想,未敢尝试。制作辛 ...

大佬做修复也属于先驱者了
奇异博士的声音我也很满意,MJ提取的原音声音,我发现使用原版声线的效果都没有提取中文配音老师的效果好,MJ声音有点人机,可能我提取的片段不太好,反而加上情绪的部分比正常说话效果要好一些。难搞哦
回复 支持 反对

使用道具 举报

629

主题

2480

帖子

24万

积分

超级版主

大洋
671363
阅读权限
150

超级版主富甲天下帅哥

发表于 26-7-18 09:33 | 显示全部楼层
这两年Ai配音发展很迅速,想当初我给死侍3补齐配音的时候,那才删了几分钟的东西,死侍又是个话唠,补那么点东西补了一个月时间,后面混音的时候,虽然已经有DTS5.1的素材,但我已经没有耐性再来一遍,太累人了。
后面AI补的配音被pete偷了发在其他地方,更是打击了我的积极性,现在我快变成伸手党了。
回复 支持 反对

使用道具 举报

50

主题

1234

帖子

1万

积分

师长

大洋
194137
阅读权限
80

论坛元老灌水之王热心会员悍匪之王

 楼主| 发表于 26-7-18 10:51 | 显示全部楼层
本帖最后由 huaixiaozi6 于 26-7-18 10:52 编辑
麦哈 发表于 26-7-18 09:33
这两年Ai配音发展很迅速,想当初我给死侍3补齐配音的时候,那才删了几分钟的东西,死侍又是个话唠,补那么 ...


感谢麦大的付出,死侍与金刚狼的音轨当时根本听不出来是后补的配音,当时的技术手段能做出这些真是太厉害了。今年TTS以及confyui大爆发,上手难度比以前要简单多了。但是混音我还是不会
希望以后有更多的朋友能够用AI来弥补所有的遗憾!
回复 支持 反对

使用道具 举报

31

主题

5191

帖子

1679

积分

营长

大洋
4218
阅读权限
50
发表于 26-7-19 00:35 | 显示全部楼层
楼主有没有想过让AI给你打造一款,一条龙配音软件,首先根据发音生成字幕,然后把字幕分段,分离出人声得到背景音,然后用字幕给TTS选择特定的人声配音,最后把配好音的片段整合合并,最后叠加到背景音上。目前这种一条龙软件已经有了。而且我相信AI能帮你做到这点。
回复 支持 反对

使用道具 举报

50

主题

1234

帖子

1万

积分

师长

大洋
194137
阅读权限
80

论坛元老灌水之王热心会员悍匪之王

 楼主| 发表于 26-7-19 08:51 | 显示全部楼层
imagine 发表于 26-7-19 00:35
楼主有没有想过让AI给你打造一款,一条龙配音软件,首先根据发音生成字幕,然后把字幕分段,分离出人声得到 ...

这个想法确实很好,b站也有大神做出来在用,不过多数在游戏汉化中,那种分段式一句台词一个语音文件,自动翻译自动生成语音,效率非常高,不过有的效果不错,有的差强人意。最主要的还是生成结果还是像抽卡一样,并不是每次生成的都能直接拿来用,希望以后有大佬能做出来更简单的方法并分享出来吧。
回复 支持 反对

使用道具 举报

45

主题

5009

帖子

3006

积分

团长

大洋
37394
阅读权限
60
发表于 26-7-19 09:02 | 显示全部楼层
剪映和千问要花钱吗?
回复 支持 反对

使用道具 举报

304

主题

1339

帖子

2706

积分

客服

大洋
23485
阅读权限
200

超级版主土豪

发表于 26-7-23 05:40 | 显示全部楼层
https://cnlang.org/thread-108389-1-1.html  24年论坛就在搞同类的配音了,为记录片配音的例子:https://cnlang.org/thread-108284-1-1.html,但没有继续跟进。
论坛口号:国语视界我的家园; 论坛理念:寻找快乐;论坛原则:无限倾向原创者;
回复 支持 反对

使用道具 举报

50

主题

1234

帖子

1万

积分

师长

大洋
194137
阅读权限
80

论坛元老灌水之王热心会员悍匪之王

 楼主| 发表于 26-7-23 09:17 | 显示全部楼层
cnlang 发表于 26-7-23 05:40
https://cnlang.org/thread-108389-1-1.html  24年论坛就在搞同类的配音了,为记录片配音的例子:https://c ...

感谢老大支持,BOBO大佬是真的厉害,早期先锋者了,对于现在的技术而言配纪录片比那个时候门槛低多了。目前的技术而言,有点耐心大家都能为喜欢的影片做出自己理想的配音。
回复 支持 反对

使用道具 举报

0

主题

975

帖子

117

积分

班长

大洋
4437
阅读权限
20
发表于 26-7-24 03:14 | 显示全部楼层
非常感谢论坛的各位大佬们交流,虽然很多不懂,但是这部电影能有耐心和实力完成,绝非易事,感谢分享付出。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表