欢迎访问副业网(XFuYe.CN)- 手机就是POS机,费率最低0.38%,免费招代理,咨询微信:860056696!
当前位置:首页>免费资源>AI>3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

作为一个对音频工具略有研究的AI爱好者,
肉饼对AI进化速度早已无力吐槽,
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
从5月份介绍GPT-Sovits声音克隆项目,
到今天为止,短短两个月时间,
肉饼已跟大家,分享过多款音频大模型...
前几天才介绍完Fish Speech ,
这个在线音频TTS项目,
而今天阿里最新开源语言大模型CosyVoice
就又刷新了肉饼对声音克隆的认知:
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
支持多语言,音色情感控制
支持中、英、日、粤、韩这5种语言的生成,
最值得一提的是,只需3~10秒的原始音频
它就能够模拟生成,有韵律和情感的克隆音色!
老规矩,先来个极简介绍:

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

CosyVoice

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

产品概述

  • 语音合成技术

  • 依托大规模预训练语言模型

  • 深度融合文本理解和语音生成

 

核心功能

  • 自然语音生成

  • 多语言支持

  • 音色和情感控制

 

技术优势

  • 高度拟人化

  • 零样本语音克隆模型本地部署

  • 支持one-shot音色克隆

 

应用场景

  • 语音克隆

  • 情绪语音对话

  • 有声读物等场景

 

开源与社区贡献

  • 阿里通义实验室开源项目

  • GitHub上提供训练、推理和微调代码

  • https://github.com/FunAudioLLM/CosyVoice

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
很多时候不懂编程的我们,即使有项目库,
没法下载安装,只能望而却步...
好在B站大佬们已准备好安装包,
操作简单,备好电脑,跟肉饼一起来:
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

本地实操

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
第一步,下载打开
解压安装包到非C盘根目录, 打开目录, 
找到下图箭头应用程序, 双击即可
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
第二步,效果展示
输入文字 ,选择推理模式: 3s音频克隆
上传一段3~10秒的音频, 
并把对应的文字填在参考音频文本处
这里肉饼拿自己的5秒音频来测试
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

1. 肉饼中文效果展示

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
个人觉得,效果还行,只是还有
TTS生成长文的通病:漏读字,卡顿...
如何解决呢?很简单,多生成几次(俗称抽卡)
 
再试试粤语效果如何:
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
输入一段粤语文字, 预训练音色选择粤语女,
因为没有粤语男声可以选择,
肉饼截取一段5s女声测试:
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

2. 粤语效果展示

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
俏皮又好听,声音的还原度还是非常高的
(因原声在户外,所以底噪较大)
试都试了,再来段安妮·海瑟薇英文Show吧
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
一样的操作,只是推理模式
要改为跨语种克隆,音色选择英文女
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

3. 英语效果展示

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!
嗯,效果还是挺奈斯~
工具总结
总体来说,操作非常简单,
加上只需提供3~10秒的音频,
就能进行声音复刻,还是非常不错的
但操作时肉饼也发现,
这款工具对显存的占用还是比较高
8G以下显存操作起来会比较吃力!

3秒音频就能极速克隆?!阿里开源巨作CosyVoice,解压即用,效果哇塞!

副业网公众号

微信公众号『副业天下』

第一时间了解最新网络动态
扫码关注不迷路~

给TA打赏
共{{data.count}}人
人已打赏

本文来源:数字AI肉饼李

免责声明:部分文章来自网络转载及用户投稿,如有侵权请联系我们。客服邮箱:xfuye # qq.com(#换成@)

本站实操重点推荐的网赚项目:

社交电商:0元购

零撸项目:手机免费挖Pi币

任务赚钱:趣闲赚

增值服务:做一个年赚百万的网站 · 知识付费

网站联盟:首码项目网 · 副业网 · 网赚营 · 卡友家

跟Q哥做项目,可免费获赠本站VIP会员,更多扶持福利请咨询微信:860056696

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧