23.5k Star!OpenVoice:这款AI工具能够精准模仿你的声音并说出任何语言!

技术

Aitrainee | 公众号:AI进修生

🌟从一小段音频中复制声音并生成多种语言的语音。它不仅支持精准的音色克隆,还可以灵活控制语音风格,如情感和口音,确保声音输出自然流畅。

picture.image

picture.image

体验地址:


        
            

          https://app.myshell.ai/zh/web3/chat
        
      

准确的音色克隆

OpenVoice 可以准确克隆参考音色并生成多种语言和口音的语音。

picture.image

灵活的语音风格控制

OpenVoice 可以对语音风格(例如情感和口音)以及其他风格参数(包括节奏、停顿和语调)进行精细控制。在这里,我们演示了对生成声音的情感和口音的控制。

picture.image

零样本跨语言语音克隆

参考语音和生成的语音可以是海量说话人多语言数据集之外的任何语言。在下面的例子中,我们使用“U”来表示未见过的语言。

picture.image

如何使用

以下涉及到的链接 无法跳转 ,请参考如下 原教程文档链接


        
            

          https://github.com/myshell-ai/OpenVoice/blob/main/docs/USAGE.md
        
      

Linux安装

本节仅供熟悉Linux、Python和PyTorch的开发人员和研究人员使用。克隆此存储库,并运行


      
          

        conda create 
        -
        n openvoice python
        =
        3.9
          

        conda activate openvoice
          

        git clone git@github
        .
        com
        :
        myshell
        -
        ai
        /
        OpenVoice
        .
        git
          

        cd 
        OpenVoice
          

        pip install 
        -
        e 
        .
      
    

无论您使用V1还是V2,上述安装过程都是相同的。

OpenVoice V1

从这里下载检查点,并将其解压缩到checkpoints文件夹中。

1. 灵活的语音风格控制。 请参阅demo_part1.ipynb以了解OpenVoice如何实现对克隆声音的灵活风格控制的示例用法。

2. 跨语言语音克隆。 请参阅demo_part2.ipynb以了解在MSML训练集中看到或未看到的语言的示例。

3. Gradio演示。 我们在这里提供了一个简约的本地gradio演示。如果用户在使用gradio演示时遇到问题,我们强烈建议用户查看demo_part1.ipynbdemo_part2.ipynb和QnA。使用python -m openvoice_app --share启动本地gradio演示。

OpenVoice V2

从这里下载检查点,并将其解压缩到checkpoints_v2文件夹中。

安装MeloTTS:


      
          

        pip install git
        +
        https
        :
        //github.com/myshell-ai/MeloTTS.git
          

        python 
        -
        m unidic download
      
    

演示用法。 请参阅demo_part3.ipynb以了解OpenVoice V2的示例用法。现在它原生支持英语、西班牙语、法语、中文、日语和韩语。

更多配音相关

下面两个 灰色 的,一个是微软 最新的神经网络配音 网页资源,一个是 实时 配音: 唯有入梦rvc

picture.image

获取:


          
链接:https://pan.baidu.com/s/16aG3_cZPVjvkkd-QWuKmOw?pwd=1234 
          
提取码:1234
      

除此以外这个视频介绍了使用 GPT4语音api 的教程:


        
            

          https://www.bilibili.com/video/BV1P64y1E72W/
        
      

点这里👇关注我,记得标星哦~

一键三连「分享」、「点赞」和「在看」

科技前沿进展日日相见 ~

picture.image

0
0
0
0
关于作者
关于作者

文章

0

获赞

0

收藏

0

相关资源
VikingDB:大规模云原生向量数据库的前沿实践与应用
本次演讲将重点介绍 VikingDB 解决各类应用中极限性能、规模、精度问题上的探索实践,并通过落地的案例向听众介绍如何在多模态信息检索、RAG 与知识库等领域进行合理的技术选型和规划。
相关产品
评论
未登录
看完啦,登录分享一下感受吧~
暂无评论