GPT-SoVITS开源音色克隆框架的训练与调试

这篇具有很好参考价值的文章主要介绍了GPT-SoVITS开源音色克隆框架的训练与调试。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

GPT-SoVITS是一款创新的跨语言音色克隆工具,同时也是一个非常棒的少样本中文声音克隆项目。

它是是一个开源的TTS项目,只需要1分钟的音频文件就可以克隆声音,支持将汉语、英语、日语三种语言的文本转为克隆声音,作者已测试,部署很方便,训练速度很快,效果很好。项目发布不到1个月就有了9.3k star。

遇到的问题

GPT-SoVITS的项目地址为链接: GPT-SoVITS。我在本地部署后,即可打开可视化网页,并在网页上更改参数和进行模型训练。

打开的网页如下所示:
GPT-SoVITS开源音色克隆框架的训练与调试,gpt,AIGC,人工智能,自然语言处理
在微调训练中,依次点击开启SoVITS训练和GPT训练后,两个训练进程输出信息为训练已完成。但是在模型的推理页面中,点击刷新路径后,找不到刚刚训练的模型权重。
GPT-SoVITS开源音色克隆框架的训练与调试,gpt,AIGC,人工智能,自然语言处理

解决办法

将微调训练中的batch_size改小一点,这里我改为了10,使得程序能够跑起来。
不知为何,显存不足的情况,权重未跑出,但是也没有报错信息。
GPT-SoVITS开源音色克隆框架的训练与调试,gpt,AIGC,人工智能,自然语言处理

原因就是查看服务器的显存占用,发现利用率已经快满了。
GPT-SoVITS开源音色克隆框架的训练与调试,gpt,AIGC,人工智能,自然语言处理

改过之后,就能够看到模型的权重信息了。文章来源地址https://www.toymoban.com/news/detail-840541.html

到了这里,关于GPT-SoVITS开源音色克隆框架的训练与调试的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包赞助服务器费用

相关文章

  • Window系统GPT-SoVITS配置安装

    Window系统GPT-SoVITS配置安装

    作者链接 版本这里根据教程的版本走即可,这里不会安装python或者不会配置环境的参考我之前的文章 Python 3.9, PyTorch 2.0.1, CUDA 11 Python 3.10.13, PyTorch 2.1.2, CUDA 12.3 Python 3.9, PyTorch 2.3.0.dev20240122, macOS 14.3 (Apple silicon, GPU) prezip win + r打开cmd命令行找到对应的源文件地址输入pip install

    2024年02月21日
    浏览(12)
  • GPT-SoVITS教程,接入酒馆AI,SillyTavern-1.11.5,让AI女友声若幽兰

    GPT-SoVITS教程,接入酒馆AI,SillyTavern-1.11.5,让AI女友声若幽兰

    本次分享一下如何将GPT-SoVITS接入SillyTavern-1.11.5项目,让让AI女友声若幽兰,首先明确一下,SillyTavern-1.11.5只是一个前端项目,它没有任何大模型文本生成能力,所以后端必须有一个api服务来流式生成对话文本,这里选择koboldcpp。 首先看一下简单的项目运行架构图: 这里Sill

    2024年04月25日
    浏览(11)
  • GPT SOVITS项目 一分钟克隆 (文字输出)

    GPT SOVITS项目 一分钟克隆 (文字输出)

    步骤流程:(首先使用UVR 提取人声文件,然后按下面步骤进行) 注意这里提交的音频是参考的音频

    2024年02月20日
    浏览(13)
  • GPT-SoVITS-WebUI 克隆声音 macos搭建

    GPT-SoVITS-WebUI 克隆声音 macos搭建

    激活环境 conda activate GPTSoVits 停用 conda deactivate 强大的少样本语音转换与语音合成Web用户界面 GPT-SoVITS指南

    2024年02月21日
    浏览(12)
  • 实时语音克隆,准确复制音色:OpenVoice | 开源日报 No.150

    实时语音克隆,准确复制音色:OpenVoice | 开源日报 No.150

    Stars: 9.6k License: NOASSERTION OpenVoice 是一个通过 MyShell 进行即时语音克隆的开源项目。 OpenVoice 可以准确地克隆参考音色,并生成多种语言和口音的语音。 OpenVoice 允许对声音风格进行细粒度控制,如情感、口音以及节奏、停顿和抑扬等其他风格参数。 无需在大规模说话者多语言

    2024年01月22日
    浏览(19)
  • 克隆你的音色!!使用你自己的声音做语音合成

    克隆你的音色!!使用你自己的声音做语音合成

    代码在文章最后!!! 目录 1.音频数据集(自制) 2.更改设置  3.换自己的数据集 4.依次运行接下来的代码, 5.合成句子 6.成功试听/下载音频 7.代码源码 提前准备好 6段以上 音频文件 音频不要太长,也不要太短,建议 2s~10s 之间 音频尽量是干净人声,不要有BGM声音 保存为

    2024年02月10日
    浏览(12)
  • 【AI】文本转语音 变声 音色克隆 数字人音视频口型同步AI应用

    【AI】文本转语音 变声 音色克隆 数字人音视频口型同步AI应用

    项目地址:https://github.com/coqui-ai/TTS 环境安装: 下载项目; 安装Python,安装项目依赖: 1. 下载安装AI模型: https://github.com/facebookresearch/fairseq/tree/main/examples/mms 模型文件放到:C:UsersAdministratorAppDataLocaltts 2. 将文本转换为语音: tts --text “要转换的文本内容” --model_name “指

    2024年02月19日
    浏览(8)
  • 【AI 孙燕姿 | AI 音色克隆】RVC 使用图文教程:无难度男女换声(伪音)、 AI 孙燕姿

    【AI 孙燕姿 | AI 音色克隆】RVC 使用图文教程:无难度男女换声(伪音)、 AI 孙燕姿

    最近,视频网站音乐区up主掀了“AI孙燕姿”的风潮。这种使用AI技术提取某位歌手的音色,再用其替换另一位歌手音色的方式,可以实现接近歌手本人翻唱的逼真效果。除孙燕姿外,面对周杰伦、陶喆、陈奕迅、王菲等众多具有独特嗓音的歌手,歌迷纷纷奔向“AI点唱机”—

    2024年02月08日
    浏览(13)
  • ⏰AI 孙燕姿 | AI 音色克隆⏰RVC 使用图文教程⏩无难度男女换声(伪音)、 AI 孙燕姿!

    ⏰AI 孙燕姿 | AI 音色克隆⏰RVC 使用图文教程⏩无难度男女换声(伪音)、 AI 孙燕姿!

    最近,视频网站音乐区up主掀了“AI孙燕姿”的风潮。这种使用AI技术提取某位歌手的音色,再用其替换另一位歌手音色的方式,可以实现接近歌手本人翻唱的逼真效果。除孙燕姿外,面对周杰伦、陶喆、陈奕迅、王菲等众多具有独特嗓音的歌手,歌迷纷纷奔向“AI点唱机”—

    2024年02月08日
    浏览(81)
  • AI 语音 - 人物音色训练

    AI 语音 - 人物音色训练

    前情提要 2023-07-02 周日 杭州 阴晴不定 AI 入门三大项,AI 绘画基础学习,AI 语音合成,AI 智能对话训练,进入 AI 语音合成阶段了,搓搓小手很激动的,对于一个五音不全的我来说,这个简直了(摆脱了低级趣味,保留点好色就够了); ** 时间线 ** a. 2021 年函数计算编程大赛;

    2024年02月12日
    浏览(12)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包