OpenVoice 是一款由 MyShell TTS 开发的令人惊叹的技术。它只需一小段参考发言者的音频片段,就能精确复制其声音,并能够生成多种语言的语音。
其主要功能包括准确的音色克隆,能够精确地克隆参考音色,并在多种语言和口音中生成语音;灵活的声音风格控制,允许用户对声音的情绪、口音、节奏、停顿和语调进行详细的调整,提供个性化的声音输出;零样本跨语言声音克隆,实现了对大规模多语言数据集之外的语言进行零样本声音克隆,即使这些语言未在训练集中出现也能进行声音复制;高效的计算性能,相比市场上现有的商业 API,在保持高性能的同时,计算成本大大降低。
OpenVoice V2 版本则带来了更多的惊喜。它具有更好的音频质量,采用新的训练策略提升了音频质量;原生多语言支持,V2 版本原生支持英语、西班牙语、法语、中文、日语和韩语;还集成了 MeloTTS 技术,用户可以通过 pip install git+https://github.com/myshell-ai/MeloTTS.git 进行安装,这是一个新的文本到语音转换系统,增强了声音的自然度和表现力。更值得一提的是,自 2024 年 4 月起,V1 和 V2 版本均以 MIT 许可证发布,支持商业和研究用途的免费使用。
OpenVoice 的出现为语音技术领域带来了重大突破,它的强大功能和广泛的支持语言使其在众多应用场景中具有巨大的潜力。无论是在娱乐、教育还是商业领域,OpenVoice 都将为我们带来更加丰富和个性化的语音体验。