Amphion

Amphion开源工具集，支持音频、音乐、语音生成及多任务评估

Amphion 语音生成音乐生成文本到语音声码器 Github 开源项目

Amphion是一个开源的音频、音乐和语音生成工具集，旨在支持可重复的研究并帮助研究人员和工程师入门。提供TTS、SVS、VC、SVC、TTA等生成任务，集成高级语音编码器和评估指标，如F0建模、能量建模、语音相似度测评。功能包括模型可视化、数据集建设及文本到音频/音乐的实现，推动音频生成技术应用。

Github

Huggingface

介绍相关项目

speech-dataset-generator - 多语言语音数据集生成与处理工具

GithubSpeech Dataset Generator多语言支持开源项目数据集生成语音识别音频处理

speech-dataset-generator是一款开源的多语言语音数据集处理工具。它支持从多种来源获取音频，包括YouTube、LibriVox和TED Talks等。该工具提供音频转录、质量增强、静音移除、性别识别、多说话者检测等功能，还能计算语速指标。通过集成多种音频增强器，speech-dataset-generator为文本转语音和语音转文本模型的训练提供了全面的数据准备解决方案。

so-vits-svc - 虚拟歌声转换工具，提供丰富的自定义功能

GithubSinging Voice ConversionSoftVC VITS人工智能模型开源项目热门语音合成

so-vits-svc是一个专注于虚拟歌声转换(SVC)的项目，不支持文本到语音(TTS)功能。该项目利用SoftVC内容编码器从源音频中提取语音特征，并通过VITS进行处理，保留了原始音频的音调和语调。此外，该项目还支持Whisper-PPG编码器和静态/动态声音融合等新功能。最新版本支持通过浅层扩散模型改善声音质量，为开发者提供了一个稳定的学习和实验平台，但不适用于商业生产环境。

stable-audio-metrics - 音频生成模型评估指标集合

GPU支持Githubstable-audio-metrics开源项目数据结构音频指标音频生成模型评估

stable-audio-metrics是一个评估音乐和音频生成模型的开源指标集合。它包含基于Openl3的Fréchet距离、基于PaSST的Kullback-Leibler散度和基于CLAP-LAION的CLAP分数。该项目针对长形式全频带立体声生成进行了优化，支持可变长度输入，并提供了详细文档和示例。适用于评估MusicCaps、AudioCaps和Song Describer等数据集的音频生成质量。

TTS - 高性能文本到语音生成库，支持多语言

GithubMozillaTTSText-to-Speech多语言支持开源项目预训练模型

TTS库基于最新研究成果，提供高效的文本到语音生成技术，实现了训练便捷、速度快、质量高的最佳平衡。该库包括预训练模型和数据集质量评估工具，已被广泛应用于20多种语言的产品和研究项目。支持多说话人TTS、快速模型训练、多GPU训练，并兼容PyTorch、TensorFlow和TFLite等多种平台。

stable-audio-open-1.0 - 开源文本转音频模型支持44.1kHz立体声和最长47秒音频生成

GithubHuggingfaceStable Audio Open 1.0人工智能开源项目机器学习模型音乐创作音频生成

Stable Audio Open 1.0是Stability AI推出的开源音频生成模型，通过自编码器、T5文本嵌入和DiT扩散模型架构，将文本转换为最长47秒的44.1kHz立体声音频。模型基于48万条音频数据训练，在音效和环境音生成方面表现突出，支持stable-audio-tools和diffusers两种调用方式。现阶段仅支持英文提示词输入，不具备人声生成能力。

AudioLCM - 基于潜在一致性模型的文本到音频生成系统

AudioLCMGithub开源实现开源项目文本生成音频潜在一致性模型高质量音频生成

AudioLCM是一个开源的文本到音频生成系统，基于潜在一致性模型。该项目提供完整实现代码和预训练模型，支持高效生成高质量音频内容。AudioLCM在ACM-MM'24会议被接受，并在GitHub和HuggingFace平台发布。研究人员可使用预训练模型进行推理，或按指南准备数据集训练自定义模型。项目还包含数据集处理、变分自编码器训练等功能。

Codec-SUPERB - 音频编解码模型性能评估基准平台

Codec-SUPERBGithub开源项目性能基准评估框架语音处理音频编解码

Codec-SUPERB是一个综合性音频编解码模型评估平台，提供标准化测试环境和统一数据集。平台特色包括直观的编解码接口、多角度评估和在线排行榜。它旨在促进语音处理领域的发展，为研究人员提供便捷的模型集成和测试环境，支持快速迭代和实验。

Pandrator - AI驱动的多语言语音生成和视频配音工具

GithubPandrator开源项目文本处理语音克隆语音合成音频生成

Pandrator是一款开源的多语言语音生成工具,支持将文本、PDF、EPUB和SRT文件转换为语音。该工具集成了语音克隆、LLM文本预处理和AI优化功能,可将生成的音频同步到视频中。Pandrator采用图形界面设计,提供一键安装,操作简便。它利用XTTS、Silero等开源模型实现语音合成,并支持RVC语音增强和NISQA质量评估,为语音生成提供全面解决方案。

FunCodec - 开源神经语音编解码工具包

FunCodecGithubLibriTTS开源工具开源项目神经网络语音编解码

FunCodec是一个高效的开源神经语音编解码工具，提供高质量的文本到语音转换功能，并支持丰富的预训练模型。它易于安装，适用于多种数据集，持续集成最新技术，适合专业开发者和研究人员使用。

audiomentations - 使用于深度学习的高级音频数据增强库

AudiomentationsGithubPyPIPython开源项目深度学习音频数据增强

Audiomentations是一个用于音频数据增强的Python库，专为提升深度学习模型性能而设计。该库支持单声道和多声道音频，能够集成到Tensorflow/Keras或Pytorch等训练管道中。它已在Kaggle竞赛中帮助用户取得了出色的成绩，并被多家开发下一代音频产品的公司采用。Audiomentations提供了丰富的音频变换功能，如加噪声、时间拉伸、音调变化和移位等，在CPU上运行，同时推荐使用torch-audiomentations以获得GPU支持。

相关项目

项目侧边栏1

项目侧边栏2

推荐项目

Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手，通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能，支持100+编程语言，与主流编辑器无缝集成，显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台，能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐，Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案，通过智能技术简化视频制作流程。无论是企业宣传还是个人分享，有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持，能够阅读和理解用户上传的文件内容，解析网页信息，并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题，Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术，为商家提供一键生成商品图和营销文案的服务，显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台，让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型，免费访问各种图像生成与AI训练工具，从Stable Diffusion等基础模型开始，轻松实现创新图像生成。体验前沿的AI技术，推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器，它将改变您观看视频的方式！SubCat结合了先进的人工智能技术，为您提供即时视频字幕翻译，无论是本地视频还是网络流媒体，让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台，利用前沿AI技术，为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图，再到文案生成，美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具，简化了选题、文献检索至论文撰写的整个过程。通过简单设定，平台可快速生成高质量论文大纲和全文，配合图表、参考文献等一应俱全，同时提供开题报告和答辩PPT等增值服务，保障数据安全，有效提升写作效率和论文质量。

使用协议隐私政策广告服务

投诉举报邮箱: service@vectorlightyear.com

@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号