STT: 离线语音识别转文字工具

Ray

stt

STT: 离线语音识别转文字工具

STT是一款功能强大的离线语音识别转文字工具,基于fast-whisper开源模型开发。它可以将视频或音频中的人类语音准确识别并转换为文字,支持多种输出格式,包括JSON、SRT字幕和纯文本。作为一个本地化解决方案,STT可以替代OpenAI等云端语音识别API,为用户提供更加灵活和隐私的选择。

主要特点

  1. 离线运行:STT完全在本地运行,无需联网,保护用户隐私。

  2. 多模型支持:内置base模型,同时支持small、medium和large-v3等多种模型,用户可根据需求选择。

  3. 多语言支持:支持中文、英语、法语、德语、日语等多种语言的识别。

  4. 多种输出格式:可输出JSON格式、SRT字幕(带时间戳)和纯文本格式。

  5. 高准确率:识别准确率基本等同于OpenAI官方API。

  6. CUDA加速:支持NVIDIA GPU加速,提高处理速度。

  7. API接口:提供API接口,方便集成到其他应用中。

使用方法

STT提供了预编译的Windows版本,用户可以直接下载使用。对于Linux和Mac用户,也可以通过源码部署。使用步骤如下:

  1. 下载并解压预编译文件或克隆源码。

  2. 双击start.exe启动程序(Windows预编译版)或执行python start.py(源码版)。

  3. 在打开的浏览器界面中上传音频或视频文件。

  4. 选择识别语言、输出格式和使用的模型。

  5. 点击"立即开始识别",等待识别完成。

  6. 识别结果将显示在底部文本框中。

STT使用界面

API接口

STT还提供了API接口,方便开发者集成到自己的应用中。API接口的基本信息如下:

  • 接口地址: http://127.0.0.1:9977/api
  • 请求方法: POST
  • 主要参数:
    • language: 语言代码(如zh、en等)
    • model: 模型名称(base、small、medium、large-v3)
    • response_format: 返回格式(text、json、srt)
    • file: 音视频文件(二进制上传)

CUDA加速支持

对于拥有NVIDIA显卡的用户,STT支持使用CUDA加速处理速度。使用CUDA加速需要正确配置CUDA环境,包括安装CUDA Toolkit和cuDNN。配置完成后,修改set.ini文件中的devtype=cpudevtype=cuda,即可启用CUDA加速。

注意事项

  1. 没有NVIDIA显卡或未配置CUDA环境时,不建议使用large/large-v3模型,可能导致内存耗尽。

  2. 中文识别结果可能会出现繁体字。

  3. 如遇到"cublasxx.dll不存在"错误,需下载并安装cuBLAS。

  4. 默认使用CPU运算,配置好CUDA环境后可修改set.ini启用CUDA加速。

  5. 如果启用CUDA后程序闪退,可能是GPU显存不足,建议使用较小的模型或处理较小的文件。

STT为用户提供了一个强大、灵活且隐私的语音识别解决方案。无论是个人用户还是开发者,都可以通过STT轻松实现高质量的语音转文字功能。随着持续的开发和社区贡献,STT有望成为离线语音识别领域的重要工具。

CUDA加速配置

STT的开发得益于多个开源项目的支持,包括faster-whisper、Flask和FFmpeg等。这种开源协作精神不仅推动了STT的发展,也为整个语音识别领域带来了创新和进步。随着技术的不断演进,我们可以期待STT在未来提供更加强大和智能的语音识别功能,为用户带来更多便利。

avatar
0
0
0
相关项目
Project Cover

leon

Leon是一个开源的个人助手,通过整合最新的TTS和ASR引擎及混合NLP技术,提供快速、定制和精准的服务。用户可以在自己的服务器上运行Leon,实现离线交流,确保隐私。Leon支持语音和文本交流,并拥有扩展技能的结构,开发者可以创建和分享技能。随着项目的发展,Leon引入了基于transformers的模型,并计划建立一个技能注册平台,鼓励社区共同开发新功能。

Project Cover

vosk-api

Vosk是一款离线开源语音识别工具包,支持20多种语言和方言。其模型体积小(仅50MB),但能提供连续的大词汇量转录、零延迟响应和流媒体API。支持Python、Java、Node.JS、C#、C++、Rust、Go等多种编程语言。适用于聊天机器人、智能家居设备、虚拟助手,也能为电影创建字幕、为讲座和采访生成转录。Vosk从Raspberry Pi等小型设备到大型集群均可扩展。访问Vosk官网获取安装指南、示例和文档。

Project Cover

wav2letter

wav2letter++现已整合到Flashlight中,专注于端到端和在线语音识别的研究。该项目提供多种预训练模型和数据准备指南,适用于有监督和半监督学习。通过Flashlight的ASR应用实现所有功能,确保高效、准确的语音识别。

Project Cover

whisper

Whisper是一个通用语音识别模型,支持多种语言处理任务,如语音翻译和语言识别。该模型基于大规模多样化音频数据集进行训练,利用Transformer技术实现高效的序列到序列学习。用户可以通过简单的命令或Python代码实现快速准确的语音识别与翻译,是一个适用于多种应用场景的强大工具。支持多个模型大小和语言选项,用户可根据需求选择合适的模型。

Project Cover

stt

这款语音识别工具可在本地离线运行,基于开源的fast-whisper模型,可将视频和音频中的人声快速转换为文字。支持输出json、srt及纯文本格式,无需联网,确保隐私安全,与openai语音识别接口准确率相当。用户可便捷下载预编译版本,或自行部署源码,支持多种操作系统。此外,还提供API接口,适合开发者使用。支持CUDA加速,优化处理速度。

Project Cover

NeMo

NeMo框架是NVIDIA开发的一款云原生生成式AI框架,专为研究人员和使用PyTorch的开发者设计,支持大型语言模型、多模态模型、自动语音识别等多个领域。该框架能够利用现有代码和预训练的模型检查点,帮助用户高效创建和定制新的生成式AI模型。通过广泛的教程和文档,用户可以轻松开始使用NeMo框架,无论是在任何云端还是本地环境中。

Project Cover

PaddleSpeech

PaddleSpeech是基于PaddlePaddle平台的开源语音处理工具集,覆盖自动语音识别、文本转语音合成、说话人确认及声音分类等多项功能,提供易于使用、高效和灵活的模型,支持各类语音相关任务。工具集包含全流程服务,支持流式识别与合成系统,为研究和工业应用提供强大支持。

Project Cover

飞书妙记

飞书妙记提供智能会议纪要与语音转文字服务,支持视频音频自动转录和多语言翻译,有效优化协作流程,提升信息管理效率。

Project Cover

DeepSpeech

DeepSpeech是一个开源语音转文字引擎,基于百度的Deep Speech研究,并利用Google TensorFlow实现。提供详细的安装、使用和训练模型文档。最新版本及预训练模型可在GitHub获取,支持和贡献指南请参阅相应文件。

最新项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号