Logo

#并行处理

SAMMO: 智能化提示工程的新利器

2 个月前
Cover of SAMMO: 智能化提示工程的新利器

SoundStorm: 谷歌新一代高效并行音频生成模型

2 个月前
Cover of SoundStorm: 谷歌新一代高效并行音频生成模型

EnvPool: 高性能并行强化学习环境执行引擎

2 个月前
Cover of EnvPool: 高性能并行强化学习环境执行引擎

Whisper JAX: 最快的语音识别模型实现

2 个月前
Cover of Whisper JAX: 最快的语音识别模型实现

相关项目

Project Cover
EnumerableAsyncProcessor
EnumerableAsyncProcessor是一个.NET异步任务处理库,提供单线程、批处理、并行和速率限制等多种执行模式。该库能够帮助管理大量异步操作,优化资源利用,并提供精细控制。适用于API请求限流、批量数据处理和并发性能优化等场景,简化了异步编程的复杂性。
Project Cover
SoundStorm
SoundStorm是一个基于谷歌研究的并行音频生成项目的非官方PyTorch实现。该项目采用掩码离散扩散方法,使用HuBERT提取语义并预测声学特征。与原版不同,本实现创新性地使用浅层U-Net组合码本。项目提供完整的数据准备、训练和推理指南,为研究人员提供了探索并行音频生成技术的实用框架。
Project Cover
envpool
EnvPool是一款基于C++的高性能并行强化学习环境引擎。它支持Atari、Mujoco等多种环境,提供同步和异步执行模式,适用于单玩家和多玩家场景。EnvPool易于集成新环境,在高端硬件上可达到每秒100万Atari帧或300万Mujoco步骤的模拟速度,比传统Python子进程方法快约20倍。作为通用解决方案,EnvPool可显著加速各类强化学习环境的并行化执行。
Project Cover
geesefs
GeeseFS是一款Go语言开发的S3文件系统,可将S3存储桶挂载为本地文件系统。它通过并行和异步处理提高了小文件和元数据操作性能。支持Yandex、Amazon等多种S3兼容存储,具备并行预读、多部分上传等性能优化特性。GeeseFS通过了大部分适用的xfstests测试,展现出良好的稳定性和POSIX兼容性。
Project Cover
Laminar
Laminar是专注于LLM应用开发和调试的工具平台。它提供真实调试体验,支持本地开发和远程调试,具备可视化调试器。平台支持实时流式执行管道,允许逐步调试、添加断点、自选节点执行和数据预填充。Laminar还具有高效评估功能,可在短时间内对大量数据点进行自定义评估,显著提升LLM应用的开发和测试效率。
Project Cover
kvazaar
Kvazaar是一个采用3条款BSD许可的开源HEVC编码器。它提供多种预设和参数选项,支持多线程编码和波前并行处理,可实现高效视频压缩。该项目持续优化编码速度和码率失真性能,适用于需要高质量HEVC编码的视频处理场景。Kvazaar还支持ROI编码、自适应量化等高级功能。
Project Cover
sammo
SAMMO是一个用于运行和优化大型语言模型提示词的开源库。该项目支持数据标注、提示词设计、指令优化、提示词压缩和大规模执行等功能。SAMMO提供并行化和速率限制能力,可进行大规模查询而不会过载API。这个库适合需要高效处理和优化LLM提示词的多种应用场景。
投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号