Project Icon

eos

CERN开发的多PB级高性能磁盘存储系统EOS

EOS是CERN开发的多PB级磁盘存储系统,为LHC和非LHC用例提供高性能数据存储解决方案。系统基于XRootD框架,支持XRootD、FUSE和HTTP(S)/WebDAV协议访问。EOS采用商用硬件和JBOD磁盘配置,主要使用C/C++开发,部分模块用Python实现。该系统可扩展性强,适用于大规模科学数据管理,为CERN的研究工作提供可靠的数据存储支持。

keops - 大规模矩阵运算与自动微分的高效GPU加速库
GPU计算GithubKeOps开源项目核方法符号矩阵自动微分
KeOps是一个开源库,专门用于高效计算大型数组的归约运算。它集成了高效C++程序和自动微分引擎,支持Python、Matlab和R等多种编程语言。KeOps尤其适合处理核矩阵向量乘积、K近邻查询和N体问题等计算,即使在核矩阵或距离矩阵超出内存容量的情况下也能高效运行。与PyTorch GPU基准相比,KeOps在多种几何应用中能实现10-100倍的性能提升,广泛应用于核方法和几何深度学习等领域。
haupt - 多功能元数据API及数据管理工具
APIGithubHauptPolyaxonmetadatasandbox开源项目
Haupt提供Polyaxon的元数据API、工件流、沙盒和空间管理,简化数据管理和追踪。强大的API功能使集成数据处理管道变得轻松,并支持实时数据监控。Haupt支持多种数据流模式和高效空间分配,适用于各种数据驱动应用。与Polyaxon生态系统无缝衔接,提高生产力和数据准确性。
venice - 全球工作负载的衍生数据存储平台
GithubVenice低延迟多租户多集群支持开源项目高吞吐量
Venice是一个衍生数据存储平台,提供高吞吐量的批处理和流处理数据异步摄取,低延迟的在线读取,基于CRDT的区域间主动主动复制,多集群支持和多租户水平伸缩能力。适用于Feathr等特征存储,支持离线、近线和在线工作负载的多种写操作和读取API,具有分片感知和本地缓存功能的客户端模式,满足不同性能和成本需求。
awesome-space - 太空资源代码和数据的精选列表
APIGithub卫星天文学太空开源项目数据
该项目整理了太空相关的代码、API、数据等资源,涵盖天文学、航天器、地球观测等领域。提供学习材料、开源工具和数据集,适合天文爱好者、航天工程师和数据科学家参考使用。项目鼓励社区贡献,致力于成为太空探索和研究的综合资源库。
moon - Rust开发的高性能仓库管理和构建自动化工具
GithubRustmoon代码库管理开发工具开源项目自动化
moon是一个基于Rust的仓库管理工具,旨在优化开发流程和提高效率。它集成了智能哈希、远程缓存和工具链管理等功能,支持多平台运行和增量构建。moon简化了脚本管理,保证了版本一致性,并提供了内置的自动化特性。其渐进式设计允许开发者逐步采用,从而减少配置和构建方面的问题,使团队更专注于核心开发工作。
higgsfield - 高容错且可扩展的GPU调度与机器学习框架
GPU管理GithubHiggsfield分布式计算大模型训练开源项目深度学习
Higgsfield是一款开源、高容错、可扩展的GPU调度与机器学习框架,适用于数十亿到数万亿参数的模型(如大型语言模型)。它的主要功能包括分配计算资源、支持高效分片、启动和监控大规模神经网络训练、管理资源竞争,并通过与GitHub的集成实现持续集成。Higgsfield简化了大规模模型训练的流程,提供了多样且强大的开发工具。
polyaxon - 深度学习应用的全面管理平台
GithubPolyaxon分布式训练开源项目机器学习深度学习超参数调优
Polyaxon是一个旨在提升深度学习应用开发效率的平台,提供构建、训练和监控大规模深度学习应用的解决方案。兼容主流深度学习框架如Tensorflow、MXNet和Caffe等,并支持在数据中心、云提供商或由Polyaxon托管的环境中部署。Polyaxon通过智能容器和节点管理,使GPU服务器成为团队或组织的共享资源,提升工作效率。平台还提供详细的安装和快速入门指南,支持分布式训练和超参数优化等功能。
dice - 高性能内存数据库,支持Redis和SQL,适用于实时应用
DiceDBGithubRedis支持SQL支持实时数据库开源项目现代硬件
DiceDB是一款优化的内存型、实时数据库,支持Redis和SQL,专为现代硬件和实时应用而设计。尽管尚在开发阶段,但其多线程架构和创新的QWATCH命令使其与Redis有所区别,能够实现真正的实时应用。用户可以通过Docker快速启动,也可以参与源代码贡献。DiceDB为开发者提供了多种便捷的开发和测试环境,但当前版本不适用于生产环境。欢迎通过代码贡献或关注开源问题加速项目进展。
nebula - 多功能开源广播与媒体管理系统
GithubNebula媒体资产管理广播自动化开源软件开源项目线性广播
Nebula是一个面向电视、广播和VOD平台的开源广播自动化和媒体资产管理系统。自2012年投入使用以来,Nebula在全天候广播环境中展现出卓越的稳定性和可靠性,目前已被全球众多电视台和制作公司采用。系统提供全面的功能,包括媒体资产管理、视频音频转码、线性编排、播出控制、内容发布和数据报告。Nebula支持CasparCG、VLC和Conti等主流播出平台,并提供API接口便于与网站集成,具有极高的灵活性。作为一个功能强大的开源系统,Nebula集成了广播自动化、媒体资产管理(MAM)、内容分发等核心功能。系统支持多种媒体格式,能够满足现代广播行业的多样化需求。凭借其稳定性和可扩展性,Nebula成为广播机构实现数字化转型的理想选择。
oasysdb - 高性能混合向量数据库,兼容SQLite和Postgres
GithubOasysDBRustSQL数据库开源项目数据完整性混合向量数据库
OasysDB是一种混合向量数据库,利用SQLite和Postgres作为存储引擎,提供快速的向量索引层,确保数据的高完整性。目前仅支持Rust项目,未来计划提供RPC API以支持更多语言。OasysDB集成了SQLx进行SQL数据库操作,实现了灵活的向量索引算法,适合高性能检索需求。项目仍在早期开发阶段,欢迎在GitHub上贡献代码或提出建议。更多信息请访问官方网站或加入Discord社区。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

白日梦AI

白日梦AI提供专注于AI视频生成的多样化功能,包括文生视频、动态画面和形象生成等,帮助用户快速上手,创造专业级内容。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

讯飞绘镜

讯飞绘镜是一个支持从创意到完整视频创作的智能平台,用户可以快速生成视频素材并创作独特的音乐视频和故事。平台提供多样化的主题和精选作品,帮助用户探索创意灵感。

Project Cover

讯飞文书

讯飞文书依托讯飞星火大模型,为文书写作者提供从素材筹备到稿件撰写及审稿的全程支持。通过录音智记和以稿写稿等功能,满足事务性工作的高频需求,帮助撰稿人节省精力,提高效率,优化工作与生活。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号