Project Icon

delta-sharing

开放协议实现跨平台大规模数据实时共享

Delta Sharing是一个开放协议,用于安全实时交换大型数据集。它支持跨平台实时数据共享,使用REST API安全共享云数据集,通过S3、ADLS或GCS等云存储系统传输数据。用户可直接使用pandas、Tableau、Apache Spark等工具访问共享数据,无需部署特定计算平台。该协议简化了数据提供和使用流程,使数据共享更加高效便捷。

OpenDelta - 高效参数调整的开源工具包
GithubOpenDeltaPyTorchdelta tuningtransformers参数高效微调开源项目
OpenDelta是一个高效的开源调优工具包,通过添加少量参数进行调整,可实现如前缀调优、适配器调优、Lora调优等多种方法。最新版本支持Python 3.8.13、PyTorch 1.12.1和transformers 4.22.2。
dvc - 提升机器学习项目可重复性和快速迭代的命令行工具
DVCGithubVS Code扩展开源项目数据版本控制机器学习版本管理
DVC是一个命令行工具和VS Code扩展,用于管理机器学习项目的数据和模型版本控制。数据存储在云端,版本信息保存在Git仓库,通过轻量级管道实现快速迭代。DVC还支持本地实验跟踪和对比,允许在无服务器的情况下分享和重现实验结果。
LAMBDA - LAMBDA:无代码多代理数据分析系统,集成大模型与自然语言技术
GithubLAMBDA多智能体系统开源项目数据分析机器学习
LAMBDA 是一个创新的开源无代码多代理数据分析系统,通过大模型解决复杂数据问题。主要功能包括通过自然语言指令进行数据分析、多代理模块(编程和检查代理)生成与调试代码、灵活的模型和算法集成、自动报告生成等。LAMBDA 提供易用的用户界面,允许直接干预操作过程,大幅提升数据科学实践和分析模式。
deeplake - 面向 AI 的数据库,由针对深度学习应用程序优化的存储格式提供支持
AI数据库Deep LakeGithub向量存储开源项目数据版本控制深度学习
Deep Lake是一个为深度学习设计的AI数据库,提供多云和本地数据存储方案,支持动态数据类型如嵌入向量、音频、视频等。它通过即时可视化、高级查询和向量搜索功能,以及与LangChain、Weights & Biases等工具的无缝整合,优化了企业级LLM产品的部署和数据管理。该平台适用于各种规模的数据,支持无服务器架构。
h2o-3 - 支持多编程语言的高性能内存中分布式机器学习平台
GithubH2O-3分布式机器学习开源资源开源项目模型部署算法
H2O-3是一个支持多编程语言的高性能内存中分布式机器学习平台,提供广泛的算法如GLM、随机森林、深度神经网络等,并可扩展以添加自定义算法。平台与Hadoop和Spark等大数据技术完美整合,可通过POJO或MOJO格式轻松导出模型至生产环境,适合各类数据科学家在大数据场景下进行机器学习开发。
maxar-open-data - Maxar开源卫星影像数据共享项目
GithubMaxar Open DataSTAC卫星图像地理空间数据开源项目灾害响应
maxar-open-data是一个开源的高分辨率卫星影像数据共享项目。该项目提供了支持紧急规划、风险评估、灾害监测和应急响应等场景的卫星影像数据。用户可通过AWS、STAC索引和Hugging Face等多种方式访问数据。项目还包含Python接口、可视化示例和相关资源,便于数据获取、处理和分析。
PairDrop - 基于浏览器的多平台文件共享工具
GithubPairDrop开源项目文件共享点对点传输网页应用跨平台
PairDrop是一款基于网页浏览器的文件共享工具,支持多平台间的本地和远程传输。它提供类似AirDrop的功能,允许在同一网络内的设备间安全传输文件。此外,PairDrop通过临时公共房间实现互联网传输。无需安装,兼容现代浏览器,为用户提供便捷的文件传输体验。
odd-platform - 开源数据发现与可观察性平台
GithubODD Platform元数据管理开源项目数据发现数据可观察性数据治理
ODD Platform是一个开源的数据发现和可观察性平台,为数据团队提供现代化的用户友好环境。该平台具备联邦数据目录、端到端数据血缘、ML实验记录和数据质量监控等功能,有助于提高数据民主化效率、增强协作能力并缩短数据发现时间。作为开放数据发现规范的参考实现,ODD Platform支持多种数据源集成,适合需要改善数据治理的组织使用。
transfer.sh - 命令行文件分享工具 快速高效
Githubtransfer.sh云存储命令行工具开源项目文件共享
transfer.sh是一款开源的命令行文件分享工具,支持Amazon S3、Google Drive等多种存储方式。它提供简单的curl命令实现文件上传下载,具备加密和下载限制等功能。该项目开源了完整服务器代码,便于用户自建实例。transfer.sh主要面向开发者和技术人员,满足快速文件分享需求。
dlt - 简化数据加载流程的Python库
GithubPython库dlt开源开源项目数据加载数据管道
dlt是一个开源Python库,旨在简化数据加载过程。它具备自动模式生成、数据规范化和增量加载功能,可集成到多种环境中。支持从快速数据探索到复杂生产环境的应用,并提供多种验证源和目标。dlt的灵活性和可扩展性使其能够有效处理不断增长的数据需求,适合各类数据处理任务。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号