Project Icon

barfi

Python流式编程库,集成现有工作流程

Barfi是一款Python流式编程库,提供图形化编程接口,支持集成现有Python工作流程。用户可通过Barfi.Block构建模式,使用Barfi.ComputeEngine进行执行。每个Block都包含输入输出接口和用户定义的可执行函数,支持在Streamlit组件中使用,并计划增加Jupyter-Notebook小部件。未来还将添加特定领域的组件,弥补现有库的局限性。

taskflow - 现代C++并行和异构任务编程库Taskflow
GPU加速GithubTaskflow任务图并行编程开源项目异步编程
Taskflow是一个C++任务编程库,专注于并行和异构计算。它通过简洁的API支持静态和动态任务图构建、条件执行和GPU加速。Taskflow提供可视化和分析工具,有助于程序优化。该库在性能和可扩展性方面表现优异,适用于各类并行计算场景,已在学术和工业项目中得到应用。
real-time-data-pipelines-in-python - Python实时数据管道构建实例,加密货币交易应用
Apache KafkaGithubPythonQuix Streams加密货币交易实时特征管道开源项目
本项目展示如何使用Python和Apache Kafka构建生产级实时特征管道。以加密货币交易为例,介绍从Kraken Websocket API获取原始数据、转换为机器学习模型特征,并存储至特征库的完整流程。项目基于Quix Streams 2.0库实现,提供可扩展的解决方案。同时包含Streamlit仪表板,实时可视化特征数据。此实例为数据科学家和机器学习工程师提供了实时系统构建参考。
Flyte - 灵活高效的数据和机器学习工作流编排解决方案
AI工具Flyte可扩展性工作流编排数据科学机器学习
Flyte是一个高度可扩展和灵活的工作流编排平台,可无缝整合数据、机器学习和分析工具链。它支持数据科学家和工程师轻松构建和管理生产级工作流,实现从本地开发到大规模部署的流畅过渡。Flyte提供强大的扩展性、数据血缘追踪和缓存机制,能处理从简单ETL到复杂机器学习训练等多样化工作流。该平台致力于简化工作流开发,使用户能专注于核心业务逻辑。
flink - 开源流处理框架 实时批处理数据分析利器
Apache FlinkGithub开源项目批处理数据流流处理框架
Apache Flink是开源流处理框架,专注于高性能流处理和批处理。框架提供Java和Scala API,支持高吞吐低延迟的事件处理。主要特性包括事件时间处理、灵活窗口操作和exactly-once语义。Flink还集成了图计算、机器学习库,并可与Hadoop生态系统无缝对接。该框架适用于实时分析和大规模数据处理场景,为企业提供强大的数据处理能力。
pathway - 高性能Python数据处理框架 支持流处理和LLM应用
GithubLLM管道Pathway实时分析开源项目数据处理流处理
Pathway是一个高性能Python数据处理框架,支持流处理、实时分析和LLM应用。该框架提供简洁的Python API,可处理批量和流式数据,并集成多种机器学习库。Pathway采用Rust引擎,实现增量计算和并行处理。它具备丰富的数据连接器、状态转换功能和一致性保证,适用于多种复杂的数据处理场景。
beam - 统一批处理和流处理的数据并行处理模型
Apache BeamGithub分布式计算开源项目批处理数据处理流处理
Apache Beam是一个统一的数据处理模型,用于定义批处理和流处理的并行数据处理管道。它提供多语言SDK构建管道,并可在Apache Flink、Spark等分布式处理后端上执行。Beam支持Java、Python和Go等语言,为各类开发者提供灵活的开发环境。该项目采用统一模型处理批处理和流处理数据,支持多种编程语言,并可在多个分布式处理平台上运行。它为不同类型的开发者提供了灵活的工具,简化了大规模数据处理的复杂性。
cylc-flow - 通用工作流引擎 专注循环系统管理
CylcGithub天气预报工作流引擎开源项目气候预测环境预报
Cylc是一款通用工作流引擎,擅长高效管理循环系统。该系统在HPC平台上的天气、气候和环境预报生产中广泛应用,但不限于这些领域。Cylc提供简便的安装和使用方法,支持Python 3,采用新的调度算法,支持分支工作流。系统配备终端和Web用户界面,便于工作流监控和控制。作为开源软件,Cylc欢迎社区参与开发。
finic - 开源Python集成平台 简化复杂系统连接
FinicGithubPython工作流开源开源项目集成平台
Finic是一款开源Python集成平台,为企业提供Boomi、MuleSoft和Tray的替代选择。它融合了拖放式界面、声明性连接器引擎和混合代码/无代码环境,让业务人员和开发者都能高效构建复杂集成。Finic专注于解耦集成和产品代码,在保持灵活性的同时简化开发流程,并通过开源部署降低合规和法律障碍。该平台支持API和SFTP连接,并提供可配置的Python环境,允许开发者在每个工作流程中安装所需的数据处理包。Finic还计划引入生成式AI功能,以助非技术用户更易理解和修改工作流程。
PhiFlow - 注重物理模拟与机器学习的开源仿真工具
GPU执行GithubPhiFlowPython开源项目机器学习模拟工具包
PhiFlow 是一款开源仿真工具包,专为优化和机器学习应用设计。它主要用 Python 编写,与 NumPy、PyTorch、Jax 和 TensorFlow 深度集成,利用这些框架的自动微分功能,简化涉及学习模型和物理仿真的可微函数构建。PhiFlow 特别适用于流体现象的 PDE 操作,通过联网操作支持实时可视化和交互控制,并支持 GPU 执行,为用户提供简洁、灵活且可扩展的编码体验。
viewflow - 基于Django的低代码组件库 用于构建复杂业务应用
DjangoGithubViewflow业务应用低代码工作流开源项目
Viewflow是基于Django的低代码组件库,用于开发复杂业务应用。它提供用户管理、工作流和报告等预构建组件,简化开发流程。支持Python 3.8+和Django 4.0+,具备响应式UI、可重用工作流库、CRUD功能和集成报告面板。Viewflow分为开源Core版和功能全面的PRO版,适应不同规模项目需求。该框架允许快速构建全功能业务应用,同时保持灵活性和可定制性。
项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

AIWritePaper论文写作

AIWritePaper论文写作是一站式AI论文写作辅助工具,简化了选题、文献检索至论文撰写的整个过程。通过简单设定,平台可快速生成高质量论文大纲和全文,配合图表、参考文献等一应俱全,同时提供开题报告和答辩PPT等增值服务,保障数据安全,有效提升写作效率和论文质量。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号