Project Icon

steampipe

高效数据集成工具 直接访问 API 无需 ETL

Steampipe 是一款创新的数据集成工具,能够直接从各类 API 和服务获取数据,无需传统的 ETL 过程。该工具提供多种引擎,包括命令行界面、Postgres 外部数据包装器、SQLite 扩展和独立导出工具。借助丰富的插件生态系统,Steampipe 可将 API 数据轻松映射为数据库表,便于快速查询和分析。不论是本地部署还是云端使用,Steampipe 都为数据访问和整合提供了灵活而高效的解决方案。

Steampipe 标志

插件   Slack   维护者

Steampipe 是一种零 ETL 解决方案,可直接从 API 和服务获取数据。我们提供以下 Steampipe 引擎:

  • Steampipe CLI。使用 Steampipe 核心引擎将 API 转换为 Steampipe 捆绑的 Postgres 实例中的表。

  • Steampipe Postgres FDW。使用原生 Postgres 外部数据包装器将 API 转换为外部表。

  • Steampipe SQLite 扩展。使用 SQLite 扩展将 API 转换为 SQLite 虚拟表。

  • Steampipe 导出工具。使用独立二进制文件从 API 导出数据,无需数据库。

  • Turbot Pipes。使用 Turbot Pipes 在云端运行 Steampipe。

Steampipe API 插件

Steampipe 社区开发了一系列插件,将 API 映射到数据库表。这些插件可与所有 Steampipe 引擎配合使用。

安装 Steampipe

下载页面会告诉你如何安装,但简而言之:

Linux 或 WSL

sudo /bin/sh -c "$(curl -fsSL https://steampipe.io/install/steampipe.sh)"

MacOS

brew tap turbot/tap
brew install steampipe

安装插件

插件中心选择一个插件,例如:Hacker News

运行 steampipe plugin 命令安装它。

steampipe plugin install hackernews

使用插件查询

使用 psql —— 或其他 Postgres 客户端,或 Powerpipe —— 来查询已安装插件提供的表。

psql -h localhost -p 9193 -d steampipe -U steampipe
steampipe=> select * from hackernews_new limit 10

开发

前提条件:

  • Golang 1.19 或更高版本。

克隆仓库。

git clone https://github.com/turbot/steampipe
cd steampipe

构建,这会自动将新版本安装到你的 /usr/local/bin/steampipe 目录:

make

检查版本。

$ steampipe -v
steampipe version 0.21.1

按上述方法安装插件并运行查询。

开源与贡献

本仓库根据 AGPL 3.0 许可证发布。请查看我们的行为准则。贡献者必须在第一次拉取请求中签署我们的贡献者许可协议。我们期待与你合作!

Steampipe 是由 Turbot HQ, Inc 基于此开源软件独家生产的产品。它根据我们的商业条款分发。其他人可以自行分发该软件,但不能使用任何 Turbot 商标、云服务等。你可以在我们的开源常见问题中了解更多信息。

Turbot Pipes

想要 Steampipe 的托管版本吗?带领你的团队加入 Turbot Pipes

参与其中

加入 Slack 上的 #steampipe 频道 →

想要帮忙但不知从何开始?选择一个标记为 help wanted 的问题:

项目侧边栏1项目侧边栏2
推荐项目
Project Cover

豆包MarsCode

豆包 MarsCode 是一款革命性的编程助手,通过AI技术提供代码补全、单测生成、代码解释和智能问答等功能,支持100+编程语言,与主流编辑器无缝集成,显著提升开发效率和代码质量。

Project Cover

AI写歌

Suno AI是一个革命性的AI音乐创作平台,能在短短30秒内帮助用户创作出一首完整的歌曲。无论是寻找创作灵感还是需要快速制作音乐,Suno AI都是音乐爱好者和专业人士的理想选择。

Project Cover

有言AI

有言平台提供一站式AIGC视频创作解决方案,通过智能技术简化视频制作流程。无论是企业宣传还是个人分享,有言都能帮助用户快速、轻松地制作出专业级别的视频内容。

Project Cover

Kimi

Kimi AI助手提供多语言对话支持,能够阅读和理解用户上传的文件内容,解析网页信息,并结合搜索结果为用户提供详尽的答案。无论是日常咨询还是专业问题,Kimi都能以友好、专业的方式提供帮助。

Project Cover

阿里绘蛙

绘蛙是阿里巴巴集团推出的革命性AI电商营销平台。利用尖端人工智能技术,为商家提供一键生成商品图和营销文案的服务,显著提升内容创作效率和营销效果。适用于淘宝、天猫等电商平台,让商品第一时间被种草。

Project Cover

吐司

探索Tensor.Art平台的独特AI模型,免费访问各种图像生成与AI训练工具,从Stable Diffusion等基础模型开始,轻松实现创新图像生成。体验前沿的AI技术,推动个人和企业的创新发展。

Project Cover

SubCat字幕猫

SubCat字幕猫APP是一款创新的视频播放器,它将改变您观看视频的方式!SubCat结合了先进的人工智能技术,为您提供即时视频字幕翻译,无论是本地视频还是网络流媒体,让您轻松享受各种语言的内容。

Project Cover

美间AI

美间AI创意设计平台,利用前沿AI技术,为设计师和营销人员提供一站式设计解决方案。从智能海报到3D效果图,再到文案生成,美间让创意设计更简单、更高效。

Project Cover

稿定AI

稿定设计 是一个多功能的在线设计和创意平台,提供广泛的设计工具和资源,以满足不同用户的需求。从专业的图形设计师到普通用户,无论是进行图片处理、智能抠图、H5页面制作还是视频剪辑,稿定设计都能提供简单、高效的解决方案。该平台以其用户友好的界面和强大的功能集合,帮助用户轻松实现创意设计。

投诉举报邮箱: service@vectorlightyear.com
@2024 懂AI·鲁ICP备2024100362号-6·鲁公网安备37021002001498号