如果你喜欢 Dataplane,请给它一个星标 ⭐
Dataplane
⚡️ 使用 Golang 编写并编译为机器代码,实现极致性能,同时保持低内存和 CPU 占用。
🖐 拖放式数据管道构建器。
🧑💻 内置 Python 代码编辑器。
👮 团队协作的细粒度权限,实现分隔访问。
🐿 带日志编辑的秘密管理,允许团队成员使用安全资源而不泄露密码。
⏱ 支持多时区的调度器。
🌍 设置隔离环境,用于跨数据网格域进行开发、测试和部署。
📊 监控分析工作负载的实时资源使用情况。
⭐️ 使用工作组进行分布式计算。
🌳 添加更多副本以实现高可用性和扩展。
☁️ 云原生
Dataplane 社区
Discord 聊天 是与社区成员见面和互动的最快方式。
Github 讨论 更适合提出新想法和需要更多思考的长期讨论。
GitHub Issues 仅用于实际问题。
关于项目
Dataplane 的理念是为各种规模的企业和团队提供更快速、更简便的方式来构建稳健的数据管道和自动化工作流程。除了更加用户友好外,我们还特别强调可扩展性、弹性、性能和安全性。Dataplane 刚刚发布第一个版本,还处于早期阶段。我们非常希望听到您的想法,也欢迎您参与其中。
网站:https://dataplane.app/
文档:https://dataplane.app/docs/
演示:https://dataplane.app/demo
配方:https://dataplane.app/recipes/
使用 Docker 快速开始
需要安装 Docker 引擎 - https://docs.docker.com/engine/install/
下载快速启动 docker compose 文件
curl -LfO 'https://raw.githubusercontent.com/dataplane-app/dataplane/main/quick-start/docker-compose.yaml'
运行 docker compose
docker-compose up
首次设置,请按照以下地址的入门流程操作:http://localhost:9001/webapp/get-started
使用 Dataplane,请访问 http://localhost:9001/webapp/
Docker 发布版本:https://hub.docker.com/u/dataplane
开发 Dataplane 代码
我们为 VS Code 设置了一个容器化的开发环境。
要开始开发设置,请按照以下步骤操作:
- 在 VS Code 中安装 Remote Development - 扩展 ID:ms-vscode-remote.vscode-remote-extensionpack
- 点击 VS Code 左下角绿色部分的两个尖括号"打开远程窗口"
- 确保 Docker 正在运行
- 点击"在容器中重新打开"
- 要在容器外工作,再次点击绿色部分并选择"在本地重新打开文件夹"
许可证
本 git 仓库中发布的项目采用开源可用许可证 - 商业源代码许可证 1.1 (BSL)。选择此许可证是为了阻止云提供商将此项目作为数据平台服务提供。如果您想将 Dataplane 作为服务提供,我们欢迎讨论,请与我们联系。对于其他用户(99.999%)出于个人或业务需求使用本软件,这些限制将不适用,您可以自由使用。
感谢 Vectorized (https://vectorized.io/blog/open-source/)、CockroachDB 和 Mariadb 研究和开发商业源代码许可证。我们持相同观点,在使软件对社区开放的同时,防止不公平做法,即旨在商业受益而不回馈社区。