scio
Scio是一个为Apache Beam和Google Cloud Dataflow设计的Scala API,灵感源自Apache Spark和Scalding。它支持统一的批处理和流处理编程模型,并与Google Cloud产品及多种工具如Avro、Cassandra、Elasticsearch、gRPC、JDBC、Neo4j、Parquet、Redis和TensorFlow等集成。Scio还具备交互模式、类型安全的BigQuery访问,并支持与Algebird和Breeze的集成,通过Scala Futures进行管道编排。其详尽的文档、示例和扩展模块为用户提供了全面的使用指南和示例。