用于 Cloud Foundry 和 Kubernetes 的基于微服务的流式和批处理数据处理。
Spring Cloud Data Flow 提供了为流和批处理数据管道创建复杂拓扑的工具。数据管道由使用Spring Cloud Stream或Spring Cloud Task微服务框架构建的Spring Boot应用程序组成。
Spring Cloud Data Flow 支持一系列数据处理用例,从 ETL 到导入/导出、事件流和预测分析。
特征
Spring Cloud Data Flow 服务器使用Spring Cloud Deployer,将 Spring Cloud Stream 或 Spring Cloud Task 应用程序组成的数据管道部署到 Cloud Foundry 和 Kubernetes 等现代平台上。
一系列用于各种数据集成和处理场景的预构建流和任务/批处理启动器应用程序有助于学习和实验。
可以使用熟悉的 Spring Boot 风格的编程模型构建针对不同中间件或数据服务的自定义流和任务应用程序。
一个简单的流管道 DSL可以轻松指定要部署的应用程序以及如何连接输出和输入。当一系列任务应用程序需要作为有向图运行时,组合任务 DSL非常有用。
该仪表板为构建数据管道交互,以及意见部署的应用程序,并使用指标监测它们的图形编辑器,波前,普罗米修斯,潮DB,或其它监控系统。
Spring Cloud Data Flow 服务器公开了一个用于组合和部署数据管道的REST API。一个单独的shell使从命令行使用 API 变得容易。