本文介绍: Wormhole 是一个一站式流式处理云平台解决方案（SPaaS – Stream Processing as a Service）。Wormhole 面向大数据流式处理项目的开发管理运维人员，致力于提供统一抽象的概念体系，直观可视化的操作界面，简单流畅的配置管理流程，基于 SQL 即可完成的业务逻辑开发方式，并且屏蔽了流式处理的底层技术细节，极大的降低了数据项目管理运维门槛，使得大数据流式处理项目的开发管理运维变得更加轻量敏捷可控可靠。
Wormhole 是一个一站式流式处理云平台解决方案（SPaaS – Stream Processing as a Service）。
Wormhole 面向大数据流式处理项目的开发管理运维人员，致力于提供统一抽象的概念体系，直观可视化的操作界面，简单流畅的配置管理流程，基于 SQL 即可完成的业务逻辑开发方式，并且屏蔽了流式处理的底层技术细节，极大的降低了数据项目管理运维门槛，使得大数据流式处理项目的开发管理运维变得更加轻量敏捷可控可靠。
开源地址：GitHub – edp963/wormhole: Wormhole is a SPaaS (Stream Processing as a Service) Platform
系统架构
设计理念
主要特性
Experience
Admin 可以创建 Project/Namespace/User/UDF，并且可查看所有 Flow/Stream/Job
Admin 可以为 Project 分配 Namespace 资源/User 资源/UDF 资源/计算资源，以支持多租户资源隔离
User 可以对自己有权限的 Project 进行开发实施和管理运维工作
User 可以通过简单配置步骤即可搭建起一个流式作业 pipeline（Flow），只需关注数据从哪来到哪去和如何转换处理
转换支持大部分流上作业常用场景，大部分工作可以通过配置 SQL 实现流上处理逻辑
Wormhole 有 Flow 和 Stream 的概念，支持在一个物理 Stream（对应一个 Spark Stream）里通过并行处理多个逻辑 Flow，使得 User 可以更加精细灵活的利用计算资源，User 也可以对 Stream 进行精细化参数配置调整以更好平衡需求和资源
Wormhole 也支持批处理 Job，同样可以配置化实现处理逻辑并落到多个异构 Sink，Flow 和 Job 的配合可以很容易实现 Lambda 架构和 Kappa 架构
User 可以查看 Project 相关的 Namespace/User/UDF/Resource
User 还可以监控 Project 正在运行的所有 Flow/Stream 的吞吐和延迟
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
