网站建设如果没有源代码,工程建筑模板生产厂家,wordpress iis内存高,佛山市seo推广哪家好简介#xff1a; RocketMQ5.0 的发布标志着阿里云消息从消息领域正式迈向了“消息、事件、流”场景大融合的新局面。未来阿里云消息产品的演进也将继续围绕消息、事件、流核心场景而开展。
从“消息”到“消息、事件、流”的大融合
消息队列作为当代应用的通信基础设施…简介 RocketMQ5.0 的发布标志着阿里云消息从消息领域正式迈向了“消息、事件、流”场景大融合的新局面。未来阿里云消息产品的演进也将继续围绕消息、事件、流核心场景而开展。
从“消息”到“消息、事件、流”的大融合
消息队列作为当代应用的通信基础设施微服务架构应用的核心依赖通过异步解耦能力让用户更高效地构建分布式、高性能、弹性健壮的应用程序。
从数据价值和业务价值角度来看消息队列的价值不断深化。消息队列中流动的业务核心数据涉及集成传输、分析计算和处理等不同环节与场景。伴随着不断演进我们可以预见消息队列势必在数据通道、事件集成驱动、分析计算等场景不断产生新价值创造新的“化学反应”。 RocketMQ 诞生于阿里巴巴内部电商系统发展至今日其核心架构经历了多次关键演进
早在 2007 年淘宝电商系统做服务化拆分的时候就诞生了第一代消息服务 Notify这是 RocketMQ 最早雏形。Notify 采用了关系型数据库作为存储使用推模式。在阿里淘宝这种高频交易场景中具有非常广泛地应用。
在 2007-2013 年期间随着阿里集团业务发展不仅需要交易场景异步调用同时需要支持大量传输埋点数据、数据同步。此时内部衍生出 MetaQ 以及 RocketMQ3.0 版本这两个版本开始探索自研存储引擎采用了自研专有消息存储支持了单机海量 Topic并前瞻性地去除了 Zookeeper 等组件的外部依赖。在十年后的今天我们看到去各种 keeper 已成为整个消息领域的发展主流。
经历了前三代的内部业务打磨后阿里巴巴积极参与开源并将 RocketMQ3.0 贡献到开源社区并于 2017 年从 Apache 孵化器毕业成为中国首个非 Hadoop 生态体系的 Apache 社区顶级项目。此后RocketMQ 也开始服务于阿里云企业客户。秉承开源、商业、内部三位一体发展策略18 年发布的 4.x 版在高可靠低延迟方面重点优化构建了全新的低延迟存储引擎和多场景容灾解决方案、并提供了丰富的消息特性。这也使得 RocketMQ 成为金融级的业务消息首选方案。
上个月社区发布了 RocketMQ5.0-preview 版正式宣告 5.0 的到来。RocketMQ5.0 将不再局限于消息解耦的基本场景更是通过统一内核、存储的优势提供消息、事件、流一体化的处理能力。 回顾 RocketMQ 发展的十余年良好的社区环境和商业支持使得大量企业开发者可以很方便的跟进业务特点和诉求进行选型和验证。在社区活跃影响力方面RocketMQ 社区项目收获 15000Star活跃的贡献者有 400 位多语言、生态连接等周边活跃项目 30 个深受社区开发者欢迎。在应用规模方面RocketMQ 作为金融级业务消息方案积累了互联网游戏、在线教育、金融证券、银行、政企能源、汽车出行等众多行业数以万计的企业客户。同时在阿里巴巴内部担负业务核心链路每天流转万亿级消息流量扛过了历届双十一的零点峰值。在行业评测方面RocketMQ 也多次斩获大奖。 官宣阿里云新一代 RocketMQ“消息、事件、流”融合处理平台
今天发布阿里云消息队列 RocketMQ 版 5.0我们称之为一站式“消息、事件、流”融合处理平台。
新版本核心诞生两大新亮点首先是消息核心场景的扩展和布局RocketMQ 5.0 不再局限于消息解耦场景将全新布局事件驱动和消息流式处理场景其次则是一站式融合处理的技术架构和趋势。 “消息、事件、流”一站式融合处理的技术架构可以实现一份消息存储支持消息的流式计算、异步投递、集成驱动多种场景极大地降低业务人员运维多套系统的技术复杂度和运维成本。可以说无论是微服务的指令调用、异步通知还是 CDC 变更日志、行为埋点数据亦或是资源运维、审计事件统一的 RocketMQ5.0 产品栈都能统一处理。
重大发布一RocketMQ 基础架构全新升级
首先最重要的升级是阿里云 RocketMQ 的技术架构全面焕新。 全新的 RocketMQ5.0 版将通用的存储逻辑下沉集中解决消息存储的多副本、低延迟、海量队列分区等技术问题将上层的消息处理和剥离出完全的无状态计算层主要完成协议适配、权限管理、消费状态、可观测运维体系支持。得益于存算分离的架构设计从 SDK 接入到线上运维全链路带来全面提升
轻量版 SDK 的开放和全链路可观测系统的提升同时支持 4.x 通信协议和全新的 gRPC 通信协议并内置 OpenTelemetry 埋点支持新版本 SDK 新增了 10 余个指标埋点。消息级负载均衡新版本 SDK 不再参与实际存储队列的负载均衡消息负载均衡将更加轻量以单条消息为调度最小单元。多网络访问支持新版本支持单一实例同时暴露公网、内网等访问形式方便客户多网络接入访问。海量分级存储新版本开放分级存储历史消息保存能力消息低成本无大小限制最长保存 30 天。冷热数据进行分离设计极大降低消费历史消息对实例的性能影响。
重大发布二RocketMQ Streaming 云上最佳实践——消息ETL
消息基础架构的能力提升之外阿里云 RocketMQ 在 Streaming 流式处理场景推出了轻量级消息 ETL 功能。 用户在数据库变更、终端数据上报、后台埋点日志等场景产生的消息典型的消费场景就是数据清洗转化同时再存储到外部的存储和离线分析、在线分析系统中。传统实现方案需要搭建 Flink 等重量级实时计算服务或者自建消费应用做消息处理。而使用商业版 RocketMQ ETL 功能简单控制台配置即可实现消息的清洗和转化。RocketMQ ETL 功能有三大优势
轻量无依赖作为阿里云消息原生功能使用时不需要部署外部计算服务或消费程序方案更轻量。开发门槛低内置常见清洗转化模板满足绝大多数消息内容处理需求并支持用户快速编写自定义函数来支持特殊的业务逻辑。整体开发成本非常低1 小时即可完成业务上线。Serverless 弹性无需预先估算容量采取 Serverless 无服务器模式实现按需弹性伸缩。
重大发布三EDA 云上最佳实践——事件中心 EventBridge
本次 RocketMQ 最后一个发布点是在事件驱动的业务场景的布局和演进。早在 2018 年Gartner 评估报告将 EDAEvent-Driven-Architecture 列为十大战略技术趋势之一事件驱动架构将成为未来微服务主流。我们首先下一个定义
事件驱动其本质是对消息驱动的再升级是企业IT架构深度演进的下一个必然阶段。
事件驱动架构和消息驱动架构的区别和关联主要集中于以下三点
EDA 更加强调深层次解耦消息驱动是同一业务、组织系统内不同组件之间在技术架构层面的调用解耦其信息封装和处理都是有预期、预定义的。事件驱动适配是更宽泛的业务、组织系统基于事件的解耦上下游之间无需有预期和行为定义上下游统一遵循标准化的规范这是更深度的解耦。EDA 更加强调连接能力消息驱动更多是单一系统内的调用而事件驱动往往会涉及到不同的地域、账户主体以及三方 SaaS 的协同事件驱动的一大特征就是生态的强连接能力。EDA 更加强调 Serverless 低代码开发类比于消息和微服务的协同关系未来业务架构 Serverless 化的大趋势会推动业务开发模式逐步转向低代码配置化。事件驱动的另一大特征就是低代码开发基于丰富的工具能力业务侧不需要像消息驱动一样编写大量的生产消费代码。因此阿里云统一事件中心 EventBridge 产品带来如下能力
统一标准化的事件集成生态作为阿里云事件中心集成 80 余款云产品的业务事件支持 800 多种事件类型用户使用 EventBridge 可以一次性管理所有云产品资源的变更、操作使用事件避免对接多个产品接口的重复性劳动。全球事件互通网络贯彻事件驱动强连接的属性能力本次发布了全球事件互通网络首批支持国内五大地域事件互通。企业客户简单配置即可实现跨账号、跨地域、跨网络的事件聚合和流转。Serverless 低代码开发内置十余种事件目标和处理模板涵盖了大多数业务场景客户简单配置、低代码无需部署服务即可完成事件的驱动和处理。
面向未来坚定推动“消息、事件、流”大融合的发展
RocketMQ5.0 的发布标志着阿里云消息从消息领域正式迈向了“消息、事件、流”场景大融合的新局面。未来阿里云消息产品的演进也将继续围绕消息、事件、流核心场景而开展。消息基础架构本身也必将步伐不断继续朝着 Serverless 弹性、强容灾能力、可观测免运维方向推进给客户带来高性能、高可靠、强容灾的高 SLA 服务并在 Streaming 的场景会基于客户业务诉求联合生态产品持续推出更多的消息处理计算服务打造面向未来的企业集成模式联合生态伙伴和开源社区大力推动事件驱动进一步发展。 原文链接
本文为阿里云原创内容未经允许不得转载。
