阿里每天近万亿等级的音讯是怎样完结实时音讯传递的? 几十万台服务器, 不计其数个使用顺利协作和音讯实时传递都离不开分布式音讯中间件 RocketMQ。长久以来,RocketMQ 易于布置、高性能、高可用的架构, 支撑了数十年来集团表里海量的事务场景。2016 年, 阿里巴巴宣告将开源分布式音讯中间件 RocketMQ 捐赠给 Apache, 并一举成为 Apache 项目 (TLP)。一个由我国开发者建议的项目, 站在了一个国际的舞台上, 遭到全球的企业和开发者重视。RocketMQ 深受开发者欢迎, 屡次斩获职业大奖, 究竟是怎样的一群人让这一项目不断迸发出昌盛的生命力?
这是一个从诞生第起就在 GitHub 上开发的开源项目, 也是个非 Hadoop 生态的 Apache 项目。它一致了阿里集团内部一切事务线的音讯中间件, 伴随着我国互联网开展数次迭代。
《十万亿条音讯背面的故事》记载了从诞生、开源到开展至今, 那些 RocketMQ 背面不为人知的开创故事。经过「开源人说」的娓娓道来, 让咱们一同来了解分布式音讯中间件 Apache RocketMQ 背面的人与事!
早在 2007 年, 阿里巴巴中间件团队就自主研发了音讯中间件 Notify。作为 RocketMQ 的前身, 在很长一段时刻里,Notify 作为首要的音讯中间件支撑着淘宝天猫事务。
Apache RocketMQ 的开创人王小瑞于 2011 年加入到淘宝中间件。其时面对应战是, 每年“双 11”Notify 都会出问题, 使得音讯会推迟半响甚至以上, 商家看不到买家现已购买了产品, 这关于商家服务以及客户体会的影响十分大。在细致研判后, 发现问题中心便是怎样能够完结高速读写, 王小瑞地点的团队以为想要处理这一问题, 就需要根据一个全新存储架构来处理这个问题。所以,RocketMQ 诞生了。
王小瑞 (Apache RocketMQ 开创人 & 作者) 说:“阿里的文明特别敞开, 我是在食堂跟小邪 (现阿里云根底产品工作部负责人) 吃饭的时分, 说咱们期望这个产品名字叫 RocketMQ, 期望它能够一开端便是开源的。小邪其时就给予了支撑。”淘宝的文明也是立刻做, 做精彩。假如你有主意, 那你赶忙去做。所以我其时其实做梦的进程中都在想这些问题该怎样处理。老板没有定一个严厉的时刻点, 说你必须在什么时刻写完, 但我的主意是, 我现已想清楚了整个架构, 需要把它快速完结出来。”
从第开端,RocketMQ 就在 Github 完好展示, 也便是说 RocketMQ 的榜首行代码对用户便是敞开的。在十分多国表里开发者的一同参加下。RocketMQ 快速迭代, 大约用了 3 个月时刻就完结榜首个版别。
2016 年“双 11”当天, 到达万亿级音讯量, 峰值 TPS 几千万, 发明了国内甚至国际上的音讯流通记载。
在阿里巴巴树立之初, 正是根据开源软件将整个电商渠道的原型快速建立起来。阿里巴巴感恩开源社区带来的巨大贡献与价值, 也期望将自身阅历同享出来、回馈社区, 让更多的人获益。
2016 年, 阿里巴巴将分布式音讯中间件 RocketMQ 捐赠给了 Apache 开源软件基金会。仅用 10 个月时刻就从 Apache 结业, 并成为 Apache 项目 (TLP)。这也标志着我国具有了榜首个非 Hadoop 生态的项目。
Apache RocketMQ 社区运营负责人王荣刚说:“咱们总算完结了一个阶段性的小方针, 一个由我国开发者建议的项目, 站在了一个国际的舞台上, 遭到全球的企业和开发者的重视, 那种感觉仍是十分骄傲的。”
2021 年, 在阅历社区很多开发者的不断尽力,RocketMQ 5.0 出现在职业视界中, 并引发广泛评论。新版别中心包含两大新亮点。首要, 音讯中心场景全面扩展,RocketMQ 5.0 不再局限于音讯解耦场景, 将全新布局事情驱动和音讯流式处理场景; 其次, 技能架构不断演进, 逐步构成一站式交融处理的技能架构和趋势。
2022 年, 批量音讯索引、逻辑行列发布 RocketMQ-MQTT,RocketMQ-Connect、RocketMQ-Streams, 完结从事务音讯渠道向『音讯、事情、流』一体化交融处理渠道的晋级。开发者能够完结一份音讯存储, 支撑流式核算、异步投递、集成驱动等多个场景。完结技能问题一站式处理, 大大下降技能复杂度和运维本钱, 简化企业使用架构。
阿里巴巴开源委员会副主席丁宇表明:“未来, 咱们会加大 RocketMQ 的开源投入, 构建愈加昌盛的社区生态, 期望与更多的开发者、贡献者一同, 寻求、敞开同享, 完结技能普惠。”
正是由于有这样一群酷爱开源并愿意为它一向斗争的开源人们, 让我国的开源工作未来可期!