AutoMQ_AutoMQ技术文章_InfoQ写作社区

全部标签 



写点什么

登录注册

AutoMQ

0 人感兴趣 · 28 次引用

关注

最新
推荐

AutoMQ 开源可观测性方案：夜莺 Flashcat

07-29

01引言

云计算 kafka 云原生 Apache Kafka AutoMQ

https://static001.geekbang.org/infoq/6c/6cbe476c56e4e7d4040e6ce8f27d18a6.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

使用观测云监控观测 AutoMQ 最佳实践

07-19

利用观测云提供的数据采集工具 DataKit 与观测云平台进行集成。方便用户对 AutoMQ 集群的状态进行监测和管理，有效地对 AutoMQ 集群的各种信息进行统计，比如常见 Topics, Brokers, Partitions 以及 Group 统计数据。

活动预告｜想更了解流式数据湖？亚马逊云科技数据开源软件 - 流式数据湖 Tech Talk 来啦！

07-15

活动介绍

AWS AutoMQ 流式数据湖

基于 Netty 的自研流系统缓存实现挑战: 内存碎片与 OOM 困境

07-09

01

Java 云原生 Netty AutoMQ

AutoMQ 生态集成 Kafdrop-ui

07-09

Kafdrop [1] 是一个为 Kafka 设计的简洁、直观且功能强大的Web UI 工具。它允许开发者和管理员轻松地查看和管理 Kafka 集群的关键元数据，包括主题、分区、消费者组以及他们的偏移量等。通过提供一个用户友好的界面，Kafdrop 大大简化了 Kafka 集群的监控和管

Java kafka 云原生 AutoMQ kafdrop

AutoMQ vs Kafka: 来自小红书的独立深度评测与对比

07-09

测试背景

Java kafka 云原生小红书 AutoMQ

AutoMQ 与蚂蚁数科达成战略合作

07-09

近期，AutoMQ 与蚂蚁数科正式签署战略合作协议，将和蚂蚁数科云原生 PaaS 平台 SOFAStack 在产品研发、生态集成、市场合作、技术社区影响力等多方面开展深度合作。

Java kafka 云原生 AutoMQ 蚂蚁数科

AutoMQ 产品动态 | 发布 1.1.0，兼容至 Apache Kafka 3.7，支持 Kaf

07-09

2024年05-06月动态

Java 云计算 kafka AutoMQ

Java ZGC 深度剖析及其在构建低延迟流系统中的实践心得

07-09

01

Java 云计算 AutoMQ

「布道师系列文章」宝兰德徐清康解析 Kafka 和 AutoMQ 的监控

07-09

作者｜北京宝兰德公司解决方案总监徐清康

云计算 kafka Java’AutoMQ

AutoMQ 生态集成 CubeFS

06-17

CubeFS [1] 是新一代云原生存储产品，目前是云原生计算基金会 CNCF托管的孵化阶段开源项目，兼容 S3、POSIX、HDFS 等多种访问协议，支持多副本与纠删码两种存储引擎，为用户提供多租户、多 AZ 部署以及跨区域复制等多种特性，广泛应用于大数据、AI、容器平

云原生 AutoMQ

为什么公共云的弹性能力很难被发挥出来？

05-09

作者｜王小瑞 AutoMQ 联合创始人 & CEO

Java 大数据云原生 AutoMQ

AutoMQ 系统测试体系揭秘

04-29

01 前言

Java 云计算云原生后端 AutoMQ

https://static001.geekbang.org/infoq/9c/9c011236e1e85e4904c6711003690531.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Kafka Exactly Once 语义实现原理：幂等性与事务消息

04-28

在现代分布式系统中，确保数据处理的准确性和一致性是至关重要的。Apache Kafka，作为一个广泛使用的流处理平台，提供了强大的消息队列和流处理功能。

大数据 kafka 云原生幂等性 AutoMQ

https://static001.geekbang.org/infoq/74/74030d35fe8e978ac2e5456f815668b6.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

「布道师系列文章」小红书黄章衡：AutoMQ Serverless 基石 - 秒级分区迁移

04-28

作者｜黄章衡，小红书消息引擎研发专家

大数据 kafka 云原生小红书 AutoMQ

https://static001.geekbang.org/infoq/d7/d7baec42448e001e439fa6a48f033db8.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

云上如何实现 Autoscaling: AutoMQ 的实战经验与教训

04-28

弹性是云原生、Serverless 的基础。AutoMQ 从软件设计之初即考虑将弹性作为产品的核心特质。对于 Apache Kafka 而言，由于其存储架构诞生于 IDC 时代，针对物理硬件设计，存储层强依赖本地存储，已不能很好地适应现在云的时代了。

大数据 kafka 云原生 AutoMQ autoscaling

https://static001.geekbang.org/infoq/e6/e6e8a734be808462384af6f7a6eaf16a.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

「布道师系列文章」解析 AutoMQ 对象存储中的文件存储格式

04-18

作者｜王金龙，知乎消息队列研发工程师，开源爱好者，长期关注云原生基础组件

大数据 kafka 云原生知乎 AutoMQ

https://static001.geekbang.org/infoq/48/4844e6f8ed3af818bccfbac14959df38.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Kafka 迁移工具 MirrorMaker2 原理起底

04-16

注意：本文内容截止到 2024 年 2 月 26 日发布的 Kafka 3.7.0 版本。

大数据 kafka 云原生 AutoMQ MirrorMaker2

AutoMQ 1.1.0-RC0 重磅更新：内核升级到 Apache Kafka 3.7.0

04-08

AutoMQ 在 2024.02 正式发布了基于 Apache Kafka 3.4.0 的云原生重构版本 1.0.0，AutoMQ 1.0.0 版本相比原版提供了 Serverless、自动负载均衡、秒级分区迁移和 All in 对象存储能力，让 Kafka 用户能充分利用云的弹性能力和廉价存储，实现十倍成本优势。

大数据云原生 AutoMQ

https://static001.geekbang.org/infoq/71/716c85b7c03edf731cb82d55db579e6a.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

2024 AutoMQ 布道师计划启动！

04-08

我们是来自 Apache RocketMQ 和 Linux LVS 项目的核心团队，曾经见证并应对过消息队列基础设施在大型互联网公司和云计算公司的挑战。基于对象存储优先、存算分离、多云原生等技术理念，我们重新设计并实现 Apache Kafka 和 Apache RocketMQ，带来高达10 倍的

大数据云原生布道师 AutoMQ

https://static001.geekbang.org/infoq/16/16450f4fff644204df5d828531158c0c.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Kafka 痛点专题：AutoMQ 如何实现分区持续重平衡？

04-08

在一个线上 Kafka 集群中，流量的波动、Topic 的创建和删除、Broker 的消亡和启动都随时可能发生，而这些变化可能导致流量在集群各个节点间分布不均，从而导致资源浪费、影响业务稳定。

云计算大数据 kafka AutoMQ

https://static001.geekbang.org/infoq/8c/8cfb5ec6f67595ff9b598fabb83656bf.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

一文搞懂 Kafka consumer 与 broker 交互机制与原理

03-29

本文详细阐述了 Kafka consumer 的主要生命周期背后的原理，重点介绍了 consumer 在消费和退出过程中与 broker 之间的交互机制。此外，还对 group 状态管理、rebalance 原理做了分析。

大数据 kafka 云原生 broker AutoMQ

https://static001.geekbang.org/infoq/04/04020eadebe1761a30a0acf328eca358.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Redis 开源协议变更背后：开源软件与云计算巨头的竞争博弈

03-29

在云计算的风潮下，开源软件的生态环境正在经历一场剧变。2024 年 3 月 20 日，这种变化在 Redis 身上得到了集中体现。Redis 商业公司 CEO Rowan Trollope 宣布，Redis 将从 BSD 3-Clause 许可证过渡到双重许可证模式，包括 RSALv2 和 SSPLv1。

redis 大数据云原生 AutoMQ BSL

https://static001.geekbang.org/infoq/68/6860e7b19981bb2a838b436d2ec2cd64.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

AutoMQ 社区双周精选第九期（2024.03.11~2024.03.22）

03-26

本期概要

大数据 kafka 云原生 AutoMQ

https://static001.geekbang.org/infoq/2e/2e4876e515250dcc6a5b3da5f4dd5da3.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

原理剖析：AutoMQ 如何基于裸设备实现高性能的 WAL

03-22

AutoMQ 是一个建立在 S3 Stream 流存储库基础上的 Apache Kafka 云原生重塑解决方案。S3 Stream 利用云盘和对象存储，将对象存储作为主存储，将云盘作为缓冲区，实现了低延迟、高吞吐、“无限”容量和低成本的流式存储。

大数据 kafka 云原生 AutoMQ

https://static001.geekbang.org/infoq/3c/3ce0b9c4a0558cff8f46a1fa173b4cf9.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

Kafka 痛点专题｜AutoMQ 如何解决 Kafka 冷读副作用

03-15

Apche Kafka （下文简称 Kafka）作为一款成功的流处理平台已经在各行各业中有广泛的应用，并且具备极其强大的软件生态。但是，其一些缺点也给使用者带来了很大的挑战。AutoMQ 是基于云原生架构实现的新一代 Kafka ，与 Kafka 100% 完全兼容。致力于解决 Kafk

云计算大数据 kafka 云原生 AutoMQ

https://static001.geekbang.org/infoq/b2/b2502e6c74ddb24ef6f940e95d2595b3.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

AutoMQ 社区双周精选第八期（2024.02.26~2024.03.08）

03-14

AutoMQ 社区双周精选

Java 云计算大数据 kafka AutoMQ

https://static001.geekbang.org/infoq/70/705e60d87891b168cab0eaaa293c355c.png?x-oss-process=image%2Fresize%2Cw_416%2Ch_234

研发日记｜一次 Java 乌龙“内存泄露”排查之旅

03-14

《研发日记》这个系列的诞生初衷，是希望分享 AutoMQ 版本迭代中我们的研发故事，其中会包括技术调研、问题诊断、性能优化等内容。如果你也对 AutoMQ 背后的技术和进展感兴趣的话，欢迎关注我们。

Java 大数据 kafka 云原生 AutoMQ

1

玩转社区

Q&A

优质合集

精选文章

企业号社区

行业技术资讯