Kafka
Apache Kafka 是分布式事件流平台,以持久化分区日志为核心,支持高吞吐发布订阅、事件保留与重放。Kafka 4.x 仅使用 KRaft 管理元数据,ZooKeeper 模式已经移除。
Kafka 用作 Filebeat 下游、为多个日志消费者提供缓冲与扇出时,参见微服务板块的 日志平台 和 KEFK。
当前正式下载线最高为 Kafka 4.3.1。生产者、消费者、Broker 与 Connector 的兼容边界应结合目标版本验证。
文档目录
| 文档 | 内容 |
|---|---|
| 架构与存储模型 | Broker、KRaft、Topic、Partition、Replica、Segment 与保留策略 |
| 生产、消费与可靠性 | Producer、Consumer Group、Offset、ISR、幂等与事务 |
| 集群运维与调优 | 分区规划、扩容迁移、监控、积压、倾斜和故障处理 |
| 高可用架构 | Controller Quorum、Partition Replica、ISR、故障域与切换 |
| 版本演进与升级 | Kafka 0.x~4.3 的差异、KRaft 迁移和升级路径 |