Kafka系列三基础概念

小半 • 2022年9月20日下午9:10 • 后端开发 • 阅读 77

kafka 是一款分布式消息发布和订阅系统，其高性能、高吞吐量的特点决定了其适用于大数据传输场景。

Broker 其实就是一个运行 Kafka 服务的服务器。Kafka 集群包含一个或者多个的服务器，这些服务器就称为 Broker。Broker 不维护数据的消费状态，直接使用磁盘进行存储（通过配置的大小和时间批量写入），线性读写，速度快。

Kafka 中的 Topic 是一类数据的分类，比如告警消息 AlarmMessage 这个 Topic，Kafka 使用 Topic 区分各种数据类型。一个 Topic 下可以有多个 Partition。

一般来说，一个 Topic 下会有多个 Partition，也叫分区，每个分区可以看作是一个队列。每一个分区都是一个顺序的、不可变的、持续添加（append）的消息队列。

一个 Topic 下的多个分区的数据类型是相同的，采用分区的目的是：

生产者，负责往消息队列发送数据。

消费者，负责消费消息队列的数据。

因为 Kafka 是一个分布式的消息系统，所以 zookeeper 是用于Kafka集群的管理。其作用体现在系统中的 Broker 注册、Topic 注册、生产者注册、消费者注册、负载均衡等等方面之中。

原文始发于微信公众号（林锦佳）：Kafka系列三基础概念

文章由极客之音整理，本文链接：https://www.bmabk.com/index.php/post/28278.html