kafka基本概念
2017-02-06 22:27
120 查看
1.producer:
消息生产者,发布消息到 kafka 集群的终端或服务。
2.broker:
kafka 集群中包含的服务器。
3.topic:
每条发布到 kafka 集群的消息属于的类别,即 kafka 是面向 topic 的。
4.partition:
partition 是物理上的概念,每个 topic 包含一个或多个 partition。kafka 分配的单位是 partition。
5.consumer:
从 kafka 集群中消费消息的终端或服务。
6.Consumer group:
high-level consumer API 中,每个 consumer 都属于一个 consumer group,每条消息只能被 consumer group 中的一个 Consumer 消费,但可以被多个 consumer group 消费。
7.replica:
partition 的副本,保障 partition 的高可用。
8.leader:
replica 中的一个角色, producer 和 consumer 只跟 leader 交互。
9.follower:
replica 中的一个角色,从 leader 中复制数据。
10.controller:
kafka 集群中的其中一个服务器,用来进行 leader election 以及 各种 failover。
12.zookeeper:
kafka 通过 zookeeper 来存储集群的 meta 信息。
消息生产者,发布消息到 kafka 集群的终端或服务。
2.broker:
kafka 集群中包含的服务器。
3.topic:
每条发布到 kafka 集群的消息属于的类别,即 kafka 是面向 topic 的。
4.partition:
partition 是物理上的概念,每个 topic 包含一个或多个 partition。kafka 分配的单位是 partition。
5.consumer:
从 kafka 集群中消费消息的终端或服务。
6.Consumer group:
high-level consumer API 中,每个 consumer 都属于一个 consumer group,每条消息只能被 consumer group 中的一个 Consumer 消费,但可以被多个 consumer group 消费。
7.replica:
partition 的副本,保障 partition 的高可用。
8.leader:
replica 中的一个角色, producer 和 consumer 只跟 leader 交互。
9.follower:
replica 中的一个角色,从 leader 中复制数据。
10.controller:
kafka 集群中的其中一个服务器,用来进行 leader election 以及 各种 failover。
12.zookeeper:
kafka 通过 zookeeper 来存储集群的 meta 信息。
相关文章推荐
- Kafka学习(二):Kafka的基本结构和概念
- SparkStreaming Kafka基本概念
- Kafka基本概念介绍及快速上手资料
- Kafka基本概念及原理
- kafka学习(一) ---- 基本概念以及环境搭建
- kafka基本概念和操作
- kafka基本概念
- kafka基本概念
- 分布式消息队列kafka系列介绍 — 基本概念
- kafka分布式消息队列 — 基本概念介绍
- Kafka学习(二):Kafka的基本结构和概念
- Kafka学习(一)基本概念
- Kafka的基本概念与安装指南(单机+集群同步)
- Kafka学习笔记-基本概念与安装部署
- Kafka系列4-基本概念及消费者组(Consumer Group)的理解
- kafka官方文档学习笔记1--基本概念了解
- kafka学习笔记——基本概念与安装
- Kafka基本概念总结
- Kafka的基本结构和概念
- kafka官方文档学习笔记1--基本概念了解