kafka深入研究之路(1)-剖析各原理02

接着上一文的内容继续升入研究

topic如何创建于删除的

topic的创建
kafka深入研究之路(1)-剖析各原理02

具体流程文字为：

1、 controller 在 ZooKeeper 的 /brokers/topics 节点上注册 watcher，当 topic 被创建，则 controller 会通过 watch 得到该 topic 的 partition/replica 分配。
2、 controller从 /brokers/ids 读取当前所有可用的 broker 列表，对于 set_p 中的每一个 partition：
     2.1、 从分配给该 partition 的所有 replica（称为AR）中任选一个可用的 broker 作为新的 leader，并将AR设置为新的 ISR 
     2.2、 将新的 leader 和 ISR 写入 /brokers/topics/[topic]/partitions/[partition]/state 
3、 controller 通过 RPC 向相关的 broker 发送 LeaderAndISRRequest。

注意：此部分和 partition 的leader选举过程很类似都是需要 zk参与相关信息都是记录到zk中
controller在这些过程中启到非常重要的作用。

topic的删除
kafka深入研究之路(1)-剖析各原理02

文字过程：

1、 controller 在 zooKeeper 的 /brokers/topics 节点上注册 watcher，当 topic 被删除，则 controller 会通过 watch 得到该 topic 的 partition/replica 分配。 
2、 若 delete.topic.enable=false，结束；否则 controller 注册在 /admin/delete_topics 上的 watch 被 fire，controller 通过回调向对应的 broker 发送 StopReplicaRequest。

consumer是如何消费消息的

参考链接Wie：
Kafka学习之路（三）Kafka的高可用 https://www.cnblogs.com/qingyunzong/p/9004703.html

来源：https://blog.51cto.com/12445535/2432350

标签

topic

Kafka

partition