storm中的zookeeper集群

storm使用zookeeper来协调整个集群

1nimbus通过在zookeeper上写状态信息来分配任务。通俗的讲就是写哪些supervisor执行哪些task的对应关系。而supervisor则通过从zookeeper上读取这些状态信息,来领取任务。

2supervisortask会发送心跳到zookeeper,使得nimbus可以监控整个集群的状态,从而在task执行失败时,可以重启他们。

但是要注意的是storm并不用zookeeper来传递消息。所以zookeeper上的负载是非常低的,单个节点的zookeeper在大多数情况下 都已经足够了, 但是如果你要部署大一点的storm集群, 那么你需要的zookeeper也要大一点。

 





标签: zookeeper、supervisor、storm、nimbus、task、面试
猜你感兴趣的圈子:
蕾啦啦啦蕾
  • 回复
隐藏