目录
- LearnerCnxAcceptor
- run()
- LearnerCnxAcceptorHandler
- run()
- LearnerHandler
- run()
- syncFollower()
- SNAP全量同步
- startSendingPackets()
LearnerCnxAcceptor
在Leader.lead()
方法中创建并启动LearnerCnxAcceptor线程,该线程主要是建立LearnerCnxAcceptorHandler并将其放入线程池中等待执行,每一个LearnerCnxAcceptorHandler代表Leader服务器的一个服务器地址监听器。
run()
LearnerCnxAcceptorHandler
LearnerCnxAcceptorHandler监听来自集群中Learner服务器的连接,每监听到一个连接就创建一个LearnerHandler实例并将其启动。
run()
LearnerHandler
它是服务器的管理器,主要负责Follower/Observer服务器与Leader服务器之间的一系列网络通信,包括数据同步、请求转发和Proposal提议的投票等,它的工作流程如下:
run()
LearnerHandler的工作如下:
第1步至第16步都是在进行初始化工作,当这16步都结束后就进入leader与learner之间的发送请求与处理请求的过程,第17步在后文针对具体的请求再做详细的分析,接下来着重分析第9步中的syncFollower()、第10步、第12步中的startSendingPackets()。
syncFollower()
- 在开始数据同步之前,会收集leader服务器提议缓存队列中的最小ZXID和最大ZXID,以及learner服务器最后处理的ZXID
- 如果leader与learner最后一次处理的zxid相等,则只需要发送DIFF包
- 如果
peeLastZxid
大于maxCommittedLog
,leader会发送TRUNC包要求learner回滚到zxid值为maxCommitedLog对应的事务操作 - 如果
peeLastZxid
介于maxCommittedLog
与minCommitedLog
两者之间,则leader向learner发送(peeLastZxid, maxCommittedLog]
之间的数据包进行同步 - 如果
peeLastZxid
小于minCommitedLog
,则先发送事务日志获取所缺的数据,再发送内存数据库中的数据进行同步。如果事务日志中数据依旧不足,则需要从快照日志中进行全量同步 - 最后,将Leader中待提交的数据发送给learner
SNAP全量同步
startSendingPackets()
至此,Leader与Learner的通信网络介绍到此结束。