ZooKeeper 的连接，释放分步式锁，监控备用节点的 ZKFC 进程会去获取锁，同时把备用
NameNode 切换成 主 NameNode。
ZooKeeper: 为 ZKFC 进程实现自动故障转移提供统一协调服务。通过 ZooKeeper 中 Watcher 监
听机制，通知 ZKFC 异常NameNode 下线；保证同一时刻只有一个主节点。
DataNode: DataNode 是实际存储文件 Block 块的地方，一个 Block 块包含两个文件：一个是数
据本身，一个是元数据（数据块长度、块数据的校验和、以及时间戳），DataNode 启动后会向
NameNode 注册，每 6 小时同时向主备两个 NameNode 上报所有的块信息，每 3 秒同时向主备
两个 NameNode 发送一次心跳。
DataNode 向 NameNode 汇报当前块信息的时间间隔，默认 6 小时，其配置参数名如下：
1.2HA主备故障切换流程
HA 集群刚启动时，两个 NameNode 节点状态均为 Standby，之后两个 NameNode 节点启动 ZKFC 进
程后会去 ZooKeeper 集群抢占分步式锁，成功获取分步式锁，ZooKeeper 会创建一个临时节点，成功
抢占分步式锁的 NameNode 会成为 Active NameNode，ZKFC 便会实时监控自己的 NameNode。
HDFS 提供了两种 HA 状态切换方式：一种是管理员手动通过 DFSHAAdmin -faieover 执行状态切换；
另一种则是自动切换。下面分别从两种情况分析故障的切换流程：
1. 主 NameNdoe 宕机后，备用 NameNode 如何升级为主节点？
当主 NameNode 宕机后，对应的 ZKFC 进程检测到 NameNode 状态，便向 ZooKeeper 发生删除
锁的命令，锁删除后，则触发一个事件回调备用 NameNode 上的 ZKFC
ZKFC 得到消息后先去 ZooKeeper 争夺创建锁，锁创建完成后会检测原先的主 NameNode 是否真
的挂掉（有可能由于网络延迟，心跳延迟），挂掉则升级备用 NameNode 为主节点，没挂掉则将
原先的主节点降级为备用节点，将自己对应的 NameNode 升级为主节点。
2. 主 NameNode 上的 ZKFC 进程挂掉，主 NameNode 没挂，如何切换？
ZKFC 挂掉后，ZKFC 和 ZooKeeper 之间 TCP 链接会随之断开，session 也会随之消失，锁被删
除，触发一个事件回调备用 NameNode ZKFC，ZKFC 得到消息后会先去 ZooKeeper 争夺创建
锁，锁创建完成后也会检测原先的主 NameNode 是否真的挂掉，挂掉则升级 备用 NameNode 为
主节点，没挂掉则将主节点降级为备用节点，将自己对应的 NameNode 升级为主节点。
<property>
<name>dfs.blockreport.intervalMsec</name>
<value>21600000</value>
<description>Determines block reporting interval in
milliseconds.</description>
</property>
剩余10页未读，继续阅读
Nancy_NG
- 粉丝: 0
- 资源: 34
我的内容管理
展开
最新资源
- 解决本地连接丢失无法上网的问题
- BIOS报警声音解析：故障原因与解决方法
- 广义均值移动跟踪算法在视频目标跟踪中的应用研究
- C++Builder快捷键大全：高效编程的秘密武器
- 网页制作入门：常用代码详解
- TX2440A开发板网络远程监控系统移植教程：易搭建与通用解决方案
- WebLogic10虚拟内存配置详解与优化技巧
- C#网络编程深度解析：Socket基础与应用
- 掌握Struts1：Java MVC轻量级框架详解
- 20个必备CSS代码段提升Web开发效率
- CSS样式大全：字体、文本、列表样式详解
- Proteus元件库大全：从基础到高级组件
- 74HC08芯片：高速CMOS四输入与门详细资料
- C#获取当前路径的多种方法详解
- 修复MySQL乱码问题：设置字符集为GB2312
- C语言的诞生与演进：从汇编到系统编程的革命
资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！
点击此处反馈
