简要描述如何安装配置Hadoop高可用

Hadoop High Availability (HA) 是为了提高Hadoop集群的稳定性和容错能力而设计的一套机制。以下是简要步骤：

1. **设置基础环境**：
- 安装Hadoop的主版本（如HDFS和MapReduce），并确认所有节点都安装了必要的软件包。

2. **安装ZooKeeper**：
- Hadoop HA需要ZooKeeper作为服务发现和协调工具。安装并启动ZooKeeper服务器。

3. **配置Master选举**：
- 在Hadoop配置文件`core-site.xml`中，启用HDFS和YARN的HA相关配置，如`ha.zookeeper.quorum`指定ZooKeeper集群地址。

4. **配置NameNode HA（HDFS）**：
- 配置两个NameNode，一个为Active NameNode处理写操作，另一个为Standby NameNode。通过`hdfs-site.xml`修改`fs.nameservices`和`hdfs.ha.namenodes.<service>`。

5. **配置DataNodes**：
- DataNodes会自动检测并连接到适当的NameNode，无须特殊配置。

6. **配置ResourceManager HA（YARN）**：
- 同样，配置两个ResourceManager（ ResourceManager HA 和 NodeManager HA）。`yarn-site.xml`中调整`yarn.resourcemanager.ha.enabled`等配置。

7. **配置Hadoop Federation**：
- 如果有多个独立的服务实例，比如HDFS和YARN在一个集群中，还需要配置跨集群通信。

8. **启动服务**：
- 分别启动各组件的主备实例，如Active NameNode、Standby NameNode、RM Master和RM Standby等。

9. **验证和测试**：
- 使用Hadoop提供的命令行工具如`hadoop fsadmin -getServiceState <service>`检查服务状态，并进行负载均衡和故障恢复测试。