HadoopHA集群部署指南：从JDK到HDFS

需积分: 10 139 浏览量更新于2024-07-24 收藏 38KB DOCX 举报

"这份文档详细介绍了如何在Hadoop2.0版本下进行高可用性(HA)部署，涵盖了从环境准备到各个组件的安装和配置步骤。" 在Hadoop2.0的高可用性部署中，主要涉及以下几个关键环节： 1. 用户账户创建：首先，需要在集群的所有节点上创建相同的用户名，例如"had

保存并退出，执行以下命令使配置生效：

[hadoop@zhangpeng ~]$ source /etc/profile

若目前有多个 JDK 版本，可以通过以下命令使刚安装的 JDK 生效：

$ alternatives –install /usr/bin/java java /usr/java/jdk1.6.0_25/bin/java 20000

配置完毕，在命令行中使用命令“java -version”可以判断是否成功。

3. SSH 无密码验证配置

Hadoop 通信时，需要用到机器名进行寻址，所以要对/etc/hosts 文件进行编

辑。在所有主机的/etc/hosts 上添加主机名和相应的 IP 地址：

10.65.173.70 master

10.65.173.71 slave1

10.65.173.72 slave2

10.65.173.73 slave3

10.65.173.77 slave4

10.65.173.78 slave5

10.65.173.79 slave6

10.65.173.80 slave7

1. 安装和启动 SSH 协议

centos6.0 默认已经安装 ssh，并且启动。查看命令为：ssh -v。

2. 配置 namenode 无密码登录所有 datanode

（1）原理

Hadoop 运行过程中需要管理远端 Hadoop 守护进程，在 Hadoop 启动之后，

剩余14页未读，继续阅读

格律诗2010