hadoop集群搭建root

### 如何以Root用户身份搭建Hadoop集群

#### 准备工作
确保服务器环境已经准备好，包括操作系统安装完毕并更新到最新状态。对于网络设置，确认主机名和IP地址已正确配置，并且防火墙允许必要的端口通信。

#### 安装Java运行环境
由于Hadoop依赖于Java，因此需要先安装JDK。可以通过包管理器来完成这一操作，在基于Debian的系统上可以使用如下命令：

apt-get update && apt-get install openjdk-8-jdk -y

在RedHat/CentOS系列则可执行:

yum install java-1.8.0-openjdk-devel.x86_64 -y

验证安装成功后，通过`java -version`查看版本号[^1]。

#### 下载与解压Hadoop软件包
前往Apache官方网站下载适合当前系统的稳定版Hadoop压缩包，将其放置在一个合适的目录下（比如/opt），接着创建一个新的文件夹用于存放解压后的文件，并将tarball移动至此处进行解压处理。

cd /opt/
wget https://archive.apache.org/dist/hadoop/core/hadoop-3.3.1/hadoop-3.3.1.tar.gz
tar zxvf hadoop-3.3.1.tar.gz
ln -s hadoop-3.3.1 hadoop
chown -R root:hadoop ./hadoop*

这里假设选择了Hadoop 3.3.1作为目标版本；实际部署时应根据需求选择最恰当的一个版本。

#### 配置SSH无密码登录
为了简化节点间的交互过程以及后续维护工作的便利性，建议为root账户设定好免密登陆机制。这一步骤涉及到生成一对公私钥对并将公钥分发给各个参与计算的数据节点上的对应位置(/root/.ssh/authorized_keys)，从而实现无需输入密码即可远程访问其他机器的效果。

ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
chmod 0600 ~/.ssh/authorized_keys
ssh-copy-id node2    # 假设node2是另一台数据节点的名字或ip地址

请注意替换上面例子中的`node2`为你自己的从属节点名称或者IP地址。

#### 修改Hadoop核心配置文件
编辑位于`${HADOOP_HOME}/etc/hadoop`下的几个重要XML格式配置文档(hdfs-site.xml, core-site.xml 和 yarn-site.xml), 添加相应的参数项以便适应分布式存储架构的要求。具体修改内容取决于个人应用场景的不同而有所差异，请参照官方指南做出适当调整。

#### 初始化NameNode元数据库
首次启动之前要初始化Namenode所使用的本地磁盘空间结构，即执行namenode format指令：

${HADOOP_HOME}/bin/hdfs namenode -format

这条语句会清除掉任何现存的状态记录并建立新的文件系统镜像副本，所以通常仅限初次安装期间调用一次就够了。

#### 启动服务进程
当一切准备就绪之后就可以依次开启各组件的服务实例了——首先是DFS(Distributed File System):

start-dfs.sh

紧接着再激活YARN资源调度框架及其附属模块：

start-yarn.sh

此时整个集群应该处于正常运作之中，可通过浏览器访问Web UI界面监控其健康状况(默认情况下分别为http://master:9870 和 http://master:8088)。