如何在CentOS 7上搭建Hadoop 3.3.1集群？

搭建Hadoop集群的步骤如下：

1. 安装Java

首先需要安装Java，Hadoop需要Java环境才能运行。可以使用以下命令安装Java：

sudo yum install java-1.8.0-openjdk-devel

2. 下载Hadoop

从官方网站下载Hadoop 3.3.1版本，然后解压到目录中。可以使用以下命令：

wget https://downloads.apache.org/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz
tar -zxvf hadoop-3.3.1.tar.gz
sudo mv hadoop-3.3.1 /usr/local/hadoop

3. 配置Hadoop环境变量

编辑`/etc/profile`文件，添加以下内容：

export HADOOP_HOME=/usr/local/hadoop
export HADOOP_CONF_DIR=${HADOOP_HOME}/etc/hadoop
export PATH=${PATH}:${HADOOP_HOME}/bin:${HADOOP_HOME}/sbin

然后执行以下命令使配置生效：

source /etc/profile

4. 配置Hadoop集群

在Hadoop集群中，需要指定一个节点作为NameNode，其他节点作为DataNode。可以在`/usr/local/hadoop/etc/hadoop`目录下找到`core-site.xml`和`hdfs-site.xml`两个配置文件，进行以下修改：

在`core-site.xml`文件中添加以下内容：

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://namenode:9000</value>
    </property>
</configuration>

其中，`namenode`是NameNode节点的主机名或IP地址。

在`hdfs-site.xml`文件中添加以下内容：

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>3</value>
    </property>
    <property>
        <name>dfs.namenode.name.dir</name>
        <value>file:/usr/local/hadoop/hadoop_data/hdfs/namenode</value>
    </property>
    <property>
        <name>dfs.datanode.data.dir</name>
        <value>file:/usr/local/hadoop/hadoop_data/hdfs/datanode</value>
    </property>
</configuration>

其中，`dfs.replication`指定了数据备份数量，`dfs.namenode.name.dir`和`dfs.datanode.data.dir`指定了NameNode和DataNode的数据存储路径。

5. 配置YARN

YARN是Hadoop的资源管理器，需要进行相应的配置。可以在`/usr/local/hadoop/etc/hadoop`目录下找到`yarn-site.xml`文件，进行以下修改：

<configuration>
    <property>
        <name>yarn.resourcemanager.hostname</name>
        <value>resourcemanager</value>
    </property>
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
</configuration>

其中，`yarn.resourcemanager.hostname`指定了ResourceManager节点的主机名或IP地址。

6. 启动Hadoop集群

按照以下顺序启动Hadoop集群：

start-dfs.sh
start-yarn.sh

7. 验证Hadoop集群

可以通过访问以下网址来验证Hadoop集群是否正常运行：

http://namenode:9870/dfshealth.html
http://resourcemanager:8088/cluster

其中，`namenode`和`resourcemanager`分别是NameNode和ResourceManager节点的主机名或IP地址。

以上就是在CentOS 7上搭建Hadoop 3.3.1集群的步骤。