centos安装hadoop

以下是在CentOS 7上安装Hadoop的步骤：

1. 安装Java

Hadoop需要Java环境才能运行。如果没有安装Java，请先安装Java。运行以下命令安装Java：

sudo yum install java-1.8.0-openjdk-devel

2. 下载Hadoop

下载最新的Hadoop版本。在本教程中，我们将使用Hadoop 3.3.1。运行以下命令下载Hadoop：

wget https://mirror.bit.edu.cn/apache/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz

3. 解压Hadoop

使用以下命令解压Hadoop：

tar -xzf hadoop-3.3.1.tar.gz

4. 配置Hadoop

进入Hadoop目录并编辑Hadoop配置文件：

cd hadoop-3.3.1/etc/hadoop/
sudo nano hadoop-env.sh

将以下行添加到文件底部并保存文件：

export JAVA_HOME=/usr/lib/jvm/java-1.8.0

接下来，编辑hadoop-core-site.xml文件：

sudo nano core-site.xml

将以下代码添加到文件底部：

<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>

接下来，编辑hadoop-hdfs-site.xml文件：

sudo nano hdfs-site.xml

将以下代码添加到文件底部：

<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>/home/hadoop/hadoopdata/hdfs/namenode</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/home/hadoop/hadoopdata/hdfs/datanode</value>
</property>
</configuration>

最后，编辑mapred-site.xml文件：

sudo cp mapred-site.xml.template mapred-site.xml
sudo nano mapred-site.xml

将以下代码添加到文件底部：

<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>

5. 启动Hadoop

运行以下命令启动Hadoop：

cd hadoop-3.3.1/sbin/
./start-all.sh

6. 验证Hadoop安装

运行以下命令检查Hadoop是否正在运行：

jps

如果一切正常，您应该看到以下输出：

21840 NameNode
21922 DataNode
22018 ResourceManager
22104 NodeManager
22297 Jps

现在，您已经成功地在CentOS 7上安装了Hadoop。