hadoop安装配置教程

Hadoop是一个开源的分布式计算平台，它可以处理大规模数据集并支持分布式存储和计算，以下是Hadoop的安装配置教程：

1. 安装Java环境
Hadoop是使用Java编写的，首先需要安装Java环境。可以从Oracle官网下载Java并按照提示进行安装。

2. 下载Hadoop
从Hadoop官网（http://hadoop.apache.org/）下载最新版本的Hadoop，并解压到任意目录中。

3. 配置环境变量
编辑系统环境变量，在PATH中添加Hadoop的bin目录路径，例如：C:\hadoop-3.2.1\bin

4. 配置Hadoop
进入Hadoop的安装目录，找到etc/hadoop目录。在该目录下有多个配置文件，其中最重要的是core-site.xml、hdfs-site.xml和mapred-site.xml。

4.1 core-site.xml
在core-site.xml中添加以下内容：

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://localhost:9000</value>
  </property>
</configuration>

4.2 hdfs-site.xml
在hdfs-site.xml中添加以下内容：

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
  <property>
    <name>dfs.namenode.name.dir</name>
    <value>/hadoop_data/hdfs/namenode</value>
  </property>
  <property>
    <name>dfs.datanode.data.dir</name>
    <value>/hadoop_data/hdfs/datanode</value>
  </property>
</configuration>

其中dfs.replication表示数据备份数量，dfs.namenode.name.dir表示NameNode节点数据存储路径，dfs.datanode.data.dir表示DataNode节点数据存储路径。

4.3 mapred-site.xml
在mapred-site.xml中添加以下内容：

<configuration>
  <property>
    <name>mapreduce.framework.name</name>
    <value>yarn</value>
  </property>
</configuration>

5. 启动Hadoop
在命令行中输入以下命令启动Hadoop：

start-all.sh

启动成功后，可以访问http://localhost:50070查看Hadoop的状态。

至此，Hadoop的安装配置工作完成。