centos7配置hadoop

在 CentOS 7 上安装 Hadoop 需要几个步骤，包括安装 Java、设置环境变量和配置文件，以及下载并安装 Hadoop。这里是一个简化的指南：

1. **更新系统和安装Java**:

   sudo yum update -y
   sudo yum install java-1.8.0-openjdk-devel -y

2. **下载Hadoop源码** (如果你需要最新版本，访问Apache官网下载tarball):

   wget https://www.apache.org/dist/hadoop/common/hadoop-3.x.x/hadoop-3.x.x.tar.gz

3. **解压和进入目录**:

   tar xvf hadoop-3.x.x.tar.gz
   cd hadoop-3.x.x

4. **配置Hadoop**:
- 进入 `conf` 目录，编辑核心配置文件 `core-site.xml`, `hdfs-site.xml`, 和 ` yarn-site.xml`。修改其中的IP地址为你的机器地址，例如更改 `<nameNode>` 和 `<datanode>` 的地址。
- 可能还需要创建一个 `hadoop-env.sh` 文件，设置JAVA_HOME路径等。

5. **初始化HDFS集群**:

   ./bin/hadoop namenode -format

注意，这将删除所有现有的HDFS数据，所以在运行前确认无误。

6. **启动服务**:

   start-dfs.sh
   start-yarn.sh

7. **验证安装**:
通过命令行工具如 `jps` 或 `hadoop fs -ls` 来检查是否成功启动。