centos7安装集群hadoop

安装Hadoop集群需要以下步骤：

1. 下载Hadoop的安装包并解压缩。
2. 配置Java环境变量。
3. 配置SSH免密登录。
4. 配置Hadoop集群。
5. 启动Hadoop集群。

以下是详细的安装步骤：

1. 下载Hadoop的安装包并解压缩。

在官网下载Hadoop的安装包（https://hadoop.apache.org/releases.html），选择最新的稳定版本进行下载。下载完成后，使用命令tar -zxvf hadoop-xxx.tar.gz解压缩到指定目录。

2. 配置Java环境变量。

在安装Hadoop前，需要先安装Java环境。在CentOS 7上安装Java可以使用yum命令，具体命令如下：

yum install java-1.8.0-openjdk-devel

安装完成后，需要配置Java环境变量。编辑/etc/profile文件，添加以下内容：

export JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk
export PATH=$JAVA_HOME/bin:$PATH

使配置文件生效：

source /etc/profile

3. 配置SSH免密登录。

Hadoop集群需要在各个节点之间进行通信，因此需要配置SSH免密登录。在主节点上生成SSH公钥和私钥：

ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa

将公钥拷贝到所有节点上：

ssh-copy-id -i ~/.ssh/id_rsa.pub user@host

4. 配置Hadoop集群。

编辑Hadoop的配置文件，主要包括以下几个文件：

- core-site.xml：配置Hadoop的核心参数，如文件系统地址、IO类型等。
- hdfs-site.xml：配置Hadoop分布式文件系统（HDFS）的参数，如副本数、块大小等。
- mapred-site.xml：配置MapReduce任务的参数，如任务跟踪器地址等。
- yarn-site.xml：配置YARN资源管理器的参数，如节点管理器地址等。

在主节点上编辑以上文件，然后将配置文件拷贝到所有节点上。在主节点上启动HDFS和YARN服务：

hadoop namenode -format
start-dfs.sh
start-yarn.sh

5. 启动Hadoop集群。

在主节点上启动Hadoop集群：

start-all.sh

使用jps命令查看Hadoop集群进程是否运行正常：

jps

以上就是在CentOS 7上安装Hadoop集群的步骤。