ubuntu环境下搭建hadoop

在Ubuntu环境中搭建Hadoop通常涉及以下几个步骤：

1. **更新系统**:
- `sudo apt-get update`
- `sudo apt-get upgrade`

2. **安装Java**:
Hadoop需要Java环境，可以安装Oracle官方推荐的JDK版本，如8或11：

   sudo add-apt-repository ppa:linuxuprising/java
   sudo apt-get install oracle-java8-installer

3. **安装Hadoop**:
- 下载Hadoop源码或二进制包，从Apache官网下载适合版本的tar.gz文件。
- 解压到合适目录，例如`/usr/local/hadoop`：

     tar xzf hadoop-VERSION.tar.gz -C /usr/local/hadoop

4. **配置环境变量**:
- 配置`bashrc`或`bash_profile`文件添加Hadoop路径：

     export JAVA_HOME=/usr/lib/jvm/java-8-oracle
     export HADOOP_HOME=/usr/local/hadoop
     export PATH=$PATH:$HADOOP_HOME/bin

5. **编辑核心配置**:
- 修改`$HADOOP_HOME/etc/hadoop/core-site.xml`，设置HDFS的相关参数。
- 修改`$HADOOP_HOME/etc/hadoop/hdfs-site.xml`，设置NameNode和DataNodes地址。

6. **启动服务**:
- 初始化HDFS和YARN集群：

     $HADOOP_HOME/sbin/start-all.sh

7. **验证安装**:
- 使用`jps`命令检查是否运行了Hadoop守护进程，如ResourceManager、NodeManager等。