ubuntu安装hadoop教程

好的，以下是 Ubuntu 安装 Hadoop 的教程：

1. 安装 Java 环境

首先，需要安装 Java 环境，可以通过以下命令进行安装：

sudo apt-get update
sudo apt-get install openjdk-8-jdk

2. 下载 Hadoop

可以从 Hadoop 官网下载最新版本的 Hadoop，下载地址为：https://hadoop.apache.org/releases.html

在终端中进入下载目录，使用 wget 命令下载 Hadoop，例如：

cd Downloads
wget https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-3.3.0/hadoop-3.3.0.tar.gz

3. 解压 Hadoop

使用以下命令解压 Hadoop：

tar -xvf hadoop-3.3.0.tar.gz

解压后会得到一个名为 hadoop-3.3.0 的文件夹。

4. 配置环境变量

在终端中打开 /etc/environment 文件，添加以下内容：

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64
export HADOOP_HOME=/path/to/hadoop-3.3.0
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

其中，/path/to/hadoop-3.3.0 需要替换为实际的 Hadoop 文件夹路径。

保存并关闭文件后，执行以下命令使修改生效：

source /etc/environment

5. 配置 Hadoop

进入 Hadoop 文件夹，打开 etc/hadoop 目录，编辑 hadoop-env.sh 文件，将以下内容添加到文件末尾：

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

然后，编辑 core-site.xml 文件，添加以下内容：

<configuration>
  <property>
    <name>fs.defaultFS</name>
    <value>hdfs://localhost:9000</value>
  </property>
</configuration>

接着，编辑 hdfs-site.xml 文件，添加以下内容：

<configuration>
  <property>
    <name>dfs.replication</name>
    <value>1</value>
  </property>
  <property>
    <name>dfs.namenode.name.dir</name>
    <value>/path/to/hadoop-3.3.0/data/namenode</value>
  </property>
  <property>
    <name>dfs.datanode.data.dir</name>
    <value>/path/to/hadoop-3.3.0/data/datanode</value>
  </property>
</configuration>

其中，/path/to/hadoop-3.3.0 需要替换为实际的 Hadoop 文件夹路径。

6. 启动 Hadoop

使用以下命令启动 Hadoop：

start-all.sh

如果一切正常，可以通过以下命令查看 Hadoop 运行状态：

jps

如果看到以下进程，则表示 Hadoop 已经成功启动：

DataNode
NameNode
SecondaryNameNode
ResourceManager
NodeManager

7. 验证 Hadoop

可以使用以下命令创建一个测试文件，并将其上传到 Hadoop：

echo "Hello Hadoop" > test.txt
hdfs dfs -mkdir /input
hdfs dfs -put test.txt /input

然后，可以使用以下命令查看上传的文件是否存在：

hdfs dfs -ls /input

如果看到 test.txt 文件，则表示 Hadoop 配置成功。

以上就是在 Ubuntu 上安装 Hadoop 的教程，希望能对你有所帮助。