ubuntu24.04 安装hadoop
时间: 2024-12-26 18:20:53 浏览: 7
### 安装 Hadoop on Ubuntu 24.04 教程
#### 准备工作
为了确保顺利安装,在开始之前需确认已更新系统的软件包列表并安装必要的依赖项。
```bash
sudo apt-get update && sudo apt-get upgrade -y
```
#### 下载与解压 Hadoop
前往 Apache Hadoop 的官方网站下载最新版本的 Hadoop 压缩包。假设选择了 Hadoop 版本 `hadoop-3.2.1`,可以使用 wget 或者 curl 工具来获取压缩文件,并将其放置到 `/usr/local/` 目录下:
```bash
wget https://downloads.apache.org/hadoop/common/stable/hadoop-3.2.1.tar.gz -P /tmp/
tar -xzvf /tmp/hadoop-3.2.1.tar.gz -C /usr/local/
```
#### 设置环境变量
编辑全局配置文件以便设置 PATH 和其他环境变量,使命令可以在任何位置执行:
```bash
echo 'export HADOOP_HOME=/usr/local/hadoop' | sudo tee -a /etc/profile.d/hadoop.sh
echo 'export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin' | sudo tee -a /etc/profile.d/hadoop.sh
source /etc/profile.d/hadoop.sh
```
#### 修改 Hadoop 配置文件
进入 Hadoop 的配置目录并对核心配置文件进行修改以适应本地环境需求。对于 `hadoop-env.sh` 文件可以通过文本编辑器打开并调整 Java Home 路径等参数[^1];而对于 `core-site.xml` 则需要指定 NameNode 地址和其他必要属性[^2]:
```xml
<!-- core-site.xml -->
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
```
#### 启动 Hadoop 并验证安装
完成上述操作之后就可以启动 HDFS 和 YARN 来测试集群是否正常运行了。通过 JPS 命令查看进程状态以及访问 Web UI 页面来进行进一步验证。
```bash
start-dfs.sh
jps
```
阅读全文