hadoop伪分布式安装过程

Hadoop的伪分布式模式是一种简化版的部署方式，主要用于开发和测试环境，不需要集群，而是在一个节点上模拟整个Hadoop集群。以下是Hadoop伪分布式的安装步骤：

1. **下载Hadoop**: 首先，你需要从Apache官网下载适合你系统的Hadoop版本，比如`hadoop-3.x.x.tar.gz`。

2. **配置环境变量**:
- 将Hadoop的bin目录添加到PATH环境变量中，这样可以在命令行直接运行Hadoop工具。
- 创建一个`conf`目录，复制`conf.dist`文件夹中的内容到这个新创建的目录下，并修改`core-site.xml`和`hdfs-site.xml`等核心配置文件，设置本地路径作为NameNode和DataNode的存储位置。

3. **启动守护进程**:
- 使用`start-dfs.sh`（HDFS）和`start-yarn.sh`（YARN）脚本启动Hadoop守护进程。在伪分布式模式下，NameNode、DataNode、ResourceManager和NodeManager将都在同一个节点上运行。

4. **验证安装**:
- 可以通过命令如`jps`检查是否能看到NameNode、DataNode等进程，并通过HTTP访问`localhost:50070`（NameNode Web UI）和`localhost:9870`（YARN Web UI）来确认服务正常运行。

5. **开始使用**:
现在你可以使用Hadoop命令行工具，如`hadoop fs`（用于HDFS操作）或`yarn jar`（提交MapReduce作业）来进行测试。