配置hadoop伪分布式
时间: 2024-01-12 11:21:05 浏览: 78
以下是配置Hadoop伪分布式集群的步骤:
1. 设置Hadoop核心配置文件
```shell
cd /usr/local/hadoop/etc/hadoop
```
2. 编辑hadoop-env.sh文件,设置JAVA_HOME环境变量
```shell
export JAVA_HOME=/usr/local/jdk11
```
3. 编辑core-site.xml文件,配置Hadoop核心参数
```xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
```
4. 编辑hdfs-site.xml文件,配置HDFS参数
```xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
```
5. 配置yarn-site.xml文件,配置YARN参数
```xml
<configuration>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
</configuration>
```
6. 配置mapred-site.xml文件,配置MapReduce参数
```xml
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
```
阅读全文