hadoop集群搭建mapred-site.xml文件
时间: 2024-05-01 14:23:32 浏览: 182
mapred-site.xml文件是Hadoop集群中用于配置MapReduce框架的核心配置文件之一。
以下是一个简单的mapred-site.xml文件的示例:
```xml
<?xml version="1.0"?>
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<property>
<name>mapreduce.jobtracker.address</name>
<value>localhost:54311</value>
</property>
<property>
<name>mapreduce.jobtracker.http.address</name>
<value>localhost:50030</value>
</property>
<property>
<name>mapreduce.jobhistory.address</name>
<value>localhost:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>localhost:19888</value>
</property>
</configuration>
```
其中,配置项的含义如下:
- mapreduce.framework.name:指定MapReduce框架的运行模式,这里设置为yarn,表示在Yarn上运行。
- mapreduce.jobtracker.address:指定JobTracker的地址和端口号。
- mapreduce.jobtracker.http.address:指定JobTracker的Web界面地址和端口号。
- mapreduce.jobhistory.address:指定JobHistoryServer的地址和端口号。
- mapreduce.jobhistory.webapp.address:指定JobHistoryServer的Web界面地址和端口号。
注意:以上配置项中,部分配置在Hadoop 2.x版本以后已经废弃,可以不必配置。如果需要了解更多的MapReduce配置项,请参考Hadoop官方文档。
阅读全文