mapred-site.xml文件应该怎么设置
时间: 2023-05-24 13:07:03 浏览: 737
补充:配置yarn的步骤:1、配置yarn-site.xml;2、配置mapred-site.xml;3、配置历史服务器
mapred-site.xml文件用于配置MapReduce框架的参数,可以通过以下步骤进行设置:
1. 找到Hadoop安装目录下的conf文件夹,进入该文件夹。
2. 复制模板文件mapred-site.xml.template,将其重命名为mapred-site.xml。
3. 打开mapred-site.xml文件,在文件中添加以下参数并设置对应值:
```
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
<property>
<name>mapreduce.jobtracker.address</name>
<value>localhost:54311</value>
</property>
<property>
<name>mapreduce.jobtracker.http.address</name>
<value>localhost:50030</value>
</property>
<property>
<name>mapreduce.jobhistory.address</name>
<value>localhost:10020</value>
</property>
<property>
<name>mapreduce.jobhistory.webapp.address</name>
<value>localhost:19888</value>
</property>
</configuration>
```
其中,参数mapreduce.framework.name设置为yarn,表示使用YARN作为MapReduce框架的执行引擎;参数mapreduce.jobtracker.address和mapreduce.jobtracker.http.address用于指定JobTracker的地址和HTTP端口号;参数mapreduce.jobhistory.address和mapreduce.jobhistory.webapp.address用于指定JobHistory的地址和Web应用端口号。
4. 保存mapred-site.xml文件,重新启动Hadoop集群。
以上是一个简单的示例配置,根据不同的使用场景和需求,mapred-site.xml文件的具体配置可能会有所不同。
阅读全文