dolphinscheduler配置common.properties时,yarn.job.history.status.address怎么配置
时间: 2023-12-27 12:04:39 浏览: 31
在DolphinScheduler中,要配置`common.properties`文件中的`yarn.job.history.status.address`属性,可以按照以下步骤进行操作:
1. 打开DolphinScheduler的安装目录,找到`conf`文件夹。
2. 在`conf`文件夹中找到`common.properties`文件,并使用文本编辑器打开。
3. 在`common.properties`文件中,找到并编辑`yarn.job.history.status.address`属性。
4. 将该属性设置为YARN的JobHistoryServer的地址。该地址通常是YARN集群中JobHistoryServer的主机名和端口号的组合。例如,`yarn.job.history.status.address=http://<JobHistoryServer_Host>:<JobHistoryServer_Port>`。
5. 保存并关闭`common.properties`文件。
请确保配置的YARN的JobHistoryServer地址是正确的,并且确保DolphinScheduler能够访问到该地址。完成以上步骤后,重新启动DolphinScheduler服务,配置将生效。
注意:在配置`yarn.job.history.status.address`属性时,确保该属性与YARN集群的实际配置相匹配,以确保DolphinScheduler能够正确地连接到YARN的JobHistoryServer。
相关问题
dolphinscheduler配置common.properties时必须配置yarn.job.history.status.address吗
在DolphinScheduler中,配置`common.properties`文件时,并不是必须要配置`yarn.job.history.status.address`属性。这个属性是用于配置与YARN的JobHistoryServer的通信地址。
如果您的DolphinScheduler任务不需要与YARN的JobHistoryServer进行通信或获取任务历史状态信息,那么可以不配置该属性。在这种情况下,DolphinScheduler将不会与YARN的JobHistoryServer进行交互,而是仅运行和监控自身任务。
只有当您需要在DolphinScheduler中查看和管理YARN任务的历史状态时,才需要配置`yarn.job.history.status.address`属性。这样,DolphinScheduler就能够与YARN的JobHistoryServer进行通信,并获取任务的历史状态信息。
因此,根据您的具体需求,在配置`common.properties`文件时是否需要配置`yarn.job.history.status.address`属性可以灵活选择。
如何配置 yarn.scheduler.capacity.root.<queue-name>.priority
yarn.scheduler.capacity.root.<queue-name>.priority 是 YARN 调度器的配置,它用于设置一个队列的优先级。在配置时,需要替换 <queue-name> 为具体队列的名称。
以下是配置 yarn.scheduler.capacity.root.<queue-name>.priority 的步骤:
1. 打开 YARN 配置文件 yarn-site.xml。
2. 添加以下配置项:
```
<property>
<name>yarn.scheduler.capacity.root.<queue-name>.priority</name>
<value><priority-value></value>
</property>
```
其中,<queue-name> 是要配置优先级的队列名称,<priority-value> 是要设置的优先级值,取值范围是 1-10,数字越小表示优先级越高。
3. 保存并关闭配置文件。
4. 重启 YARN。
配置完成后,YARN 调度器会根据队列的优先级来进行任务调度。优先级高的队列会先得到资源,优先级低的队列则会在高优先级队列没有任务时才得到资源。
相关推荐
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![pdf](https://img-home.csdnimg.cn/images/20210720083512.png)
![zip](https://img-home.csdnimg.cn/images/20210720083736.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)
![](https://csdnimg.cn/download_wenku/file_type_ask_c1.png)