oozie -kill

时间: 2023-10-04 10:10:53 浏览: 101

OOZIE 配置和调度流程(1).doc

OOZIE 配置和调度流程 OOZIE 是一个开源的工作流调度系统，用于管理和调度 Hadoop 作业。下面是 OOZIE 配置和调度流程的详细知识点： 1. OOZIE 命令： OOZIE 提供了多种命令来管理和调度作业，包括： * 提交并执行作业：oozie job -oozie http://localhost:11000/oozie -config job.properties -run * 提交作业：oozie job -oozie http://localhost:11000/oozie -config job.properties -submit * 运行作业：oozie job -oozie http://localhost:11000/oozie -start job-id * 暂停作业：oozie job -oozie http://localhost:11000/oozie -suspend job-id * 杀死作业：oozie job -oozie http://localhost:11000/oozie -kill job-id * 查看作业状态：oozie job -oozie http://localhost:11000/oozie -info job-id 2. OOZIE 配置： OOZIE 配置主要包括系统时区配置和 WEB 界面时区设置。 * OOZIE 系统时区配置：在 CM OOZIE 的配置界面，oozie-site.xml 的 Oozie Server 高级配置代码段（安全阀）这一栏配置如下属性，然后重启 OOZIE 服务：<property> <name>oozie.processing.timezone</name> <value>GMT+0800</value></property> * OOZIE WEB 界面时区设置：在 OOZIE WEB 界面中设置时区，以便正确显示作业的执行时间。 3. OOZIE 调度流程： OOZIE 调度流程主要包括 OOZIE 调度文件、相关文件说明和作业部署执行步骤。 * OOZIE 调度文件：oozie_run 文件夹下的文件包括 coordinator.xml、workflow.xml、job_h.properties、job_test.properties、run.sh、test.sh、rbis-spark_2.10-1.0.jar、mysql-connector-java.jar 和 commons-pool2-2.3.jar。 * 相关文件说明：coordinator.xml 是 OOZIE coord 定时调度文件，workflow.xml 是 OOZIE 作业执行文件，job_h.properties 是作业按小时调度相关参数配置文件，job_test.properties 是测试 OOZIE 是否可以正常调度相关参数配置文件，run.sh 是执行用 shell 脚本，test.sh 是测试 oozie 用 shell 脚本，rbis-spark_2.10-1.0.jar 是执行程序，mysql-connector-java.jar 是程序使用 jar 包，commons-pool2-2.3.jar 是程序使用 jar 包。 * 作业部署执行步骤： + 提交 oozie 调度文件到 hdfs 指定路径执行命令：hadoop fs –put oozie_run /tmp/ 上传路径在 job.properties 文件中 filepath，oozie.coord.application.path 两个属性指定。 + 提交并执行调度任务：进入 oozie_run 目录执行按小时调度命令：oozie job -oozie http://localhost:11000/oozie -config job_h.properties -run。 + 查看任务状态信息：oozie job -oozie http://localhost:11000/oozie -info jobid。 + OOZIE WEB 界面查看调度任务：http://hadoop233:11000/oozie。 4. OOZIE 调度 sqoop：在 job.properties 文件中配置 oozie.use.system.libpath=true，以便使用 OOZIE 调度 sqoop。 5. 注意事项： * 程序本地可以正常执行，使用 OOZIE 提交到集群后不能正常执行。可能原因：OOZIE 提交的作业由 YARN ResourceManager 分配到集群的 NodeManager 执行，优先选择配置资源高, NodeManager Default Group 中的 NodeManager。执行作业的 NodeManager 可以从 jobhistory 查看得到。解决方式：尝试从相应 NodeManager 直接执行程序，并检查所需配置。 * OOZIE 提交作业后报错：Error: E0901 : E0901: Namenode [nam，可能原因： Namenode 节点不可用或 HDFS 文件系统不可用。解决方式：检查 Namenode 节点和 HDFS 文件系统的可用性。

您好！对于杀死 Oozie 作业的命令，您可以使用以下指令： ``` oozie job -kill <job-id> ``` 请将 `<job-id>` 替换为您要杀死的 Oozie 作业的 ID。这将向 Oozie 服务器发送一个请求，以终止指定的作业。请注意，杀死作业可能会中断正在进行的任务，并且可能需要一些时间才能完成。此外，您需要确保您具有适当的权限来执行此操作。

阅读全文

oozie -kill

相关推荐

oozie使用整理

Oozie调度SparkSQL样例代码_oozie_hive_

大数据技术之Oozie.doc

尚硅谷大数据技术之Oozie1

大数据Oozie架构原理.pdf

Oozie安装部署及任务定义说明

Oozie：大数据工作流调度利器-模块详解与部署

OOZIE配置与调度详解

Oozie调度与依赖任务处理

Oozie中的MapReduce任务管理

Oozie工作流程详解与示例

什么是Oozie？入门指南

使用Oozie进行数据仓库集成

Oozie中的数据传输与复制

Oozie中的数据导入与导出

Oozie工作流调度与任务编排

使用Oozie进行数据清洗与预处理

oozie与Spark的集成与数据处理

最新推荐

Oozie安装部署及任务定义说明

Spring Cloud 全面学习案例集，含多种功能示例与教程.zip

AudioStream 1.5.unitypackage

驾驭未来：Simulink中PMSM永磁同步电机控制深度解析

Jupyter_B 站直播事件 webhook 和开播邮件提醒.zip

高清艺术文字图标资源，PNG和ICO格式免费下载

管理建模和仿真的文件

DMA技术：绕过CPU实现高效数据传输

SGM8701电压比较器如何在低功耗电池供电系统中实现高效率运作？

mui框架HTML5应用界面组件使用示例教程