2023-05-24 23:23:58,573 WARN org.apache.hadoop.yarn.server.resourcemanager.RMAuditLogger: USER=root OPERATION=Application Finished - Failed TARGET=RMAppManager RESULT=FAILURE DESCRIPTION=App failed with state: FAILED PERMISSIONS=Application application_1684941557845_0001 failed 2 times due to AM Container for appattempt_1684941557845_0001_000002 exited with exitCode: 1
时间: 2024-01-24 09:18:03 浏览: 33
根据日志信息,应用程序尝试执行两次都失败了,原因是 AM 容器在 appattempt_1684941557845_0001_000002 中退出并返回了 exitCode: 1。这可能是由于一些错误导致的,例如代码错误、内存不足或其他资源不足等。您可以检查应用程序的代码并查看是否有任何错误。您还可以检查资源管理器的日志以获取更多详细信息。
相关问题
warn org.apache.hadoop.util.shell - did not find winutils.exe:
这是一个常见的错误信息,通常是因为在Windows操作系统上运行Hadoop时缺少winutils.exe文件而导致的。Winutils.exe是Windows操作系统上Hadoop的本地库,用于处理文件系统中的操作,例如在HDFS上创建目录或更改文件权限。如果winutils.exe文件不存在或未配置,则无法执行以下操作并显示警告信息:
-连接到Hadoop集群
-在Hadoop集群上运行作业
-对Hadoop集群上的文件系统进行任何操作
为了解决这个问题,您需要从Apache Hadoop网站上下载winutils.exe并将其添加到系统路径中。请确保下载winutils.exe与您所使用的Hadoop版本相对应。您还可以通过设置一个环境变量HADOOP_HOME来指向Hadoop安装目录,以使winutils.exe文件正确加载。
解释以下log的意思:2023-06-13 11:15:44,512 WARN [main] org.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ContainerLocalizer: Localization running as yarn not target_hive2ck
这是一个日志信息,包含了时间戳、日志级别、线程信息、应用程序信息和日志消息。其中:
- 时间戳:2023-06-13 11:15:44,512,表示日志记录时间为2023年6月13日11点15分44.512秒。
- 日志级别:WARN,表示警告级别,提示该消息并不是一个错误,但是需要注意。
- 线程信息:[main],表示该日志消息是在哪个线程中记录的。
- 应用程序信息:org.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ContainerLocalizer,表示应用程序或类名。
- 日志消息:Localization running as yarn not target_hive2ck,表示该应用程序在执行本地化时使用的用户不是目标用户,可能会影响执行结果。
总体来说,这是一个来自Hadoop YARN NodeManager中ContainerLocalizer组件的警告信息,提示当前用户与目标用户不一致,可能会影响应用程序的执行。