INFO client.RMProxy: Connecting to ResourceManager at node2/192.168.164.127:8032 2023-06-08 04:49:35,995 INFO mapreduce.JobResourceUploader: Disabling Erasure Coding for path: /tmp/hadoop-yarn/staging/had/.staging/job_1686223338867_0002 2023-06-08 04:49:36,051 INFO sasl.SaslDataTransferClient: SASL encryption trust check: localHostTrusted = false, remoteHostTrusted = false 2023-06-08 04:49:36,532 INFO input.FileInputFormat: Total input files to process : 1 2023-06-08 04:49:36,537 INFO mapreduce.JobSubmitter: Cleaning up the staging area /tmp/hadoop-yarn/staging/had/.staging/job_1686223338867_0002
时间: 2024-01-29 12:04:31 浏览: 198
Hive Beeline连接报错:Could not open client transport with JDBC Uri: jdbc:hive2://hcmaster:10000/default
5星 · 资源好评率100%
这是一个 Hadoop MapReduce 任务的日志。其中包括了作业的一些基本信息,如连接到 ResourceManager 的地址和端口、输入文件的数量等等。
其中的一行日志 "Disabling Erasure Coding for path: /tmp/hadoop-yarn/staging/had/.staging/job_1686223338867_0002" 表示禁用了纠删码编码(Erasure Coding)功能,这是因为在该路径下的文件不支持纠删码编码。
另外一行日志 "Total input files to process : 1" 表示该作业需要处理的输入文件数量是 1。
最后一行日志 "Cleaning up the staging area /tmp/hadoop-yarn/staging/had/.staging/job_1686223338867_0002" 表示清理作业的临时目录。在 MapReduce 任务执行期间,会在 HDFS 中创建一个临时目录,用于存放作业相关的中间结果和临时文件。作业执行完成后,这个临时目录会被清理掉,以释放存储空间。
阅读全文