Hadoop job information for Stage-1: number of mappers: 0; number of reducers: 0 2023-05-22 22:59:18,366 Stage-1 map = 0%, reduce = 0% Ended Job = job_1684762105058_0005 with errors Error during job, obtaining debugging information... FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce Jobs Launched: Stage-Stage-1: HDFS Read: 0 HDFS Write: 0 FAIL Total MapReduce CPU Time Spent: 0 msec hive>

这段信息是关于一个Hadoop作业的执行情况。其中，“Stage-1”表示这是第一阶段的任务信息，“number of mappers: 0; number of reducers: 0”表示没有任何Mapper或Reducer被分配给这个作业。接下来的“map=0%, reduce=0%”表示当前作业的Mapper和Reducer的任务完成进度都为0%。

在执行过程中，该作业遇到了错误，导致作业失败。具体的错误信息可以通过“obtaining debugging information”来获取。最后的“MapReduce Jobs Launched”部分提供了有关Hadoop作业启动和完成的信息，包括读取和写入的数据量，以及CPU使用时间等。

根据这些信息，可能需要进一步检查Hadoop集群的配置和作业的参数设置，以找出导致作业失败的原因。

相关问题

Unresolved dependency: 'org.apache.hadoop:hadoop-MapReduce-client-core:jar:2.7.7'

这个错误通常是由于缺少依赖项引起的，你需要确保在你的项目中添加了正确的Hadoop依赖项。你可以尝试在你的pom.xml或build.gradle文件中添加以下依赖项：

Maven:

<dependency>
  <groupId>org.apache.hadoop</groupId>
  <artifactId>hadoop-mapreduce-client-core</artifactId>
  <version>2.7.7</version>
</dependency>

Gradle:

implementation 'org.apache.hadoop:hadoop-mapreduce-client-core:2.7.7'

如果你已经添加了这个依赖项但仍然出现错误，那么可能是因为你的本地仓库中没有下载该依赖项。你可以尝试清除本地仓库并重新构建项目来解决这个问题。

hadoop 启动时报错： -ls: Can't get Kerberos realm 如何解决

这个错误通常是由于 Hadoop 配置中缺少 Kerberos Realm 导致的。要解决这个问题，可以按照以下步骤操作：

1. 确认 Hadoop 配置中是否正确配置了 Kerberos Realm，可以在 core-site.xml 文件中查看是否有类似以下的配置：

   <property>
     <name>hadoop.security.authentication</name>
     <value>kerberos</value>
   </property>
   <property>
     <name>hadoop.security.authorization</name>
     <value>true</value>
   </property>
   <property>
     <name>hadoop.security.auth_to_local</name>
     <value>DEFAULT</value>
   </property>
   <property>
     <name>hadoop.security.kerberos.realm</name>
     <value>EXAMPLE.COM</value>
   </property>
   <property>
     <name>hadoop.security.kerberos.kdc</name>
     <value>kdc.example.com</value>
   </property>

2. 如果没有配置 Kerberos Realm，则需要根据实际情况添加配置。

3. 如果已经正确配置了 Kerberos Realm，但仍然出现此错误，则可能是由于 Kerberos 配置文件缺失或配置不正确导致的。可以检查 Kerberos 配置文件（通常是 krb5.conf 文件）是否存在，并且其中的配置是否正确。

4. 如果以上步骤都没有解决问题，则可以尝试重新启动 Hadoop，或者查看 Hadoop 日志以获取更多信息。