sqoop 报错ERROR tool.ImportTool: Imported Failed: Missing Hive MetaStore connection URI

这个错误是由于Sqoop在导入数据时无法找到Hive元数据存储连接URI引起的。这通常是由于以下原因之一：

1. 没有配置正确的Hive元数据存储连接URI。在Sqoop命令中，必须指定正确的Hive元数据存储连接URI。

2. 没有正确安装和配置Hive。Sqoop需要Hive来处理导入的数据，并且必须正确安装和配置Hive才能使用Sqoop。

要解决这个问题，可以采取以下步骤：

1. 检查Sqoop命令中的Hive元数据存储连接URI是否正确。

2. 确保Hive已正确安装和配置。可以尝试在Hive中运行一些查询，以确保它正在正常工作。

3. 如果以上步骤均未解决问题，则可以尝试重新安装和配置Hive和Sqoop。确保按照正确的步骤进行安装和配置，并且所有必需的依赖项和配置都已正确设置。

相关问题

sqoop报错：ERROR tool.ImportTool: Error during import: Import job failed

这个错误信息比较笼统，可能由于多种原因引起。以下是一些可能的解决方法：

1. 检查源和目标数据源的连接是否正确，用户名和密码是否正确。

2. 检查源和目标数据源是否都处于运行状态。

3. 检查导入数据的表或者目录是否存在，以及是否有权限访问。

4. 检查导入的列是否存在，列名是否正确。

5. 检查导入的数据格式是否与目标表的数据格式匹配。

6. 检查导入的数据是否包含无效或者不可识别的字符。

7. 检查导入的数据是否过大，是否需要增加 sqoop 的参数来增加内存和调整批处理大小。

8. 检查 sqoop 的日志，查看更详细的错误信息。

希望这些方法能帮到你。

root@zhaosai conf]# sqoop import --connect jdbc:mysql://192.168.160.130:3306/mydb --username root -P --table news --hive-import --hive-table mydb.news --incremental append --check-column id --last-value 0 --split-by id --target-dir /hdfs://zhaosai:9000/user/hive/warehouse/news --num-mappers 1 23/06/07 17:23:56 INFO sqoop.Sqoop: Running Sqoop version: 1.4.7 Enter password: 23/06/07 17:24:04 INFO tool.BaseSqoopTool: Using Hive-specific delimiters for output. You can override 23/06/07 17:24:04 INFO tool.BaseSqoopTool: delimiters with --fields-terminated-by, etc. 23/06/07 17:24:04 INFO manager.MySQLManager: Preparing to use a MySQL streaming resultset. 23/06/07 17:24:04 INFO tool.CodeGenTool: Beginning code generation Loading class `com.mysql.jdbc.Driver'. This is deprecated. The new driver class is `com.mysql.cj.jdbc.Driver'. The driver is automatically registered via the SPI and manual loading of the driver class is generally unnecessary. 23/06/07 17:24:04 INFO manager.SqlManager: Executing SQL statement: SELECT t.* FROM `news` AS t LIMIT 1 23/06/07 17:24:04 INFO manager.SqlManager: Executing SQL statement: SELECT t.* FROM `news` AS t LIMIT 1 23/06/07 17:24:04 INFO orm.CompilationManager: HADOOP_MAPRED_HOME is /opt/programs/hadoop-2.7.6 注: /tmp/sqoop-root/compile/b07035b094b6ac39b87f2ef11261c934/news.java使用或覆盖了已过时的 API。 注: 有关详细信息, 请使用 -Xlint:deprecation 重新编译。 23/06/07 17:24:05 INFO orm.CompilationManager: Writing jar file: /tmp/sqoop-root/compile/b07035b094b6ac39b87f2ef11261c934/news.jar 23/06/07 17:24:05 INFO tool.ImportTool: Maximal id query for free form incremental import: SELECT MAX(`id`) FROM `news` 23/06/07 17:24:05 ERROR tool.ImportTool: Import failed: java.io.IOException: java.sql.SQLSyntaxErrorException: Unknown column 'id' in 'field list' at org.apache.sqoop.tool.ImportTool.initIncrementalConstraints(ImportTool.java:322) at org.apache.sqoop.tool.ImportTool.importTable(ImportTool.java:511) at org.apache.sqoop.tool.ImportTool.run(ImportTool.java:628) at org.apache.sqoop.Sqoop.run(Sqoop.java:147) at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70) at org.apache.sqoop.Sqoop.runSqoop(Sqoop.java:183) at org.apache.sqoop.Sqoop.runTool(Sqoop.java:234) at org.apache.sqoop.Sqoop.runTool(Sqoop.java:243) at org.apache.sqoop.Sqoop.main(Sqoop.java:252) Caused by: java.sql.SQLSyntaxErrorException: Unknown column 'id' in 'field list' at com.mysql.cj.jdbc.exceptions.SQLError.createSQLException(SQLError.java:120) at com.mysql.cj.jdbc.exceptions.SQLError.createSQLException(SQLError.java:97) at com.mysql.cj.jdbc.exceptions.SQLExceptionsMapping.translateException(SQLExceptionsMapping.java:122) at com.mysql.cj.jdbc.StatementImpl.executeQuery(StatementImpl.java:1200) at org.apache.sqoop.tool.ImportTool.getMaxColumnId(ImportTool.java:238) at org.apache.sqoop.tool.ImportTool.initIncrementalConstraints(ImportTool.java:309)

根据你提供的信息，这是一个使用Sqoop从MySQL导入数据到Hive的命令。但是，在执行命令时出现了错误。错误信息是“Unknown column 'id' in 'field list'”，意思是在字段列表中找不到名为“id”的列。这可能是因为在MySQL表中不存在“id”列，或者“id”列的名称不正确。您需要检查MySQL表中是否存在该列，并确保在Sqoop命令中正确指定了列名。