hive启动元数据遇到 INFO metastore.HiveMetaStore: Added admin role in metastore INFO metastore.HiveMetaStore: Added public role in metastore INFO metastore.HiveMetaStore: No user is added in admin role, since config is empty INFO conf.HiveConf: Found configuration file file:/D:/apache-hive-3.1.2-bin/conf/hive-site.xml INFO metastore.HiveMetaStore: Starting DB backed MetaStore Server with SetUGI enabled INFO metastore.HiveMetaStore: Started the new metaserver on port [9083]... INFO metastore.HiveMetaStore: Options.minWorkerThreads = 200 INFO metastore.HiveMetaStore: Options.maxWorkerThreads = 1000 INFO metastore.HiveMetaStore: TCP keepalive = true INFO metastore.HiveMetaStore: Enable SSL = false
时间: 2024-02-26 10:51:51 浏览: 255
这段日志是hive启动时输出的,其中包含了启动元数据服务的信息。可以看到,启动过程中添加了admin和public角色,并且没有添加任何用户到admin角色中。同时,hive-site.xml配置文件被找到并使用。元数据服务以DB方式启动,同时启用了SetUGI选项,并在9083端口启动了新的元数据服务。最后,还显示了一些元数据服务的参数配置信息,如最小工作线程数、最大工作线程数、TCP keepalive选项和SSL启用状态。
相关问题
[root@zhaosai ~]# hive Logging initialized using configuration in jar:file:/opt/programs/apache-hive-1.2.2-bin/lib/hive-common-1.2.2.jar!/hive-log4j.properties Exception in thread "main" java.lang.RuntimeException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:522) at org.apache.hadoop.hive.cli.CliDriver.run(CliDriver.java:677) at org.apache.hadoop.hive.cli.CliDriver.main(CliDriver.java:621) at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62) at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) at java.lang.reflect.Method.invoke(Method.java:498) at org.apache.hadoop.util.RunJar.run(RunJar.java:221) at org.apache.hadoop.util.RunJar.main(RunJar.java:136) Caused by: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient at org.apache.hadoop.hive.metastore.MetaStoreUtils.newInstance(MetaStoreUtils.java:1523) at org.apache.hadoop.hive.metastore.RetryingMetaStoreClient.<init>(RetryingMetaStoreClient.java:86) at org.apache.hadoop.hive.metastore.RetryingMetaStoreClient.getProxy(RetryingMetaStoreClient.java:132) at org.apache.hadoop.hive.metastore.RetryingMetaStoreClient.getProxy(RetryingMetaStoreClient.java:104) at org.apache.hadoop.hive.ql.metadata.Hive.createMetaStoreClient(Hive.java:3005) at org.apache.hadoop.hive.ql.metadata.Hive.getMSC(Hive.java:3024) at org.apache.hadoop.hive.ql.session.SessionState.start(SessionState.java:503) ... 8 more Caused by: java.lang.reflect.InvocationTargetException at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method) at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62) at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45) at java.lang.reflect.Constructor.newInstance(Constructor.java:423) at org.apache.hadoop.hive.metastore.MetaStoreUtils.newInstance(MetaStoreUtils.java:1521) ... 14 more Caused by: javax.jdo.JDOFatalInternalException: Error creating transactional connection factory NestedThrowables:
这个错误提示看起来像是由于Hive无法连接到Hadoop集群或者Metastore服务导致的。您可以检查以下几点:
1. 检查Hadoop集群是否已经启动并运行中。
2. 检查Hive配置文件中是否正确配置了Hadoop集群的相关信息,如core-site.xml、hdfs-site.xml等。
3. 检查Metastore服务是否已经启动并运行中,以及Hive配置文件中是否正确配置了Metastore服务的相关信息。
4. 如果您使用的是远程Metastore服务,那么请检查网络连接是否畅通,能否访问到Metastore服务。
如果以上步骤都检查过了还是无法解决问题,可以尝试重新安装或者升级Hadoop和Hive,或者查看Hive日志文件,找到更详细的错误信息以便定位问题。
Metastore connection URL: jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true&useSSL=false&allowPublicKeyRetrieval=true Metastore Connection Driver : com.mysql.cj.jdbc.Driver Metastore connection User: hive org.apache.hadoop.hive.metastore.HiveMetaException: Failed to load driver Underlying cause: java.lang.ClassNotFoundException : com.mysql.cj.jdbc.Driver Use --verbose for detailed stacktrace. *** schemaTool failed ***
根据你提供的错误信息,看起来是在连接 Hive Metast 时出现了问题。错误提示显示无加载 com.mysql.cj.jdbc.Driver 驱动程序。这可能是由于缺少该驱动程序或驱动程序版本不兼容导致的。
解决此问题的一种方法是确保正确安装了 MySQL Connector/J 驱动程序,并且与你使用的 Hive Metastore 版本兼容。你可以尝试以下步骤:
1. 下载适用于你的 MySQL 版本的 Connector/J 驱动程序。可以从 MySQL 官方网站或 Maven 仓库下载。
2. 将驱动程序的 JAR 文件添加到 Hive Metastore 的类路径中。这通常涉及将 JAR 文件复制到 Hive Metastore 的 lib 目录下。
3. 确保 Metastore 连接 URL 中的驱动程序类名与实际驱动程序类名一致。你提供的连接 URL 中的类名为 com.mysql.cj.jdbc.Driver,确保该类名与实际驱动程序类名一致。
4. 重启 Hive Metastore 服务,并检查是否仍然出现相同的错误。
如果问题仍然存在,你可以尝试使用更详细的日志(使用 --verbose 选项)来获取更多关于错误的详细信息,以便更好地诊断和解决问题。
阅读全文