hive启动hiveserver2

时间: 2023-11-15 12:02:39 浏览: 161

Hiveserver2 Beeline连接设置用户名和密码.docx

5星 · 资源好评率100%

本文将详细介绍如何在Hive中设置用户名和密码,从而保证连接的鉴权与安全。基本思路是先自定义一个权限认证类接收用户名和密码，打成jar包后放到到HIVE的Lib目录下，然后配置Hive的配置文件和Hadoop的配置文件即可。本文档基于HIVE 3.12 支持最新的Hive和 Hadoop版本。在大数据处理领域，Hive 是一个非常重要的组件，它提供了基于 Hadoop 的数据仓库功能，使得用户可以通过 SQL 类似的查询语言来操作分布式存储的数据。Beeline 是 Hive 提供的一个命令行工具，用于与 HiveServer2 进行交互。在企业环境中，为了确保数据的安全性，通常需要对访问 Hive 的用户进行身份验证。本文将指导你如何在 Hive 3.12 版本中设置 Hiveserver2 与 Beeline 的连接，通过用户名和密码进行鉴权。一、自定义权限认证类 1. JAVA 端代码在实现自定义权限认证时，我们需要创建一个类，这个类需要继承 Apache Hadoop 的认证接口。例如，我们可以创建一个名为 `MyAuthenticationProvider` 的类，实现 `org.apache.hive.service.auth.HiveAuthFactory.Authenticator` 接口。这个接口定义了 `authenticate` 方法，用于验证用户提交的用户名和密码。在 `authenticate` 方法中，你可以根据实际需求实现自己的认证逻辑，如查询数据库或 LDAP 服务验证用户信息。 ```java package org.jt; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.security.UserGroupInformation; import org.apache.hadoop.security.authentication.util.KerberosName; import org.apache.hadoop.security.token.Token; import org.apache.hive.service.auth.HiveAuthFactory.Authenticator; import org.apache.hive.service.auth.PasswdAuthenticationProvider; import javax.security.auth.login.LoginException; import java.io.IOException; import java.security.PrivilegedActionException; import java.util.Map; public class MyAuthenticationProvider extends PasswdAuthenticationProvider implements Authenticator { @Override public UserGroupInformation authenticate(String user, String password, Map<String, String> params) throws IOException, LoginException { // 实现你的认证逻辑 } } ``` 2. POM 代码为了编译这个类，你需要创建一个 Maven 项目，并在 `pom.xml` 文件中添加必要的依赖，比如 Hive 和 Hadoop 的相关库。具体依赖项会根据你的 Hadoop 和 Hive 版本有所不同。 ```xml <project> <dependencies>  <dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-exec</artifactId> <version>3.1.2</version> </dependency> <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> <version>3.x.y</version> </dependency> </dependencies>  </project> ``` 编译完成后，将生成的 `.jar` 文件放入 Hive 的 `lib` 目录。二、Hive 中进行相应配置在 Hive 的配置文件 `hive-site.xml` 中，需要配置自定义的认证类。添加或修改以下配置： ```xml <configuration> <property> <name>hive.server2.authentication</name> <value>PASSWORD</value> </property> <property> <name>hive.server2.authentication.provider.class</name> <value>org.jt.MyAuthenticationProvider</value> </property>  </configuration> ``` 三、Hadoop 中进行相应配置在 Hadoop 的配置文件（如 `core-site.xml`）中，可能需要配置相关的安全属性，以便支持 Hive 的认证机制。具体配置取决于你的 Hadoop 配置和环境。四、重启 HDFS 配置完成后，需要重启 Hadoop 的 DataNode 和 NameNode 以使配置生效。五、重启 Hiveserver2 重启 HiveServer2 服务，使新的认证配置生效。用户现在可以通过 Beeline 使用用户名和密码连接到 HiveServer2。总结，设置 Hiveserver2 Beeline 连接的用户名和密码涉及到自定义认证类的编写、Hive 和 Hadoop 配置文件的修改以及服务的重启。通过这样的方式，你可以为你的大数据环境提供更安全的访问控制，确保只有经过验证的用户才能访问 Hive 服务。

启动HiveServer2有两种方式，一种是使用命令hive --service hiveserver2，另一种更为简洁，为hiveserver2。使用hiveserver2命令启动HiveServer2时，可以通过-h或--help选项查看帮助信息。同时，Hive提供了三种客户端来操作Hive表，分别是hive shell、WebUI和基于JDBC等协议的客户端。其中，启动hiveserver2并通过jdbc协议访问Hive可以实现高并发操作。

阅读全文

hive启动hiveserver2

相关推荐

通过beeline连接Hive的详细步骤

Hive数据导出与操作详解

只启动hiveserver2和 同时启动hive和hiveserver2有什么区别

hive和hiveserver2同时启动？

为什么我使用你给我的启动hive和hiveserver2的shell脚本，我只能启动hive但是并不执行hiveserver2

hive，hiveServer2没找到命令

linux hive的hiveserver2打开错误

hive hiveserver2启动时间长

启动 hiveserver2

datagrip连接hive需要开启hiveserver2吗?

hive --service hiveserver2为什么启动好久

hive --service hiveserver2

hiveserver2: $HIVE_HOME/bin/hive --service hiveserver2 &一直处理会话

编写hive的同时启动ive、hiveserver2和metastore的脚本

hive --service hiveserver2 &

./bin/hive --service hiveserver2 -hiveconf hive.server2.thrift.port=10000一个小时了还没有启动成功

hive --service hiveserver2 --hiveconf hive.server2.thrift.port=21066

bin/hive --service hiveserver2

nohup hive --service hiveserver2 &

最新推荐

基于python的垃圾分类系统资料齐全+详细文档.zip

Raspberry Pi OpenCL驱动程序安装与QEMU仿真指南

管理建模和仿真的文件

Fluent UDF实战攻略：案例分析与高效代码编写

如何使用DPDK技术在云数据中心中实现高效率的流量监控与网络安全分析？

Apache RocketMQ Go客户端：全面支持与消息处理功能

"互动学习：行动中的多样性与论文攻读经历"

Fluent UDF进阶秘籍：解锁高级功能与优化技巧

在Vue项目中，如何利用Vuex进行高效的状态管理，并简要比较React中Redux或MobX的状态管理模式？

WStage平台：无线传感器网络阶段数据交互技术

只启动hiveserver2和同时启动hive和hiveserver2有什么区别