sqoop的hive、hbase基本配置

要使用Sqoop将数据从关系型数据库导入到Hive或HBase中，需要进行以下基本配置：

1. Hive配置

在使用Sqoop将数据导入到Hive之前，需要在Hive的配置文件hive-site.xml中添加以下配置：

<property>
  <name>hive.metastore.uris</name>
  <value>thrift://<hive_metastore_host>:9083</value>
</property>

其中，`<hive_metastore_host>`是Hive元数据存储的主机名或IP地址。

2. HBase配置

在使用Sqoop将数据导入到HBase之前，需要在HBase的配置文件hbase-site.xml中添加以下配置：

<property>
  <name>hbase.zookeeper.quorum</name>
  <value><zookeeper_quorum_host></value>
</property>
<property>
  <name>hbase.zookeeper.property.clientPort</name>
  <value>2181</value>
</property>

其中，`<zookeeper_quorum_host>`是ZooKeeper集群的主机名或IP地址。

3. Sqoop配置

在使用Sqoop将数据导入到Hive或HBase之前，还需要在Sqoop的配置文件sqoop-site.xml中进行以下配置：

- 如果要将数据导入到Hive中，需要添加以下配置：

<property>
  <name>hive.server2.authentication.kerberos.principal</name>
  <value>hive/_HOST@EXAMPLE.COM</value>
</property>
<property>
  <name>hive.server2.authentication.kerberos.keytab</name>
  <value>/path/to/hive.keytab</value>
</property>

其中，`_HOST`将被替换为Hive Server 2的主机名或IP地址，`/path/to/hive.keytab`是Hive Server 2的Keytab文件路径。

- 如果要将数据导入到HBase中，需要添加以下配置：

<property>
  <name>hbase.security.authentication</name>
  <value>kerberos</value>
</property>
<property>
  <name>hbase.master.kerberos.principal</name>
  <value>hbase/_HOST@EXAMPLE.COM</value>
</property>
<property>
  <name>hbase.regionserver.kerberos.principal</name>
  <value>hbase/_HOST@EXAMPLE.COM</value>
</property>
<property>
  <name>hbase.master.keytab.file</name>
  <value>/path/to/hbase.keytab</value>
</property>
<property>
  <name>hbase.regionserver.keytab.file</name>
  <value>/path/to/hbase.keytab</value>
</property>

其中，`_HOST`将被替换为HBase Master和RegionServer的主机名或IP地址，`/path/to/hbase.keytab`是HBase的Keytab文件路径。