hdfs数据导入到Hive

将HDFS中的数据导入到Hive可以通过以下两种方式实现：

1. 使用Hive的LOAD DATA命令

首先将数据文件上传到HDFS中，然后使用Hive的LOAD DATA命令将数据导入到Hive表中。LOAD DATA命令的语法如下：

LOAD DATA [LOCAL] INPATH 'hdfs_path' [OVERWRITE] INTO TABLE tablename [PARTITION (partcol1=val1, partcol2=val2 ...)]

其中，hdfs_path是数据文件在HDFS中的路径，tablename是要导入数据的Hive表名。如果数据文件中的字段与Hive表的字段不匹配，则需要指定字段的分隔符和行分隔符。

2. 使用Hive的EXTERNAL TABLE

如果数据文件已经存在于HDFS中，可以使用Hive的EXTERNAL TABLE将数据文件映射为Hive表。EXTERNAL TABLE与普通表不同的是，它只是对HDFS中的数据文件的一个元数据描述，不会将数据复制到Hive的数据仓库中。使用EXTERNAL TABLE的语法如下：

CREATE EXTERNAL TABLE tablename (col1 type1, col2 type2, ...) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' LINES TERMINATED BY '\n' LOCATION 'hdfs_path';

其中，hdfs_path是数据文件在HDFS中的路径，col1、col2等是Hive表的列名和类型。如果数据文件中的字段与Hive表的字段不匹配，则需要指定字段的分隔符和行分隔符。

总体来说，使用LOAD DATA命令比使用EXTERNAL TABLE更简单，但是需要将数据文件上传到HDFS中。而使用EXTERNAL TABLE则可以直接使用HDFS中的数据文件，但是需要手动创建表和指定分隔符和行分隔符。