hive建表指定压缩格式

在 Hive 中，可以通过 `STORED AS` 子句来指定表的压缩格式。以下是一些常见的压缩格式及其示例用法：

1. Snappy 压缩格式：

CREATE TABLE my_table (
  column1 INT,
  column2 STRING
)
STORED AS PARQUET
TBLPROPERTIES ('parquet.compression'='SNAPPY');

2. Gzip 压缩格式：

CREATE TABLE my_table (
  column1 INT,
  column2 STRING
)
STORED AS TEXTFILE
TBLPROPERTIES ('compression.codec'='org.apache.hadoop.io.compress.GzipCodec');

3. LZO 压缩格式：

CREATE TABLE my_table (
  column1 INT,
  column2 STRING
)
STORED AS TEXTFILE
TBLPROPERTIES ('compression.codec'='com.hadoop.compression.lzo.LzopCodec');

请根据你的需求选择适当的压缩格式，并在 `STORED AS` 子句中指定相应的格式。

相关问题

hive建表指定压缩格式为LZO

你可以使用以下语句在 Hive 中创建一个指定压缩格式为 LZO 的表：

CREATE TABLE your_table
(
  column1 data_type,
  column2 data_type,
  ...
)
STORED AS INPUTFORMAT 'com.hadoop.mapred.DeprecatedLzoTextInputFormat'
OUTPUTFORMAT 'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat'
LOCATION 'your_table_location'
TBLPROPERTIES (
  'mapred.output.compression.codec'='com.hadoop.compression.lzo.LzopCodec'
);

请将 `your_table` 替换为你想要创建的表的名称，`column1`、`column2` 等替换为实际的列名和数据类型，并将 `your_table_location` 替换为表的存储路径。

这里使用了 LZO 压缩格式的输入和输出格式，以及相应的编解码器。确保你的 Hadoop 集群中已经安装了 LZO 压缩库，并将其相关配置添加到 Hive 的环境中。

希望对你有所帮助！如果有任何进一步的问题，请随时提问。

hive建表指定数据格式

在 Hive 中，可以使用 CREATE TABLE 语句来创建表并指定数据格式。以下是一个示例：

CREATE TABLE my_table (
  col1 INT,
  col2 STRING,
  col3 DOUBLE
)
ROW FORMAT DELIMITED
FIELDS TERMINATED BY ','
STORED AS TEXTFILE;

在上述示例中，我们创建了一个名为 my_table 的表，该表包含三列：col1（整数类型）、col2（字符串类型）和col3（双精度浮点类型）。ROW FORMAT DELIMITED 子句指定了行的格式，FIELDS TERMINATED BY ',' 表示字段之间使用逗号分隔。STORED AS TEXTFILE 指定了数据存储格式为文本文件。

除了 TEXTFILE，Hive 还支持其他存储格式，如 ORC、Parquet 等。你可以根据实际需求选择适合的存储格式。