抽取shtd_store库中LINEITEM的增量数据进入Hive的ods库中表lineitem,根据 LINEITEM表中orderkey作为增量字段,只将新增的数据抽入,字段类型不变,同时添加静态分 区,分区字段类型为String,且值为当前比赛日的前一天日期(分区字段格式为yyyyMMdd)。 并在hive cli执行show partitions ods.lineitem命令,将结果截图复制粘贴至对应报告中。
时间: 2023-02-23 21:26:53 浏览: 368
全国职业技能大赛大数据赛项十套赛题(shtd)
可以使用Hive的INSERT INTO语句进行数据抽取。首先,创建一个静态分区的ods.lineitem表,分区字段为String类型的日期(yyyyMMdd格式)。然后使用INSERT INTO语句,将shtd_store库中LINEITEM的增量数据(仅新增的数据)插入到ods.lineitem表中,同时在INSERT语句中指定分区值为当前比赛日的前一天日期。最后,使用"show partitions ods.lineitem"命令,将查询到的结果截图复制粘贴到报告中。
阅读全文