Hive那些事儿之八-大数据踩过的坑——Hiveinsert_hiveinsertoverwrite - CSDN文库

5星 · 超过95%的资源 102 浏览量更新于2023-03-03 评论 1 收藏 31KB PDF 举报

身份认证购VIP最低享 7 折!

领优惠券(最高得80元）

资源详情

资源评论

资源推荐

Hive那些事儿之八那些事儿之八-大数据踩过的坑大数据踩过的坑——Hive insert

Hive那些事儿之八-大数据踩过的坑——Hive insert

我在对Hive表数据清洗后，使用了如下SQL将结果集插入到新表中:

insert into db_name.table_name_1 (

col_1,col2,col3

)

with temp_table_1 as (

select id,col_2

from db_name.table_name_2 where id = condatition

),

temp_table_2 as (

select id,col_3

from db_name.table_name_3 where id = condatition

)

select a.id,a.col_2,b.col_3

from temp_table_1 a

left join temp_table_2 b on a.id= b.id

出现了如下报错信息：

Error while compiling statement: FAILED: ParseException line 15:0 cannot recognize input near ‘with’ ‘temp_table_1’ ‘as’ in

statement

错误原因：

Hive是支持with语法的，但是当与insert搭配使用时，语法与标准SQL语法规则不一样，需要将with放在insert之前，如下所

示：

with temp_table_1 as (

select id,col_2

f rom db_name.table_name_2 where id = condatition

),

temp_table_2 as (

select id,col3

from db_name.table_name_3 where id = condatition

)

insert into db_name.table_name_1 (

col_1,col2,col3

)

select a.id,a.col_2,b.col_3

from temp_table_1 a

left join temp_table_2 b on a.id= b.id

但是目标表db_name.table_name_1包含col_1,col_2,col_3,col_4,col_5等多个字段。上述insert语句执行后，又报了如下错

误：

Error while compiling statement: FAILED: NullPointerException null

错误原因：Hive SQL中的Insert不支持插入部分字段

解决方案：将字段补全，没有数据的字段插入空值，修改如下：

with temp_table_1 as (

select id,col_2

f rom db_name.table_name_2 where id = condatition

),

temp_table_2 as (

select id,col3

from db_name.table_name_3 where id = condatition

)

insert into db_name.table_name_1 (

col_1,col_2,col_3,col_4,col_5

)

select a.id,a.col_2,b.col_3,null,null

from temp_table_1 a

left join temp_table_2 b on a.id= b.id

作者：西西弗斯的石头

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余0页未读，立即下载

评论10

陈游泳

2023-07-24

对于刚入门的人来说，这篇文章解释了Hive insert的一些基本概念，让我更容易理解。

weixin_38631599

粉丝: 9
资源: 944

会员权益专享

图片转文字

全年可省5，000元立即开通

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈