修改完整版的sql存储(积分兑换脚本),改写出可执行的hive脚本create procedure "rptdev"."sp_wjq_jf_value_dhfz_show"( in @data_date integer default cast("dateformat"("now"()-1,'yyyymmdd') as integer), in @is_run_flag1 integer default 1, in @is_run_flag2 integer default 10 ) on exception resume /****************************************************************** -- Purpose : 兑换积分分析报表 -- Auther: xxx -- Date : 20210923 *******************************************************************/ begin declare @stat_date varchar(8); --统计日期 declare @month_id integer; --统计月份 declare @month_first_date varchar(8); --统计月的第一天 declare @month_last_date varchar(8); --统计月的最后一天 declare @last_month_first_date varchar(8); --上月的第一天 declare @last_month_last_date varchar(8); --上月的最后一天 declare @last_month integer; --上月 declare @last_last_month integer; --上上月 declare @last_month_this_day varchar(8); --上月当天 declare @last_year_this_month integer; --上年当月 declare @this_year_first_month integer; --本年首月 declare @last_year_last_month integer; --上年尾月 set @stat_date = convert(varchar(8),@data_date); set @month_id = @data_date/100; set @month_first_date = "dateformat"(@data_date,'yyyymm01'); --统计月的第一天 set @month_last_date = "dateformat"("dateadd"("dd",-1,"dateformat"("dateadd"("mm",1,@data_date),'yyyymm01')),'yyyymmdd'); --统计月的最后一天 set @last_month_first_date = "dateformat"("dateadd"("mm",-1,@data_date),'yyyymm01'); --上月第一天 set @last_month_last_date = "dateformat"("dateadd"("dd",-1,"dateformat"("dateadd"("mm",1,@data_date),'yyyymm01')),'yyyymmdd'); set @last_month = cast("dateformat"("dateadd"("month",-1,@data_date),'yyyymm') as integer); --上月 set @last_last_month = cast("dateformat"("dateadd"("month",-2,@data_date),'yyyymm') as integer); --上上月 set @last_month_this_day = "dateformat"("dateadd"("mm",-1,convert(date,@data_date)),'yyyymmdd'); --上月当天 set @last_year_this_month = convert(integer,"dateformat"("dateadd"("yy",-1,@last_month_this_day),'yyyymm')); --上年当月

时间: 2023-08-28 21:04:10 浏览: 122
--将存储过程改写成Hive脚本 --设置变量 SET data_date = from_unixtime(unix_timestamp()-86400,'yyyyMMdd'); SET is_run_flag1 = 1; SET is_run_flag2 = 10; --获取日期相关变量 SET stat_date = CAST(data_date AS VARCHAR(8)); SET month_id = CAST(data_date/100 AS INT); SET month_first_date = CONCAT(SUBSTR(data_date, 1, 6), '01'); SET month_last_date = DATE_FORMAT(DATE_ADD(month_first_date, INTERVAL 1 MONTH), 'yyyyMMdd') - 1; SET last_month_first_date = DATE_FORMAT(DATE_ADD(month_first_date, INTERVAL -1 MONTH), 'yyyyMMdd'); SET last_month_last_date = DATE_FORMAT(DATE_ADD(month_first_date, INTERVAL -1 DAY), 'yyyyMMdd'); SET last_month = CAST(DATE_FORMAT(DATE_ADD(data_date, INTERVAL -1 MONTH), 'yyyyMM') AS INT); SET last_last_month = CAST(DATE_FORMAT(DATE_ADD(data_date, INTERVAL -2 MONTH), 'yyyyMM') AS INT); SET last_month_this_day = DATE_FORMAT(DATE_ADD(data_date, INTERVAL -1 MONTH), 'yyyyMMdd'); SET last_year_this_month = CAST(DATE_FORMAT(DATE_ADD(last_month_this_day, INTERVAL -1 YEAR), 'yyyyMM') AS INT); SET this_year_first_month = CAST(DATE_FORMAT(DATE_ADD(data_date, INTERVAL -MONTH(data_date) MONTH), 'yyyyMM') AS INT); SET last_year_last_month = CAST(DATE_FORMAT(DATE_ADD(data_date, INTERVAL -1 YEAR), 'yyyyMM') AS INT); --创建临时表 DROP TABLE IF EXISTS tmp_jf_value_dhfz_show; CREATE TABLE tmp_jf_value_dhfz_show AS SELECT t1.cust_id, t1.cust_name, t2.channel_name, t1.consume_value, t1.exchange_value, t1.this_month_value, t1.last_month_value, t1.last_last_month_value, t1.last_year_this_month_value, t1.this_year_first_month_value, t1.last_year_last_month_value, t1.month_id FROM ( --获取本月和上月的兑换积分数 SELECT cust_id, cust_name, SUM(CASE WHEN consume_date >= month_first_date AND consume_date <= month_last_date THEN consume_value ELSE 0 END) AS consume_value, SUM(CASE WHEN exchange_date >= month_first_date AND exchange_date <= month_last_date THEN exchange_value ELSE 0 END) AS exchange_value, SUM(CASE WHEN consume_date >= last_month_first_date AND consume_date <= last_month_last_date THEN consume_value ELSE 0 END) AS last_month_value, SUM(CASE WHEN exchange_date >= last_month_first_date AND exchange_date <= last_month_last_date THEN exchange_value ELSE 0 END) AS last_month_exchange_value, SUM(CASE WHEN consume_date >= DATE_FORMAT(DATE_ADD(last_month_first_date, INTERVAL -1 MONTH), 'yyyyMMdd') AND consume_date <= DATE_FORMAT(DATE_ADD(last_month_last_date, INTERVAL -1 MONTH), 'yyyyMMdd') THEN consume_value ELSE 0 END) AS last_last_month_value, SUM(CASE WHEN consume_date >= DATE_FORMAT(DATE_ADD(last_month_this_day, INTERVAL -1 YEAR), 'yyyyMMdd') AND consume_date <= DATE_FORMAT(DATE_ADD(last_month_this_day, INTERVAL -1 YEAR MONTH), 'yyyyMM') THEN consume_value ELSE 0 END) AS last_year_this_month_value, SUM(CASE WHEN consume_date >= DATE_FORMAT(DATE_ADD(data_date, INTERVAL -MONTH(data_date) MONTH), 'yyyyMMdd') AND consume_date <= month_last_date THEN consume_value ELSE 0 END) AS this_month_value, SUM(CASE WHEN consume_date >= DATE_FORMAT(DATE_ADD(data_date, INTERVAL -1 YEAR), 'yyyyMM') AND consume_date <= DATE_FORMAT(DATE_ADD(data_date, INTERVAL -1 MONTH), 'yyyyMM') THEN consume_value ELSE 0 END) AS last_year_last_month_value, SUM(CASE WHEN consume_date >= DATE_FORMAT(DATE_ADD(data_date, INTERVAL -MONTH(data_date) MONTH), 'yyyyMM') AND consume_date <= DATE_FORMAT(DATE_ADD(data_date, INTERVAL -1 MONTH), 'yyyyMM') THEN consume_value ELSE 0 END) AS this_year_first_month_value, month_id FROM jf_value_detail GROUP BY cust_id, cust_name, month_id ) t1 LEFT JOIN ( --获取渠道名称 SELECT channel_id, channel_name FROM channel_info ) t2 ON t1.channel_id = t2.channel_id; --根据条件筛选记录 DROP TABLE IF EXISTS jf_value_dhfz_show; CREATE TABLE jf_value_dhfz_show AS SELECT cust_id, cust_name, channel_name, consume_value, exchange_value, this_month_value, last_month_value, last_last_month_value, last_year_this_month_value, this_year_first_month_value, last_year_last_month_value, month_id FROM tmp_jf_value_dhfz_show WHERE ((is_run_flag1 = 1 AND consume_value > 0) OR (is_run_flag1 = 0)) AND ((is_run_flag2 = 10 AND channel_id = 10) OR (is_run_flag2 <> 10 AND channel_id <> 10)); --删除临时表 DROP TABLE IF EXISTS tmp_jf_value_dhfz_show;
阅读全文

相关推荐

修改完整版的sql存储(积分兑换脚本),改写出可执行的shell和hive脚本。 积分兑换脚本: create procedure "rptdev"."sp_wjq_jf_value_dhfz_show"( in @data_date integer default cast("dateformat"("now"()-1,'yyyymmdd') as integer), in @is_run_flag1 integer default 1, in @is_run_flag2 integer default 10 ) on exception resume /****************************************************************** -- Purpose : 兑换积分分析报表 -- Auther: xxx -- Date : 20210923 *******************************************************************/ begin declare @stat_date varchar(8); --统计日期 declare @month_id integer; --统计月份 declare @month_first_date varchar(8); --统计月的第一天 declare @month_last_date varchar(8); --统计月的最后一天 declare @last_month_first_date varchar(8); --上月的第一天 declare @last_month_last_date varchar(8); --上月的最后一天 declare @last_month integer; --上月 declare @last_last_month integer; --上上月 declare @last_month_this_day varchar(8); --上月当天 declare @last_year_this_month integer; --上年当月 declare @this_year_first_month integer; --本年首月 declare @last_year_last_month integer; --上年尾月 set @stat_date = convert(varchar(8),@data_date); set @month_id = @data_date/100; set @month_first_date = "dateformat"(@data_date,'yyyymm01'); --统计月的第一天 set @month_last_date = "dateformat"("dateadd"("dd",-1,"dateformat"("dateadd"("mm",1,@data_date),'yyyymm01')),'yyyymmdd'); --统计月的最后一天 set @last_month_first_date = "dateformat"("dateadd"("mm",-1,@data_date),'yyyymm01'); --上月第一天 set @last_month_last_date = "dateformat"("dateadd"("dd",-1,"dateformat"("dateadd"("mm",1,@data_date),'yyyymm01')),'yyyymmdd'); set @last_month = cast("dateformat"("dateadd"("month",-1,@data_date),'yyyymm') as integer); --上月 set @last_last_month = cast("dateformat"("dateadd"("month",-2,@data_date),'yyyymm') as integer); --上上月 set @last_month_this_day = "dateformat"("dateadd"("mm",-1,convert(date,@data_date)),'yyyymmdd'); --上月当天 set @last_year_this_month = convert(integer,"dateformat"("dateadd"("yy",-1,@last_month_this_day),'yyyymm')); --上年当月 set @this_year_first_month = convert(integer,"dateformat"("dateadd"("yy",0,@data_date),'yyyy01')); --本年首月 set @last_year_last_month = cast("dateformat"(convert(integer,"dateformat"("dateadd"("yy",-1,@data_date),'yyyy1231')),'yyyymm') as integer); --上年尾月 set temporary option "conversion_error" = 'OFF'; set temporary option "Query_Temp_Space_Limit" = 0; --drop table if exists rpt_wjq_jf_value_dhfz_list;commit;

最新推荐

recommend-type

如何在python中写hive脚本

在Python中编写Hive脚本主要是为了方便地与Hadoop HIVE数据仓库进行交互,这样可以在数据分析和机器学习流程中无缝地集成大数据处理步骤。以下将详细介绍如何在Python环境中执行Hive查询和管理Hive脚本。 1. **直接...
recommend-type

shell中循环调用hive sql 脚本的方法

在IT行业中,尤其是在大数据处理和自动化任务执行的场景下,Shell脚本与Hive SQL的结合使用非常常见。本文将详细介绍如何在Shell脚本中循环调用Hive SQL语句,以便实现批量处理数据或者执行一系列相关的查询操作。 ...
recommend-type

Hive用户指南(Hive_user_guide)_中文版.pdf

Metastore负责存储Hive的元数据,Query Compiler负责将SQL语句编译成MapReduce作业,Query Executor负责执行MapReduce作业,HDFS负责存储数据,MapReduce负责执行计算任务。 2. Hive和Hadoop关系 Hive是基于Hadoop...
recommend-type

hive-shell批量命令执行脚本的实现方法

在大数据处理领域,Hive 是一个非常重要的工具,它提供了SQL-like 的接口来查询和管理分布式存储的数据。本文将详细讲解如何使用Hive与Shell结合,实现批量执行Hive命令的脚本,这对于数据处理和ETL(提取、转换、...
recommend-type

HIVE-SQL开发规范.docx

【秘密】Hive SQL 开发规范 Hive作为Hadoop生态系统中的重要组件,为企业提供了对大规模数据集的高效处理和分析能力。它允许用户通过类似于SQL的查询语言(HiveQL)来操作分布式存储的数据,简化了MapReduce编程...
recommend-type

掌握Android RecyclerView拖拽与滑动删除功能

知识点: 1. Android RecyclerView使用说明: RecyclerView是Android开发中经常使用到的一个视图组件,其主要作用是高效地展示大量数据,具有高度的灵活性和可配置性。与早期的ListView相比,RecyclerView支持更加复杂的界面布局,并且能够优化内存消耗和滚动性能。开发者可以对RecyclerView进行自定义配置,如添加头部和尾部视图,设置网格布局等。 2. RecyclerView的拖拽功能实现: RecyclerView通过集成ItemTouchHelper类来实现拖拽功能。ItemTouchHelper类是RecyclerView的辅助类,用于给RecyclerView添加拖拽和滑动交互的功能。开发者需要创建一个ItemTouchHelper的实例,并传入一个实现了ItemTouchHelper.Callback接口的类。在这个回调类中,可以定义拖拽滑动的方向、触发的时机、动作的动画以及事件的处理逻辑。 3. 编辑模式的设置: 编辑模式(也称为拖拽模式)的设置通常用于允许用户通过拖拽来重新排序列表中的项目。在RecyclerView中,可以通过设置Adapter的isItemViewSwipeEnabled和isLongPressDragEnabled方法来分别启用滑动和拖拽功能。在编辑模式下,用户可以长按或触摸列表项来实现拖拽,从而对列表进行重新排序。 4. 左右滑动删除的实现: RecyclerView的左右滑动删除功能同样利用ItemTouchHelper类来实现。通过定义Callback中的getMovementFlags方法,可以设置滑动方向,例如,设置左滑或右滑来触发删除操作。在onSwiped方法中编写处理删除的逻辑,比如从数据源中移除相应数据,并通知Adapter更新界面。 5. 移动动画的实现: 在拖拽或滑动操作完成后,往往需要为项目移动提供动画效果,以增强用户体验。在RecyclerView中,可以通过Adapter在数据变更前后调用notifyItemMoved方法来完成位置交换的动画。同样地,添加或删除数据项时,可以调用notifyItemInserted或notifyItemRemoved等方法,并通过自定义动画资源文件来实现丰富的动画效果。 6. 使用ItemTouchHelperDemo-master项目学习: ItemTouchHelperDemo-master是一个实践项目,用来演示如何实现RecyclerView的拖拽和滑动功能。开发者可以通过这个项目源代码来了解和学习如何在实际项目中应用上述知识点,掌握拖拽排序、滑动删除和动画效果的实现。通过观察项目文件和理解代码逻辑,可以更深刻地领会RecyclerView及其辅助类ItemTouchHelper的使用技巧。
recommend-type

【IBM HttpServer入门全攻略】:一步到位的安装与基础配置教程

# 摘要 本文详细介绍了IBM HttpServer的全面部署与管理过程,从系统需求分析和安装步骤开始,到基础配置与性能优化,再到安全策略与故障诊断,最后通过案例分析展示高级应用。文章旨在为系统管理员提供一套系统化的指南,以便快速掌握IBM HttpServer的安装、配置及维护技术。通过本文的学习,读者能有效地创建和管理站点,确保
recommend-type

[root@localhost~]#mount-tcifs-0username=administrator,password=hrb.123456//192.168.100.1/ygptData/home/win mount:/home/win:挂载点不存在

### CIFS挂载时提示挂载点不存在的解决方案 当尝试通过 `mount` 命令挂载CIFS共享目录时,如果遇到错误提示“挂载点不存在”,通常是因为目标路径尚未创建或者权限不足。以下是针对该问题的具体分析和解决方法: #### 创建挂载点 在执行挂载操作之前,需确认挂载的目标路径已经存在并具有适当的权限。可以使用以下命令来创建挂载点: ```bash mkdir -p /mnt/win_share ``` 上述命令会递归地创建 `/mnt/win_share` 路径[^1]。 #### 配置用户名和密码参数 为了成功连接到远程Windows共享资源,在 `-o` 参数中指定 `user
recommend-type

惠普8594E与IT8500系列电子负载使用教程

在详细解释给定文件中所涉及的知识点之前,需要先明确文档的主题内容。文档标题中提到了两个主要的仪器:惠普8594E频谱分析仪和IT8500系列电子负载。首先,我们将分别介绍这两个设备以及它们的主要用途和操作方式。 惠普8594E频谱分析仪是一款专业级的电子测试设备,通常被用于无线通信、射频工程和微波工程等领域。频谱分析仪能够对信号的频率和振幅进行精确的测量,使得工程师能够观察、分析和测量复杂信号的频谱内容。 频谱分析仪的功能主要包括: 1. 测量信号的频率特性,包括中心频率、带宽和频率稳定度。 2. 分析信号的谐波、杂散、调制特性和噪声特性。 3. 提供信号的时间域和频率域的转换分析。 4. 频率计数器功能,用于精确测量信号频率。 5. 进行邻信道功率比(ACPR)和发射功率的测量。 6. 提供多种输入和输出端口,以适应不同的测试需求。 频谱分析仪的操作通常需要用户具备一定的电子工程知识,对信号的基本概念和频谱分析的技术要求有所了解。 接下来是可编程电子负载,以IT8500系列为例。电子负载是用于测试和评估电源性能的设备,它模拟实际负载的电气特性来测试电源输出的电压和电流。电子负载可以设置为恒流、恒压、恒阻或恒功率工作模式,以测试不同条件下的电源表现。 电子负载的主要功能包括: 1. 模拟各种类型的负载,如电阻性、电感性及电容性负载。 2. 实现负载的动态变化,模拟电流的变化情况。 3. 进行短路测试,检查电源设备在过载条件下的保护功能。 4. 通过控制软件进行远程控制和自动测试。 5. 提供精确的电流和电压测量功能。 6. 通过GPIB、USB或LAN等接口与其他设备进行通信和数据交换。 使用电子负载时,工程师需要了解其操作程序、设置和编程方法,以及如何根据测试目的配置负载参数。 文档的描述部分提到了这些资料的专业性和下载人群的稀少。这可能暗示了这些设备的目标用户是具备一定专业知识的工程师和技术人员,因此文档内容将涵盖较为复杂的操作指南和技术细节。 标签中提到了“中文说明书”,表明这些文件是为中文用户提供方便而制作的,这对于不熟悉英语的技术人员来说是非常重要的。这有助于减少语言障碍,使得中文使用者能够更容易掌握这些专业的测试设备使用方法。 综上所述,惠普8594E频谱分析仪和IT8500系列电子负载都是测试设备领域中不可或缺的工具。掌握它们的使用方法和功能对于电子工程师来说是必需的。这些设备在维护和开发电子系统、电源设备以及无线通信设备中起着至关重要的作用。这份文档对于涉及相关领域的工作技术人员,特别是在中国环境下,提供了非常实用和必需的专业知识。
recommend-type

MATLAB与Python在SAR点目标仿真中的对决:哪种工具更胜一筹?

# 摘要 本文系统地探讨了SAR点目标仿真技术,重点分析了MATLAB和Python在这一领域的应用及其潜在价值。首先概述了SAR仿真概念和需求,然后详细介绍了MATLAB在SAR仿真中的功能、信号处理应用以及仿真实例。接着,文章转向Python,分析了其语言特点、生态系统