电子设计工程
Electronic Design Engineering
第 26卷
Vol.26
第 20期
No.20
2018年 10月
Oct. 2018
收稿日期:2018-03-03 稿件编号:201803023
作者简介:骆金维(1980—),男,湖北黄冈人,讲师。研究方向:云计算、大数据、网络技术。
数据压缩技术可以提高数据运行性能,随着数
据压缩技术与其他信息技术不断发展,可对时序数
据进行无损压缩,并已有并行压缩技术,实现时序数
据的高效压缩
[1]
。时序数据压缩可有效将原有时序
数据转换为多种表现形式,用尽可能少的数据对时
序数据信号进行表示
[2]
。相关专家学者对时序数据
压缩技术展开深入研究,并取得一定有效成果。已
有通过谐波滤波器对时序数据进行压缩的方法。先
将原始时序数据信号内稳态分量和暂态分量分离,
利用傅里叶变换法对谐波分量参数进行估计,通过
参数量化实现压缩。该方法压缩速度快,但稳定性
较差
[3-5]
。传统时序数据并行压缩技术在对大规模时
序数据进行压缩的过程中,存在大量原始数据和经
过应用程序处理后产生的数据,这些数据经过积累
占用大量存储空间,导致压缩速度慢
[6]
。为解决以上
问题,提出混合熵编码时序数据并行压缩速率改进
技术研究。实验证明,该技术将时序数据小波分解,有
效减小数据占用的存储空间,具有较高的压缩速率。
1 研究背景与目的
上个世纪 70 年代,由于计算机中的各项硬件设
备限制,众人在设计及实现数据库时就考虑了怎样
通过有限硬盘空间对时序数据进行高效存储,这是
数据压缩的初始阶段。在上个世纪的 80 年代至 90
时序数据并行压缩速率改进技术研究
骆金维,曾德生,郭 雅,黄富平
(广东创新科技职业学院 信息工程学院,广东 东莞 523960)
摘要:为了改善传统压缩技术因时序数据占用存储空间过大,导致压缩速率低的问题,提出时序数
据并行压缩速率改进技术研究。依据数据压缩背景,设置数据阈值,采用提升法对时序数据阈值
进行选择,保留阈值最大的时序数据变换系数,对噪声干扰进行有效抑制,减小数据存储空间的占
用;引入混合熵编码,将字典编码与零行程编码有机结合,实现时序数据的并行高速压缩。实验结
果表明,该技术提高了时序数据压缩时的信噪比和压缩比,有效抑制噪声干扰,能够高效完成数据
压缩。
关键词:时序数据;并行压缩;压缩速率;混合熵编码
中图分类号:TP311 文献标识码:A 文章编号:1674-6236(2018)20-0098-04
Research on improvement of parallel compression rate of time series data
LUO Jin⁃wei,ZENG De⁃sheng,GUO Ya,HUANG Fu⁃ping
(School of Information Engineering,Guangdong Innovative Technical College,Dongguan 523960,China)
Abstract: In order to improve the traditional compression technology due to the large storage space and
the low compression rate caused by the time series data,the technology of parallel data compression rate
improvement is proposed. According to the data compression background data set threshold,using the
lifting method for selection of time series data retention time series data transform coefficient threshold,
the maximum threshold,effectively eliminate the noise and reduce the occupied storage space of data;
the introduction of hybrid entropy encoding,the dictionary coding and zero stroke encoding organically,
realize parallel sequential data compression. The experimental results show that this technique improves
the signal to noise ratio and compression ratio of time series data compression,effectively restrains noise
interference,and can efficiently complete data compression.
Key words: Time series data;parallel compression;compression rate;mixed entropy coding
-- 98