基于EMS时间序列数据的实时全息无损压缩方法的研究与应.PDF

2012 年 第 6 卷 增刊 2 南方电网技术 2012 南网技术论坛获奖论文* 2012，Vol. 6，Supplement 2 SOUTHERN POWER SYSTEM TECHNOLOGY Articles Awarded in CSG Forum, 2012 文章编号：1674-0629(2012)S2-0001-01 中图分类号：TP274.2 文献标志码：A 基于 EMS 时间序列数据的实时全息无损 压缩方法的研究与应用** 黄缙华，周伊琳 （广东电网公司电力科学研究院，广州 510080） 摘要：针对时间序列数据库存在压缩实时性差、损失数据精度、压缩比低等缺陷，提出了时间序列数据实时全息无损压 缩方法。介绍实时全息无损压缩方法利用差值、异或运算等方式实现时间序列数据的快速、无损的高效压缩过程，并在 实验室测试中通过实时全息无损压缩方法和 Zip、Lzo 压缩算法对 120 MB 的相同时间序列数据文件分别进行正弦数据、 递增数据、功率扰动数据和开关量数据压缩测试。测试结果表明，实时全息无损压缩方法的压缩比最高可达到 100∶1； 可实现时间序列数据的无损、高效、快速压缩，具有强大的容错能力。 关键词：数据采集与监视控制；时间序列数据；实时全息无损压缩方法；Zip 压缩算法；Lzo 压缩算法；应用 Research and Application of Real-time Lossless Compression Technique Based on Time Series Data in EMS HUANG Jinhua, ZHOU Yilin (Electric Power Research Institute of Guangdong Power Grid Corporation, Guangzhou 510080, China) Abstract: Aiming at poorness of real-time, loss of data accuracy and low compression rate of time series database, the paper proposes a real-time lossless compression technique based on time series data and it introduces implementation of fast, lossless and effective compression by means of differentials, difference or calculation; furthermore, 120 MB time series data is tested in terms of sine data, increasing data, power disturbance data and switching value data by real-time lossless compression technique and Zip and Lzo compression algorithm in laboratory test. The test result shows that compression rate of lossless compression technique can be