实时数据库数据压缩算法探讨与改进
研究与应用
化工自动化及仪表,20lO,37(6):72—75
ControlandInst九JmPntsinChemicalInduslry
实时数据库数据压缩算法探讨与改进
刘红霞,牛富丽’
(南京工业大学电子与信息j:程学院,南京211816)
摘要:针对历史数据压缩算法的不足。提出了一种改进的压缩算法。对历史数据的三个组成元素数值、时
间标签和质量码采用不同的策略进行压缩,在数值压缩中引入了矢量数据压缩的概念。通过设立数据缓冲池,定期对数值进行一次压缩。最后对该算法进行了仿真模拟,仿真结果表明,改进算法的压缩率和压缩时间都有了显著的提高。
关键词:
实时数据库;历史数据;压缩算法;矢量数据压缩
中图分类号:7rP392文献标识码:A
l
文章编号:lOoo-3932(20lO)06伽72J弭
据,可将其存放在外存数据库中;对于各种经常变化的实时数据,为保证最快的响应速度,将它们放置在内存中。
报警模块
客n端!示模块
涵f古
模块
引言
实时数据库(RrI'DB)作为组态软件的核心,保存着系统运行时产生的各种数据和信息。这砦信息对管理层及时了解生产现场的实时情况、实现卜层信息系统与底层控制系统的集成都具有重要意义。随着RTDB应用领域的不断扩展,对它的研究也越来越深入,其中如何存储与管理实时数据库中大量历史数据的问题也受到了更多的关注j
工业实时数据库广泛采川数据压缩技术。数据压缩技术面临两个关键问题:首先,压缩算法必须能够提供较高的数据压缩率以支持实时数据库海量存储的特点;其次,RTDB的实时记求和查询功能要求压缩算法在压缩和解压缩两个过程都必须具有较好的速度性能,尤其在解压过程中。这两个问题的解是相互矛盾的,我们研究压缩算法,就是要找到两者的平衡点,使其达到最优性能。
22.1
实时数獬库
Jj史数{
库模块
输入,输
出模块
图lRTDB功能结构图
2.3历史数据的特点
历史数据记录了工业生产的实际过程,对工艺改进、趋势分析、成本统计等方面都具有苇要的价值。大体巾i言,历史数据可以分为三大类:时间标
签、质量码和数值。时间标签表示采集数据的时间,
RTDB及历史数据
RTDB介绍
质量码表示位号的当前状态,数值则表示位号的当前值一o。历史数据具有如下特点:①测点数量多。工业控制领域实时数据采集过程中会产生大量的数据,而且测点的变化周期非常短,通常在1s之内;②数据存储培大。实时数据库的核心就是对大量的实时信息进行处理,成年累月的数据将占据大譬的硬盘窄问;③时效性强。工控系统所采集的每个测点的值都与时间相关,系统采集的生产数据随时都呵能发生变化。
3几种典型的数据压缩算法
在工业控制领域,为r减少对海量历史数据存储管理的成本,需要采用数据压缩算法对其进行压
RTDB是事务和数据都具有定时特性或定时限制的数据库系统,系统的正确性不仅依赖于逻辑结果,还依赖于逻辑结果产生的时间。RTDB在组态软件的应用系统中处于中枢环节,主要承担系统所有实时数据的存储和管理,为相关的模块提供快速、准确的实时信息¨。。RTDB在组态软件中的功能结构如图1所示。2.2数据存储方式
由于RTDB存储的数据量极为庞大,所以数据的存储管理和压缩硅得尤为重要。可以采用多种存储方式来构建组态软件的实时数据库。对于需要长期保存的非共享数据可以采用文件管理系统直接存取;对于数据量大而工控软件无特殊要求的共享数
收稿日期:2们O旬3讲(修改稿)
万方数据
为了在保持高实时性等特点的同时,尽可能地提高数据库的容量,数据压缩技术被引入实时数据库。本文设计一种针对实时数据库历史数据的无损压缩算法,该算法改进自LZ算法...
实时数据库有损压缩算法的研究_专业资料。在实时数据库中,测点数量多,数据量庞大,数据变化慢,数据冗余多,且实时数据库对实时性的要求很高,因此需要高效的压缩...
2011 基于实时数据库的有损线性压缩算法研究与改进王 君( 金陵科技学院 南京 211169) ——“双旋转门” 摘要: 首先对常见的实时数据库数据有损线性压缩算法原理...
数据压缩技术在实时数据库中的应用研究_专业资料。流程工业中的实时数据库提供...通用数据压缩算法的基础上,针对实时数据库中的数据形态设计了一种无损数据压缩...
论文在分析多种通用数据压缩算法的基础上, 针对实时数据库中的数据形态 设计了一... 内乙. 实时数据库中的历史数据记录了工业生产的实际 过程, 对工艺改进、 ...
6页 免费 实时数据库数据压缩算法探... 6页 5财富值喜欢此文档的还喜欢 ...(94 )男,北孝感人,士生,要研究计 周17一, 湖硕主 算机视觉. 维普资讯 ...
中,工业实时数据也有一定的变化规律,可以针对这些规律,研究特定的数据压缩算法。...总而言之,实时数据库的压缩算法真的不难理解,只是实时数据库重多技术中的一种...
本文从介绍实时数据库中历史数据 的特点入手 ,在分析多种类型数据压缩算法的基础...2 历史数据的特点 过程 ,对工艺改进 、 趋势分析 、 成本统计等各方面都具 ...
大型实时历史数据库的系统... 5页 免费 实时数据库数据压缩算法探... 6页... 成熟压 缩算 法的时间复杂度也很难在短时间通 过改进得以较大 收稿 日期 :...
热门文档