实时数据库领域中有关数据压缩的认识误区
实时数据库领域中有关数据压缩的认识误区
2007年10月28日晚上,我挖了一个坑,那篇“关于实时数据库接口标准的讨论”,只写了第一部分,到现在还没有填上。工作忙是一个原因,我只能利用晚上22:00至23:00这一段时间写一些东西,另外一个更重要的原因是:我还在为该文章备课呢,请大家再等一段时间吧。
今天咱另换一个话题,谈谈在实时数据库领域中,有关数据压缩的一些认识误区。
我曾答应liyaoer123(实时数据库阵地的博主)同学,与他讨论一下数据压缩技术。另外,我经常收到一些朋友的来信,他们对实时数据库及数据压缩的认识有一些误区,今天,我便收到三封讨论实时数据库的邮件。
数据压缩是实时数据库中一个很重要的概念和技术,只要接触过实时数据库,都应该听说过数据压缩。同时,很多人对实时数据库中数据压缩存在误解,我们就一条一条地解说吧。
1.实时数据库中的数据压缩技术很高深很神秘。
现在的数据压缩理论和技术已经很成熟,大家可以看看我转摘的博文《数据压缩技术简史》,该文章浅显易懂,是一篇很好的关于数据压缩的科普文章。
在不同的应用领域,又可以针对不同的数据应用特征,引用不同的数据压缩技术,比如,图形处理领域的JEPG压缩技术,声音处理中的MP3压缩技术等。在流程工业行业中,工业实时数据也有一定的变化规律,可以针对这些规律,研究特定的数据压缩算法。
下面是工业实时数据的一些特征:
工业实时数据的数据变化具有一定波形规律;
工业实时数据中只有一小部分测点的值经常发生改变;
工业实时数据中很多测点的数值都具有慢变化的特征;
数值变化与时间变化具有共同变化特性;
用户在一定范围内,能够允许数据的精度损失;
在工业应用领域中,常用的压缩算法分为三类:
无损压缩;
有损压缩;
二级压缩;
其中,无损压缩一般以通用压缩理论为基础,采取哈佛曼算法等经典的压缩算法;而有损压缩而更多地考虑了工业实时数据的特征,而采取的一些特殊舍点算法;二级压缩技术,则是同时利用了这两种数据压缩技术。
实时数据库的无损压缩以通用压缩理论为基础,随便找一本大学教材就能看懂,在此不再多说。
目前比较著名的有损压缩算法,有PI中使用的旋转门压缩算法,IH中使用的死区压缩算法,以及一些变通压缩算法(如在旋转门算法基础上改用二次均方差作为偏差比较,以提高数据还原精度),这些算法原理都比较简单。网上有很多相关的文章,我在前几篇文章中提到的变化压缩算法,是死区压缩算法的简化变种,而liyaoer123同
实时数据库在工业控制领域得到广泛应用,其保存的历史数据占用大量的存储空间。为了在保持高实时性等特点的同时,尽可能地提高数据库的容量,数据压缩技术被引入实时数据...
随着RTDB应用领域的不断扩展,对它的研究也越 来越深入,其中如何存储与管理实时数据库中大量 历史数据的问题也受到了更多的关注j 工业实时数据库广泛采川数据压缩...
实时数据库领域中有关数据... 4页 5财富值 基于人工免疫算法的数据压... 13...数据压缩技术在实时数据库中的应用研究( 浙江大学先进控制研究所 杭州 302)107 ...
实时数据库原理及其压缩技术分析 实时数据库相关论文实时数据库相关论文隐藏>> N...尤其是在过程控制应用领域的潜在市场十分 巨大。 由于 R 分享到: X 分享到...
采集点数通常有几千到十几万...实时数据库系统中数据压缩技术的研究 关 中辉 贺玉凯 杨 徽 ,,(- 宁工 程...
实时数据库数据压缩算法探讨与改进_专业资料。针对历史数据压缩算法的不足,提出了一种改进的压缩算法。对历史数据的三个组成元素数值、时间标签和质量码采用不同的策...
数据压缩技术在实时数据库中的应用研究_专业资料。流程工业中的实时数据库提供历史数据存储功能,用来保存现场的过程数据.由于数据量大、实时性要求高,需要对过程数据进...
实时数据库有损压缩算法的研究_专业资料。在实时数据库中,测点数量多,数据量庞大,数据变化慢,数据冗余多,且实时数据库对实时性的要求很高,因此需要高效的压缩算法...
(SIS),在这类应 用领域中,数据库应用有如下特点: 测点数量多 一个新建 300...的压缩算法介绍 实时数据库的压缩算法介绍 实时数据库系统的技术核心在于数据压缩...
关系型数据库中的压缩技术_专业资料。计算机存储的容量限制仍然日益成为IT系统的瓶颈。其主要原因有两个:第一,信息革命导致人们产生了比过去多得多的数据。巨大的数据...
热门文档