统计与管理 二0一三 六
大数据与云计算
李永宏
近年来,大数据和云计算已经成为社会各界关注的热点话题。秉承“按需服务”理念的“云计算(Cloud computing)”正高速发展,“数据即资源”的“大数据(bigdate)”时代已经来临。大数据现象及技术的发展将影响统计数据的采集、处理、分析、发布等各环节,政府统计工作的流程和方式也将发生变化。谁能驾驭大数据,谁就将赢得主动。
一、大数据──堪比信息高速公路
麦肯锡全球研究院 (MGI)于2011年6月发布了题为《大数据:下一个创新、竞争和生产力的前沿》的研究报告,最早提出“大数据时代已经到来”,并从经济角度引发全球对大数据的关注。2012年3月,美国奥巴马政府宣布投资2亿美元启动“大数据研究和发展计划”,标志着美国把大数据提高到国家战略层面,将“大数据研究”上升为国家意志,对未来的科技与经济发展必将带来深远影响。这是继1993年美国宣布“信息高速公路”计划后的又一次重大科技发展部署。数据就是资源,大数据被美国政府认为是“未来的新石油”,一个国家拥有数据的规模和运用数据的能力将成为综合国力的重要组成部分,对数据的占有和控制也将成为国家间和企业间新的争夺焦点。
(一)大数据的概念
大数据是一种大规模数据的管理和利用的商业模式和技术平台的泛指,它与传统的海量数据不同的是,它除了数据规模呈现几何级数增长的特征之外,还包括所有数据类型的采集、分类、处理、分析和展现等多个方面,从而最终实现从大数据挖掘潜在巨大价值的目的。到目前为止还没有统一的定义。
IDC对“大数据”的定义:为了更经济地从高频率获取的、大容量的、不同结构和类型的数据中获取价值,而设计的新一代架构和技术。此定义也可以概括为大数据的四大特征即四个V,海量的数据规模(volume)、快速的数据流转和动态的数据体系(velocity)、多样的数据类型(variety)和巨大的数据价值(value)。包括基础架构、数据管理、广告、专项推介等营销方式进行全方位推广,千方百计、不遗余力地扩大福建旅游的知名度和美誉度,拓展福建旅游的市场影响力。比如通过每年举办“‘欢乐海峡爱在福建’海西旅游年”活动,让广大群众和游客进一步了解海峡西岸经济区建设的辉煌成就,共享福建改革开放丰硕成果,亲身体验“海峡旅游”的独特魅力。
(七)以地区为版块,挖掘文化看点和内涵,提高旅游的文化附加值
旅游景点越是有地区文化特色的,越具有魅力,越容
分析挖掘和决策支持四个层面。
2013年3月IBM重新定义和完善大数据“4V理论”,即规模性(Volume)、多样性(Variety)、高速性(Velocity)和真实性(Veracity),与IDC的定义既有相同部分也有不同的含义。
NetApp (全球领先的网络管理和数据存储服务商)大中华区总经理陈文所理解的大数据包括A、B、C三个要素:大分析(Analytic),高带宽(Bandwidth)和大内容(Content)。
(二)大数据的特点
1、数据体量大。普遍认为PB(1024KB=1MB、1024MB=1GB、1024GB=1TB、1024TB=1PB、1024PB=1EB、1024EB=1ZB、1024ZB=1YB)(对应中文名称为兆、吉、太、拍、艾、泽、尧)级的数据为大数据的起点。到目前为止,人类生产的所有印刷材料的数据量是200PB,而历史上全人类说过的所有的话的数据量大约是5EB。
2、数据类型繁多。既可以是传统的有因果关系的结构化数据如关系数据库数据,但更多的是诸如网络日志、视频、图片、地理位置信息等等的半结构化和非结构化数据。
3、价值密度低。大数据蕴藏的价值虽然巨大,价值密度却很低,往往需要对海量的数据进行挖掘分析才能得到真正有用的信息,从而产生价值。以视频为例,连续不间断监控过程中,可能有用的数据仅有一两秒。
4、处理速度快。大数据时代更强调实时分析,而不是批量分析,奉行1秒定律。即一般要在秒级时间范围内给出分析结果,时间太长就失去价值。
(三)美国大数据研究和发展计划
该计划涉及美国国家科学基金会、美国国家卫生研究院、美国能源部、美国国防部、美国国防部高级研究计划局、美国地质勘探局6个联邦政府部门,首轮资助包括以下项目:
1、国家科学基金会(NSF)与国家卫生研究院(NIH):推进大数据科学与工程的核心技术和工艺
两机构联合招标的“促进大数据科学与工程的核心技术”项目将促进对大规模数据集进行管理、分析、可视化并易走向全国甚至于世界。福建省可以按照闽南文化、客家文化、闽东文化等不同地区的文化内容和特点,以此为支点,撬动地方文化,打造迥异的不同区域旅游文化品牌,并着力于在各地自然山水中的人文和文化呈现。让福建的旅游景区成为风景迷人、文化感人,服务留人的人们心灵向住之地,成为人们的精神和文化家园,使福建省旅游业不断发展壮大,使福建逐渐走向旅游强省。
(作者单位:福建省统计局)
大数据与云计算_李永宏 暂无评价 3页 1下载券 云计算是什么? 26页 免费云...云计算的发展和前景应用IT行业发展至今,已经经历了翻天覆地的变化;从最初的笨拙...
大数据与云计算_李永宏 暂无评价 3页 1下载券 云计算是什么? 26页 免费云...云计算的发展和前景应用IT行业发展至今,已经经历了翻天覆地的变化;从最初的笨拙...
热门文档