大数据的定义特征及其应用分析

随着互联网的迅猛发展,大数据时代已然来临。本文对大数据的定义和特征进行了总结,并分析了其发展对社会产生的影响和在通信行业中的应用。

1 大数据产生背景

随着网络信息化时代的日益普遍,互联网、物联网、云计算的飞速发展以及各种类型的移动智能终端应用普及,互联网的边界和应用范围得到了极大地拓展,互联网(搜索、社交、电商)、移动互联(微博、微信、翼聊)、物联网(传感器、智慧地球)、电信行业(通话、上网、短信)等都在疯狂地产生着数据,促使当前人类社会的数据增长比以往任何一个时期都要快。据有关公司统计,在2006年,个人用户数据量刚刚迈进TB时代,全球一共新产生了约180EB的数据,到了2010年年底,全球数据量已经达到了1.14ZB。预计到2020年,全球电子设备存储的数据量将会达到35ZB,这个数据量是2006年全球电子数据存储量的20多万倍,这其中企业数据正在以55%的速度逐年增长。随着数据量越来越大、数据变化速度越来越快、数据类型越来越复杂、数据特性的逐步演变和发展,基于海量信息数据处理需求等诸多因素,诞生了一个全新的概念——大数据。

2 大数据定义和特征

大数据(Big Data),或称巨量资料,指的是所涉及的数据量规模庞大到无法通过目前主流软件工具,在可以容忍的时间内对其进行抓取、管理、处理的数据集合。它的数据规模和转输速度要求都很高,一般单个数据集在10TB左右,其结构不适合原本的数据库系统。大数据同过去的海量数据有所区别,其基本特征可以用4个V来总结:Volume、Variety、Value和Velocity 即数据规模大、种类繁多、价值密度低、处理速度快。1)数据规模大,数据量从TB级别跃升到PB级别。2、数据类型繁多,现在的数据不仅是文本形式,更多的是视频、音频、图片、地理位置信息多类型的数据。3)价值密度低,价值密度高低与数据总量成反比。以网络视频为例,1小时的视频,可能其中只有一分钟甚至几秒钟的数据有价值。4)处理速度快,数据处理遵循“1秒定律”,可以从各类型数据中快速获得高价值信息,这是大数据区分于传统数据挖掘最显著的特征。

3 大数据的发展及应用

大数据并非新生事物,它在物理学、天文学、生物学、环境生态学、自动控制等科学领域,以及军事、通讯、金融等行业已存在多年。近年来,随着互联网行业的卓越发展,大数据越来越受到人们的关注。大数据技术的战略意义不在于仅仅掌握庞大的数据信息,而在与对这些含有意义的数据进行专业化处理。如果把大数据比作一座蕴含巨大价值的宝藏,那么云计算则是挖掘宝藏的利器。云计算(cloud computing)的核心是业务模式,本质是数据处理技术,是为用户提供无限计算资源的商业服务,为了解决大数据等“大”问题发展而来的技术趋势,没有大数据的需求,云计算的功用也得不到完全发挥,两者结合在一起相得益彰,互相都能发挥最大的优势。2012年初,《纽约时报》一篇专栏中宣告“大数据时代”已经到来。大数据正在对政治、经济、贸易等各个领域都造成影响,越来越多的决策行为将逐渐依赖于对数据的收集和梳理分析而做出,基于经验和直觉的判断将被质疑。而在公共卫生、经济发展和经济预测等领域中,大数据的预见能力也已崭露头角。大数据对于国家和政府也表现出不凡的力量,通过大数据分析技术,使得数据采集、分析和处理的效率大幅提高,有效地降低了政府成本。通过大数据推进政府信息资源进一步开放,政府信息资源的公开透明,有利于建立公众和政府的沟通渠道,政府能够广泛倾听民意,及时化解一些社会矛盾。公众也可以通过该渠道及时了解并参与制定政府决策。大数据与云计算相结合所表现出的巨大能量,将惠及到各行各业,特别是通信行业,在传统话音业务持续走低、各类增值业务逐渐网络化的趋势中,大数据与云计算技术的结合将为通信行业提供加速转型的动力,主要体现在以下几方面:1)提升网络服务质量,增强管道智能化。通信行业拥有着海量的用户使用行为数据,例如呼叫记录、上网使用记录等等,这需要海量的存储空间,大数据拥有海量分布式存储技术,恰好可以满足这方面的存储需求。结合云计算技术,对用户使用数据进行挖掘分析,为通信网络优化提供技术参考,从而提高通信网络服务质量,提升用户感知。2)更加精准地挖掘出客户需求,提升企业自身生存、竞争力。通过使用大数据分析,发现更多有关客户和企业的关系,预测未来的客户行为,从不同角度了解客户,制定合理的营销策略,提升客户忠诚度,加强企业竞争力。3)提供基于“云”的数据分析服务,大数据和云计算相结合,使得数据分析也可以作为一种服务向外界提供。通信运营商可以在数据中心的基础上,搭建大数据分析平台,满足在线广告、电子商务等行业的数据分析需求,并为相关企业提供分析报告。4)提供数据安全保障,大数据的风险之一就是有可能造成客户的隐私被泄露,而通信运营商在网络及数据安全方面具有得天独厚的优势,凭借这一优势,使其可以稳固立足于大数据领域并从中受益。5)升级行业信息化解决方案,通信运营商可以将大数据技术整合到行业信息化方案中,帮助客户通过数据采集、存储,利用高效的数据挖掘技术,分析出有价值的数据结果,更好地进行经营决策,进而极大地提升信息化服务的价值。

未来,数据可能成为最大的交易商品,就如同现在的基础设施一样,有数据的提供方、数据管理部门、监管部门,数据的交叉重复会用将大数据变成一大产业。而这种产业实现盈利的关键,就在于提高对数据的“加工能力”,通过“加工”实现数据的增值,基于数据交易就能产生很好的效益。到那时,得数据者则得天下!

版权所有:北京天地通电信有限责任公司 公司地址: 北京市丰台区杜家坎周公路3号院甲

电话:010-52713196 010-52713168 传真:010-52713196-3131

ICP证:京ICP备11033530号-2 京公网安备11010802012321号