1、大数据的真实价值冰山效应 互联网时代,尤其是社交网络、电子商务与移动通信把人类社会带入了一个以“PB”(1024TB)为单位的结构与非结构数据信息的新时代。在云计算出现之前,传统的计算机是无法处理如此量大、并且不规则的“非结构数据”的。以云计算为基础的信息存储、分享和挖掘手段,可以便宜、有效地将这些大量、高速、多变化的终端数据存储下来,并随时进行分析与计算。大数据与云计算是一个问题的两面:一个是问题,一个是解决问题的方法。通过云计算对大数据进行分析、预测,会使得决策更为精准,释放出更多数据的隐藏价值。一旦“不再追求精确度,不再追求因果关系,而是承认混杂性,探索相关关系”,“思维转变过来,数据就
2、能被巧妙地用来激发新产品和新型服务”。数据正成为巨大的经济资产,成为新世纪的矿产与石油,将带来全新的创业方向、商业模式和投资机会庞大的人群和应用市场。复杂性高、充满变化,使得中国成为世界上最复杂的大数据国家。解决这种由大规模数据引发的问题,探索以大数据为基础的解决方案,是中国产业升级、效率提高的重要手段。数据挖掘不仅能够成为公司竞争力的来源,也将成为国家竞争力的一部分。联系到我国现代化所面临的种种问题以及教育、交通、医疗保健等各方面挑战,通过大数据这种创新方式来解决问题,创建新的产业群,实现“中国制造到中国创造”的改变,意义就更大 在人类历史长河中,即使是在现代社会日新月异的发展中,人们还主要
3、是依赖抽样数据、局部数据和片面数据,甚至在无法获得实证数据的时候纯粹依赖经验、理论、假设和价值观去发现未知领域的规律。因此,人们对世界的认识往往是表面的、肤浅的、简单的、扭曲的或者是无知的。维克托指出,大数据时代的来临使人类第一次有机会和条件,在非常多的领域和非常深入的层次获得和使用全面数据、完整数据和系统数据,深入探索现实世界的规律,获取过去不可能获取的知识,得到过去无法企及的商机。大大数据数据(Big data),或称巨量数据巨量数据、海量数据海量数据、大资大资料料,指的是所涉及的数据量规模巨大到无法通过人工,在合理时间内达到截取、管理、处理、并整理成为人类所能解读的信息。-维基百科 大数
4、据(big data),或称巨量资料,指的是所涉及的资料量规模巨大到无法透过目前主流软件工具,在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。-百度百科体量(Volume)多样性(Variety)速度(Velocity)大数据的特点的四个层面Volume(大量)数据体量巨大。从TB级别,跃升到PB级别;Velocity(高速)数据类型繁多。前文提到的网络日志、视频、图片、地理位置信息等等。Variety(多样)(价值密度低,商业价值高。以视频为例,连续不间断监控过程中,可能有用的数据仅仅有一两秒。Value(价值)处理速度快(动态实时)。1秒定律。最后这一点也是和
5、传统的数据挖掘技术有着本质的不同。整合后的数据像钻石具有多个价值角度,找到合适的卖家就是赚钱中文单位中文单位中文简称中文简称英文单位英文单位英文简称英文简称进率(进率(Byte=1)位位比特bitb0.125字节字节字节ByteB1千字节千字节千字节KiloByteKB210兆字节兆字节兆MegaByteMB220吉字节吉字节吉GigaByteGB230太字节太字节太TrillionByteTB240拍字节拍字节拍PetaBytePB250艾字节艾字节艾ExaByteEB260泽字节泽字节泽ZettaByteZB270尧字节尧字节尧YottaByteYB280千亿亿亿字节千亿亿亿字节千亿亿亿字
6、节BrontByteBB290 华为“4V”打通大数据价值通道Big Data大数据云端上的大数据经济大数据的应用智能化“怀孕事件”英剧黑镜“复活男友”“网盘”战场“乔布斯医疗”“Google、百度”大数据具有海量、多源、复杂的信息属性和高端、前沿的技术特征,是继云计算、物联网之后又一次颠覆性的技术革命。大数据使人的思维方式、行为模式、管理理念发生全方位变革,在公共管理领域蕴含巨大的应用潜力和创新空间。在“全面深化改革,推进国家治理体系和治理能力现代化”的时代要求与背景下,充分重视大数据在国家治理中的重要价值,推动数据治理技术、模式的创新,实现数据治国,具有重要的理论和现实意义。1.提升科学决
7、策水平。大数据,作为一种新兴数据处理技术,能够更为有效地集成国家政治、经济、文化、社会、生态等各领域方方面面的信息资源,为国家治理提供重要数据基础和决策支撑。如医疗、“三公”经费、保障性住房、食品药品安全等改革焦点问题,都可借助大数据来辅助决策。通过对政府海量数据的交换、整合和分析,还可以挖掘新知识,带来新发现,创造新价值,增强国家战略制定的前瞻性和先导性。更为重要的是,大数据的广泛应用,利于形成用数据分析、用数据决策、用数据创新的治理思维和文化,对于实现“数据治国”具有深远的影响和价值。2.增强国家治理能力。大数据在创新社会管理模式,增强国家治理能力方面具有显著优势。大数据与公共危机管理的有
8、效对接,能够强有力地推动公共安全信息网络完善,促进跨部门、跨区域管理信息协同共享,提升公共危机事件的源头治理、动态监控、应急处置和事前预警能力;大数据与互联网、微信、微博等新媒体的深度融合,可以突破时间和空间的限制,从更深层次、更广领域促进政府与民众之间的互动,形成政府主导、公众参与、多元协同治理的新格局;同时,大数据是维护国家数据主权、增强信息和网络安全的新引擎,让世界震惊的美国“棱镜门”事件,敲响了世界各国维护信息安全的警钟,也再次证明了大数据在维护国家数据主权中的重要价值。3.提高政府服务效能。大数据与物联网、云计算等技术的联姻,能够加快智慧城市的建设步伐,推进智能交通、智能物流、智能社
9、区、智能医疗、智能教育的快速发展;我国的工业化、城镇化、信息化、生态化建设也将因大数据的革命而加速转型升级。大数据所集成的数据挖掘、遗传算法、机器学习等前沿技术,具有智能判断分析、智能纠错优势,应用于财政、金融、税收、政府转移支付等领域重大项目的跟踪审计,可实现对项目实施过程的实时动态监控与预警,减少差错和舞弊行为,对建设阳光、高效、服务型政府具有积极意义。建设建设大数据强国的战略大数据强国的战略路径路径:1.将大数据上升为国家战略。2.建立健全大数据公共服务体系。3.完善大数据立法。我国是数据大国,随着国家金关、金税、金盾、金审等一大批电子政务“金字工程”的深入实施,积累了海量的数据资源,构成了新时期国家治理领域改革和创新潜在的巨大“数据红利”。但我国还不是数据强国,数据资源共享协同程度低、技术支撑体系不完善、立法滞后等问题突出,当务之急还需做好以下方面工作。