大数据的产生-新闻详情

大数据的产生


发布时间:2017-10-31责任编辑:朱明 浏览:849


人类文明进步的每个阶段都有一张历史标签;19世纪是煤炭石油蒸汽机,20世纪是内燃机、石油和电力。进入21世纪,有信息技术和互联网引发的新一轮科技革命和产业变革更加深刻的诠释着人类进步的征程。其中最具标志的标签非大数据莫属。

概括的说,大数据迅速发展的背后有三个因素。一是随着存储硬件能力的提升,人类保存数据的能力在增强。1965年,因特尔创始人之一戈登摩尔提出了著名的摩尔定律。该定律指出,同一面积芯片上能容纳的晶体管数量,约每隔18-24个月便会增加一倍。以物理存储器为例,半个多世纪以来,其性能不断上升,以此同时,其价格不断下降。1955年,IBM推出一款商用硬盘存储器,一兆字节的存储量需要6000多美元。到2010年,一兆字节的存储量仅仅需要0.005美分。半个多世纪,存储器的价格下降了1亿倍!预计2020年,1太硬盘的价格将下降到3美元,相当于一杯咖啡的价格。一所普通大学的图书馆,其馆藏量大约就一两个太。也就是说,到2020年,只需要花上一杯咖啡的钱,就可以把一个图书馆的全部信息拷进一个小小的硬盘。正是因为存储器的价格在半个世纪之内经历了空前绝后的下降,人类才可能以非常低廉的成本保存海量的数据,这为大数据时代的到来铺平了硬件道路,打下了坚实的物质基础。

二是随着物联网技术与互联网经济的发展,人类生产数据的能力在增强。从内容来源上来看,大数据主要来自以下两个方面。其一机器产生数据。物联网技术诞生后,越来越多的机器设备开始配备传感器,传感器可以感知和运输这些不断产生的数据。移动互联网出现后,移动设备的传感器收集了大量的用户数据,也成为大数据的一个重要来源。其二,人创造的数据,由于社交媒体的横空出世以及互联网经济的发展,人类开始自己在互联网上产生数据,例如发微博、写微信,记录各自的活动和行为。在网上购物,留下支付行为、空间位置、兴趣爱好、信用历史等行为数据。大数据时代,全世界网民都是数据的生产者,每个网民都犹如一个信息系统、一个传感器、不断地制造数据,引发了人类历史迄今为止规模最为庞大的数据爆炸。

三是随着云计算的诞生与发展,人类处理数据的能力大大增强。数据的处理离不开计算,数据与计算的关系就如同一个硬币的两面。没有云计算的诞生,人类就不可能具备处理大数据的能力。云计算是通过网络按需供给的可动态伸缩的廉价计算服务。我们可以这样理解云计算:将提供资源的网络被成为“云”。云中的资源在使用者看来是可以无线扩展的,并可以随时获取,按需使用按使用付费。云计算一般由数量惊人的计算机群构成,谷歌云计算拥有的服务器超过100万台。云计算的特性经常被称为像水电一样使用IT基础设施。这就好比是从古老的单台发动机模式转向的电厂集中供电的模式。它意味着计算能力也可以作为一种商品进行流通,就像煤气水电一样,取用方便,费用低廉。最大的不同在于,它是通过互联网进行传输的。

在云计算时代,普通人只要打开笔记本或者智能手机,就可以享受以往只有少数科学家才能拥有的超大规模的计算,云计算甚至可以让你体验每秒10万亿次的运算能力,如此强大的计算能力可以模拟核爆炸,预测气候变化和市场发展趋势,随着云计算分析能力的越来越强,人们才开始思考从海量数据中提取挖掘其隐含的大价值。大数据这一全新的概念在此过程中才渐渐成型。

引用:宁家骏



诚信工作室  供稿