大数据技术的形成与本质.docVIP

大数据技术的形成与本质 　　【摘 要】现代技术的迅速发展促进了大数据时代的到来，大数据技术的发展极大地变革了人们的生产、生活和思维方式，给我们带来前所未有的机遇和挑战。大数据的产生是随着现代技术的发展以及互联网的发展而形成的。大数据技术的本质就是从海量的数据中发现隐藏在其中的规律并对事物发展的可能性做出预测。 　　【关键词】数据 大数据 现代技术 　　【Abstract】The development of big data technology has greatly revolutionized the way people production， life and thinking， has brought us unprecedented opportunities and challenges. Big data is generated with the development of modern technology and Internet Access formed. The nature of Big Data technology is found hidden in one of the laws from the mass of data in the possibility of the development of things and make predictions. 　　【Keywords】Data，Big data，Modern technology 　　随着云计算、物联网以及社交网络的发展，人类所储存的数据越来越多，已经发生了质的变化。在全球范围内，个人电脑、平板电脑、智能手机等常见的计算终端以及更广阔的、泛在互连的智能设备都连接到网络之中，基于社会化网络的平台和应用，让数以百亿计的机器、企业、个人随时随地都会获取和产生新的数据，也使数据的积累呈爆发式增长，这些数据的保存积累形成“大数据”。大数据时代已经到来。大数据涉及到几乎所有的领域，并对政治、经济、教育、医疗以及整个社会带来巨大的变革。大数据技术是如何形成的？它的本质是什么？我们应该以怎样理性的态度去看待它？对这些问题的思考将有助于我们更加深刻的认识大数据对于人类生产、生活等各个方面的影响。 　　1大数据的产生 　　美国知名的咨询公司麦肯锡是研究大数据的先驱，它将大数据定义为“大小超出常规的数据库工具获取、存储、管理和分析能力的数据集。”[1]维基百科中“大数据指的是所涉及的资料量规模巨大到无法通过目前主流软件工具，在合理时间内达到撷取、管理、处理并整理成为帮助企业经营决策目的的资讯。”[2]国际数据公司（IDC）从四个特征来定义大数据：海量的数据规模（Volume）、快速的数据流转和动态的数据体系（Velocity）、多样的数据类型（Variety）、巨大的数据价值（Value）[3]。这些定义无一例外的突出了一个“大”字，旨在说明数据“大”是大数据的一个重要特征。然而，大数据的“大”不是凭空出来的，而是一个发展的过程。它是随着互联网的发展阶段发展而增加的。 　　1.1数据库发展阶段 　　数据库的出现使得数据管理的复杂度大大降低，各种各样的数据库在不同的领域发挥着它们的作用，超市的销售记录、银行的交易记录、医院病人的医疗记录等等，这些数据库都大大的提高了行业的生产效率。人类社会数据量第一次大的飞跃就是数据库的广泛使用。这个阶段最主要的特点就是数据都是单向的，数据往往是跟随着我们的经营活动产生并记录在数据库中。这时候的数据的产生是被动的。 　　1.2双向交互阶段 　　这一阶段就是我们所说的Web2.0时代。在这一时期，数据呈现爆发式的增长。每个人不仅是信息的接受者，还是信息的产生者。这一时期主要是以微博、博客为代表的新型社交网络的发展以及以智能手机、平板电脑为代表的便携式移动设备的使用和发展，使得人们产生数据的意愿更加强烈和途径更加便捷。这一阶段的主要特征就是数据时双向互动的。数据的产生是主动的。 　　1.3自动产生阶段 　　这一阶段是人类社会数据量的第三次飞跃，最终导致了大数据的产生。此次飞跃的根本原因在于传感器的广泛使用。随着科技的发展，人们已经有能力制造相当微小的带有处理功能的传感器，并开始将这些设备广泛地布置于社会的各个角落，通过这些设备来对监控整个社会的运转。这些设备会随时随地源源不断地产生新数据，这种数据的产生是自动的。 　　总而言之，大数据的产生不是一蹴而就的，而是经过了被动、主动、自动三个阶段。这三个阶段的数据共同构成了大数据的数据来源。然而，大数据的产生不仅仅只有“大”就称之为大数据，而是人们可以通过对这些海量数据的分析，找出关联，发现规律，检验假设，提高决策的准确性。这才是我们