大数据技术及应用.docVIP

大数据技术及应用 大家下午好！今天我和大家交流的题目是大数据技术及应用。随着互联网技术的飞速发展，电子商务、云计算、物联网、社交网络等新兴服务的兴起，使得人类社会创造、存储数据的种类和规模正以前所未有的速度增长，人类来到了大数据时代。大数据代表了信息技术发展的必威体育精装版成果，但对与我们这些不从事IT行业的人来说，大数据可以说是既熟悉又陌生，熟悉是因为我们经常会从各种新闻媒体（包括电视、杂志、书籍）中看到、听到,大数据信息铺天盖地；陌生是因为我们不知道大数据是什么意思，对我们的工作学习生活有什么影响。那么为了解开大数据神秘面纱，线面我就和大家共同学习大数据先关知识。 一、大数据产生的时代背景 大数据的兴起源于人类社会数据量的爆发式增长。人类社会发展到21世纪，尤其是最近几年，随着互联网和移动互联网的快速发展，社交网络、有哪些信誉好的足球投注网站引擎、电子商务、视频网站、电子游戏、微博、微信每天都在产生大量的数据。据网上一篇疯传的帖子《互联网的一天》中指出“每天互联网上要发出2940亿封邮件，200万篇博客，1288个新应用可供下载，数据流量可以刻1.68亿张DVD光盘”。数据并非单纯指人们在互联网上发布的信息，工业设备、汽车、电表无数的数码传感器，随时测量和传递着有关位置、运动、震动、温度、湿度乃至空气中化学物质变化，美国互联网数据中心指出，互联网上的数据每年将增长50%，每两年便将翻一番，而目前世界上90%以上的数据是最近几年才产生的。 根据事物的发展规律：量变引发质变。如此巨大的数据量，引发了人们对数据价值的重新认识、挖掘和应用。最早提出“大数据”时代到来全球知名咨询公司麦肯锡2011年5月，麦肯锡发布了名为《大数据：创新、竞争和生产力的下一个前沿》的研究报告，报告中指出大数据将成为企业的核心资产，对大数据的分析将成为竞争的关键，并会引发新一轮生产力的增长与创新，对海量数据的有效利用将成为企业在竞争中取胜的最有利武器。 在讲大数据概念之前，我们先来看一个例子。我们很多人都上过网，也都在网上购过物。比如在亚马逊网站买书，在淘宝买衣服等，在亚马逊网站有这么一个推荐系统，当你在这个网站浏览某一个产品时，比如说买一本书，他通过以往保存的其他人大量的有哪些信誉好的足球投注网站、点击、浏览记录，根据你的浏览记录，分析出你想要什么产品，然后通过推荐系统给你推荐出很多同类产品，从而使你能够快速的找到自己想要的产品。这就是大数据在我们日常生活中应用的一个例子。通过这个例子我们可以更容易的理解大数据的概念。 大数据(big data)，或称巨量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。 整合大数据技术的意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。规模性（volume）指的是数据量巨大。.多样性（variety）指数据类型繁多。.高速性（Velocity）数据处理速度快，在数据量非常庞大的情况下，也能够做到实时处理比如通过手持终端设备关注天气、交通、物流等信息 4.价值性（value）体现出的是大数据运用的真实意义所在。。以视频为例，连续不间断监控过程中，可能有用的数据仅仅有一两秒。 新浪微博在中国有几亿活跃用户，掌握了大量用户日常生活行为信息，这个量十分庞大，但新浪却无法进行利用。我们再看阿里巴巴，是中国最大电商平台，它有产品、有购买信息，但这些购买信息不足以帮助阿里巴巴了解人群特点和喜好。所以，阿里巴巴跟新浪微博合作，就可以掌握大量完整的用户日常生活行为信息，从而对其分类，根据不同人群甚至不同个体的喜好、偏好、兴趣、爱好、习惯、传播习惯、分享路径等等，推荐不同的商品，那么就能实现精准营销，个性化营销。从这个例子我们可以得出这么一个结论：就是数据不再是静止和陈旧的。以前，一旦完成了收集数据的目的后，数据就会被认为没有用处了，成为负担和垃圾。而在大数据时代，我们可以对数据进行重复开发和利用，从而发掘出数据新的潜在价值。数据的真实价值就像漂浮在海洋中的冰山，第一眼只能看到冰山一角，而大部分则隐藏在表面之下。我们必须通过挖掘才能发现数据更多的价值。 3.大数据对个人的影响 未来的大数据除了将更好的解决社会问题、商业营销问题，还有一个可预见的趋势大数据将更好的服务于人本身。比如，建立个人的数据档案，将每个人的日常生活习惯，身体体征，社会网络，知识能力，爱好性情，疾病嗜好，情绪波动.....换言之,就是记录人从出生那一刻起的每一分每一秒，将除了思维外的一切都储存下来，这些数据可以被充分的开发利用：医疗机构将实时的监测用户的身体健康状况;教育机构更有针对性的制定用户喜