大数据,我们手边的金矿.pdfVIP

苏盐科技 2014年 6月 JiangsuSaltScienceTechnology 第 2期 43 大数据，我们手边的金矿 陈彩叶 (江苏省苏盐连锁有限公司无锡分公司，江苏 无锡 214005) 【摘 要 】本文介绍了大数据的概念、作用，并结合企业实际分析了大数据分析技术使用的可行性。 【关键词 】数据化 相关关系分析 预测 为什么我们现在要不惜成本，大力推进 “直配直送， 有特色的新书，并放在亚马逊的网页上。这个版块非常 直达终端”工作?为什么亚马逊能够 “提前发货” (即 红火，曾经成为公司竞争优势的主要来源，有些媒体将 能够在客户购买付款之前就将货物送到距客户最近的仓 销售量猛增的原因归功于这些很具有影响力的书评家。 储中心)?这其实都与大数据有关。 转折出现在亚马逊推 出的自动推荐系统，一个根 随着互联网技术和存储技术的发展 ，尤其是社交网 据亚马逊公司总裁贝索斯的想法 ，能够根据客户个人以 络、电子商务和移动通信的迅猛扩张，人类 已经开始进 前的购物爱好为其推荐书本。通过客户留在亚马逊服务 入以 “PB”为单位的信息新时代。大数据正在不知不觉 器中的数据记录，比如客户已经购买了哪些书籍，哪些 地改变着我们的生活方式和思维方式。 书籍只是浏览并没有购买，浏览的时间是多久等，找到 2009年，美国出现了一种结合了几种病毒的新流感 产品之间的关联性，最终对客户进行推荐。简单地说就 病毒，并迅速传播，而当时还没有应对这种病毒的疫苗。 是对客户的购买行为进行预测。有句话很好的描述了这 公共卫生专家想要减慢它的传播速度 ，就必须要知道它 个推荐系统： “如果系统运作 良好，亚马逊应该只推荐 出现在哪里，但问题是疾控中心的消息来源只有医院报 你购买一本书，而这一本书恰恰就是你将要买的下一本 告。而疾控中心收到医院的报告往往因为病人的拖延、 书”。这个系统应用了著名的 “item—to—item”协同过滤 信息传递不及时、信息汇总慢等原因最少延迟2周的时 技术 ，推荐的速度和效率非常高，因为系统使用的是亚 间，这一段时间又将感染一大批人。然而在流感爆发前 马逊记录的所有数据 ，是大数据，并能够根据客户浏览 几周，谷歌公司的工程师在杂志上发表了一篇预测此流 情况实时的进行分析。 感的论文，并且能够具体到特定的地区和州。那么他怎 最终结果显而易见，人工推荐的销售业绩和计算机 么会能预测这个病毒呢?原来是谷歌保存了用户的有哪些信誉好的足球投注网站 推荐产生的销售业绩相差甚远，当书评家和编辑看到了 记录，谷歌把 5000万条最频繁检索的词条和美国疾控 销售额对比后最终放弃了人工推荐。虽然计算机不知道 中心的数据进行比较，发现通过特定检索词条的组合， 为什么客户会喜欢这个作者或者那个作者的书，但是这 从特定数据模型得出的结果与官方发布的数据相关性高 些都不重要，重要的是计算机能够极快的做出预测，而 达97％，而谷歌做出这个预测是瞬间的。与传统的方式 且论成本 ，增加单位销售额的成本要 比人工便宜得多。 相 比，这绝对是革命式的改变。 1．2 大数据是建立在庞大后台数据上的相关关系分析 沃尔玛是公认的最大零售商，有几千万的员工，销 1 大数据的概念及作用 售额比某些国家的国内生产总值还要多。从2O世纪开 1．1 大数据的核心是预测 始，沃尔玛就通过零售链记录每一个产品，通过多年的 亚马逊的推荐能力大家都是有 目共睹的，但是鲜有 积累，其已经拥有一个庞大的历史交易记录数据库。数 人知道，起初这些工作都是 由人工完成的。当时，亚马 据不仅记录了顾客的购物清单、消费额，而且还包括了 逊聘请了一些书评家和编辑，专门为新书写书评，挑选 购物当天的时间和天气。沃尔玛公司注意到，每当飓风