大数据应用的敏捷商道.docx

??

?

??

“大数据”应用的敏捷商道

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

文上海国资记者孙玉敏

越来越多的国企正致力于拥抱“大数据”时代，寻找“大数据”应用的敏捷商道。

7月26日，为了引导企业前瞻布局，推进“大数据”等新技术在企业的应用，上海市国资委联合市科委、上海国有资本运营研究院、上海国资杂志社等单位举办了“大数据时代的企业应用”沙龙活动。

在活动中，上海市科委对《上海推进大数据研究与发展三年行动计划(2013-2015年)》进行了政策解读；中粮集团电子商务平台“我买网”负责人与大家分享了基于数据的全产业链整合及数据挖掘的案例。来自IBM、SAP、九恒星等专业机构的专家围绕智慧企业的“大数据”应用、数据化分析与系统规划、企业财资管理与创新等话题，发表了各自的观点。

本期《商学院摘要刊登部分发言，以飨读者。

IBM全球业务咨询服务部副合伙人谢国忠：大数据淘金

大数据释义

先来看几个大数据的具体落地应用。一个是零售行业的沃尔玛，将看似不相干的“天气数据”加入其“物流配送预测模型”；这样一来，它就能在天气模式改变之前、在顾客涌入商店之前，保证所有商品及时送达商店。一个是美国电力行业的Oncor公司，传统的电表每月／每年读取一次数据，而这家公司的智能电表每15分钟读取一次数据，且能双向通信；通过对读取的大数据分析，可以帮助用户更好地管理和使用电能。再一个是纽约市政府，根据实时的摄像数据，通过模式匹配，第一时间就能识别被盗的车辆。

什么是大数据呢？数据一般包括三类：结构化数据（传统的关系型数据库中的数据，可用二维表结构来表示）、半结构化数据（有一定的数据结构，但与内容混杂在一起，比如：电子邮件、电子表格、网络上的新闻等）、非结构化数据（各种文档、图片、视频、音频、文本、传感数据等。有报告称，超过85%的数据属于此类）。大数据则是包含结构化数据、半结构化数据和非结构化数据的数据集合。

随着社交化网络的兴起，企业所面临的内外部环境在不断改变，影响企业决策和行为的数据也在跟着改变，企业面临“大交易数据”和“大交互数据”的双重数据环境。大交易数据主要是传统的企业、消费者、供应链数据；大交互数据主要是基于社交网络、互联网、物联网、移动终端的数据。大数据分析的目的，是要实现这两类数据的集成与融合，增强企业的洞察力。对于“大交易数据”的分析，企业过去已经做了很多；但对于“大交互数据”的分析，可能才刚刚起步或还没有开始。“大交易数据”和“大交互数据”的融合，往往可以帮助企业找到潜在的商机，发现新的业务亮点。

目前大数据的技术手段和工具的不断增强，使很多大数据的分析已成为可能。比如音频处理技术，现在已有技术手段将音频直接转换成文本，并从文本中截取关健词来进行分析；图像识别技术，已可以由系统自动按照花、鸟、虫、鱼对照片进行分类；先进的人脸识别技术，能从一段视频或者图像中，自动识别相应的人物。这些都是大数据的必威体育精装版技术应用。所有这些技术手段的应用，都可以为企业带来极大的市场空间，赢得巨大的经济利益。这些技术可以说都是现成的，只要企业认识到了它的作用，肯投资应用，取得效果是非常明显的。

大数据分析的价值

在大数据时代，企业常常面临3种类型的海量数据，需要不同的数据处理平台。（见表1）

这三种平台需要不同的分析方法。传统的数据仓库，通过商业智能应用，实现业务报表、决策分析和满足监管需求。非结构化数据平台，通过自然语言处理、文本分析和内容挖掘，实现舆情分析、声誉度分析、精准营销等应用。流数据平台，通过实时的流数据处理，实现实时欺诈监测、实时产品服务、实时质量控制等应用。这三种技术和分析能力的结合，可以突破传统的分析模式，挖掘新的业务亮点和商机，实现产品创新、流程创新、服务创新和客户体验创新，进而实现管理创新。

传统的数据仓库平台及其商业智能应用，大家都比较熟悉。这里简单介绍两种新的计算手段：流计算和内容计算。

流计算针对流数据平台，它是一种内存计算。从传感器、网络日志、网络点击流等设备实时采集下来的数据，连续注入到流计算平台；流计算平台部署相应业务规则，以实现实时的业务分析与判断。电信行业基于手机的实时异常话单检测，银行业的实时信用卡欺诈检测和实时营销等，都是流计算的案例。美国“棱镜”计划也是应用了流计算。

内容计算针对非结构化数据平台，是自然语言处理、文本分析与内容挖掘。其具体做法是：从网站找到一个链接，通过爬虫技术，爬下一篇新闻；新闻文本爬下来后的分析过程就是内容计算，包括语言检测、中文分词、句法分析、主谓宾识别、关键实体抽取、短语识别、建立标签和索引等；内容计算涉及的技术包括自然语言处理、归类与索引、机器学习等。

大数据应用场景

目前，大数据应用的成功案例有很多。这里介绍几种应用场景。

一、社交媒体与舆