计算机网络通信技术第09章 大数据编.pptVIP

（5）大数据 VS 物联网 物联网是大数据流程中的第一层：采集层，物联网网关以上就进入了大数据工作范畴。 大数据、物联网不应仅从技术层面去理解。 互联网的核心是一种基于新的技术和商业模式的生态系统的建立，是技术、人和系统的有机体。 （6） 精准营销是大数据的应用之一 对用户行为分析实现精准营销是大数据的典型应用，大数据在各行各业，特别是公共服务领域具有广阔的应用前景。 设计并实现企业进行低成本精准营销的平台，非常有意义。大数据应用前景如图所示。 大数据应用前景 （7）理解和管理大数据 非结构化海量信息的智能化处理。 自然语言理解、多媒体内容理解、机器学习等。 大数据管理模式 9.4 大数据在企业管理和营销中的渗透 （1）行业拓展者，打造大数据行业基石 （2）渗透众多行业 （3）能加强企业与客户相互沟通 大数据价值潜力指数 （1） 具体案例如图 （2）难点分析（存储和检索是大数据关联图） （3）移动用户上网记录集中查询与分析支撑系统 9.5 大数据分析工具hadoop Hadoop在可伸缩性、健壮性、计算性能和成本上具有无可替代的优势，事实上已成为当前互联网企业主流的大数据分析平台。 （1）什么是hadoop （2）为什么hadoop很重要 （3）hadoop与大数据 hadoop与大数据 Hadoop是处理“大数据”处理的最重要平台之一 数据存储：能够扩展到PB级别 处理规模：带有高度容错能力的并行处理架构 硬件成本低廉：用内置格式存储/处理数据 代码来源丰富：传统厂商对其的支持，它已经成为重要的并行处理架构标准之一。 Hadoop应用界面 9.6 大数据在各方面的应用 1. 大数据在政府的应用 2. 大数据在智慧城市应用 * * * * * * * * * * * * * 第09章 大数据 第09章 大数据 内容提要： 大数据的特征 大数据原理和构成 大数据分析工具hadoop 大数据在各方面的应用 9.1 大数据时代的背景 9.1.1“大数据”的诞生 21世纪是数据信息大发展的时代，移动互联、社交网络、电子商务等极大拓展了互联网的边界和应用范围，各种数据正在迅速膨胀并急剧增多。 互联网（社交、有哪些信誉好的足球投注网站、电商）、移动互联网（微博）、物联网（传感器，智慧地球）、车联网、GPS、医学影像、安全监控、金融、电信（通话、短信）都在疯狂产生着数据。 大数据 数据的通信、网络、传感、存储、有哪些信誉好的足球投注网站、分析和处理技术与工具发展促进了大数据（Big Data）时代到来。 “大数据”正在对每个领域造成影响。 大数据的思考 9.1.2 数据大爆炸 地球上至今总共的数据量： 2006年，个人用户才刚刚迈进TB时代，全球一共新产生了约180EB的数据； 2011年，这个数字达到了1.8ZB。 而有市场研究机构预测：到2020 年，整个世界的数据总量将会增长44 倍，达到35.2ZB（1ZB=10 亿TB）。 表 9.1 是数据计量单位 B（Byte，字节）=8 bits PB（Petabyte，拍字节）=1015 B KB（Kilobyte，千字节）=103 B EB（Exabyte，艾字节）=1018 B MB（Megabyte，兆字节）=106 B ZB（zettabyte，泽字节）=1021 B GB（Gigabyte，吉字节）=109 B YB（jottabyte，佑字节）=1024 B TB（Terabyte，太字节）=1012 B 数据科学技术进展 数据科学技术进展经历以下阶段： 手工作业时代 单个计算机时代 分布网络时代 互联网时代 大数据时代 9.1.3 大数据的特征 大数据：指那些超过传统数据库系统处理能力的数据。 数据规模很大：对传输速度要求很高、结构复杂、不适于原本的数据库系统。 大 数据特征 9.1.3 大数据的特征 大数据（Big Data）：指“无法用现有的软件工具提取、存储、有哪些信誉好的足球投注网站、共享、分析和处理的海量的、复杂的数据集合”。 通常用4个V（即Volume、Variety、Value、Velocity）来概括大数据的特征。 大数据的特点 大数据的特点包括（4V）： 海量、高速、多样、精确。大数据的4个“V”，或者说特点有四个层面： 第一，数据体量巨大。 第二，数据类型繁多。 第三，处理速度快 第四，合理利用数据会带来很高的回报。 大数据的特点 业界将其归纳为4个“V” Volume（数据体量大） Variety（数据类型繁多） Velocity（处理速度快） Value（价值密度低）。 9.2 大数据原理和构成 （1）大数据的核心工作思路 （2）传统数据系统工作原理 （3）大数据平台架构 （4）大数据 VS 云计算 （5）大数据 VS 物联网 （6）精准营销是大数据的应用之一