云计算物联网大数据人工智能概述.ppt

智能电网 物流物联网 智能家居 智能建筑 本章主要内容 一、云计算 二、物联网 三、大数据 四、人工智能 交易数据 传感数据 交互数据 价值 海量 多样 快速 大数据就是对多样化的海量数据进行快速处理与分析，从而获取巨大商业价值的理念、技术和服务。 POS ERP 电子商务 GPS RFID 视频监控 大数据的概念 “大量化(Volume)、多样化(Variety)、快速化(Velocity)、价值密度低（Value）”就是“大数据”的显著特征，或者说，只有具备这些特点的数据，才是大数据。 Volume Velocity Value Variety 大数据的4V特征 大数据有什么用？ 图灵奖获得者、著名数据库专家Jim Gray博士观察并总结人类自古以来，在科学研究上，先后历经了实验、理论、计算和数据四种范式 实验 理论 计算 数据 THANK YOU SUCCESS * * 可编辑 互联网上一分钟 * * IBM的创立者托马斯·沃森曾表示，全世界只需要5台电脑就足够了。 比尔·盖茨则在一次演讲中称，个人用户的内存只需640K足矣。 IBM的高傲，使它在上世纪七八十年代失去了整个PC市场，让位给了Intel。 随着互联网的快速发展和普及，尤其是基于互联网商业模式的创新，在互联网时代的后期，也出现了一些新的问题： 1、互联网业务的特点之一是网络用户群体数量巨大，当几百万、几千万人访问一个应用系统时（如浏览同一个网页），如何提供大并发量情况下的访问速度？ 2、互联网业务的特点之二是数据为海量数据，例如有哪些信誉好的足球投注网站、数字地图、网上视频等，如何提高在大数据量情况下的业务处理速度？例如在1PB的数据中迅速查找与“浪潮”相关的资料等。 3、互联网厂商均是花巨资建设IDC，但客户的应用负载有高峰和低谷，如新浪新闻，白天看的人多设备的负载高，晚上看的人少，负载底。如何动态合理的调配计算资源，提高IT资产的使用效率？ 面对互联网发展出现的问题，人类进行了大量的探索和实践，通过多种技术创新，不仅解决了互联网发展出现的问题，而且催生了一个新的云计算时代。 1、网格计算：把一个复杂的计算任务（一台计算机运算需要很长时间），拆分成多个独立的小任务，通过互联网分发给多台空闲的计算机，再把计算结果汇总到一起，用于解决大并发量和大数据量问题。但网格计算使用的是互联网上的空闲计算机（如远程使用中午休息期间的PC），这些计算机属于不同的组织和个人，在商业上涉及盈利模型和法律问题，因此没有商业化推广。 2、集群计算也是把一个复杂的计算分拆成多个小任务，但任务之间逻辑关系很强，一台机器的输出是另一台机器的输入，主要用于气象预报、动画渲染、科学计算等领域。 3、分布式计算：与网格计算类似，但分布式计算使用的计算机是商业组织内部的，对外服务的盈利模型也清楚，成为云计算重要的技术创新之一。 4、由于云计算面对的客户群体巨大，运营商面临盈利压力，不能购买传统的商业软件如Windows、Oracle数据库等，云计算相关的软件大量基于开源软件，运营商再个性化开发。 第一V是Variety，海量数据有不同格式，第一种是结构化，我们常见的数据，还有半结据化网页数据，还有非结构化视频音频数据。而且这些数据化他们处理方式是比较大的。 很多不同形式（文本、图像、视频、机器数据），无模式或者模式不明显，不连贯的语法或句义 第二点就是Volume，量比较大，我们有一些用户化每秒就要进入很多数据，很多客户内部都有几批数据，还有下面淘宝都是几PB数据，所以PB化将是比较常态的情况。 非结构化数据的超大规模和增长，占总数据量的80~90%，比结构化数据增长快10倍到50倍，是传统数据仓库的10倍到50倍 第三个是Velocity，因为数据化会存在时效性，需要快速处理，并得到结果出来。比如说，一些电商数据，今天的信息不处理没有结果化，将会影响到今天捕获很多商业决策。 立竿见影而非事后见效 第四个是Value：大量的不相关信息，不经过处理则价值较低，属于价值密度底的数据 海量数据分析非常复杂，使得过去靠单纯易于关于数据库BI已经不是太适合了。所以，可能需要新的创新。 * 可编辑 可编辑 主要内容 一、云计算 二、物联网 三、大数据 四、人工智能 上传30小时视频 130万人评论 200万条有哪些信誉好的足球投注网站 27.7万人登录 600万条信息发布 2.04亿封邮件 互联网发展 计算资源的演进：从集中到分散再到集中 全世界只需要5台电脑就足够了 ——托马斯·沃森 个人用户的内存只需640K足矣 ——比尔·盖茨 计算时代 网络时代 如何提高成千上万的网络用户同时访问的速度？ 图片、视频等海量数据，如何提高数据的处理速度？ 昂贵的IT设备和能耗，如何减少成