1_大数据的时代背景教学教案.pptVIP

产业界与学术界的关注 大数据是人们获得新的认知，创造新的价值的源泉；大数据还是改变市场、组织机构，以及政府与公民关系的方法。 大数据的核心就是预测。三个转变。 更多：不是随机样本，而是全体数据 更杂：不是精确性，而是混杂性 更好：不是因果关系，而是相关关系 * 2013-1 产业界与学术界的关注 本书主要介绍了如何驾驭大数据浪潮，并详细地介绍了什么是大数据，大数据为什么重要，以及如何应用大数据。 本书还从具体实用的角度，介绍了用于分析和操作大数据的工具、技术和方法；以及人才和企业文化的角度，介绍了如何使分析专家、分析团队以及所需的分析原则更加高效，如何通过分析创新中心使得分析更加有创造力，以及如何改变分析文化。 * 2013-1 产业界与学术界的关注 爆发：大数据时代预见未来的新思维。 巴拉巴西的研究是在人类生活数字化的大数据时代基础上进行的，移动电话、网络以及电子邮件使人类行为变得更加容易量化，将我们的社会变成了一个巨大的数据库。 巴拉巴西揭开人类行为背后隐藏的模式“爆发”，提出人类日常行为模式不是随机的，而是具有“爆发性”的。 * 2012-6 新信息世界观：物理世界、信息世界、人类社会组成三元世界  * 大数据 共生智能系统中的数据、信息与知识管理 组织与社群：人类集体智能 ——决策与问题求解 扩展的计算机网络系统：人工智能——数据加工平台 可感知的环境与物品：周遭智能（AmI）——感知与执行终端 数据、信息、知识流转 共生智能系统： 综合集成 共同解决现实的复杂问题 “大数据”对社会发展的影响 科学研究 第四种范式 公共管理 智慧城市 工业生产与商业经营 大数据产业链与商务智能 * 第四种范式 观察与经验描述与实验、理论建模、仿真与计算等科研模式之后，当代又出现了数据密集型的科研范式。 微软公司于2009年10月发布了《The Fourth Paradigm: Data-Intensive Scientific》，首次全面地描述了快速兴起的数据密集型科学研究。 “The Next Science Revolution”，Harvard Business Review，November 2010 * 《第四范式:数据密集型的科学发现》中文版图书 ?科学正在进入一个崭新的阶段。在信息与网络技术迅速发展的推动下，大量从宏观到微观、从自然到社会的观察、感知、计算、仿真、模拟、传播等设施和活动，产生出大量科学数据，形成被成为“大数据”（Big?Data）新的科学基础设施。 * 2012-10 * 《自然》《科学》大数据专刊 * 2011年2月11日出版的《科学》杂志刊登专题——《数据处理》 2008年9月3日出版的《自然》杂志刊登专题——《大数据》 * 大数据时代的数据挖掘与商务智能 郭崇慧 教授 guochonghui@ 大连理工大学 管理科学与工程学院 系统工程研究所 * 数据是宝贵的财富，其中蕴含大量有用的（有助于管理和决策）信息和知识。 计算机和通讯技术的发展，使数据量急剧增加，人类进入大数据时代。收集、传输、存储、整合、分析与挖掘数据的各项技术快速发展。 大数据时代，数据分析与数据挖掘作为一门信息技术，其兴起主要是受数据积累的增长和对数据分析的需求的驱动。 * 在大数据时代，我们共同探讨数据分析与数据挖掘的思想、方法和应用前景。 尽量向大家介绍数据分析与数据挖掘的全貌，给一些资料性的信息。 由于数据分析与数据挖掘涉及的方法广泛，软件、工具、公司太多，应用太广，此次以介绍方法为主。 * 大 纲 大数据的时代背景 商务智能与数据科学 基于统计的传统数据分析技术 数据管理与数据挖掘概论 数据挖掘与知识发现技术 典型应用及案例分析 * 第一部分 大数据的时代背景 大数据的时代背景 从数据谈起 大数据现象与新信息世界观 产业界与学术界的关注 “大数据”对社会发展的影响 * 从数据谈起 数据无所不在 * “大数据”的时代背景 * 无所不在的数据（1） 国家(省、市)统计局（） 70万家企业联网“直报”统计数据 从2012年2月18日开始，全国70万家三上企业和房地产开发经营企业将在统一的数据采集和处理平台上，通过互联网直接向国家数据中心或国家认定的省级数据中心报送统计数据。 * 无所不在的数据（2） 金融数据（/） 低频数据：日数据 高频数据：金融市场中的逐笔交易数据和逐秒交易数据。 超高频数据：实时数据 金融大数据的挑战与应对 在以网络化和数字化为基本特征的新经济时代，金融产业日渐回归本质，表现为金融数据流的产生、交换、存储、分析以及使用。 大数据对金融业带来了剧烈的挑战冲击，我国金融机构需要明确大数据战略的顶层设计，加强大数据基础设施建设，实施稳妥的大数据