数据分析与可视化实践 数据思维概述 教学PPT课件.pptxVIP

数据分析与可视化实践（第三版） 第1章 数据思维 学习目标1.理解数据、信息、知识、智慧之间的区别及联系2.了解数据思维的本质3.了解大数据思维的本质4.了解大数据技术? 1．1 数据思维概述 1．1．1 认识数据1．数据 数据是对现实世界客观事物的特征的抽象化的、符号化的表示，是用于表示客观事物的未经加工的原始素材。数据（连续）：模拟的声音、图像数据（离散）：符号、文字，声音、图像数据（固定）：圆周率??数据（变化）：每天水电消耗数据（随机）：抛硬币的结果 1．1．1 认识数据2．信息 信息是人们对现实世界客观事物等认识的描述，它比数据更加抽象。信息是一种已经被加工为特定形式的数据。 数据是信息的表示，信息是数据的内涵。例1-1： 数据：3 信息：最高气温是3℃，天气寒冷，注意保暖 1．1．1 认识数据3．知识 知识是信息经过加工提炼后形成的相应的抽象产物，它表述的是事物运动的状态和状态变化的规律。可以说，知识是一类高级的、抽象的而且具有普遍适应性的信息。知识具有系统性、规律性和可预测性。 例1-2：上海、冬季、雨三个常规数据，通过对这三个数据关联性分析以及与往年上海这个季节的雨量进行对比，发现2018年冬季上海雨水偏多。 1．1．1 认识数据4．智慧 智慧是知识层次中的最高一级。也是人类区别于其他生物的重要特征。智慧是人类基于已有的知识，针对现实世界客观事物运动过程中产生的问题根据获得的信息进行分析，对比，演绎找出解决方案的能力。 例1-3：身高1.75米。 数据：1.75米； 信息：身高1.75米 知识：东北男性平均身高是1.75米 智慧：来自东北的男性身高大约是1.75米 1．1．1 认识数据5．数据、信息、知识和智慧的相互关系 1．1．2 数据思维的本质1．什么是数据思维 数据思维是关于数据认知的一套思维模型。例1-4：在这个例子中列举了两家公司的市场份额及2017年营业收入数据，但对于数据并没有给出最终的行业销量排名结论。包括和竞争对手相比。只有数据没有结论，这不是数据思维。公司领域市场份额营业收入A空调27%1482.86亿元B冰箱35%1593亿元 1．1．2 数据思维的本质1．什么是数据思维 例1-5： 这就是数据思维的成果，它告诉A公司和B公司优化销售策略不能仅限于几种家电，需要对多种家电销售予以重视。公司领域市场份额营业收入A空调27%1482.86亿元B冰箱35%1593亿元C12种第一名2400亿元 1．1．2 数据思维的本质2．数据思维的价值 在大学里，考试基本上一个学期只有一到二次。考试作为对学生学业发展的一种评估手段，是静态和滞后的，并不能实时发现学生学习行为的异常。网络游戏不学习成绩差 1．1．2 数据思维的本质2．数据思维的价值通过收集学生在学校日常被动积累的数据，对这些数据进行分析，早期发现学生学业发展中的异常情况，并进行预警和干预。建设数据的一体化平台：选课记录教材阅读成绩有关数据水房打水洗澡规律其他数据 1．1．2 数据思维的本质2．数据思维的价值数据思维是一种必备的素养。如何提高数据思维：首先，扎实掌握数据领域涉及到的基本知识，它是思维能力的基础。其次，日常生活和工作中，要时常关注所看到的数据，对数据保持足够的敏感性。最后，多思考数据背后的隐藏的东西，把数据转化成知识，让数据产生真正的价值。 1．1．2 数据思维的本质3．数据分析思维模式数据分析是从数据中提取有价值信息的过程，从而达到分析现状、分析原因和预测未来的目的。数据分析过程中需要对数据进行各种处理和归类，所以需要掌握正确的数据分类方法和数据处理模式。主要的数据分类方法和数据处理模式包括分类、回归、聚类、相似匹配、频繁项集、统计描述、链接预测、数据压缩和因果分析。 1．1．2 数据思维的本质4．数据分析的一般步骤数据分析通常可分为：明确分析目的：明确数据分析目的，即梳理分析思路、搭建数据分析框架。数据收集：数据收集是按照确定的数据分析框架，收集相关数据，它为数据处理和数据分析提供素材和依据。数据处理：数据处理是指对收集到的数据进行加工整理，形成适合数据分析的样式，保证数据的一致性和有效性。 1．1．2 数据思维的本质4．数据分析的一般步骤数据分析通常可分为：数据分析：数据分析是指用适当的分析方法及工具，对收集、处理后的数据进行分析，提取有价值的信息，形成有效结论的过程。数据展示：通过数据分析，隐藏在数据内部的关系和规律就会逐渐浮现出来，运用数据可视化技术可以展现出这些关系和规律，让