BI相关知识简介重点详解.pptVIP

BI相关知识简介BI项目组 广州金鹏科技信息系统有限公司 2009年9月 预备知识内容提要 BI相关知识 1. 概念 BI为Business Intelligence（商业智能）的简称，指应用在商业信息的收集，集成，分析和报告上的技术和应用与实践。 一种流行的说法：BI就是由数据仓库、数据挖掘、数据备份和恢复、OLAP（Online Analystical Processing 在线联机分析处理）、几大过程组成的一个总称。 2. 目的 支持商业决策 3. 评价指标 BI使用KPI(Key Performance Indication)即关键业绩指标作为他的评价指标。 (KPI是通过对组织内部流程的输入端、输出端的关键参数进行设置、取样、计算、分析，衡量流程绩效的一种目标式量化管理指标，是把企业的战略目标分解为可操作的工作目标的工具，是企业绩效管理的基础。） 1. ETL过程 ETL是数据抽取（Extracting）、转换（Transforming）、清洗（Cleaning）、装载（Loading）几个过程的简称。 ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过ETL最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。 数据清洗 重复行数据的清理，无用字段的清理，空值的处理等，正则表达式的使用。 数据转换 数据类型的转换，比如int转varchar,字符型转日期型（2009-08-01）等等。 有时候需要，还有类似用1标识男，2表示女；在PUSH中如果用户有回访我们用True表示，没有回访用False标识等转换。 数据仓库 2. 数据仓库概念 数据仓库是一个面向主题的、集成的、不可更新的、随时间不断变化的数据集合，它用于支持企业或组织的决策分析处理。 数据仓库中的数据不会随着时间的改变而改变。 数据仓库 3. 数据仓库的分类 标准数据仓库 数据集市 多层数据仓库 联合式数据仓库 OLAP相关概念及建立 OLAP OLAP在线联机分析处理的简称，又叫多维数据分析, 他是指使分析人员、管理人员或执行人员能够从多种角度对从原始数据中转化出来的、能够真正为用户所理解的、并真实反映企业维特性的信息进行快速、一致、交互地存取，从而获得对数据的更深入了解的一类软件技术。(OLAP委员会的定义) OLAP与OLTP的区别 联机事务处理OLTP（Online Transaction Processing）、联机分析处理OLAP(Online Analytical Processing) OLTP数据???????????????????? OLAP数据???? 原始数据?????????? 导出数据???? 细节性数据?????????? 综合性和提炼性数据????? 当前值数据?????????? 历史数据????? 可更新?????????? 可更新，但周期性刷新????? 一次处理的数据量小??????? 一次处理的数据量大????? 面向应用，事务驱动????????? 面向分析，分析驱动????? 面向操作人员，支持日常操作???面向决策人 员支持管理需要 维度建立的相关知识 几个概念 事实表 度量值所在的表称为事实数据表，事实表所表现的特点是包含数值数据(事实)，而这些数值数据可以统计汇总以提供有关单位运作历史的信息。此外，每个事实数据表还包括一个或多个列，这些列作为引用相关的维度表的外码。 2. 度量值 度量值是决策者所关心的具有实际意义的数值。 维度 维度是人们观察数据的角度。维度表包含描述事实数据表中的事实记录的特性。 维度分类： 常规维度 最常见的一种维度，由维度级别的字段类型，又可把它分为标准维度和时间维度 虚拟维度 基于物理维度列的逻辑维度，它也是基于另外一个维度所提供的成员属性或列。