数据仓库课件1.pptVIP

 第5章 传统数据挖掘技术  5.1传统的统计分析类数据挖掘技术 5.2统计分析类工具 5.3统计分析类工具的应用 5.4统计分析类工具应用的问题 练习 5.1 传统的统计分析类数据挖掘技术 5.1 传统的统计分析类数据挖掘技术 5.1.3 柱状图数据挖掘技术 5.1.3 柱状图数据挖掘技术 5.1.4 线性回归数据挖掘技术 5.1.5 非线性回归数据挖掘技术 5.1.6 聚类数据挖掘技术 1.聚类分析原理 2.分层聚类 CURE算法的主要步骤如下： ⑴从源数据集中抽取一个随机样本S。 ⑵将样本S划分为一组划分。 ⑶对每个划分进行局部的聚类。 ⑷通过随机抽样剔除孤立点。如果一个簇增长太慢，就删除该簇。 ⑸对局部的簇进行聚类。落在每个新形成的簇中的代表点根据用户定义的收缩因子收缩或向簇中心移动。这些点代表了簇的形状。 ⑹用相应的簇标签来标记数据。 3.划分聚类 4.密度聚类 4.密度聚类 DBSCAN算法首先需要用户给定聚类对象的半径ε-邻域和ε-邻域中最少要包含的对象数MitPts。然后算法检查某个对象ε-邻域中的对象数，如果对象数大于MitPts，该对象就是核心对象，就构建以该对象为核心的新簇。然后反复寻找从这些核心对象出发在ε-邻域内的对象，这个寻找过程可能会合并一些簇，直到没有新的对象可以添加到任何簇中为止。 4.密度聚类 OPTICS算法是对DBSCAN算法的改进，因为在DBSCAN算法中需要用户设定ε-邻域和MitPts，但是在实际应用中用户往往很难确定这些参数，而且这些参数设置的不同往往会导致聚类结果有很大差别。在OPTICS算法中认定对象应该以特定的顺序进行处理，这个顺序首先处理最小的ε值密度可达的对象，这样可以首先完成高密度的聚类。 4.密度聚类 DENCLUE算法的依据是某个数据点在邻域内的影响可以用一个数学函数来形式化地模拟，这个函数为影响函数。所聚类数据空间的整体密度看成是所有数据点影响函数的总和。在聚类时就根据全局密度函数的局部最大，即密度吸引点来确定。 5.网格聚类 STING算法将数据空间区域划分为矩形单元，并且对应于不同级别的分辨率，存在着不同级别的矩形单元，高层的每个单元被分为多个低一层的单元，每个网络单元的统计信息被预先计算和存储，供处理和查询使用。 5.网格聚类 利用STING算法可以自顶向下回答查询： ⑴从层次中选定一层（含较少单元的层次）作为查询处理的开始。 ⑵对当前层次的每个单元计算置信区间，用以反映该网格单元与给定查询的关联程度。 ⑶当前层次处理完毕，转入下一层次，处理下一层次时只检查处理相关单元。 ⑷重复以上过程，直到底层处理完毕。如果查询要求满足，就返回相关单元的区域，否则检索和进一步处理相关单元中的数据，直到满足查询要求为止。 5.网格聚类 WaveCluster方法首先通过在数据空间上强加一个多维网格结构来汇总数据，每个网格单元汇总了一组映射到该单元中的点的信息，然后采用一种小波变换对原特征空间进行变换，汇总信息在进行小波变换时使用，接着在变换后的空间中找到聚类区域。 小波变换的聚类是无监督聚类，不用事先假定聚类的形状，可以发现任意形状的聚类，边界弱信号不会被屏蔽，可以剔除孤立点，本身运算开销不大。 5.网格聚类 基于网格和密度的聚类CLIQUE算法主要步骤是： ⑴将数据空间划分为互不相交的长方形单元，记录每个单元中的对象数。 ⑵用先验性质识别包含簇的子空间。 ⑶在符合兴趣度的子空间中先找出密集单元，再找出相连接的密集单元，以识别簇。 ⑷为每个簇生成最小化的描述。 6、模型聚类 5.1.7 最近邻数据挖掘技术 基本概念是：相互之间“接近”的对象具有相似的预测值。如果，你知道了其中一个对象的预测值后，就可以用它来预测其最近的邻居对象。 5.1.7 最近邻数据挖掘技术 5.2 统计分析类工具 5.2.1 统计类数据挖掘工具 SAS和SPSS 许多数据挖掘工具中都使用了这样一些统计分析过程：决策树推断（C4.5、CART）、规则推断（AQ、CN2、RECON）、最近邻方法、聚类方法、关联规则、特征提取和可视化等。 5.2.2 统计类数据挖掘的商业分析 5.2.3 统计类数据挖掘工具的功能 1.可视化功能 2.探索功能 3.统计功能和操作 4.数据管理功能 5.显示功能 6.挖掘结果描述功能 7.开发工具 8.可接受的响应时间 5.2.4 统计类数据挖掘工具—SPSS 5.2.4 统计类数据挖掘工具—SPSS 5.2.4 统计类数据挖掘工具—SPSS 5.2.4 统计类数据挖掘工具—SPSS 5.2.4 统计类数据挖掘工具—SPSS 5.2.4 统计类数据挖掘工具—SPSS 5.2.4 统计类数