数据仓库的检索与存储优化策略.pdfVIP

中南工业大学学报(自然科学版) 第34卷增刊2 2003年7月 UNIV．TECHNOL． J．CENT．SOUTH 数据仓库的检索和存储优化策略 刘畅，陈松乔，孙莹，周四新 (中南大学信息科学与工程学院，湖南长沙410083) 摘要：本文针对数据仓库的检索和存储优化展开讨论，提出了一种能够有效提高OLAP(联机分析处理)的策略。 文中将数据量大的表进行拆分重组，将其中的各个索引建立为独立的索引表。这样，原来的一个大表就分割成由 几个索引表和剩余信息组成的表的集合。这些索引表反映了大表不同维的信息，可以单独使用。当根据索引检索 时不用扫描表中的所有信息，而只需扫描索引表即能找到。利用索引表进行检索有效的减少了检索范围，从而提 高了检索效率。将该方法应用于实际系统中，取得了显著效果，具有很强的实际意义。 关键词：数据仓库；OLAP；表；索引 中图分类号：TP311．13 进入20世纪90年代后，信息技术界对数据仓表，分析将要处理的问题，从一些主表中提取出有用 库和OLAP技术及数据采掘技术进行了研究和开的信息组成一些临时聚集的表为将要进行的查询服 发，这为克服传统DSS(决策支持系统)存在的问题务．但是，当数据量大且所有值查询概率相等时，预 提供了技术支持，使DSS的发展跃上一个新的台处理数据比较困难[1’2]． 阶，也为DSS的发展开辟了一条新的途径．目前，开 (2)索引方法．这种方法主要是通过使用索引 发的综合DSS是以数据仓库(DataWarehouse)技术 为基础，以联机分析处理(0LAP)和数据采掘(Dat— 种为提高OLAP而增加的一系列索引或访问结构 aMining)工具为手段的解决方案．数据仓库概念起 源于20世纪80年代中期，而后有经过被誉为“数据对于基础数据是要特别维护的． 仓库之父”的PrismSoluton公司副总裁w．H．In—在此，作者提出一种解决数据存储和OLAP检 mon加以定义和发展．W．H．Inmon将其定义为：索的优化方案．基于这种新的设计技术，能够快速检 “数据仓库是支持管理决策过程的，面向主题的、集 索数据． 成的、随时间而变的、持久的数据集合．”数据仓库技 该方案的设计主要是针对一些数据量大并且访 术的一个重要方面是如何为业务管理决策人员有效 问频繁的表．由于这些表要经常访问，所以，如果能 使用信息提供方便，使他们能够通过使用数据仓库 够提高这些表的检索速度，那么就能提高系统的性 系统，对企业的经营管理做出正确的决策，从而为企 能．设计思想是，把数据量大的表中的索引抽取出来 业带来经济效益．要达到这个目的，就要借助OLAP建立为独立的索引表．这样，在检索数据时就可以利 技术．OLAP是针对特定问题的联机数据访问和数用索引表快速地找到所需信息． 据分析的一种技术，它满足DSS从多种角度对数据 进行快速、一致、交互地分析，克服传统DSS交互能 1 应 用 力差的弊病，使决策者能够对数据进行深入观察．高 效的查询处理对于OLAP是非常重要的，因为数据 目前，大多数银行不断采用新技术，扩充新的业 仓库非常庞大，查询又比较复杂，而且决策支持系统 务品种，突出经营特色，吸引更多的客户．建立数据 要求有较快的交互访问速度． 仓库、进行数据挖掘是商业银行生存发展，提高竞争 能力的需要．随着竞争的日益深入，美国商业银行中 目前正在研究的提高OLAP查询效率的方法 主要有2种： 的“深度效益”观念必将融入我国银行的管理策略当 (1)预处理方法．这种方法主要依赖于一些主 中：把客户细化为不同的个体，细化客户信息的组 收稿日期