数据仓库和OLAP技术在银行经营分析系统中的应用研究

东北大学硕士学位论文数据仓库和OLAP技术在银行经营分析系统中的应用研究姓名：刘洋申请学位级别：硕士专业：计算机科学与技术（软件工程）指导教师：朱志良20060101数据仓库和OLAP技术在银行经营分析系统中的应用研究作者：刘洋学位授予单位：东北大学参考文献(31条)1.王珊数据仓库技术与联机分析处理19982.WHInmonBuildingtheDataWarehouse20053.MAHernandez.SJStolfoReal-worldDataisDirty:DataCleaningandTheMergepurgeproblem1998(02)4.夏火松数据仓库与数据挖掘技术20045.JiaweiHan.MichelineKamber.范明数据挖掘概念与技术20016.邓苏.刘青宝数据仓库原理与应用20027.LWu.LMiller.SNilakantaDesignofdatawarehousingusingmetadata8.陈京民数据仓库原理、设计和应用20049.石丽.李坚数据仓库与决策支持200310.彭木根数据仓库技术与实现200211.林宇数据仓库原理与实践200312.PaulrajPonniahDataWarehousingFundamentals200113.游运.颜七笙数据仓库技术及其设计方法[期刊论文]-科技广场2005(10)14.AngelaBonifati.FabianoCattaneoDesigningdatamartsfordatawarehouses2001(04)15.康晓东基于数据仓库的数据挖掘技术200416.于戈.鲍玉斌.嵇晓数据仓库工程方法论200317.EFCodd.SBCodd.CTSalleyProvidingOLAPtoUser-Analysts:AnITMandate1993(09)18.TheOLAPCouncilOLAPandOLAPServerDefinitions199519.安淑芝数据仓库与数据挖掘200520.段云峰.吴唯宁.李剑威.韩洁数据仓库及其在电信领域中的应用200321.谷岩基于三层结构的联机分析处理(OLAP)系统的研究与设计[期刊论文]-计算机应用与软件2005(3)22.杨光.张雷.艾波OLAP技术及其发展[期刊论文]-计算机应用研究1999(7)23.杨燕燕.陈海文.邵维忠.杨芙清数据仓库星型模型及其建模工具研究1998(zk)24.刘义.李亮基于关系数据库构造多维数据模型[期刊论文]-计算机工程2000(9)25.尤玉林.张宪民一种可靠的数据仓库中ETL策略与架构设计[期刊论文]-计算机工程与应用2005(10)26.田芳.刘震数据仓库清洗技术讨论[期刊论文]-青海师范大学学报（自然科学版）2005(4)27.王克龙.王玲.王平立.宋斌数据仓库中ETL技术的探讨与实践[期刊论文]-计算机应用与软件2005(11)28.MichaelLGonzalesIBMDataWarehousing:WithIBMBusinessIntelligenceTools200329.IBMDB2OLAPServeradministrator'sguide200030.张云涛.龚玲商业智能设计、部署与实现200431.HyperionAnalyzerGettingStarted2003相似文献(10条)1.学位论文赵济东数据仓库多维分析形式语言的研究2008多维数据分析是数据仓库及联机分析处理(OLAP)中最主要的数据处理技术。为了解决油气勘探开发数据仓库中的多维分析表达与查询处理问题，本文主要提出多维分析形式语言RM_MDX及概念模型，以实现查询终端和OLAP服务器之间的有效交互。提出一种多维分析形式语言RM_MDX。针对油气数据特点和典型多维分析问题，对传统MDX查询语言做了精简和改进，形成适用于油气数据多维分析的形式语言。该形式语言具有简便、易用和灵活等优点，主要表现在：提供基本的查询分析功能；多种结果显示方式，将多维查询的结果展示到二维空间上；提供了超越标准MDX的扩展功能；语法格式简单易用，语义表达简洁清楚，利于查询处理转换。RM_MDX语言的基础是MDX语法集中抽取的基本语法和主要功能。根据油气勘探开发多维数据模型和分析处理的特点，修改了MDX的轴维度、切片维度、成员、非层次属性的限制和度量维的描述等语法结构和功能，定义了RM_MDX的语言规范。并通过用户自定义函数(存储过程)技术对该形式语言进一步扩展，使其在油气勘探开发数据仓库中的多维分析功能更加强大和易于实现。依据该语言规范，设计了包含语法分析和转换处理两部分功能的RM_MDX解释转换模块。在详细调研油气勘探开发数据仓库建模对象的前提下，提出RM_MDX多维概念模型，定义了基于该模型的代数运算。以油气生产信息为主题，列举了每种代数操作的数学表达形式及其具体应用，验证了在数据立方体上的代数操作的完备性，为系统的实现与多维分析形式语言RM_MDX的应用奠定了基础。在分析描述系统功能目标的基础上，进行了油气勘探开发数据仓库系统结构设计。依据油气企业多维分析需求，构建了油气生产多维模型，并以RM_MDX语言实现典型OLAP分析要求。使用VisualStudio2005为开发环境，配合SQLServer2005数据库系统，开发出了油气勘探开发多维分析系统软件，实现了油气生产信息数据的多维分析目标。2.学位论文郑敏娟油气田开发分布式数据仓库构建与多维分析2008油气自然蕴藏的分布决定了油气田企业在地域上的分布性。随着企业信息化的不断深入，企业下属的采油厂纷纷建立了各自的管理信息系统(MIS)，并积累了大量的历史生产数据。但是现有的MIS系统，大都是重视“事务处理”，轻视“分析处理”，缺乏决策支持功能。如何对分散在这些系统中的相关数据进行集成，快速生成针对企业不同分析需求主题的信息，并向分析人员提供统一的数据视图已成为关键的问题。论文以甘谷驿油矿勘探开发管理信息系统为背景，在分析了油气数据仓库构建方法的基础上结合油气生产数据特点，提出了适合于油气田分布式数据仓库的体系结构、多维数据模型，并对油气田分布式数据仓库进行了多维分析，主要包括：对油气田分布式数据仓库体系结构的研究。论文在分析了DB，DW与ODS的特点后，根据油气田企业对联机分析处理(OLAP)的要求，提出了一种针对于油气田企业的多层分布式数据仓库体系结构。论文以油气生产分析需求为导向，给出了面向油气田企业的多维分析模型，构建了油气田全局数据仓库和局部数据仓库，阐述了油气田分布式数据仓库构建的数据结构、数据组织以及数据存储方式。最后，论文提出了一种扩展的OLAP分析三层体系结构，以满足用户进行分布式的OLAP分析。系统采用.NET技术实现了油气田生产数据的多维分析，为用户提供了多角度、快速、直观的视图，满足了油气田企业分布式OLAP分析的需求。3.期刊论文孙泳.刘少辉.史忠植数据仓库中多维分析的数据展现-计算机工程与应用2004,40(4)文章介绍了一种数据仓库多维分析中以二维表格反映多维特征,提供了数据立方体的可视化表示的方法,并采用动态填充技术,提高了大数据量时数据查询、展现的速度,使用户能直观、快速地得到数据.4.学位论文马铁驹数据仓库及多维分析2001该文首先阐述了数据仓库的产生和发展,OLTP、OLAP的概念,多维分析的概念与多维分析的具体操作,数据仓库的的概念,数据仓库技术与数据库技术的区别与联系,数据仓库中数据的特点,数据库体系化环境及数据仓库系统的构成及数据集市的概念和类别.5.学位论文杨锦锋基于数据仓库的多BOM管理系统的研究与实现2005针对物料清单(BOM)管理中需要大量集成和汇总数据以满足决策分析的问题，结合国内外研究现状，提出用数据仓库的理论和思想集成转换原始BOM数据，构建BOM数据仓库，研究数据的导入和追加算法，并在BOM数据仓库的基础上采用多维数据模型建立部门BOM数据集市，进行多维分析。研究工作主要包括以下几个方面：1.分析讨论BOM管理的特点、难点和存在的问题。对BOM的作用，BOM的数据结构及其管理特点进行了分析和综述，指出现行BOM管理中存在的问题，概述了国内外对BOM的研究现状，说明了引入数据仓库技术的必要性。2.建立BOM数据仓库。对数据仓库技术进行了概述，提出了BOM数据仓库的体系结构，详细的讨论了BOM数据仓库的设计过程，并根据BOM的数据结构特点，研究给出了可行的数据导入和追加算法。BOM数据仓库的建立解决了数据不一致和“蜘蛛网”等问题，同时为企业的决策分析提供了完整、一致、不同粒度的综合数据。3.建立部门BOM数据集市，进行多维分析。概述了多维分析的意义和多维分析的基本操作，指出多维分析(OLAP)、数据集市和数据仓库之间的关系；在BOM数据仓库的基础上建立了部门BOM数据集市，进行多维分析，并且在部门数据集市的基础上讨论了多BOM的生成。对部门BOM数据集市进行的多维分析，使得决策者能从多个角度、多侧面的观察数据，从而深入的了解包含在数据中的信息和内涵。4.设计并实现了基于J2EE架构的BOM数据仓库管理系统。分别给出了三层的设计和实现技术，并简要介绍了系统的实现结果。6.期刊论文朱国文.冯少荣点击流数据仓库的构建与多维分析-海峡科学2010,(4)介绍点击流数据仓库的多维建模技术,在此基础上以平和网的日志数据为例,利用SQLServer2008构建点击流数据仓库,并对其进行多维分析研究.7.期刊论文陈荣保.何伟华.戚维田.CHENRong-bao.HEWei-hua.QIWei-tian基于数据仓库的财政收支多维分析系统设计-常州信息职业技术学院学报2008,7(1)随着金财工程建设的推进,财政部门已不满足于静态的财政收支报表.因此提出了一种有效的多维分析系统体系架构,在此基础上实现基于数据仓库的财政收支多维分析系统.实验结果表明,所提系统为财政用户提供了多角度、多层次、动态地洞察收支数据的能力,有助于提高财政部门的收支管理和收支分析水平.8.学位论文胥旭基于数据仓库的分析系统研究2006随着计算机与信息技术的飞速发展，使人们能以更快、更廉价的方式获取信息，这就使得信息的数量以指数速度增长，人们称之为信息爆炸。在这些大量数据的背后隐藏着很多具有决策意义的有价值的信息，同时，如此规模庞大、纷繁复杂的数据体系也让使用者漫无头绪，无从下手。那么，如何发现这些有用的知识，使之为管理决策和经营战略发展服务呢?基于数据仓库的分析技术便是解决上述问题的重要途径之一。本文是在论述了数据仓库的概念、体系结构、重要技术、开发策略及相关联机分析处理(OLAP)技术的前提下，基于数据仓库和OLAP理论，针对快餐销售业务领域，给出了数据仓库的总体设计模型和整个系统的逻辑框架雏形及软件架构，实现了对于快餐销售业务海量数据的多维分析功能，通过在快餐销售行业领域的模拟实验应用，为企业的科学决策提供了一定的依据，取得了较好的效果。本文的主要工作是根据快餐销售行业的业务需求，设计企业数据仓库的概念模型、逻辑模型和物理模型，并基于上述模型给出了扩展标记语言(XML)元数据描述，并本着理论与实践相结合的态度，采用手工ETL处理的方式，在已有的数据仓库模型的基础上，通过深入剖析J2EE开源框架—JPivot的处理机制，对其进行了二次开发，以满足更加形象化和直观化显示多维分析操作结果的要求。此外，本文还对于在数据仓库、联机分析系统应用中遇到的ETL问题给出了手工处理的转换规则示例；对于数据仓库的建模问题，根据实际需求选择了星型数据模式；对于元数据的描述问题，给出了使用扩展标记语言(XML)的形式化描述方案；对于多维分析的查询问题，采用了多维表达式(MDX)的处理机制；对于数据仓库数据存储的问题，采用了分区、索引等优化策略；对于多维分析的形象化和直观化的显示问题，采用通过XSLT来渲染XML来生成最终的HTML结果页面的方法。在数据仓库的设计、数据存储、多维分析的响应能力和结果的显示方式等方面均取得了较好的效果。9.