基于数据仓库的财险分析系统的设计与实现

大连理工大学硕士学位论文基于数据仓库的财险分析系统的设计与实现姓名：孙炜申请学位级别：硕士专业：软件工程指导教师：王占杰20081128基于数据仓库的财险分析系统的设计与实现作者：孙炜学位授予单位：大连理工大学相似文献(10条)1.学位论文靖雨虹保险企业的数据仓库建设2008数据仓库在大规模分析中的作用已经越来越得到我国企业界的认可。然而，怎样建设一个好的数据仓库，却仍然是一个困扰着的问题。主要表现在两个方面：一是目前我国企业中的数据仓库应用基本是不完整的，即只发掘了数据仓库应用的某些部分。主要有三种情况。一是有的企业利用小型的数据仓库完成了针对各个业务条线的统计报表，然而不能利用数据仓库完成跨部门或者全企业范围的综合统计。或者对具体的业务部门不能得到一些明细和实时的业务信息。二是，有的企业利用数据仓库来完成跨业务条线的交叉销售和提升销售，同时又用单独的报表系统来完成报表，这样就将数据仓库和报表系统割裂开来，不能形成一个企业范围的数据集中统一的数据仓库，造成分析的误差；由于要同时开发和维护两套系统，造成了IT系统的过度开销和IT开发人员的重复劳动。三是有的企业直接从业务抽取实时的明细数据级的数据来完成业务的监控，在抽取过程中，由于没有对抽取的逻辑进行整体和仔细的设计，各个业务部门独立抽取相似的大量数据，对营业时的业务系统造成了很大压力。第二，我国企业界普遍数据仓库的建设规律不了解，建设的信心不足。数据仓库建设需要哪些条件，建设的步骤是什么，建设之中的关键点在哪里，这些知识和经验都是一般人所缺乏的。在目前我国的数据仓库理论界，尚没有一套如何建立企业级数据仓库的完整论述。现有的理论探讨一般都侧重于数据仓库建设的一些侧面，例如探讨数据冗余对数据仓库建设的意义和影响；或者有一些整体性的探讨，但是缺乏与数据仓库建设的实际案例的结合。例如，数据仓库的模型建设，要综合考虑多种因素，如数据分析员能方便使用数据仓库进行分析，模型的未来的可扩展性，物理模型中的数据量的把握，数据的抽取、清洗、转换和加载(ECTL)的程序开发的便利和ECTL的实际性能；另外还要考虑数据库厂商的选择。在国际上的理论界也存在着同样的问题。本文试图在理论上完整、详细而有重点地论述具有丰富应用层次的、企业级数据仓库的建设，而且将理论与数据仓库建设的实际相结合，尝试使数据仓库建设的理论能够在数据仓库建设的实践中发挥方法论指导和建设指南的作用。本文将围绕如何使用数据仓库，数据仓库的性能优化和数据仓库未来的发展几个主轴来论述数据仓库的建设规律。从实际效果来看，通过本文的论述有助于解决几个问题。一是数据仓库建设能对企业的发展带来什么样的推动作用，也就是企业的业务部门应该怎样使用数据仓库来拓展视野，促进营销和增强内部管理。二是企业级的数据仓库建设需要具备哪些条件。如企业管理层的支持，跨业务部门的配合，IT组织内部的分工协作，完备的IT业务系统等。三是企业级数据仓库应该怎样建设。包括数据仓库的建设阶段，每个阶段之间的互相关联，数据仓库建设的每个阶段要解决好什么问题，关键点是什么，另外，本文还结合我国实际，就数据仓库的项目管理进行了阐述。四是数据仓库的未来应该怎样发展。数据仓库的发展不仅在现阶段对我国的各个大型企业具有重大意义，在未来，随着企业在分析和风险控制等方面的多元化需求，数据仓库将必然扮演越来越重要的角色。本文将详细阐述数据仓库在未来的发展趋势。作者在数据仓库领域工作了多年，曾参加了6个大型、中型或小型的数据仓库项目，具有比较丰富的实践经验。在撰写过程中，笔者主要结合了几年来数据仓库工作的经验和教训，借鉴了NCR公司数据仓库建设的方法论，参照了IBM公司的数据模型建设方法，吸收了全球保险业领导者AIG在快速建设DWdatamart方面的经验，同时查阅了一些数据仓库建设的经典理论资料，如数据仓库鼻祖BillInmon的和RalphKimball的著作。2.学位论文叶朝礼保险企业数据仓库的设计和实现2009随着计算机硬件性能及存储能力的不断提高和数据库技术的不断进步，数据仓库技术已经不再是纯粹的理论，而是活生生的事实。由于有了数据仓库，获取信息的代价在急剧降低，对于混乱的遗留系统环境，管理人员最终有了一种可行的解决方案。企业拥有了可用的企业范围内的历史数据的“存储方式”。整个企业的数据集成真正成为可能。br　　本论文通过一个保险行业数据仓库系统的设计和开发，对数据仓库相关的数据模型、数据库技术和系统架构的理论进行了介绍，然后采用一种基于KPI概念的数据建模的方法设计了数据仓库的数据模型。并利用Oracle数据库的数据仓库应用特性和企业级ETL工具DataStage的应用，实现了一个完整的保险行业企业级数据仓库项目的设计和开发的过程。最后探讨了数据仓库项目中一些常见问题的解决办法和实践。3.学位论文柯赛英产险数据分析系统的建立与应用2008随着商业保险公司业务系统日趋完善，为满足保险行业日益增长的各种查询、统计、报表以及分析的需求建立高效的数据交换和处理中心，提高防范和化解经营风险的能力，有效利用积累的海量数据来实现经营目标，预测保险业的发展趋势，甚至利用这些数据来设计保险企业的发展宏图以在激烈的竞争中赢得先机，是保险决策支持系统需要解决的问题，也是目前保险企业在信息技术应用上的一个难题。本文以一个财产保险公司的数据分析系统项目为背景展开论述。目的是针对企业的数据特性及分析需求找到问题所在，判断问题与目标之间的距离，在各种可选方案中做出评估和选择，形成一套行之有效的、可扩展的开发模式，开发一个既能满足企业现阶段需要又能不断扩展的数据分析系统。首先，从产险公司的数据及数据仓库应用现状出发，提出了建立一个与企业特性密切相关的数据分析系统的必要性。主体内容部分介绍了基于数据仓库的数据分析系统架构和关键技术，明确了系统螺旋式开发模式和ProACT指导思想。数据处理和数据分析作为与企业经营密切相关的部分，是本文讨论的重点。这两部分按照项目的指导思想先提出问题、分析问题、可选方案比较，最后提出解决方案并实施的思路展开。数据处理部分就企业数据现状，从数据质量、数据过载等问题入手，明确了为获取高质量数据的数据清洗和数据转换方案。数据分析从介绍分析工具、理清企业分析主题入手，详细介绍了一个分析主题的实现过程，并描述了该主题对企业的实际指导作用。最后讨论了数据仓库进一步应用的可能性。数据分析系统是一个根据企业分析需求不断完善的系统，本文描述的项目目前已实际应用，支持和指导了企业的经营。同时项目采用的开发模式和各部分的解决方案也在实际应用中得到了验证，是切实可行并可扩展的，将继续指导下一阶段项目的开发和完善。本人的主要工作在于：1.用数据仓库的理论知识结合企业的实际情况、数据特性指导项目的进展，总结了经验教训。2.在充分了解产险公司业务数据及分析需求的基础上，整理了数据处理过程中需要解决的问题及解决方案，并实际参与数据处理工作。3.整理了产险公司的数据分析主题，利用Cognos工具实现了一个完整的主题分析过程。并对数据仓库的数据的进一步利用提出了见解，演示了分析结果。4.期刊论文马建红.王万森基于数据仓库的保险管理系统的设计与实现-微机发展2004,14(7)为了充分利用保险企业的统计数据,指导公司的业务发展和决策支持,该文提出了一种基于数据仓库、在线分析处理及数据挖掘的保险企业管理系统解决方案.并从实际需求出发,分析了数据仓库的特征和体系结构模型,归纳并设计了保险企业数据仓库的基本结构框架,创建了一个面向保险业务分析管理的数据仓库系统,并对其具体的实现方法进行了阐述.该系统支持联机分析处理,并将数据挖掘应用于数据仓库的知识发现中,真正意义上运用了数据仓库理论和方法.5.学位论文廖阔基于数据挖掘的人寿保险决策支持系统2006本文针对本人所在人寿保险企业的实际情况，为适应市场经济发展，提高公司科学决策水平，提出并实现了泰康人寿广东分公司决策支持解决方案。经过多年的系统运营，泰康人寿广东分公司已积累了相当可观的保单信息、客户信息、交易信息、财务信息等，也出现了超大规模的数据库系统。同时，公司的数据集中为原有业务水平的提升以及新业务的拓展提供了条件，也为数据挖掘和决策支持系统的建立实施提供了丰厚的土壤。在此条件下，笔者通过一年多的开发与完善，逐步完成了泰康人寿保险公司广东分公司的决策支持系统。本文主要论述用数据挖掘技术解决本公司的决策支持系统。首先介绍了进行决策支持需要的核心技术，包括数据仓库、OLAP和数据挖掘。然后介绍了决策支持系统的总体设计方案。接着介绍使用IBMDB2Ⅱ和MQT技术建立人寿保险数据仓库，以及在其上的OLAP分析。然后，结合本公司实际情况，给出了数据挖掘技术——决策树分类在本公司决策支持系统中的具体应用与实现。数据仓库的建立、数据的分析挖掘和决策支持系统都是基于IBMDB2数据库和J2EE体系来阐述的。6.学位论文曾成中国人寿四川统计信息系统的设计及实现2006中国加入WTO后，随着外资公司不断涌入中国保险市场，随着垄断格局的打破，为改善服务质量、提高市场竞争力，保险企业迫切地需要提高企业内部的科学决策能力，增强在市场经营等方面的正确判断能力，必须充分利用己经积累的大量的业务数据，构建统计信息系统，快速提取(检索、查询)信息、制定市场策略，以便对市场机会做出及时灵活的反应，使企业在信息时代的市场竞争中立于不败之地。本文以中国人寿四川统计信息系统项目为背景，首先通过运用企业级多层架构设计思想，构建了3层架构的报表展示平台，用于完成新开发报表在该系统中的动态加载和系统用户的管理，同时运用了数据仓库技术，结合公司现有的资源及公司已经开发的项目进行了全新的寿险数据仓库系统设计，从而构建统一的数据仓库平台，提取对企业经营和决策有用的信息，最后以该数据仓库和报表展示平台为基础，开发了大量业务报表，帮助企业的各级领导在业务管理和发展上做出及时、准确的判断。本文通过运用企业级多层架构设计思想和数据仓库等技术，使用VisualStudio2005和SQLServer2005完成了中国人寿四川统计信息系统的设计和开发，目前整个系统已正式上线，使用效果良好。7.学位论文杨仔玲ODS存储技术在保险企业系统集成中的应用2007本文立足于当前数据集成存储这个研究热点，针对操作型数据存储理论技术研究较少的状况，首先将在理论方面进行详细的对比研究，总结其目前成果，并将理论联系实际，结合相关理论给出面向保险企业系统集成中操作型数据存储的应用架构，然后进行实际开发研究，开发中务求系统的先进、成熟，力图充实完善操作型数据存储相关理论技术，使之成为DB和DW的桥梁，而非DW的替代者。理论方面本文将操作型数据存储(OperationalDataStore，ODS)与数据库和数据仓库的相关理论技术进行详细对比，凸显ODS的优势，并且在全面汇总并借鉴国内外目前对ODS的研究成果的基础上，针对保险企业给出DB-ODS-DW的三层系统架构，并详述其主要功能。在实际开发部分将具体分析企业实际需求，进而完成操作型数据存储(ODS)系统的构建开发，其功能主要包括三方面：ODS-OLTP(操作型数据存储-在线事务处理)功能是由其“当前或接近当前的、不断变化的”的特性所决定的，支持日常业务处理，采用符合J2EE规范的层次性架构，在应用设计中借鉴SOAD(Service-OrientedAnalysisandDesign)的建模思想和方法，由业务事件和流程驱动开发，力图使系统具有良好性能、高复用性和易扩展性；数据集成规则在异构数据集成过程中必不可少，它确定异构数据的处理规则，尤其指导了对来于多源的同一数据的处理，以实现企业全局的统一信息视图；ODS-ETL(操作型数据存储-抽取转换加载)功能指由分公司业务系统数据源向ODS加载数据的过程，类似于数据仓库的ETL，在本文中将主要阐述数据清洗和数据转换两部分内容及相关规则。最后还对ODS-OLTP和ETL接口部分做了相应描述。8.学位论文秦广平基于数据仓库的河北人保业务分析系统设计与实