商业银行-DW架构体系

商业银行BI架构体系广州中软信息技术有限公司1主题BI架构概述商业银行BI架构体系专题架构介绍Q&A广州中软信息技术有限公司2BI架构概述BI概述商业银行IT概述广州中软信息技术有限公司早期BI产生的背景商业智能的发展也得益于相关技术的发展，并行处理系统、廉价数据存储、新数据挖掘算法、神经网络技术、人工智能技术、决策支持技术、从大量数据中发现其后潜藏的商业机会等等技术的发展，使企业能以更低的成本投资商业智能，并取得更高的IT投资回报率。广州中软信息技术有限公司4商业智能的基本概念BI(BusinessIntelligence，商业智能)。1989年由GartnerGroup的HowardDresner首次提出来。BI是将数据转换成知识并将知识应用到商业行为上的一个过程——DataWarehouseInstituteBI是将数据转换成信息的过程，然后通过发现将信息转化为知识——GartnerGroup广州中软信息技术有限公司5BI相关概念：OLTP与OLAP的区别OLTPOLAP广州中软信息技术有限公司BI系统的数据流向广州中软信息技术有限公司7数据仓库技术的发展趋势广州中软信息技术有限公司8BI架构概述BI概述商业银行IT概述广州中软信息技术有限公司9商业银行IT系统总体架构广州中软信息技术有限公司10核心业务系统—架构广州中软信息技术有限公司11国际结算系统—架构广州中软信息技术有限公司12网上银行—架构广州中软信息技术有限公司13BI建设的常见工具产品组合系统建设数据模型ODS数据模型（基础数据层、公共汇总层）EDW数据模型（基础数据层、公共汇总层）KPIs模型集市模型（CRM、ALM、RPT）数据加工加工工具：DataStage,Informatica,SP,Por*C,Shell,Perl算法模型：贡献度模型，EVA模型，客户积分模型，客户识别模型规则引擎：应用展示BI工具：Cognos、BI.Office、Brio、BOWebServer：Websphere、WebLogicPortLDAP广州中软信息技术有限公司14主题BI架构概述商业银行BI架构体系专题架构介绍Q&A广州中软信息技术有限公司15商业银行BI架构体系架构体系理论架构设计方法商业银行BI架构架构的评估广州中软信息技术有限公司16为什么需要架构？广州中软信息技术有限公司17企业架构的用途广州中软信息技术有限公司18数据架构不当导致的高成本广州中软信息技术有限公司IT系统的架构模块Business广州中软信息技术有限公司20业务架构原则展示业务自动化、辅助决策支持的功能结构及相关实务场景。配合商业银行的业务发展策略充分利用商业银行的最佳实践开发多元化金融产品，如发展经纪市场以产品组合大力推广个人金融业务依托高科技提供网上银行增值服务在投资银行领域争取主动为中小企业提供金融服务拓展高收益的资本运营市场广州中软信息技术有限公司21应用架构原则侧重于对业务支持的实现方法及功能模块的原则、关系描述。可用性可扩展性可管理性易用性安全性可重用性风险可控性广州中软信息技术有限公司22数据架构原则侧重于数据的采集、处理、输入、输出、管理，以及数据的流向、关系、分布等数据共享使用避免数据冗余和数据复制可扩展性数据处理集中化可用性广州中软信息技术有限公司23数据架构面临的问题与挑战广州中软信息技术有限公司24数据架构形态广州中软信息技术有限公司25各种数据架构的优缺点各数据架构的比较广州中软信息技术有限公司26数据架构布局中需要考虑的7个方面广州中软信息技术有限公司27技术架构原则描述基础技术环境、软硬件环境、网络环境、产品、工具、接口协议等基础架构产品选择、技术组件选择、技术标准（开发平台、工具、软件、硬件、操作系统、数据库）接口服务接口标准、内部接口、外部接口可集成性网络环境网络资源、高可靠性（数量、性能、容量和链路带宽）、可用性、可扩展性、安全性、可管理性、高效性、有效性、工业标准系统管理系统性能需求、容量统一监测软件升级和分发统一系统操作问题管理、变更管理、可用性管理广州中软信息技术有限公司28与原有架构的整合门户整合统一身份管理统一访问入口统一界面风格内容管理-实现内容的创建，发布，审批，发布，搜索，个性化协同工作-如内部论坛、日程表、工作任务、网上会议、即时通讯等，让用户方便沟通和办公前端整合应用整合数据整合广州中软信息技术有限公司29商业银行BI架构体系架构体系理论架构设计方法商业银行BI架构架构的评估广州中软信息技术有限公司30架构设计方法概述广州中软信息技术有限公司31架构设计流程广州中软信息技术有限公司32最佳实践=企业自身环境和需求+业界指导原则广州中软信息技术有限公司数据架构的基本要素广州中软信息技术有限公司34商业银行BI架构体系架构体系理论架构设计方法商业银行BI架构架构的评估广州中软信息技术有限公司35通用商业银行结构体系广州中软信息技术有限公司36商业银行架构层次解决方案广州中软信息技术有限公司以EDW为EDC模式广州中软信息技术有限公司38QueryAlyt.App.……外部监管供数服务企业级统一运营管理数据线整体规划（ODS&EDW）广州中软信息技术有限公司39数据线应用架构广州中软信息技术有限公司40物理架构解决方案.数据存储区应用服务区系统管理区前端服务器系统管理工作站数据备份设备业务人员管理人员中心交换机路由器&防火墙SiIntranet/Internet分支机构用户ETL过程业务主机总部用户业务人员管理人员磁盘阵列ETL服务器数据平台服务器BI前端服务器广州中软信息技术有限公司41商业银行BI架构体系架构体系理论架构设计方法商业银行BI架构架构的评估广州中软信息技术有限公司42架构的成熟度广州中软信息技术有限公司43一步一步的提高架构的成熟度理解企业IT的现状展望企业IT的3-5年远景找到适合自己的IT发展路线图从局部应用到技术标准化优化技术选择，提高效率。优先共享基础设施类服务。标准化管理，管理例外。IT用来于降低成本，提高互操作性。IT领导与业务领导共同做应用系统的决定。治理的关键是建立企业各层的标准，及投资的方式。从技术标准化到数据合理化通过数据或流程的标准化来提高企业内部的规范。优先企业级的应用系统。定义重要的流程及衡量标准。IT用来提高业务流程的质量。企业高官与流程领导共同做应用系统的决定。治理的关键是达成项目与架构目的的协调。广州中软信息技术有限公司44数据集市，内建还是外建？广州中软信息技术有限公司45主题BI架构概述商业银行BI架构体系专题架构介绍Q&A广州中软信息技术有限公司46专题架构介绍EDC（ODS）数据治理广州中软信息技术有限公司47LFT-ODS&报表系统逻辑架构广州中软信息技术有限公司48LFT-ODS&报表系统数据架构广州中软信息技术有限公司49LFT-ODS&报表系统技术架构广州中软信息技术有限公司50LFT-ODS&报表系统物理架构广州中软信息技术有限公司51专题架构介绍EDC（ODS）数据治理广州中软信息技术有限公司数据治理平台规划数据质量管理52数据标准管理广州中软信息技术有限公司53数据标准逻辑架构广州中软信息技术有限公司54数据质量逻辑架构广州中软信息技术有限公司管理数据定义技术定义转换规则域值实体关系数据拥有者确认规则数据保留原则更新频率数据映射容错阈值业务实体和属性定义业务规则业务主题数据统计值质量指标任务执行日志例外日志数据访问规则和管理应用支持、维护影响分析ETL工具内的任务描述ETL任务的相互依赖ETL调度ETL执行日志元数据报表、分析数据质量管理安全管理55元数据存储技术元数据业务元数据(操作型元数据ETL工具内的任务描述ETL任务的相互依赖ETL调度ETL执行日志ETL统计(如：纪录数、数据处理时间))新增/更改定义输入定义ETL/EAI转换规则变更需求影响对象:表,属性,映射关系,查询及数据拥有人源数据系统(主机系统,关系型数据库,其他系统)ETL工具(Informatica等)数据建模工具(如ERWin）报表需求元数据工具(如CARepository/ASGRochade,PineCone)访问权限变更需求完成访问权限变更BI工具（如Cognos）数据挖掘工具（如SAS）应用软件（如KRM）元数据管理逻辑架构技术元数据用户(数据库管理员，ETL开发人员，数据模型开发人员)业务用户运维人员(数据仓库管理人员、元数据管理人员)数据查询定义数据查询结果调度、执行规则ETL/EAI执行跟踪数据移动状态、错误处理广州中软信息技术有限公司56