经营分析系统建设（PDF39页）

经营分析系统建设何德琳资深BI顾问[e-mail]目录1：经分基础介绍2：经分系统架构3：经分数据模型4：经分应用5：经分运营支撑6：经分系统建设关键点什么是经营分析系统？经营分析系统是为企业的经营提供数据化运营服务的，是用数据分析手段来提高经营中的决策能力。经营分析系统以数据仓库作支撑，将业务系统分散的数据整合集中起来。进行企业级数据建模，进行元数据管理，进行数据质量控制，提供“统一口径”的数据信息，同时向其他业务系统提供分析的支撑服务。经营分析系统能我们带来什么？多种数据分析手段，掌握企业经营现状通过数据深度分析和挖掘，实现客户理解和精细化产品运营通过数据挖掘模型，深度了解客户特征1通过产品数据的反馈，评估产品功能合理性2从客户数发展，收入和业务量量等方面全面评估产品运营效果3经营分析系统能我们带来什么？经分在快速反应的市场经营监控机制的起到关键作用BOSS网管网厅数据业务业务系统和经分系统的区别业务系统和经分系统数据的区别业务系统原始数据:公司每天操作运行所用的细节性数据经分系统数据衍生/导出数据：统计出来的或计算出来的满足公司管理者需要的数据面向应用详细的为日常工作服务的可更新的处理需求事先可知事务处理驱动简单查询已知查询…面向主题综合的或提炼的为管理决策服务的不可更新的处理需求事先未知分析处理驱动复杂查询未知查询……业务系统原始数据VS经分系统数据(导出/衍生数据)数据库负载完全不同业务系统User_id=1234567的月消费100元FindAccount#1234456AccountTableSMS100End有哪些最近3个月活跃的客户月均消费大于50并且登录了网厅充值和订购了数据业务且上月参与了某换机营销活动，本月不活跃的客户?DWTable1Table1etc..SearchATableStoreSalesTableResultSearchBTableStoreBillingTableResultJoinStoredTablesAggregateAnswerSetEnd经分系统的建设实施步骤建议做好数据支撑逐步沉淀专题应用支撑数据化运营全流程典型应用KPI及日常运营监控常用数据分析报表建设的关键要素打通数据接口，完成基础数据底层平台建设权限管理、需求上下线管理等一系列基础配套管理规范典型应用产品优化、营销支撑专题客户特征研究及全景视图建设的关键要素面向特定的角色，基于特定的业务问题，研究其解决之道，将其需要的信息服务，以“专题”的形式落地到经分系统典型应用产品运营支撑及管理营销全流程支撑及管理建设的关键要素将信息融入产品开发、运营的“生产流程”，为决策、管理、执行提供全方位支撑经分成为所有产品、营销、市场等必不可少的左膀右臂一期：数据提供系统二期：运营分析系统三期：数据化运营门户11数据仓库管理物理数据模型ETL设计开发应用开发系统体系结构设计测试验收与试运行项目具体实施步骤需求分析业务探索信息探索逻辑数据模型1.需求分析2.数据源分析3.数据模型设计4:ETL设计开发5.前端应用开发6.测试验收与上线经分项目建设方案1.需求分析主要任务：确定重点用户与数据源用户需求调研与确认数据源确认用户需求和数据源的筛选和分析交付项目：业务需求列表(BRL)功能需求列表(FRL)业务需求功能规格说明书（FRS）项目前期准备业务探索信息探索逻辑数据模型2.数据源分析13主要任务：数据源分析表级和字段级数据分析LDM分类数据源对用户需求的支持程度评估项目前期准备业务探索信息探索逻辑数据模型数据源分析是数据仓库项目实施的基础，其主要目标有如下四点：1：清晰了解业务系统现状、特点和数据情况；2：理清数据结构和了解数据业务含义；3：为设计LDM和PDM提供基础；4：为SDM和ETL提供基础。3.数据模型设计项目前期准备业务探索信息探索逻辑数据模型物理数据模型ETL设计开发应用开发数据挖掘服务系统体系结构设计主要任务1：进行原始数据分析建立实体模型建立实体间依赖关系完善并填入所有属性建立数据库逻辑模型主要任务2：转换逻辑数据模型（LDM）为物理数据模型定义主索引、次索引非正规化处理（demoralizations）数据库建立设计优化利用工具：ERWin，PB等3.数据模型设计15主要任务：数据源及其特性定义数据析取、转换和加载策略设计构建和测试初始加载的程序和处理流程构建和测试日常加载的程序和处理流程60%～70%的工作量在数据转换与加载上使用工具：脚本语言+SQL交付项目：《数据转换加载设计说明书》《数据映射（DataMapping）说明书》数据转换加载脚本（ETLScripts)加载流程控制（ETLProcessControl)数据仓库管理物理数据模型ETL设计开发应用开发数据挖掘服务系统体系结构设计元数据管理解决方案集成4.数据抽取转换与加载（ETL）16主要任务：前端应用体系结构设计OLAP应用设计前端应用开发（随机查询、预定义报表、OLAP应用）撰写用户使用手册用户测试验收使用工具：查询报表工具OLAP工具（Cognos)基于Web的开发工具其他开发工具交付项目：《前端应用体系结构设计说明书》《应用模块设计说明书》《用户使用手册》5.前端应用开发数据仓库管理物理数据模型ETL设计开发应用开发数据挖掘服务系统体系结构设计元数据管理解决方案集成经分系统开发人员角色分工角色名称工作内容PM项目总体管理系统架构工程师经分系统架构等工作数据仓库建模工程师仓库建模，兼ETL设计等工作ETL设计工程师ETL开发等工作接口开发工程师接口开发等工作报表开发工程师报表开发等工作前台开发工程师前台开发等工作OLAP开发工程师OLAP开发等工作专题分析工程师专题分析等工作目录1：经分基础介绍2：经分系统架构3：经分数据模型4：经分应用5：经分运营支撑6：经分系统建设关键点经分系统体系架构数据仓库存储和管理源系统数据采集回答业务问题析取清洗条件剔除家庭关系加载业务系统业务系统业务数据外部数据关系数据库管理系统聚集统计人工智能神经网络多维可视化EIS/DSS电子表对象语言开发企业数据仓库数据集市业务人员数据导入知识发现数据挖掘信息存取工具源数据数据源业务应用ETLEDW企业数据仓库数据ETL析取清洗条件剔除加载分析手段源系统数据数据采集层存储管理层分析应用层ITUsersBusinessUsers关系数据库管理系统对象语言即席查询多维分析企业级报表主动预警数据挖掘基本应用主题分析客户分析产品分析收入分析…..分析……专题分析营销评估产品分析…...分务…...分析……数据挖掘客户分群客户流失客户价值健康度分析……分析应用数据准备区数据仓库DW运行管理数据质量管理元数据的管理系统安全管理备份与恢复管理代码与系统变更性能与负载管理源系统……决策层管理层操作层建立基于数据仓库的企业经营分析平台经营分析系统常用的第三方软件数据（仓）库Hadoop/Hive/HbaseOLAPServerETL工具软件InfomaticCognos前端展现工具数据挖掘工具BOCrystalTeradataSPSSHyperion(Brio)IBMDB2OracleHyperionCognosIBMIMSASEMRMicrostrageAscentialDataStage…….MicrostrageAscentialMetastageDAGMetacenter元数据管理工具ETLETL：数据抽取（Extract）、清洗（Clean）、转换（Transform）、装载（Load）ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗，按照预先定义规则转换，最终将数据加载到数据仓库中去。经分门户1、针对不同用户群设计不同的展示界面和使用方式(公司领导层，产品经理，运营分析人员)2、提供功能不操作难易程度不同的几类展示界面3、针对管理层用户设计的界面，显示KPI业务指标及宏观的分析图表4、产品经理，运营分析人员等直接使用固定报表或者OLAP灵活的浏览数据。5、管理界面，设计实现监控、用户及权限管理、参数管理等功能的界面OLAP工具和数据挖掘工具CognosClementine目录1：经分基础介绍2：经分系统架构3：经分数据模型4：经分应用5：经分运营支撑6：经分系统建设关键点经分系统数据分层设计思想操作数据层，和业务系统的数据结构完全相同，增加层的定义,数据不做任何的转换，遵循三范式操作数据存储层做轻度转换后的数据层，数据遵循三范式的关系结构，是主题内的数据处理，是未来数据分析及处理的数据平台之一，为可扩展数据提供了灵活的接口跨主题整合的数据层，供专业分析人员及专题使用的主题宽表以及整合数据表；本层数据提高了二次数据使用的效率，同时为业务人员对供了一个分析数据的数据平台解决业务数据扩展性问题，提高了数据预处理和数据查询的性能和速度目录1：经分基础介绍2：经分系统架构3：经分数据模型4：经分应用5：经分运营支撑6：经分系统建设关键点应用类型功能应用对象业务需求统计报表统计分析报表，KPI•公司领导•业务管理和分析人员•了解各项业务指标的总体情况•了解各产品线的运营总体情况•产品经理人员•业务管理和分析人员•产品、业务运营信息展示•某产品功能上报数据统计互动分析应用即时查询•产品经理人员•业务管理和分析人员•模糊条件查询•精确查询•获取基础细节数据OLAP分析•公司领导•业务管理和分析人员•分析业务指标之间的关联关系，通过多维度分析，辅助制定总体策略。•产品经理人员•业务管理和分析人员•分析部门内部产品运营相关因素之间的关联关系，制定业务策略，为日常工作的开展提供支撑分析应用专题•产品经理人员•业务管理和分析人员•针对具体的工作目标，挖掘潜在信息•对核心问题进行深入分析预测业务流程集成BI分析结果和应用固化到业务流程•业务管理和分析人员•业务执行人员•营销流程自动化•业务及系统流程自动优化基本应用类型高级应用类型经分系统应用的五种形式目录1：经分基础介绍2：经分系统架构3：经分数据模型4：经分应用5：经分运营支撑6：经分系统建设关键点从经营分析系统建设向运营支撑转型建设运营维护经营分析发展战略经营分析系统现状•需求驱动•流程引入•构建应用平台应用系统架构•流程闭环•应用互动客户服务销售管理市场营销活动管理故障单管理集成定单管理计费服务使用数据采集结算（摊分）计算机/电话集成(CTI)联机采集电子帐单和付款(EBPP)网络模拟建设项目管理业务流程维护/派工网络资源管理号码管理资源调度客户自助服务内容服务/增值服务/电子商务企业资源规划财务管理人力资源库存管理采购管理项目管理储值中心(ChargingGateway)销售点终端(POS)服务配置管理服务开通管理网络管理性能管理(SLA)防欺诈管理数据仓库决策支持系统忠诚度管理知识管理&办公自动化服务控制管理/目录服务渠道佣金管理服务供应商／运营商接口网元服务器网元EMS金融机构12345678910111215161718192021222324252627282930313233343536373839404142444546474849505152535455565758596061626566676869707163647475网元网元管理层网络管理层服务管理层合作伙伴/运营商企业门户14134373业务支持系统运营支持系统企业日常作业支持系统运营支撑经营分析建设规划•平台建设进入稳步发展阶段•业务发展，需求旺盛，应用建设进入蓬勃发展阶段•流程贯穿，应用平台的引入成为系统建设的关键•面向业务，支撑运营成为焦点组建专业的经营分析团队31经营分析团队执行人员管理人员………..经营者分层服务于内部人员计划组织协调控制经营分析服务对象目录1：经分基础介绍2：经分系统架构3：经分数据模型4：经分应用5：经分运营支撑6：经分系统建设关键点经营分析系统建设的关键点业务导向分