房地产集团数据分析与监测方案111

房地产集团数据分析与监测方案北京华通伟业科技发展有限公司2016年2月2日星期二第2页议题BI整体解决方案BI服务能力讨论及答疑第3页BI分析平台是一个对数据进行采集、整理、汇总、存储、查询、展现和交付的集成项目，主要包括4个数据处理层次结构化数据信息交付层数据存储层数据整理层原始数据层企业级数据平台数据展现层数据查询分析平台内容分析BI内容访问平台日志统计展示图表Excel数据在线录入展示报表灵活分析ERP系统CRM系统HR系统非结构化数据数据抽取、清洗、转换财务集市生产集市人力集市销售集市其他集市固定报表统计图表多维分析地图分析Office应用电子报告个性化设置元数据管理系统运维监控第4页BI分析平台是一个对数据进行采集、整理、汇总、存储、查询、展现和交付的集成项目，主要包括4个数据处理层次结构化数据信息交付层数据存储层数据整理层原始数据层企业级数据平台数据展现层数据查询分析平台内容分析BI内容访问平台日志统计展示图表Excel数据在线录入展示报表灵活分析ERP系统CRM系统HR系统非结构化数据数据抽取、清洗、转换财务集市生产集市人力集市销售集市其他集市固定报表统计图表多维分析地图分析Office应用电子报告个性化设置元数据管理系统运维监控信息管理产品数据仓库产品商务智能产品展现门户第5页迁移改善解锁控制业务用户界面(信息管理)技术用户界面(数据服务)BusinessObjectsDataServices4.0运行时间架构和服务统一的元数据抽取、转换、加载数据质量概要分析文本分析统一管理环境(计划调度，安全认证,用户管理)源/目标连接器商务智能应用成功的关键--无缝获取企业关键业务数据（无论结构化还是非结构化/实时还是非实时）预算数据关系型数据库ExcelEmails普通文件，Excel和XML)WebService大型主机业务系统DataService工具是专业的ETL工具，是企业信息管理产品线的主要工具，集数据整合,数据质量,及文本分析于一体第6页BI分析平台是一个对数据进行采集、整理、汇总、存储、查询、展现和交付的集成项目，主要包括4个数据处理层次结构化数据信息交付层数据存储层数据整理层原始数据层企业级数据平台数据展现层数据查询分析平台内容分析BI内容访问平台日志统计展示图表Excel数据在线录入展示报表灵活分析ERP系统CRM系统HR系统非结构化数据数据抽取、清洗、转换财务集市生产集市人力集市销售集市其他集市固定报表统计图表多维分析地图分析Office应用电子报告个性化设置元数据管理系统运维监控信息管理产品数据仓库产品商务智能产品展现门户第7页数据存储层主要用于存储加工处理后的业务数据，考虑到未来的应用扩展，将按照数据仓库的理论进行数据建模设计信息交付层数据存储层数据抽取层源系统层数据展现层平台安全管理数据交换区•结构几乎和源系统一致•部分数据保持全量•少量数据保持少量历史基础整合层•面向整合•主题设计•提供规范和共享公共汇总层•初级的数据加工•明细VS汇总•依赖对应用的提炼第8页数据存储层的技术方案有2种选择：基于SAPBW的多维数据存储方案和基于关系型数据库的关系型存储方案比较优势不足基于SAPBW的多维存储•与SAPERP无缝集成•内置基于SAPERP的数据抽取接口•适用于需要真正进行多维分析的场景•BW开发工作量大，实施费用较高•针对非ERP数据源，增量抽取技术难度大•数据量上TB，BW查询速度比较慢，后续使用SAP针对BW提供的Hana方案可以解决性能问题，需要硬件及软件的再次投入基于关系型数据库的关系型存储•基于主流关系型数据库，通用技术，灵活性强，可扩展性强•开发周期和成本相对较短•需要专业的ETL工具处理SAPERP以及非ERP的数据源•通过雪花型结构模拟多维分析模型，不支持真正的多维分析工具第9页BI分析平台是一个对数据进行采集、整理、汇总、存储、查询、展现和交付的集成项目，主要包括4个数据处理层次结构化数据信息交付层数据存储层数据整理层原始数据层企业级数据平台数据展现层数据查询分析平台内容分析BI内容访问平台日志统计展示图表Excel数据在线录入展示报表灵活分析ERP系统CRM系统HR系统非结构化数据数据抽取、清洗、转换财务集市生产集市人力集市销售集市其他集市固定报表统计图表多维分析地图分析Office应用电子报告个性化设置元数据管理系统运维监控信息管理产品数据仓库产品商务智能产品展现门户第10页BI产品是多个数据查询分析工具的组合，可实现仪表盘、统计图表、灵活查询、格式报表等分析形式BusinessIntelligencePlatform(BIP)DashboardAnalysisCrystalReportsWebIntelligenceBIWidgets数据仓库业务系统LiveOffice其他Explorer语义层（Universe）BIMobile第11页基于语义层技术，把数据结构转换成查询分析模型，让IT部门专注于需求的分析和总结，让业务用户自助查询所需数据语义层由IT部门负责设计，设计过程简单，更多的时间需要花在对需求的总结提炼和后台数据结构的分析上语义层-BI商务智能平台的核心组件数据源语义层：BOUniverseCrystalReportWebIntelligenceDashboardRegionRegionIDStateCityStoreNameClassesQuarterYearMonthQuantitySoldSalesRevenueStoreDateSalesMeasures第12页Universe的示例–设计过程演示语义层是将数据库中的列(字段)按查询分析主题重组为面向用户的对象用户面对的是熟悉的业务对象(如产品、日期、销售额)，而不是数据库的复杂结构（如Product_Name,Order_Date,Sales_Rev）业务人员无需学习SQL，即可从数据库中查询数据技术人员则可潜心维护系统和开发语义层从现在开始，将分析权交给用户，实现信息主张！第13页WebIntelligence-即席查询分析工具，面向业务用户，可实现灵活查询、钻取分析、格式报表等简单易用拖拽式的操作界面不需要了解底层数据结构适用于非技术型用户提供多种数据展现方式支持简单的表单查询支持复杂的中国式报表支持进行数据钻取分析支持多种数据源关系型数据库多维数据库文本文件WebIntelligence操作演示第14页使用WebIntelligence可以实现图文并茂的分析报表，包括表格和多种统计图第15页使用WebIntelligence来编制格式化报表，如税务报表、统计报表、会计报表、管理报表第16页支持广泛的数据源关系型数据库多维数据库Excel、Txt、XML等文档创建各式各样的报表简单的查询表单图文并茂的分析报表中国式格式化报表多种分发形式导出为Excel、Word导出为PDF保存在BOE报表服务器开放式的报表接口JavaSDK.netSDKCrystalReports-水晶报表，企业级报表工具，主要用来出具大数据量的实时格式化报表第17页CrystalReports展示样例第18页Dashboard–仪表盘，世界领先的数据可视化工具，主要用来设计交互式的图表简单易用可视化的设计界面不需要额外的编程适用于业务人员展示结果丰富提供多种类型的统计图各式各样的仪表盘可以创建“如果—就”分析，探索不同的结果多种分发形式在PowerPoint、PDF、Outlook和web中发布生动的数据和模型基于业界最值得信赖的BI平台上，确保信息安全性第19页使用Dashboard用不同的部件显示多个业务主题的历史数据，并进行数据对比、预警等分析第20页使用Dashboard可以构建支持预测的What-if(因果分析)模型，通过调节相关因素分析各因素对结果的影响第21页Dashboard案例-日照港集团总调度船舶实时情况第22页Dashboard案例-日照港集团分公司吞吐量分析第23页Dashboard案例-单船成本分析第24页简单易用类似于搜索引擎式的数据搜索工具自动选择合适的表格和图形显示查询结果适用于非技术型用户支持多种数据源支持多种导出结果Explorer-搜索查询工具第25页BusinessObjectsAnalysis,editionforOLAP简单易用拖拽式操作界面，比较直观基于Web形式适用于非技术型用户两种展现方式交叉表统计图表支持多维数据源SAPBW3.5andBI7MicrosoftAnalysisServices2000SP4,2005SP1andSP2,2008OracleHyperionEssbase7.0.x,7.1.x,9.1.x,9.3.x,etc.OracleOLAP10gIBMOLAPV8.2第26页AnalysisforOLAP展示实例第27页把电脑桌面做为监控KPI的门户在桌面上直接显示运营数据依赖于BIPlatform支持Dashboard文档,Webi文档支持数据的实时刷新支持警报功能可以从多个报表系统上读取报表、文档BIWidgets-BI微件第28页在Office办公软件通过BIPlatform访问企业运营数据可以直接访问CrystalReport报表、WebIntelligence文档或者是直接基于Universe建立查询，访问后台数据LiveOffice-Office插件第29页在移动设备上通过BIPlatform访问并展示企业运营数据可以直接访问CrystalReport报表、WebIntelligence文档可以基于Explorer进行数据分析可以访问Dashboard仪表盘MobileBI–移动办公第30页报表管理平台CrystalReports报表WebIntelligence文档Analysis分析文档Dashboard仪表盘Office文档/PDF文档/HTML提供了多种管理工具中央管理控制台中央配置管理器迁移和导入向导支持多种展现形式自带的内容访问门户提供WebService提供Office集成提供SDK与其他系统进行集成WEB服务层J2EESDK.NETSDKWebServices内容管理CrystalReports文档WebIntelligence文档OLAPIntelligence文档ExcelPowerpointWordAdobeAcrobatHyperlinksPrograms展现层客户端分析工具及应用程序Portal和Web应用程序Office集成仪表盘和记分卡平台服务层安全调度、告警服务资料库存储和访问发布和分发缓存和失效切换审计服务绩效管理引擎协作服务系统管理业务规则数据访问层MetadataOLAPServersERP/CRMXMLODBCandnativedriversDataIntegration工具元数据设计工具迁移和导入工具管理控制台BIPlatform-商务智能平台第31页BO产品的应用流程角色：开发人员2任务：开发分析报表工具：CrystalReportsWebIntelligenceDashboardAnalysisi商务智能平台BIPlatform报表/图表发布角色：系统管理员任务：管理和维护系统运行工具：管理工具/管理Portal角色：业务用户/报表使用者任务：浏览和使用报表工具：通过电子邮件订阅报表使用WebIntelligence工具进行数据的灵活查询分析角色：业务用户/报表使用者任务：浏览和使用报表工具：通过Portal在WEB上浏览报表在web上使用Explorer进行自主的数据分析角色：分析人员/管理人员任务：浏览和使用分析图表工具：通过移动终端查看和分析数据角色：开发人员1任务：开发语义层工具：Universe设计工具信息设计工具发布语义层第32页BI分析平台是一个对数据进行采集、整理、汇总、存储、查询、