商务智能平台应用研究

浙江科技学院毕业设计(论文)1商务智能平台应用研究杨志蓉（经济管理学院指导教师：顾忠伟）摘要：商务智能在中国的发展方兴为艾，竞争也日趋激烈。如何更多的了解商务信息，并将这种信息转变为“知识”，从而为管理人员方便，迅速地提供更准确，高质的信息以支持商务智能，已经成为企业商务决策的一个紧迫的课题。Pentaho是一个完整的开源BI平台。PentahoBI项目提供了企业级的报表、多维分析、仪表盘、数据挖掘和工作功能、帮助组织更加有效率的运营本文是基于Pentaho平台进行BI研究，分析了零售业所处的竞争环境和自身的特点，然后提出了完整的针对零售业的商务智能解决方案。该解决方案的主要特点是：提供一体化的商务智能解决方案包括查询、报表、分析、仪表盘、数据整合及数据挖掘等各方面完善的功能关键词：商务智能；Pentaho；数据仓库；数据挖掘Abstract：Businessintelligence(BI)hasaverygoodprospectinChina,butthecompetitionwillbecomefiercerandfiercer.Theproblemhowtounderstandfurtherbusinessinformationandtransferthemintotheknowledge,soasconvenientandrapidtoprovidemanagerswithbetteraccurateandhighqualityinformationtosupportvaluablebusinessdecision,hasbecomeaveryurgentprojectwhichthebusinessdecisionofenterprisesarefacing.PentahoisaintegratedBIplatforminOpenSourceBusinessIntelligence.ThePentahoBIProjectprovidesenterprise-classreporting,analysis,dashboard,dataminingandworkflowcapabilitiesthathelporganizationsoperatemoreefficientlyandeffectively.ThispaperbasedonthepentahoBIplatformforresearch,analyzesthecompetitionenvironmentandcharacteristicsoftheretailindustry,andthenputsforwardcompleteBIsolutions.ThemaincharacteristicofpentahoBIsolutionistoprovidetheperfectfunctionsofQuery、RePorting、Analyze、Dashboard、DataIntegrationandDataminingfortheintegrationofbusinessintelligencesolutions.Keywords：BI；Pentaho；DataWarehouse；Datamining第一章绪论第一节引言随着全球信息化的发展，现代企业信息化进程得到巨大发展和广泛应用，各种业务系统的广泛应用以及互联网的蓬勃发展，为计算机应用系统的运行积累了大量的历史数据。但在很多情况下，这些海量数据在原有的作业系统中是无法提炼并升华为有用的信息并提供给业务分析人员与管理决策者。现在，大多数企业并不缺少数据，而是苦恼于海量数据而总嫌知识不够。无怪乎未来学家奈斯比特（JohnNaisbitt）惊呼：“人类正被信息淹没，却饥渴于知识。”面临浩瀚无边的数据，人们呼唤从数据的汪洋大海中去芜存精，去伪存真。如何才能不被信息的汪洋大海所淹没，解决企业中普遍存在的“数据监狱”和“数据贫穷”现象，为企业决策分析人员方便、迅速地提供更准确、高质的信息，已成为企业当前迫切需要解决的问题，而传统的数据分析工具、方法对海量数据的处理和及时、林杰斌刘明德陈湘编著《数据挖掘与OLAP理论与实务》清华大学出版社浙江科技学院毕业设计(论文)2准确的商务分析力不从心，因此商务智能技术就是在这样的背景下应运而生和蓬勃发展，并越来越显示出强大的生命力。本文就是要探讨如何针对企业现存的问题，通过收集、整理和分析企业内外部的各种海量数据，转换成更有价值的商用信息，以便用于支持决策，提出可行性商务智能应用解决方案。第二节论文背景及意义信息时代，对信息处理和利用能力的强弱成为决定企业兴衰成败的关键。现今功能强大的以交易为基础的信息系统已经在各个主导工业领域变得越来越普遍。这一趋势极大地改变了中国乃至全球的市场架构，并迫使每个企业不得不全力以赴来获得竞争中的优势地位，包括使用大量的商务智能系统。因为商务智能系统使得企业能对数据进行二次开发和利用，将数据转为信息，信息转为知识，再将知识转为企业的竞争优势。作为当今企业业务主管或者信息主管，您会认识到无论您身处于哪一个行业，我们都面临着知识经济时代的挑战。您是否能够最大限度地使用信息资源来管理和影响企业决策流程，将决定企业是否能拥有最大程度的竞争优势。举例来说：在超级市场通过条码扫描，把每一宗商品交易输入数据库中，一个中型超市买卖的商品就数万种，每天的交易量上万笔，如此大量的数据，传统的数据库不能很好的回答老板所关心的问题：商品在不同季节或一天的不同时间中销售量有何变化规律？商品A销售量的增加是否会同时带动商品B的销售？如何调整商品的资金比例以达到最佳的资源调配？各种商品的销售之间是否存在一定的关联（如美国WallMart超市通过“知识发现”技术意外地发现，尿布和啤酒常常摆在一起销售，原来先生们为小孩买尿布时又随手带回啤酒，而WalMart将尿布和啤酒放在同一货架，使得销售量双双增长）？这些问题，一方面是希望对当前情况进行更加深入的了解，比如哪个商品销售创造的利润最可观，另一个方面是希望能够预测未来可能发生的情况，比如预测未来六个月内顾客可能希望购买的商品。“了解现在，预测未来”，这正是商务智能可以完成的工作。①那么，在商务智能系统中所有这些宝贵信息是从何得出呢？令人吃惊的是，几乎所有的企业都已经具备了回答以上问题的原始数据。事实上，企业的信息生产系统每天都在产生并储存大量的产品市场和客户信息，也许信息来自于销售，预定，客户服务以及技术支持系统。而企业面临的真正挑战是如何从中发掘出全部的潜在商机。大多数企业只利用了很少比例的数据资源用于战略分析，而余下的数据资源（经常与其他一些外部资源混杂在一起，像各种政府报告，研究成果，销售记录等等）将作为一座金矿等待被发掘，被筛选。在过去的几年里，几乎每个企业都建立了自己的信息中心，收集和整理了大量的历史数据。但是这些数据数量之大远远超出了可以控制和理解的范围，数据库变成了“数据监狱”，数据成了数据监狱中的“囚犯”，有些数据成为了历史数据，等于被判处了无期徒刑。怎样将这些“数据囚犯”变成有价值的生产力要素，就是使用商务智能的目的所在。①林杰斌刘明德陈湘编著《数据挖掘与OLAP理论与实务》清华大学出版社浙江科技学院毕业设计(论文)3第三节国内外研究现状企业大量的数据带来巨大的动力，为企业BI舞台上实现商务解决方案提供了竞争优势。支持商务决策，数据须从整个企业中集合起来，以便分析和解释。商务在如今的快节奏世界中寻找自身优势，它们欣赏信息被快速传输到BI中的方式，因此，BI在快速发展.根据国际数据公司（IDC，InternationalDataCompany）预计，2007年至2008年，由于“商业智能大众化”的需求不断增长，因此在商业智能应用软件领域将出现下一波投资热潮，人们需要可扩展性更高、界面更易于使用的应用软件。国内外都重视商务智能BI的价值，以下是IDC预测，从现在到2007年，BI将以20.3％年复合增长率发展，届时将达到108亿美元。图1-1IDC商务智能预测2006-2007年中国商业智能发展报告中阐述：从全球范围来看，商业智能(BI)已经成为最重要的信息系统。从国内来看，商业智能已经被越来越多的企业管理者所认识，其中包括金融、电信、保险、能源、零售等行业的决策者。商业智能已经成为这些行业信息化建设的重中之重。据ChinaBI统计，2006年中国大陆地区的BI产品许可证市场容量约为8亿元人民币，同比2005年增长33%；BI系统集成（BI软件系统，但不包括许可证）市场容量约为6亿元人民币，共计14亿元。BI市场带动相关软硬件销售额为5亿元人民币。在未来几年内商业智能市场需求旺盛，市场规模增长迅速。一、国外BI厂商简介按照起源来分，有专门做商业智能的厂商和原来的数据库厂商。第一类专门做商业智能的厂商，技术先进、产品扩展性好，已经占领了中国商业职能的大部分市场份额，主要软件厂商有SAS，BusinessObjects等。例如：SAS商业智能解决方案主要用于快速做出明智的决策及促使企业或组织进步，SAS行业解决方案可以帮助客户更好、更准确地传达决策信息，提升决策能力和决策水平，从战略管理和运营管理两个层面同时推动企业发展。第二类是从原来的数据厂商发展而来的，主要有Sybase、IBM、Oracle等，它们通常提供完整的解决方案，产品各具特色，集成度高，也占有一部分市场份额。二、国内BI厂商简介国内知名的BI独立软件开发商数量较少，规模仍然较小，但是发展迅速，基本都处于良性循环。例如：广州尚南、润乾软件、奥威智动等都是国内知名的BI独立软件开发商。浙江科技学院毕业设计(论文)4例如：北京润乾软件技术有限公司主要从事企业级报表工具产品的研发和推广，一直致力于在平台产品领域的探索，其自主独创的数据统计模型是迄今为止唯一能零编码处理复杂非线性报表的软件，成为报表领域的新一代革命性产品，润乾曾荣膺“2006中国商业智能最佳报表软件厂商”称号。三、国内BI发展的地区分布国内不同地区的BI发展水平差异巨大，根据ChinaBI网站访问者所在地计算出各地区的BI发展指数。图1-2中国重要省市的BI发展指数四、国内BI行业发展随着中国商业智能市场逐步走向成熟，用户日趋理性，传统行业中精通BI技术的人越来越多，因此BI发展更加务实。根据ChinaBI掌握的需求情况，各行业的BI发展水平参差不齐。①图1-3中国BI各行业发展比例①2006-2007年中国商业智能发展报告httP://www.chinabi.net浙江科技学院毕业设计(论文)5第四节论文的框架本论文的总体研究框架可以表示为下图：第一章：绪论（引言，研究的背景和意义，研究的现状，创新点，研究方法和论文结构）第二章：商务智能研究概述第三章：pentahoBI应用解决方案第四章：基于pentaho平台的BI开发第五章：pentahoBI平台应用实例第六章：pentahoBI零售行业实例应用分析第七章：总结和展望图1-4论文技术走势图本论文共分为七章。第一章为绪论部分，主要介绍了论文的背景及意义，国内外的研究现状，论文的框架、创新点及研究方法。首先讨论了“知识经济”时代激烈市场竞争环境中，企业普遍存在的“数据监狱”和“数据贫穷”现象，由此给出本文研究商务智能企业应用解决方案的现实意义。围绕本论文研究的宗旨和前提，绪论给出了本论文拟解决的几个问题，并围绕这些问题组织本论文的总体研究框架。最后，绪论部分还指出了本论文的主要创新点以及采用的研究方法，同时为了本论文研究的科学、顺利开展，对论文的进度安排做了个规划，以保证论文研究的整体进展。第二章是本论文研究的理论基础，主要通过文献研究，首先给出了商务智能的综述，进而介绍了传统信息系统的不足，商务智能的历史发展，商务智能系统处理流程和框架，并阐明商务智能业务应用价值。本章一方面为后面的研究做了理论铺垫，另一方面也有助于我们发现当前研究的不足之处，表明了本论文研究的理论意义。第三章通过循序渐进的不断学习研究Pentaho理论和技术，