R在BI中的應用和前景

1、R在BI中的應用和前景李艦2001.092005.07 中國人民大學 統(tǒng)計學院2005.092007.06 北京大學 軟件與微電子學院 電子服務2007.072008.10 Siemens Ltd., China, Healthcare, Performance Controlling Finance Analyst2008.11 上海源略數(shù)據(jù)服務有限公司 BI顧問目錄BI簡介R在BI中的應用一個例子R在BI中的前景什么是BIBusiness Intelligence，商務智能？OLAP數(shù)據(jù)挖掘數(shù)據(jù)倉庫機器學習決策支持人工智能專家系統(tǒng)統(tǒng)計學相關概念1950s 人工智能（邏輯推理）1960s 人

2、工智能（決策支持）1970s 人工智能（專家系統(tǒng)）1980s 人工智能（機器學習）1980s 數(shù)據(jù)挖掘統(tǒng)計和數(shù)據(jù)挖掘相同點基于歷史數(shù)據(jù)思維方式方法和模型不同點學科背景目的性技術實現(xiàn)BI與DM，DW，OLAPDW，數(shù)據(jù)倉庫DM，數(shù)據(jù)挖掘OLAP，聯(lián)機分析處理商務智能是企業(yè)利用現(xiàn)代信息技術收集、管理和分析結構化和非結構化的商務數(shù)據(jù)和信息，創(chuàng)造和累計商務知識和見解，改善商務決策水平，采取有效的商務行動，完善各種商務流程，提升各方面商務績效，增強綜合競爭力的智慧和能力 。企業(yè)信息化的發(fā)展BIBI常見架構企業(yè)數(shù)據(jù)中心數(shù)據(jù)倉庫Data WarehouseETLETL數(shù)據(jù)源OLTP 系統(tǒng)OLAP Serve

3、r多維數(shù)據(jù)庫業(yè)務系統(tǒng)財務系統(tǒng)銷售系統(tǒng)客服系統(tǒng)數(shù)據(jù)集市Data mart數(shù)據(jù)集市Data martETLETLETL數(shù)據(jù)挖掘Data Mining統(tǒng)計報表ScoringScoring多維分析挖掘分析查詢及其它應用分析師元數(shù)據(jù)(Meta Data)管理系統(tǒng)管理目錄BI簡介R在BI中的應用一個例子R在BI中的前景MVC三層架構View 表示：顯示輸入輸出數(shù)據(jù)(可以是 HTML，可以是一個 windows 應用)Model 業(yè)務邏輯和數(shù)據(jù)：基于輸入和定義的業(yè)務流程執(zhí)行計算 或其它操作Controller 協(xié)調view 和 model，在它們之間交換數(shù)據(jù)當今流行開發(fā)框架R的位置盡可能少寫代碼是系統(tǒng)開發(fā)的

4、趨勢當前框架基本已做到只在業(yè)務邏輯寫代碼面向對象與基于矩陣分析性系統(tǒng)的關鍵在于數(shù)據(jù)模型R用作分析引擎相關平臺Rserve + JRclient/Rserve/Rserve是一個R的服務器，供其他程序調用JRclient是一個JAVA類庫，可看成客戶端其他開源平臺Eclipse + lombozApache TomcatMySQLHibernate + Spring目錄BI簡介R在BI中的應用一個例子R在BI中的前景系統(tǒng)描述一個小型的OLAP引擎基于MySQL數(shù)據(jù)庫實現(xiàn)基本的OLAP功能建立立方體切片 (slice)上卷 (rollup)鉆透 (drill through)未包含展現(xiàn)層相關工具M

5、ySQLRDBI_0.1-10RMySQL_0.5-7包含函數(shù)cube (str1 , str2 , str3 , str4)slice (CUBE, str, value)drillthrough(CUBE, value1, value2, value3)rollup (CUBE, str)函數(shù)示例建立立方體cube1 drillthrough(cube1,02,1111,4) selltime goodsid transid realprice count payment1 2005-2-5 10:27:08:923 20130008 X20050205010013 35.6 2 64.0

6、2 2005-2-5 10:26:47:073 20350004 X20050205010013 22.0 4 88.03 2006-2-11 14:34:40:15 20180114 X20060211020040 4.0 10 40.04 2006-2-14 12:03:14:49 11110086 X20060214020024 33.0 1 33.05 2005-2-6 13:13:46:35 11110015 X20050206010044 38.9 4 155.66 2005-2-13 08:12:19:606 20350013 X20050213010001 37.8 6 226

7、.87 2005-2-4 18:59:18:63 11110018 X20050204010069 15.2 2 30.48 2005-2-4 19:00:23:783 11110007 X20050204010069 57.2 1 57.29 2005-2-6 20:27:45:423 20130037 X20050206010103 45.9 2 73.610 2005-2-6 20:27:39:033 20130034 X20050206010103 88.0 2 176.011 2005-2-4 08:19:25:983 11110007 X20050204010002 57.2 2

8、114.412 2005-2-4 08:19:23:43 20350016 X20050204010002 49.0 1 45.013 2006-2-17 09:35:12:81 11110001 X20060217020009 19.8 1 19.814 2006-2-17 09:38:23:62 20180019 X20060217020009 20.0 2 40.015 2005-2-6 12:05:20:736 11110051 X20050206010028 5.5 24 132.016 2005-2-6 17:22:40:946 11110046 X20050206010081 2

9、.0 48 2160.017 2005-2-10 18:03:45:22 20180203 X20050210010049 480.0 1 480.018 2005-2-4 12:59:09:836 20130037 X20050204010033 45.9 1 36.8目錄BI簡介R在BI中的應用一個例子R在BI中的前景市面上的BI產(chǎn)品07年10月，BO被SAP收購07年11月，Cognos被IBM收購定制BI系統(tǒng)的優(yōu)勢更靈活分析功能強節(jié)約成本更能適應需求開源開源的BI工具 Mondrian是開源項目Pentaho的一部分，是一個用Java寫成的OLAP引擎。它實現(xiàn)了MDX語言、XML解析、J