SAPHANA技術(shù)基礎(chǔ)知識(shí)

根據(jù)SAP的字面意思理解，SAPHANA是硬件和和軟件組合起來一個(gè)解決方案，容許客戶分析大量的數(shù)據(jù)，而且是以接近RealTime的方式來同步數(shù)據(jù)，不需要花費(fèi)太多時(shí)間在數(shù)據(jù)傳輸上，目前HANA的版本是1.0.集成了一些SAP的組件，比如IMDB(In-MemoryDatabase),Sybase的Replication技術(shù)，以及SAPSTR(LandscapeTransformationReplicator)等等。SAPHANA作為一種第3方硬件合作伙伴共同合作而優(yōu)化打造的應(yīng)用，目前支持和認(rèn)證的硬件廠商，包含HP,IBM,思科，富士通，戴爾5家合作伙伴，據(jù)說給聯(lián)想LENOVO做的HANA方案，是使用的聯(lián)想自己的服務(wù)器，應(yīng)該也可以。但是不但AP通用實(shí)施的合作伙伴范圍之內(nèi)。關(guān)于IMDBSAPIMDB(In-MemoryDatabase)是一個(gè)內(nèi)存數(shù)據(jù)庫的混血兒，不僅包含行存儲(chǔ)，也包含列存儲(chǔ)，而且還有機(jī)遇對(duì)象存儲(chǔ)的數(shù)據(jù)數(shù)據(jù)庫技術(shù)，這么設(shè)計(jì)的主要目的是用來充分挖掘和使用現(xiàn)代多核CPU架構(gòu)設(shè)計(jì)所帶來的并發(fā)處理能力，毫無疑問，SAP的這種應(yīng)用能從中受益頗多。IMDB是SAPHANA的核心，用來幫助客戶提升運(yùn)營(yíng)效率，敏捷而且靈活，下圖來自5人「HANA的TechnologyofManual中圖片。AdminClient□EndUserClientsSAP(h-Mernory

Computing

Studio

的怡枇加喈后

HMmAdminClient□EndUserClientsSAP(h-Mernory

Computing

Studio

的怡枇加喈后

HMm而出腦rt/bij■SBOPEnLQipf^SD■MSEXCELIMDB支持多種數(shù)據(jù)源，目前支持3中數(shù)據(jù)replication方法，并且提供了一個(gè)管理界面，這邊叫adminstudi。，一般的監(jiān)控和新modeling都可以在這里實(shí)現(xiàn)。然后支持2種客戶端，查看基于內(nèi)存存儲(chǔ)而產(chǎn)生的報(bào)表。SAPHANAReplicationTechnologies-數(shù)據(jù)復(fù)制技術(shù)UserInterfacesD3帛h匕口社「d%Web

Kcetsius,ExplorerSAPSAPIMDB所產(chǎn)生報(bào)告和分析所需要的業(yè)務(wù)數(shù)據(jù)是需要從源系統(tǒng)復(fù)制到SAP的IMDB.具體怎么復(fù)制這里現(xiàn)在提供了UserInterfacesD3帛h匕口社「d%Web

Kcetsius,ExplorerSAPSAPin-MemoryComputingAdministrationSAPIn-Memory

ComputingStudioSAPIn-MemoryDatabaseSAPHANA由IMDB和IMDBAdminStudio組成，UI主要用來管理hana的應(yīng)用裝置，有點(diǎn)類似BO的儀表盤界面SourceSystem,例如ERP用于支持?jǐn)?shù)據(jù)復(fù)制的軟件組件ReplicationMethodsOverviewSourceSystemSAPERPPin-Memo

DatabaseSAPHANASourceSystemSAPERPPin-Memo

DatabaseSAPHANATrigger-BaaedReplicationETL-BasedReplicationDatabaseLoS

FileLog-BasedReplicationDatabaseLoS

File-^7* t-?.fe-.JTrigger-BasedReplication這里暫且稱呼為實(shí)時(shí)模式，雖然也需要一個(gè)LandscapeTransformationReplicator實(shí)時(shí)撲捉SAPERP的數(shù)據(jù)庫系統(tǒng)的修改變化，然后幾乎是是實(shí)時(shí)的就同步到HANA中，這個(gè)Replicator可以直接安裝在ERP上，比較方便，也可以獨(dú)立的安裝在一個(gè)服務(wù)器中，也用于撲捉實(shí)時(shí)ERP的數(shù)據(jù)庫修改變化。ETLBasedReplication這里暫時(shí)稱呼為BO模式，需要用到BO的DataService組件，意味著需要有BO,優(yōu)點(diǎn)是可以對(duì)抽取的數(shù)據(jù)做合并和加工處理，支持多數(shù)據(jù)源和多目標(biāo)系統(tǒng)LogBasedReplication這里暫時(shí)稱呼Sybase模式，因?yàn)檫@種模式對(duì)于數(shù)據(jù)的要求是有依賴的，而前2種都是獨(dú)立于任何任何數(shù)據(jù)庫的，一般不推薦使用（SAP官方說法），除非客戶制定使用這種方式。所以一看數(shù)據(jù)復(fù)制技術(shù)的排序方式，就知道了，肯定是重要和好的放在前面，這就像在支持硬件中,HP惠普排名第一一樣，總不能以上來就直接吧LOGBASED復(fù)制技術(shù)，放在第一，然后跟著說這種方式不推薦吧！所以拍大腿也知道，前面兩種是重點(diǎn)對(duì)象。詳細(xì)對(duì)比，SAPHANATOM上有詳細(xì)描述，3中方式各有千秋，看你的的業(yè)務(wù)需要什么樣的模式了，這里不談好壞，只談差異！下面看看HANA的其他的一些話題，例如安全和備份恢復(fù)的問題，硬件選擇等等。架構(gòu)篇原文地址：http://LiuA/archives/1776也是剛剛開始學(xué)習(xí)HANA的一些知識(shí)，一邊看書一遍做筆記，說到底無非是用自己的語言來理解標(biāo)準(zhǔn)幫組文檔所講解的意思，肯定有理解失誤的地方，畢竟沒有參加過標(biāo)準(zhǔn)培訓(xùn)，即使有培訓(xùn)，從老師那邊來的知識(shí)也不可能是完整的傳授過來，中間多少的知識(shí)遺漏是正常的，所以多看看HELP的文檔，應(yīng)該可以原汁原味的理解作者的意思。ArchitectureOverviewInMemoryComputingEngine(IMCE>andSurroundingsIMCEStudiciERPR叩II臼ioflAgomMSE3GJientetplaniied.eg.JBUEjcplcrerOdshboarrlDc&ignSAPBI4jniwefses(WebL...)BI4AnaiysiaInMemoryGomputingEngineIMCEStudiciERPR叩II臼ioflAgomMSE3GJientetplaniied.eg.JBUEjcplcrerOdshboarrlDc&ignSAPBI4jniwefses(WebL...)BI4AnaiysiaInMemoryGomputingEngineSession-ManagementRepljcationServerSAPBusinessOb10cl忸印4DataServices-DesignerSBOBF4InformationDesignToolLoad

CcKHnollerH擔(dān)qu的IProcessing/￡j?cutionContnolSQLPara刖 MDXStSLScriptCalcEngiD.i?R函lioru|Engirb&sRowStoreColumnStcKn&ManagerTransactionManagerAutharizationOnager這張圖片是從SAPHANA的PPT上剪輯下來的，主要包含了SAPHANA的應(yīng)用架構(gòu)和在應(yīng)用中會(huì)涉及到一些周邊軟件環(huán)境。HANA架構(gòu)下的親戚關(guān)系IMCEStudio用于HANA的系統(tǒng)管理，以及信息建模（各種維度，KPI等）ERP這里指的是一般的數(shù)據(jù)源，會(huì)從ERP過來過來的業(yè)務(wù)數(shù)據(jù)BOBI4BO的BI4.0平臺(tái)，主要提供ETL的核心功能，源系統(tǒng)數(shù)據(jù)導(dǎo)入，刪選/合并/格式化數(shù)據(jù)，再導(dǎo)入目標(biāo)系統(tǒng)OtherSourceSystem其他的數(shù)據(jù)源，由于BI的In-MemoryComputingEngineIMCE的核心組件部分）Clients客戶端的工具，用什么方式瀏覽工具（查看報(bào)表或者查詢），或者用什么工具來展現(xiàn)數(shù)據(jù)（報(bào)表設(shè)計(jì)工具，是用Explorer還是用WebIntelligence,或者用CrystalReport也是可以的，這里不多加描述）和數(shù)據(jù)導(dǎo)入相關(guān)的Modeling工具中可以創(chuàng)建數(shù)據(jù)庫表ReplicationAgent（這里可能是使用SLT實(shí)時(shí)同步的情況下），可以安裝在ERP中作為一個(gè)但單獨(dú)的組件，監(jiān)控應(yīng)用層的數(shù)據(jù)庫修改，然后可以同步到HANA的數(shù)據(jù)庫

DataServiceDesigner用來創(chuàng)建數(shù)據(jù)的source,以及target,可以做mapping,作為ETL的工具，比如創(chuàng)建定時(shí)的作業(yè)，這樣可以定期的從sourcesystem抽數(shù)據(jù)，然后導(dǎo)入到HANA的數(shù)據(jù)庫中DataService是服務(wù)器端（雖然使用DS作為ETL的工具，然后DS依然需要一個(gè)數(shù)據(jù)庫來支持，注意！不是用來存儲(chǔ)從ERP來的數(shù)據(jù)，然后傳輸?shù)紿ANA中，是用來保存一些mapping關(guān)系的資源庫）數(shù)據(jù)建模的相關(guān)親戚成員DataModelingLxceiIMC45StudioAdmrustrationModolsEigDashboard

DesignCfithts(placed,egISAPBI4LinMerseM

fW^b1ni1)BI4EjqJlDierEFtPERPIn-MemafyQonipjljiigEngine的圖n&?翳ObjectsErLxceiIMC45StudioAdmrustrationModolsEigDashboard

DesignCfithts(placed,egISAPBI4LinMerseM

fW^b1ni1)BI4EjqJlDierEFtPERPIn-MemafyQonipjljiigEngine的圖n&?翳ObjectsEr旭0seDaLa SBOServices [nffiffmabonLte5igner OfeSigriTWSBOBWData wr\ersS^rvtws (progrannfdTbrnlirhnihRequeslProcessingIExeculionCocvtnolReplic^on 陽.P臺(tái)吟 MDXServer SQLScript GaleEngraieLoad Rgiatjon圍EnginesrDerRewStore CoiurnStorePageManagement P團(tuán)號(hào)國(guó)留心Ln當(dāng)TransdctiixiManagerAuttwizaiionManagerkfehdataMhnagorLogger同樣，Modeling工具（就是HANA的AdminStudio）,用來創(chuàng)建數(shù)據(jù)模型，AttributeView，AnalyticalView，CalculationView，在Modeling工具中可以直接查看HANA中數(shù)據(jù)庫表，也可以創(chuàng)建表等。MetaDataManagerSBOInformationDesignTool,比如創(chuàng)建一些BusinessLayer，然后發(fā)布成Universe，這樣其他的BO的報(bào)表設(shè)計(jì)工具就可以使用這個(gè)基于Universe的數(shù)據(jù)模型了，然后開發(fā)出查詢報(bào)表，等等。DataService口3$19口3「，除了幫助load數(shù)據(jù)之外，它提供了和報(bào)表相關(guān)的ReportingIMCEStudioAdnwni&irstion ModdingERPRepiicationA^entERFO& LogM3&國(guó)Clierrts(plswied,e.gjBI4Esq^o-nerOaEhbo^rdSAP014LniwwMSDesiqnIMCEStudioAdnwni&irstion ModdingERPRepiicationA^entERFO& LogM3&國(guó)Clierrts(plswied,e.gjBI4Esq^o-nerOaEhbo^rdSAP014LniwwMSDesiqn(WebL」0t4An3ly545In-M^mor;CnrncAmnatruingSession博an■呼mntObjeciiEnlerpn&eOarta SB0Services IrtfomnaElCMlDesigns DesignToolSBOBI4Data sorvETSServices 《programfardi^nb)口印ikatonS&rvefLeadCorrlnoliarRaqine^tProcessing/Ex^ctitmCorrtrnlSOLParaer MDXSQLSerial CatEngine的la描nalEin胡riHRowStore 51smSiaceTransaclionManagerAuthonzationManagwMel濠圓目ManagerP^eManagement^prsisie-ncel白yar LoggerDfita/oiumtsDiskStorageLogvtniirnsgMSExcel-BIAnalysisforMS-OfficeEdition,是個(gè)插件用來瀏覽報(bào)表用的BI4-WebIntelligence可以用來做基于Universe發(fā)布的報(bào)表，稍微比Explorer靈活點(diǎn)Administration-管理HANA的維護(hù)管理例如備份和恢復(fù)都是在IMCEStudio里面做的，和InformationModeling同一個(gè)界面，只是切換到管理視圖的話，就可以看到用戶，角色，schema等，以及HANA的服務(wù)的一些系統(tǒng)狀態(tài)。IMCEStudioAdministration ModelingPersistenceLayer持久層HANA的服務(wù)器中用于儲(chǔ)存數(shù)據(jù)的非閃存空間HANA中的數(shù)據(jù)都是保存在內(nèi)存中的，一拉閘停電，數(shù)據(jù)就沒有了，雖然服務(wù)器掉電的情況發(fā)生很少，但是這里還是解決了這個(gè)問題，當(dāng)然不是專門為停電而解決的，比如數(shù)據(jù)庫休克了或者IANA服務(wù)器死機(jī)了，必須重啟的情況它有以下的功能記錄Log信息，包含lastsavepoint和因?yàn)橥ｋ姸鴽]有寫入數(shù)據(jù)庫中的那些log信息。IIIIIII >□atas-av?pointtopersistentstorageIIIIIII >□atas-av?pointtopersistentstorage?Logwrittentcpe「s他tentstorage(connmittedtransactions)Powe-rfailure這里可以看到從HANA的內(nèi)存寫到PersistenceLayer的數(shù)據(jù)，包含了2個(gè)部分：Data和Log，這個(gè)過程是持續(xù)不斷的過程，當(dāng)然中間有一定的時(shí)間間隔，其實(shí)PersistenceLayer就是HANA的內(nèi)存數(shù)據(jù)庫的某個(gè)時(shí)點(diǎn)的一個(gè)完整的鏡像拷貝，以及這個(gè)拷貝之后所所有發(fā)生的數(shù)據(jù)庫更新的Log信息（在停電前成功執(zhí)行完畢的）為什么不直接寫入磁盤保存呢？因?yàn)镠ANA基于內(nèi)存數(shù)據(jù)庫（newDB），這種實(shí)時(shí)數(shù)據(jù)同步操作或者實(shí)時(shí)數(shù)據(jù)的更新是很快的，但是磁盤的讀寫速度往往和內(nèi)存的速度有差異，為了解決這個(gè)問題，在硬件層面提供了一個(gè)閃存（即使斷電，還有數(shù)據(jù)，有點(diǎn)像快速緩存，這個(gè)閃存有2~4TB左右）用來同步保存內(nèi)存數(shù)據(jù)庫中的log信息，并且生成Sa