數(shù)據(jù)倉(cāng)庫(kù)建設(shè)對(duì)數(shù)據(jù)量、硬件、軟件的要求

1、1、不同數(shù)據(jù)量級(jí)別對(duì)服務(wù)器硬件、軟件的要求(要考慮到數(shù)據(jù)的雙向傳輸、壓力等狀況)(我們目前的數(shù)量級(jí)別是多少？如果考慮到服務(wù)明細(xì)數(shù)據(jù)、三年的增量等)不同數(shù)據(jù)量級(jí)別對(duì)服務(wù)器硬件、軟件的要求：沒(méi)什么特別要求，只要保證單臺(tái)數(shù)據(jù)查詢(xún)比較快就OK， 數(shù)據(jù)量級(jí)別主要是靠橫向擴(kuò)展機(jī)器的臺(tái)數(shù)來(lái)滿足，只要數(shù)據(jù)是按照最初設(shè)計(jì)的存儲(chǔ)方式來(lái)存儲(chǔ)，滿足我們 查詢(xún)的速度即可；目前我們數(shù)據(jù)量單表每天5000左右的量，整個(gè)數(shù)據(jù)庫(kù)10g左右，未來(lái)三年可能是一年2000萬(wàn)的處理 量，三年后數(shù)據(jù)量可能到達(dá)上億條記錄，整個(gè)數(shù)據(jù)庫(kù)35g左右。2、Oracle數(shù)據(jù)庫(kù)對(duì)數(shù)據(jù)量有沒(méi)有什么限制？在Oracle中，數(shù)據(jù)庫(kù)是由實(shí)例和物理存儲(chǔ)結(jié)構(gòu)組成

2、的。而物理存儲(chǔ)結(jié)構(gòu)是指存儲(chǔ)在磁盤(pán)上的物理文件， 包括數(shù)據(jù)文件(data file)、控制文件(control file)、聯(lián)機(jī)重做日志(online redo log)、參數(shù)文件(spfile/pfile)、 警告日志(alert log)、跟蹤文件(tracefile)等眾多作用不同的文件所組成的。我們最關(guān)注的數(shù)據(jù)，則是保 存在數(shù)據(jù)文件(data file)中。那我們?cè)趧?chuàng)建以及維護(hù)數(shù)據(jù)庫(kù)時(shí)，該如何規(guī)劃數(shù)據(jù)文件的大小和數(shù)量呢？這 里面涉及較多的考量因素。主要有如下幾點(diǎn)：2.1操作系統(tǒng)的限制數(shù)據(jù)庫(kù)是運(yùn)行在操作系統(tǒng)之上的，操作系統(tǒng)是基礎(chǔ)，因此，操作系統(tǒng)所能支持的最大文件容量和數(shù)量就成 為數(shù)據(jù)庫(kù)所能

3、支持的限制。但不同操作系統(tǒng)之間，這個(gè)限制也是不同的。以下是較為常見(jiàn)的幾種操作系統(tǒng)對(duì)此的限制：WINDOWS最大數(shù)據(jù)塊：16K最大文件數(shù)量：20000個(gè)(數(shù)據(jù)塊2K時(shí))/40000個(gè)(數(shù)據(jù)塊4K時(shí))/65536個(gè)(數(shù)據(jù)塊為8K或16K時(shí))最大文件容量：4GB (文件系統(tǒng)為FAT時(shí))/ 64GB (文件系統(tǒng)為NTFS時(shí))UNIX 和 LINUX最大數(shù)據(jù)塊：32K (LINUX_X86為16K)最大文件數(shù)量：65534個(gè)2.2ORACLE數(shù)據(jù)庫(kù)的限制每個(gè)數(shù)據(jù)庫(kù)可管理的最大文件數(shù)量：65533個(gè) 每個(gè)表空間可管理的最大文件數(shù)量：取決于操作系統(tǒng)可同時(shí)打開(kāi)的文件數(shù)量。通常是1022個(gè)。每個(gè)數(shù)據(jù)文件的最大容

4、量：該值等于數(shù)據(jù)塊大小*最大可管理的數(shù)據(jù)塊數(shù)量其中，數(shù)據(jù)塊的大小最大不超過(guò)32K，一般取值是8K；可管理的數(shù)據(jù)塊數(shù)量是2的22次方減1，約等于4M 個(gè)塊。因此，對(duì)于一個(gè)數(shù)據(jù)塊大小為8K的數(shù)據(jù)文件，其最大不能超過(guò)32G。但是，若操作系統(tǒng)支持的單個(gè) 文件最大容量小于此值，則以操作系統(tǒng)的最大容量為限。2.3參數(shù)DB_FILES的限制參數(shù)DB_FILES指定了一個(gè)實(shí)例可以創(chuàng)建的最大文件數(shù)量。這個(gè)值可以被修改，但只有重啟實(shí)例后，才會(huì)生 效。DB_FILES設(shè)置得過(guò)低，可能造成不成添加新的數(shù)據(jù)文件的問(wèn)題。設(shè)置得過(guò)高，會(huì)消耗更多的內(nèi)存資源。2.4性能和便利性影響a）通過(guò)精心設(shè)計(jì)，將同一表空間內(nèi)經(jīng)常訪問(wèn)的對(duì)象

5、放置在不同的數(shù)據(jù)文件中，并將這些數(shù)據(jù)文件放置到 不同的磁盤(pán)通道上，可以改善I/O吞吐量。b）將經(jīng)常改變的數(shù)據(jù)和不變的數(shù)據(jù)，放置到不同的數(shù)據(jù)文件中，備份時(shí)，可以只對(duì)改變的數(shù)據(jù)文件進(jìn)行備 份，從而減少備份和恢復(fù)的時(shí)間注：從ORACLE 10g起，引入了大表空間的技術(shù)。所謂大表空間就是該表空間僅由1個(gè)數(shù)據(jù)文件組成。其優(yōu)點(diǎn)如下：1、顯著增加了存儲(chǔ)容量。大表空間可管理的數(shù)據(jù)塊數(shù)量由傳統(tǒng)的小表空間的2的22次方，提升到2的32 次方。在同樣采用8K大小的數(shù)據(jù)塊大小時(shí)，其最大可管理空間為32TB， 1TB=1024GB， 32TB=32*1024GB=32768GB，（一個(gè)數(shù)據(jù)庫(kù)系統(tǒng)約20TB的數(shù)據(jù)，大約有

6、600億條記錄）。2、減少了數(shù)據(jù)庫(kù)所需的數(shù)據(jù)文件的數(shù)量。3、簡(jiǎn)化數(shù)據(jù)庫(kù)管理。3、數(shù)據(jù)倉(cāng)庫(kù)建設(shè)對(duì)數(shù)據(jù)量、硬件、軟件的要求數(shù)據(jù)倉(cāng)庫(kù)和其他數(shù)據(jù)庫(kù)的搭建是一樣的，只是他們的應(yīng)用不同，數(shù)據(jù)倉(cāng)庫(kù)是一種過(guò)程，對(duì)分布在企業(yè) 內(nèi)部各處的業(yè)務(wù)數(shù)據(jù)的整合、加工和分析的過(guò)程。數(shù)據(jù)量：?jiǎn)伪頂?shù)據(jù)上億，總的數(shù)據(jù)庫(kù)容量TB級(jí)，每日數(shù)據(jù)量以千萬(wàn)為單位，所以硬件要求：多CPU，大內(nèi)存，支持并行處理軟件：不存在軟件要求，只需配置數(shù)據(jù)倉(cāng)庫(kù)本身軟件4 Oracle正版的價(jià)格？收費(fèi)方式？正版和盜版功能的差異？正版和盜版的差異：Oracle并沒(méi)有在軟件功能上有所限制，也就是說(shuō)，你可以隨便從Oracle網(wǎng)站上下 載到全功能的所有數(shù)據(jù)庫(kù)產(chǎn)品，

7、包括企業(yè)版。Oracle的正版授權(quán)靠的是法律約束。也就是說(shuō)，假如你一個(gè) 企業(yè)，使用了 Oracle數(shù)據(jù)庫(kù)進(jìn)行運(yùn)營(yíng)，讓Oracle知道了，打官司是要賠很多很多錢(qián)的。作為一個(gè)企業(yè)，用 盜版Oracle來(lái)進(jìn)行運(yùn)營(yíng)的話，假如數(shù)據(jù)庫(kù)出了問(wèn)題怎么辦，沒(méi)有售后的技術(shù)支持。而且像這種大系統(tǒng)，是 必須要有生產(chǎn)廠商的技術(shù)支持的。沒(méi)有技術(shù)支持，誰(shuí)也不敢用。收費(fèi)：價(jià)格比較昂貴1.按客戶端數(shù)2,按CPU數(shù)Oracle軟件本身是免費(fèi)的，所以任何人都可以從Oracle官方網(wǎng)站下載并安裝Oracle的數(shù)據(jù)庫(kù)軟件，收 費(fèi)的是License，即軟件授權(quán)，如果數(shù)據(jù)庫(kù)用于商業(yè)用途，就需要購(gòu)買(mǎi)相應(yīng)Oracle產(chǎn)品的License?，F(xiàn)在

8、Oracle有兩種授權(quán)方式，按CPU(Process)數(shù)和按用戶數(shù)(Named User Plus)。前一種方式一般用于用 戶數(shù)不確定或者用戶數(shù)量很大的情況，典型的如互聯(lián)網(wǎng)環(huán)境，而后一種則通常被用于用戶數(shù)確定或者較少 的情況。按CPU： License數(shù)=CPU數(shù)*系數(shù)。系數(shù)來(lái)自O(shè)racle的一個(gè)參數(shù)表，如IBM Power6的處理器為1，AMD 和Intel的處理器為0.5，詳細(xì)情況見(jiàn)下：參數(shù)處理器型號(hào)0.25 Sun UltraSPARC T1 處理器0.50 Sun UltraSPARC T1 處理器0.50 Intel、AMD 處理器0.50 Sun UltraSPARC T2+ 處理

9、器1.00 IBM POWER6、POWER7 處理器0.75其他多核處理器1.00單核處理器則根據(jù)公式可以算出，一個(gè)SUN UltraSparc T1的4*8核處理器需要4*8*0.25=8個(gè)CPU licenses按用戶數(shù)：Oracle用戶數(shù)的官方定義是每一個(gè)訪問(wèn)Oracle數(shù)據(jù)庫(kù)的用戶，無(wú)論是自然人還是設(shè)備(如工 業(yè)環(huán)境中的傳感器之類(lèi))，都算作一個(gè)用戶(Named User)。英文官方定義：Named User Plus: is defined as an individual authorized by you to use the programs which are install

10、ed on a single server or multiple servers, regardless of whether the individual is actively using the programs at any given time. A non human operated device will be counted.按用戶數(shù)購(gòu)買(mǎi)則對(duì)應(yīng)相應(yīng)的產(chǎn)品有對(duì)應(yīng)的License的最低購(gòu)買(mǎi)量限制，如下：產(chǎn)品Oracle Database Standard Edition ONE最低License數(shù)5 Named User Plus licensesOracle Database

11、 Standard Edition5 Named User Plus licensesOracle Database Enterprise EditionOracle Application Server Standard Edition ONEAll other Oracle Application Server products25 Named User Plus licenses per CPU5 Named User Plus licenses10 Named User Plus licenses per CPU當(dāng)然用戶應(yīng)該根據(jù)自己的實(shí)際用戶數(shù)訂購(gòu)，且不少于相應(yīng)版本所要求的最低用戶數(shù)。一般情況下，1CPU的費(fèi)用約等于50user的費(fèi)用，所以如果用戶數(shù)CPU數(shù)*系數(shù)*50，則按CPU訂購(gòu) 反而更為經(jīng)濟(jì)。每個(gè)License還有有效期的分類(lèi)不論是User License還是CPU License，分別為：1年、2年、3年、4 年、5年、永久。當(dāng)然價(jià)格也是依次增加。當(dāng)前Oracle 11G的User License無(wú)限使用期的價(jià)格為人民幣3千5左右，按50個(gè)Use