第六章物化視圖

1、第六章物化視圖物化視圖把查詢的結(jié)果根據(jù)相應(yīng)的引擎存入到了磁盤或內(nèi)存中，對數(shù)據(jù)重新進行了組織，可以理解物化視圖是完全的一張新表。需要注意的是，物化視圖的數(shù)據(jù)并不跟著數(shù)據(jù)源數(shù)據(jù)的改變觸發(fā)改變。個人的一些思考：物化視圖也好、Projection也好，本質(zhì)上是基于一個表的數(shù)據(jù)的重新排序、聚合、持久化，形成一個新的子表，不同之處這個子表有一個數(shù)據(jù)庫層面上的父親。這種在數(shù)據(jù)庫層面建立的血緣關(guān)系不是特別友好，增加了概念的復(fù)雜度?；菊Z法也是create語法，會創(chuàng)建一個隱藏的目標(biāo)表來保存視圖數(shù)據(jù)。也可以TO表名，保存到一張顯式的表。沒有加TO表名，表名默認(rèn)就是.inner.物化視圖名CREATEMATERIA

2、LIZEDVIEWIFNOTEXISTSdb.table_nameTOENGINE=enginePOPULATEASSELECT.創(chuàng)建物化視圖的限制4.1必須指定物化視圖的engine用于數(shù)據(jù)存儲TOdb.table語法的時候，不得使用POPULATE。4.3查詢語句(select)可以包含下面的子句：DISTINCT,GROUPBY,ORDERBY,LIMIT4.4物化視圖的alter操作有些限制，操作起來不大方便。4.5若物化視圖的定義使用了TO子語句，則可以將目標(biāo)表的視圖卸載DETACH再裝載ATTACH物化視圖的數(shù)據(jù)更新5.1物化視圖創(chuàng)建好之后，若源表被寫入

3、新數(shù)據(jù)則物化視圖也會同步更新POPULATE關(guān)鍵字決定了物化視圖的更新策略：若有POPULATE則在創(chuàng)建視圖的過程會將源表已經(jīng)存在的數(shù)據(jù)一并導(dǎo)入，類似于createtable.as若無POPULATE則物化視圖在創(chuàng)建之后沒有數(shù)據(jù)，只會在創(chuàng)建只有同步之后寫入源表的數(shù)據(jù)clickhouse官方并不推薦使用POPULATE，因為在創(chuàng)建物化視圖的過程中同時寫入的數(shù)據(jù)不能被插入物化視圖。物化視圖不支持同步刪除，若源表的數(shù)據(jù)不存在(刪除了)則物化視圖的數(shù)據(jù)仍然保留物化視圖是一種特殊的數(shù)據(jù)表，可以用showtables查看物化視圖數(shù)據(jù)的刪除：物化視圖的刪除：案例操作6.1建表#建表語句CREATETABLE

4、hits_test(EventDateDate,CounterIDUInt32,UserIDUlnt64,URLString,IncomeUInt8)ENGINE=MergeTree()PARTITIONBYtoYYYYMM(EventDate)ORDERBY(CounterID,EventDate,intHash32(UserlD)SAMPLEBYintHash32(UserID)SETTINGSindex_granularity=81926.2導(dǎo)入一些數(shù)據(jù)INSERTINTOhits_testSELECTEventDate,CounterID,UserID,URL,IncomeFROMhi

5、ts_v1limit10000;6.3創(chuàng)建物化視圖#建表語句CREATEMATERIALIZEDVIEWhits_mvENGINE=SummingMergeTreePARTITIONBYtoYYYYMM(EventDate)ORDERBY(EventDate,intHash32(UserlD)ASSELECTUserID,EventDate,count(URL)asClickCount,sum(Income)ASIncomeSumFROMhits_testWHEREEventDate=2014-03-20#殳置更新點該時間點之前的數(shù)據(jù)可以另外通過#insertintoselect的方式進行插入

6、GROUPBYUserID,EventDate;#或者可以用下列語法，表A可以是一張mergetree表CREATEMATERIALIZEDVIEW物化視圖名TO表AASSELECTFROM表B;#不建議添加populate關(guān)鍵字進行全量更新6.4導(dǎo)入增量數(shù)據(jù)#導(dǎo)入增量數(shù)據(jù)INSERTINTOhits_testSELECTEventDate,CounterID,UserID,URL,IncomeFROMhits_v1WHEREEventDate=2014-03-23limit10;#查詢物化視圖SELECT*FROMhits_mv;6.5導(dǎo)入歷史數(shù)據(jù)#導(dǎo)入增量數(shù)據(jù)NSERTINTOhitsmvSELECTUserID,EventDate,FROMhitstestWHEREEventDate=2014-0