5久其etl數(shù)據(jù)集成工具培訓(xùn)公式體系和服務(wù)器端

1、久其ETL數(shù)據(jù)集成工具培訓(xùn)-公式體系和服務(wù)器目錄公式體系1 公式體系介紹 運(yùn)算符和函數(shù)服務(wù)器端簡(jiǎn)介2場(chǎng)景分析場(chǎng)景：從某BI系統(tǒng)數(shù)據(jù)表往CI系統(tǒng)寫入數(shù)據(jù)，時(shí)期粒度是月，BI的中表示時(shí)期的字段一般為8位的字符串，例如：20120501，CI系統(tǒng)的月報(bào)時(shí)期格式為：2012Y005，即為“年”+“時(shí)期類型”+“月”，注意月有三位。應(yīng)如何轉(zhuǎn)換為CI的時(shí)期類型輸出到CI系統(tǒng)中？Left(TIMEKEY,4)+Y+LeftPad(Mid(TIMEKEY,5,2),3,0)公式體系公式體系主要包括運(yùn)算符和函數(shù)兩大部份。公式體系主要用于設(shè)置計(jì)算公式，在ETL客戶端體現(xiàn)在“公式向?qū)А苯缑妗９筋愋陀?jì)算公式條件判斷

2、即時(shí)查錯(cuò)公式體系公式數(shù)據(jù)類型基本類型：整型、浮點(diǎn)、布爾、日期、字符串特殊類型：數(shù)據(jù)連接、二進(jìn)制公式語(yǔ)法：= Round(P1, 2) + FIELD_VAL1 * 0.2544332121運(yùn)算符2常量3字段或參數(shù)4函數(shù)目錄公式體系1 公式體系介紹 運(yùn)算符和函數(shù)服務(wù)器端簡(jiǎn)介27運(yùn)算符簡(jiǎn)介注意事項(xiàng)：+ 支持字符串= 右值賦值給左值IF THEN ELSE 支持嵌套like 用法同SQL語(yǔ)句8函數(shù)簡(jiǎn)介注意事項(xiàng)：Round函數(shù)：Round(1111.5264,3)，最后的取舍保留小數(shù)位可為負(fù)，若-1則保留到十位，以此類推。不寫默認(rèn)為0位。Rand函數(shù)可利用乘以某個(gè)倍數(shù)達(dá)到任意隨機(jī)數(shù)的效果9函數(shù)簡(jiǎn)介注意

3、事項(xiàng)：左截取、右截取、中間截取實(shí)現(xiàn)復(fù)雜字符串拼接FormatNum用于處理EXCEL表格中為數(shù)字樣子的字符串（EXCEL輸入默認(rèn)抽取成數(shù)字）AddUp 函數(shù)使用前要對(duì)數(shù)據(jù)進(jìn)行排序Lag函數(shù)取值可對(duì)別的字段限定條件Ifnull返回第一個(gè)非空的值，全都為空時(shí)返回空IsNull 配合過濾適配器實(shí)現(xiàn)空數(shù)據(jù)過濾10函數(shù)簡(jiǎn)介Eliminate(“ab*cd”,”*”)=“abcd”, 剔除了*號(hào)ExtractNum(“123ab23cd45”,1)=123ExtractToken(“a,b,cf,d,e”,2,”,”)=“cf”LeftPad、LeftTrim、RightPad、RightTrim常用于處

4、理字符串拼接如果需要計(jì)算高精度值時(shí)，可以選擇高精度的處理方式，但是ETL執(zhí)行效率比較低。若直接為浮點(diǎn)類型時(shí)，執(zhí)行結(jié)果的數(shù)據(jù)有一定的誤差。注意事項(xiàng)：Date(2012,5,7)=2012-05-07FormatDate(2012-5-7,yy年MM月dd日“) =2012年04月01日DateValue(“20120507”,”yyyyMMdd”)= 2012-05-07;Now和Today 一般用于文件備份時(shí)取當(dāng)前時(shí)間ExistChinese()返回值為布爾型目錄公式體系1 公式體系介紹 運(yùn)算符和函數(shù)服務(wù)器端簡(jiǎn)介2服務(wù)器端功能ETL計(jì)劃任務(wù)的增刪改查、執(zhí)行、調(diào)度執(zhí)行日志的查看參數(shù)配置和系統(tǒng)密碼修改。計(jì)劃