(高清版)GB∕T 38672-2020 信息技術(shù) 大數(shù)據(jù) 接口基本要求

國(guó)家市場(chǎng)監(jiān)督管理總局國(guó)家標(biāo)準(zhǔn)化管理委員會(huì) I 1 13術(shù)語(yǔ)和定義 1 2 2 25.2接口1 35.3接口2 35.4接口3 45.5接口4 45.6接口5 4 46.2接口1 46.3接口2 56.4接口3 56.5接口4 66.6接口5 6I1GB/T35295—2017信息技術(shù)大數(shù)據(jù)術(shù)語(yǔ)GB/T35589—2017信息技術(shù)大數(shù)據(jù)技術(shù)參考模型2API:應(yīng)用程序接口(ApplicationProgrammingCLI:命令行界面(Command-LineIntDML:數(shù)據(jù)操縱語(yǔ)言(DataManipulationHDFS:分布式文件系統(tǒng)(HadoopDisOLAP:在線分析處理(On-LineAnalyticalREST:表述性狀態(tài)轉(zhuǎn)移(RepresentationalSNMP:簡(jiǎn)單網(wǎng)絡(luò)管理協(xié)議(SimpleNetworkManagemeSQL:結(jié)構(gòu)化查詢語(yǔ)言(StructuredQueryLanguage)數(shù)據(jù)消費(fèi)者使用大數(shù)據(jù)應(yīng)用提供者提供的應(yīng)用。大數(shù)據(jù)應(yīng)用提供者執(zhí)行數(shù)據(jù)統(tǒng)協(xié)調(diào)者定義的需求以及安全和隱私保護(hù)需求。大數(shù)據(jù)框架提供者本標(biāo)準(zhǔn)基于GB/T35589—2017描述的大數(shù)據(jù)參考架構(gòu)，給出接口框架(接口1是數(shù)據(jù)提供者與大數(shù)據(jù)應(yīng)用提供者之間的接口；接口2是數(shù)據(jù)消費(fèi)者與大數(shù)據(jù)應(yīng)用提供者之間的接口；接口3是大數(shù)據(jù)應(yīng)用提供者與大數(shù)據(jù)框架提供者之間的接口；3接口1安全和隱私管理5.2接口1一方面，數(shù)據(jù)提供者通過(guò)接口1向大數(shù)據(jù)應(yīng)用提供者傳送需要分析或處理的數(shù)據(jù)，包括結(jié)構(gòu)化數(shù)接口1的常見(jiàn)類別包括但不限于：5.3接口2接口2的常見(jiàn)類型包括但不限于：a)流數(shù)據(jù)分析接口：用于實(shí)時(shí)流數(shù)據(jù)的查詢，基于SQL擴(kuò)展提供高級(jí)分析功能(如復(fù)雜事件分46.2接口156.3接口24)應(yīng)支持基于時(shí)間窗口的聚合查詢；6)應(yīng)支持基于時(shí)間窗口的地理數(shù)據(jù)分析；8)宜支持基于時(shí)間窗口進(jìn)行流的連接；1)應(yīng)兼容主流開(kāi)源組件(例如Elasticsearch)接口；3)宜支持跨系統(tǒng)共享共用數(shù)據(jù)的同步更新。6.4接口36c)應(yīng)提供內(nèi)存計(jì)算的多種語(yǔ)言開(kāi)發(fā)接口(例如Scala,Java),提供高度抽象算子構(gòu)建分布式數(shù)據(jù)查詢等)及文件夾操作(包括但不限于文件夾創(chuàng)建、刪除、狀態(tài)信息查詢、內(nèi)容統(tǒng)計(jì)信息查詢g)應(yīng)支持多維分析數(shù)據(jù)庫(kù)以標(biāo)準(zhǔn)SQL查詢和分析；j)應(yīng)支持海量結(jié)構(gòu)化數(shù)據(jù)的交互式OLAP分析；k)宜支持分布式內(nèi)存計(jì)算框架接入多種數(shù)據(jù)源(例如HDFS、HBase、Hive),支持離線計(jì)算程序1)宜支持分布式列式存儲(chǔ)不同類型索引(例如主鍵索引、組合索引、全文索引)的創(chuàng)建、查詢、6.5接口4接口4的要求包括：