DB54T 0290-2023高原地區(qū) 多源異構(gòu)數(shù)據(jù) 采集要求

ICS35.240CCSL7054IDB54/T0290—2023前言 2規(guī)范性引用文件 3術(shù)語和定義 4多源異構(gòu)數(shù)據(jù)采集系統(tǒng)概述 5數(shù)據(jù)采集 25.1數(shù)據(jù)采集過程 25.2數(shù)據(jù)采集地點(diǎn)和采集種類 25.3數(shù)據(jù)采集系統(tǒng)設(shè)計(jì) 25.4數(shù)據(jù)采集系統(tǒng)的高原環(huán)境適應(yīng)性 36數(shù)據(jù)傳輸和存儲(chǔ) 36.1數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)設(shè)計(jì) 36.2數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)的高原環(huán)境適應(yīng)性 3DB54/T0290—2023本文件按照GB/T1.1—2020《標(biāo)準(zhǔn)化工作導(dǎo)則第1部分：標(biāo)準(zhǔn)化文件的結(jié)構(gòu)和起草規(guī)則》的規(guī)定起草。請(qǐng)注意本文件的某些內(nèi)容可能涉及專利。本文件的發(fā)布機(jī)構(gòu)不承擔(dān)識(shí)別專利的責(zé)任。本文件由西藏大學(xué)提出，西藏自治區(qū)標(biāo)準(zhǔn)化研究所歸口。本文件起草單位：西藏大學(xué)、電子科技大學(xué)。本文件主要起草人：董志誠、楊陽、位紀(jì)偉、徐行、周恩治、汪政。DB54/T0290—2023隨著適用于高原地區(qū)的智能傳感器的快速發(fā)展，數(shù)據(jù)正以前所未有的速度增長和積累。有效的對(duì)高原地區(qū)多源異構(gòu)數(shù)據(jù)進(jìn)行采集、傳輸和存儲(chǔ)是大數(shù)據(jù)分析和挖掘的關(guān)鍵步驟。高原地區(qū)多傳感器，多平臺(tái)監(jiān)控是有效提升監(jiān)控效率以及性能的重要手段。然而，如何將多源異構(gòu)數(shù)據(jù)進(jìn)行高效的分析利用，是多傳感器、多平臺(tái)監(jiān)控面臨的難題。本標(biāo)準(zhǔn)針對(duì)高原環(huán)境下（如強(qiáng)光照、高嚴(yán)寒、強(qiáng)風(fēng)沙等），基于多傳感器（紅外、可見光、雷達(dá)波等），多平臺(tái)（無人機(jī)、地面監(jiān)控）獲取的數(shù)據(jù)，規(guī)范高原環(huán)境下數(shù)據(jù)采集、傳輸和存儲(chǔ)要求，從而實(shí)現(xiàn)多傳感器、多平臺(tái)異構(gòu)信息的高效利用。本文件的起草單位經(jīng)過現(xiàn)場調(diào)查研究，認(rèn)真總結(jié)實(shí)踐經(jīng)驗(yàn)，針對(duì)西藏自治區(qū)的自然氣候條件，在廣泛征求意見的基礎(chǔ)上完成了文件編制。1DB54/T0290—2023高原地區(qū)多源異構(gòu)數(shù)據(jù)采集要求本文件規(guī)定了高原地區(qū)多源異構(gòu)數(shù)據(jù)的采集、傳輸和存儲(chǔ)的標(biāo)準(zhǔn)。本文件適用于高原地區(qū)多源異構(gòu)數(shù)據(jù)的采集、傳輸和存儲(chǔ)。2規(guī)范性引用文件下列文件中的內(nèi)容通過文中的規(guī)范性引用而構(gòu)成本文件必不可少的條款。其中，注日期的引用文件，僅該日期對(duì)應(yīng)的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本文件。GB/T11804電工電子產(chǎn)品環(huán)境條件--術(shù)語GB/T18459傳感器主要靜態(tài)性能指標(biāo)計(jì)算方法GB/T22239信息安全技術(shù)網(wǎng)絡(luò)安全等級(jí)保護(hù)基本要求GB/T25724公共安全視頻監(jiān)控?cái)?shù)字視音頻編解碼技術(shù)GB/T28181公共安全視頻監(jiān)控聯(lián)網(wǎng)系統(tǒng)信息傳輸、交換、控制技術(shù)要求GB/T35295信息技術(shù)大數(shù)據(jù)術(shù)語GB/T36100機(jī)載激光雷達(dá)點(diǎn)云數(shù)據(jù)質(zhì)量評(píng)價(jià)指標(biāo)及計(jì)算方法GB/T36625.1智慧城市數(shù)據(jù)融合第1部分：概念模型GB/T36625.3智慧城市數(shù)據(jù)融合第3部分：數(shù)據(jù)采集規(guī)范GB/T37025信息安全技術(shù)物聯(lián)網(wǎng)數(shù)據(jù)傳輸安全技術(shù)要求GB37300公共安全重點(diǎn)區(qū)域視頻圖像信息采集規(guī)范GB/T37722信息技術(shù)大數(shù)據(jù)存儲(chǔ)與處理系統(tǒng)功能要求3術(shù)語和定義GB/T11804、GB/T35295、GB/T36625.1、GB/T36625.3界定的以及下列術(shù)語和定義適用于本文件。3.1高原地區(qū)多源異構(gòu)數(shù)據(jù)multi-sourceheterogeneousdatainplateauareas高原地區(qū)多種來源、不同類型、不同結(jié)構(gòu)的數(shù)據(jù)統(tǒng)稱。3.2多源異構(gòu)數(shù)據(jù)采集系統(tǒng)multi-sourceheterogeneousdatacollectionsystem實(shí)現(xiàn)高原地區(qū)多源異構(gòu)數(shù)據(jù)采集、傳輸、存儲(chǔ)的硬件和軟件的集合。4多源異構(gòu)數(shù)據(jù)采集系統(tǒng)概述4.1多源異構(gòu)數(shù)據(jù)采集系統(tǒng)包含原始數(shù)據(jù)采集、數(shù)據(jù)傳輸以及數(shù)據(jù)存儲(chǔ)系統(tǒng)。4.2原始數(shù)據(jù)采集系統(tǒng)從采集地點(diǎn)獲取多種類型的數(shù)據(jù)。數(shù)據(jù)經(jīng)過傳輸后匯聚形成數(shù)據(jù)集，存儲(chǔ)在數(shù)據(jù)系統(tǒng)中。4.3數(shù)據(jù)傳輸系統(tǒng)通過無線或有線的方式傳輸采集的原始數(shù)據(jù)。2DB54/T0290—20234.4數(shù)據(jù)存儲(chǔ)系統(tǒng)對(duì)原始數(shù)據(jù)進(jìn)行預(yù)處理并進(jìn)行數(shù)據(jù)融合。圖1多源異構(gòu)數(shù)據(jù)采集系統(tǒng)概述5數(shù)據(jù)采集5.1數(shù)據(jù)采集過程5.1.1高原地區(qū)多源異構(gòu)數(shù)據(jù)采集是利用各種數(shù)據(jù)采集裝置采集數(shù)據(jù)并進(jìn)行質(zhì)量控制等操作的過程。5.1.2高原地區(qū)多源異構(gòu)數(shù)據(jù)采集過程宜包括：a)數(shù)據(jù)源選擇：明確數(shù)據(jù)采集地點(diǎn)和數(shù)據(jù)種類；b)采集方式選擇：通過分析數(shù)據(jù)源類型，確定數(shù)據(jù)采集方式；c)數(shù)據(jù)標(biāo)準(zhǔn)化以及有效性分析：對(duì)采集的原始數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化處理，確保數(shù)據(jù)時(shí)效性，完整性。5.2數(shù)據(jù)采集地點(diǎn)和采集種類5.2.1數(shù)據(jù)采集地點(diǎn)數(shù)據(jù)采集地點(diǎn)應(yīng)根據(jù)采集需求進(jìn)行選擇。5.2.2多源異構(gòu)數(shù)據(jù)種類表1對(duì)多源異構(gòu)數(shù)據(jù)的種類進(jìn)行了總結(jié)，采集數(shù)據(jù)種類可能包括但不限于所給的數(shù)據(jù)種類。表1多源異構(gòu)數(shù)據(jù)種類包括但不限于位置、速度、溫度、濕度、壓力等5.3數(shù)據(jù)采集系統(tǒng)設(shè)計(jì)5.3.1數(shù)據(jù)采集系統(tǒng)設(shè)計(jì)的目標(biāo)是高效獲取高質(zhì)量的多源異構(gòu)數(shù)據(jù)。3DB54/T0290—20235.3.2數(shù)據(jù)采集系統(tǒng)設(shè)計(jì)時(shí)宜對(duì)數(shù)據(jù)采集行為、采集數(shù)據(jù)內(nèi)容進(jìn)行評(píng)估，判斷是否符合國家和地區(qū)法律法規(guī)要求。5.3.3數(shù)據(jù)采集系統(tǒng)的設(shè)計(jì)宜考慮采集數(shù)據(jù)的真實(shí)性和完整性。5.3.4數(shù)據(jù)采集系統(tǒng)的功能設(shè)計(jì)可參照GB/T36625.3中7.2.2的系統(tǒng)采集功能進(jìn)行。5.3.5數(shù)據(jù)采集系統(tǒng)的安全性設(shè)計(jì)可參照GB/T22239和GB/T36625.3中的數(shù)據(jù)安全功能進(jìn)行。5.3.6對(duì)數(shù)據(jù)質(zhì)量的控制參照GB/T36625.3規(guī)定的數(shù)據(jù)質(zhì)量控制原則執(zhí)行，采集的數(shù)據(jù)宜滿足以下質(zhì)量指標(biāo)：a)視頻數(shù)據(jù)、圖像數(shù)據(jù)和音頻數(shù)據(jù)滿足GB37300中所述質(zhì)量指標(biāo)；b)雷達(dá)數(shù)據(jù)滿足GB/T36100中所述質(zhì)量指標(biāo)；c)傳感器采集數(shù)據(jù)滿足GB/T18459中所述質(zhì)量指標(biāo)。5.4數(shù)據(jù)采集系統(tǒng)的高原環(huán)境適應(yīng)性5.4.1高原地區(qū)地理環(huán)境復(fù)雜，氣候條件惡劣，針對(duì)高原地區(qū)的地理和氣候條件采取針對(duì)性措施對(duì)于實(shí)現(xiàn)高效高質(zhì)量的數(shù)據(jù)采集至關(guān)重要。5.4.2針對(duì)高原地區(qū)的地理和氣候條件，設(shè)計(jì)數(shù)據(jù)采集系統(tǒng)時(shí)宜考慮以下措施：a)針對(duì)大溫差、低氣壓、高紫外線照射環(huán)境的保護(hù)措施；b)應(yīng)對(duì)大風(fēng)天氣條件的防抖動(dòng)功能；c)針對(duì)大雨、大雪、冰雹、沙塵暴、雷電等氣候條件的保護(hù)措施；d)針對(duì)大雨、大雪、大霧、塵霧等氣候條件的數(shù)據(jù)采集增強(qiáng)；e)針對(duì)低光照、強(qiáng)光照、逆光、強(qiáng)紫外線等環(huán)境的數(shù)據(jù)采集增強(qiáng)；f)抗信號(hào)干擾。5.4.3高原地區(qū)電力資源稀缺、能源供應(yīng)不穩(wěn)定、網(wǎng)絡(luò)基礎(chǔ)設(shè)施建設(shè)不足，高原地區(qū)特殊的能源和網(wǎng)絡(luò)條件是數(shù)據(jù)采集設(shè)計(jì)中需考慮的重要因素。5.4.4針對(duì)高原地區(qū)的能源和網(wǎng)絡(luò)條件，設(shè)計(jì)數(shù)據(jù)采集系統(tǒng)時(shí)宜考慮以下措施：a)基于事件觸發(fā)的數(shù)據(jù)采集；b)適合高原電力供應(yīng)特征的節(jié)能保電方案；c)感知能源供應(yīng)和網(wǎng)絡(luò)傳輸狀態(tài)，結(jié)合應(yīng)用需求對(duì)同一目標(biāo)的多源異構(gòu)數(shù)據(jù)進(jìn)行冗余數(shù)據(jù)去除；d)根據(jù)電力供應(yīng)情況自適應(yīng)調(diào)整數(shù)據(jù)采集質(zhì)量。e)支持采集作業(yè)管理和調(diào)度，采集系統(tǒng)宜支持對(duì)作業(yè)啟動(dòng)、停止、暫停、恢復(fù)等操作。6數(shù)據(jù)傳輸和存儲(chǔ)6.1數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)設(shè)計(jì)6.1.1數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)設(shè)計(jì)的目標(biāo)是高效安全地傳輸和存儲(chǔ)數(shù)據(jù)。6.1.2數(shù)據(jù)傳輸系統(tǒng)宜同時(shí)具備在有線、無線通信網(wǎng)絡(luò)中的數(shù)據(jù)傳輸功能。6.1.3數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)宜具備對(duì)各類格式的數(shù)據(jù)進(jìn)行編碼、傳輸和存儲(chǔ)的功能。6.1.4對(duì)數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)進(jìn)行設(shè)計(jì)時(shí)建議參照以下標(biāo)準(zhǔn)：a)對(duì)多源異構(gòu)數(shù)據(jù)的標(biāo)識(shí)符編碼可遵循GB/T36625.3中的數(shù)據(jù)編碼規(guī)范；b)數(shù)據(jù)傳輸?shù)陌踩栽O(shè)計(jì)可參照GB/T37025所述的安全技術(shù)；c)數(shù)據(jù)存儲(chǔ)功能設(shè)計(jì)可參照GB/T37722中規(guī)定的大數(shù)據(jù)存儲(chǔ)子系統(tǒng)功能。6.2數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)的高原環(huán)境適應(yīng)性4DB54/T0290—20236.2.1數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)設(shè)計(jì)應(yīng)考慮高原地區(qū)電力資源保障不穩(wěn)定、通信基礎(chǔ)設(shè)施部署不均衡，數(shù)據(jù)安全性不高等重要因素。6.2.2針對(duì)高原地區(qū)的特殊條件，數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)宜采取以下措施：a)數(shù)據(jù)傳輸時(shí)根據(jù)網(wǎng)絡(luò)傳輸狀態(tài)對(duì)采集數(shù)據(jù)進(jìn)行自適應(yīng)編碼壓縮；b)數(shù)據(jù)傳輸針對(duì)網(wǎng)絡(luò)狀況不穩(wěn)定的情況采取數(shù)據(jù)傳輸增強(qiáng)算法；c)數(shù)據(jù)傳輸和存儲(chǔ)系統(tǒng)采取抗干擾、防止物理破壞、防止數(shù)據(jù)竊取和篡改的措施；d)數(shù)據(jù)存