人工智能邊緣計(jì)算視頻大數(shù)據(jù)解決方案

第第頁項(xiàng)目編號(hào)：人工智能邊緣計(jì)算視頻大數(shù)據(jù)解決方案第二章項(xiàng)目建設(shè)背景及市場分析2.1基于AI智能分析的視頻上云網(wǎng)關(guān)硬件及系統(tǒng)項(xiàng)目建設(shè)背景近年來，視頻監(jiān)控行業(yè)的核心技術(shù)發(fā)生翻天覆地的變化，從傳統(tǒng)的模擬攝像機(jī)到當(dāng)今的IP攝像機(jī)、\t"/html/2019-01/_blank"\o"AI"AI攝像機(jī)。這個(gè)轉(zhuǎn)變也將為音視頻流媒體行業(yè)帶來新的生命力，2019年亞太地區(qū)的市場總值達(dá)51億美元。隨著攝像機(jī)和傳感器的發(fā)展，\t"/html/2019-01/_blank"\o"物聯(lián)網(wǎng)"物聯(lián)網(wǎng)等新興技術(shù)與視頻管理系統(tǒng)的集成，視頻技術(shù)必將對企業(yè)和市場產(chǎn)生更多影響。對于未來的一年，我們認(rèn)為會(huì)有以下三種趨勢：一是\t"/html/2019-01/_blank"\o"人工智能"人工智能將持續(xù)推動(dòng)視頻監(jiān)控市場的轉(zhuǎn)變。人工智能能為攝像機(jī)配備更加智慧的大腦，以匹配到他們前端的采集，讓整體系統(tǒng)臃腫度進(jìn)一步改善，并減少人力的投入成本。行為分析與主動(dòng)識(shí)別已經(jīng)進(jìn)一步賦予了視頻監(jiān)控的生命力，例如目前在新加坡與韓國等主要城市的指揮中心與監(jiān)控中心開始采用智能視頻技術(shù)，以實(shí)現(xiàn)更有力地打擊犯罪。隨著智能化趨勢的發(fā)展，AI視頻技術(shù)已經(jīng)在監(jiān)控行業(yè)中嶄露頭角。二是視頻技術(shù)是企業(yè)IT戰(zhàn)略中不可或缺的因素。在現(xiàn)代企業(yè)中，企業(yè)領(lǐng)導(dǎo)者和關(guān)鍵決策者不僅重視公司資產(chǎn)的安全性，而且對業(yè)務(wù)流程與環(huán)境有更加迫切的了解需求，而智能視頻技術(shù)在提升業(yè)務(wù)績效和降低運(yùn)營成本等關(guān)鍵點(diǎn)上都會(huì)有極佳的表現(xiàn)。如零售業(yè)便是獲益最明顯的例子，視頻監(jiān)控不僅充當(dāng)安保的角色，在物聯(lián)網(wǎng)與視頻分析技術(shù)的提升下，用戶已經(jīng)可以及時(shí)了解消費(fèi)者的消費(fèi)行為及習(xí)慣；三是視頻與物聯(lián)網(wǎng)正在融合改變傳統(tǒng)業(yè)務(wù)。隨著越來越多的物聯(lián)網(wǎng)設(shè)備相互連接，其產(chǎn)生了大量的數(shù)據(jù)，視頻分析將加速大量結(jié)構(gòu)化數(shù)據(jù)的轉(zhuǎn)化，以生成可操作以及具有價(jià)值的視頻數(shù)據(jù)。2.2基于AI智能分析的視頻上云網(wǎng)關(guān)硬件及系統(tǒng)國內(nèi)外現(xiàn)狀2.2.1國外智能視頻應(yīng)用現(xiàn)狀分析2001年美國“9·11”事件，以及后來的西班牙馬德里列車連環(huán)爆炸和英國倫敦地鐵大爆炸等恐怖襲擊后，使全世界范圍內(nèi)對視頻監(jiān)控系統(tǒng)的需求空前高漲，各國部署的攝像頭越來越密集，系統(tǒng)也日益龐大。比如英國全國范圍內(nèi)目前已經(jīng)安裝攝像機(jī)420多萬個(gè)，平均每14個(gè)人一個(gè)，一個(gè)人一天之中可能出現(xiàn)在多達(dá)300個(gè)攝像機(jī)前，為了解決海量信息與圖像的有效應(yīng)用與處理問題，各國相繼把計(jì)算機(jī)視覺中的相關(guān)技術(shù)引入到視頻監(jiān)控中，從而發(fā)展起來一種新型視頻監(jiān)控技術(shù)—智能視頻監(jiān)控。智能視頻應(yīng)用概念模型出現(xiàn)后不久，一些國外的公司就開始著手研發(fā)相關(guān)的軟硬件產(chǎn)品，經(jīng)過幾年的發(fā)展，智能視頻分析技術(shù)在歐美國家得到了長足的發(fā)展，迅速形成了相對成熟的產(chǎn)品并成功應(yīng)用于實(shí)際安防工程中。如瑞典Axis網(wǎng)絡(luò)通訊有限公司早期推出了一批智能視頻產(chǎn)品，其中包括AXIS242SIV視頻服務(wù)器和AXISIVM120人數(shù)統(tǒng)計(jì)智能視頻應(yīng)用模塊。AXIS242SIV集成了專用DSP芯片（TIDM642），具備強(qiáng)大的圖像處理能力，并可支持第三方應(yīng)用軟件模塊的運(yùn)行和開發(fā)。AXISIVM120人數(shù)統(tǒng)計(jì)智能視頻應(yīng)用模塊可以使視頻監(jiān)控設(shè)備通過對監(jiān)控畫面的分析自動(dòng)為用戶計(jì)算進(jìn)/出特定區(qū)域的人數(shù)，能夠有效幫助服務(wù)、零售等行業(yè)的管理者分析營業(yè)情況或提高服務(wù)質(zhì)量。Axis還計(jì)劃推出更多智能視頻應(yīng)用模塊，包括車牌號(hào)識(shí)別、非法滯留等等。此外，美國VERINT公司是較早進(jìn)入智能視頻分析領(lǐng)域的國際廠商之一，同時(shí)也是較早倡導(dǎo)并實(shí)施“前端內(nèi)置分折”架構(gòu)理念的廠商之一。該公司為用戶提供“一站式”的智能視頻分析解決方案—Nextiva，其中包括網(wǎng)絡(luò)視頻編碼器、網(wǎng)絡(luò)攝像機(jī)、無線視頻編碼器等硬件產(chǎn)品，用來滿足不同行業(yè)不同部署環(huán)境的用戶在智能分析方面的要求。從目前的發(fā)展情況來看，當(dāng)前大部分智能視頻監(jiān)控系統(tǒng)的核心算法技術(shù)仍然掌握在美國以及歐洲地區(qū)等國家手里。據(jù)IMSResearch調(diào)查顯示，世界范圍內(nèi)IVS（IntelligentVideoSurveillance）的市場占有率為35%～36%，其中美國的OV（ObjectVideo）就占有9%左右的比例?！?·11”事件發(fā)生后，美國在安防科研方面大大加強(qiáng)了投資力度，許多研究機(jī)構(gòu)和研究人員紛紛加入了安防類技術(shù)研究和開發(fā)，智能視頻分析就是其中的一個(gè)亮點(diǎn)。由于視頻分析需求的產(chǎn)生促使視頻監(jiān)控系統(tǒng)智能化出現(xiàn)，進(jìn)而推動(dòng)軟件市場年復(fù)合增長率達(dá)到21.7%。根據(jù)IMS的市場研究分析，在未來3年內(nèi)有關(guān)視頻技術(shù)的軟件市場份額將達(dá)到8億美元。在視頻智能分析軟件的市場需求急劇增長的刺激下，國外提供視頻智能分析軟件產(chǎn)品的廠商有很多，如：Verint、Vidient、Westec、Interactive、VisualDefence、Nextiva、Vistascape、NiceVision、ioimage、TASC、MATE、Ov、Dallmeier、Ivbox、Viseowave等，這些廠商都能提供視頻智能分析產(chǎn)品，大部分廠商提供的視頻智能分析產(chǎn)品都基于ObjectVideo公司的圖像分析技術(shù)，采用ObjectVideoOnBoard平臺(tái)來設(shè)計(jì)并創(chuàng)建自己品牌的OEM產(chǎn)品，這是大部分視頻智能分析產(chǎn)品商以最小的投資成本及最快的時(shí)間來贏得市場的一個(gè)辦法?？偟膩砜?，經(jīng)過長期的發(fā)展和積累，在市場需求的推動(dòng)以及政府的支持下，國外的智能視頻應(yīng)用市場正在從“概念驗(yàn)證”階段向“規(guī)模應(yīng)用”階段轉(zhuǎn)化，智能視頻已經(jīng)在地鐵、鐵路、機(jī)場、高速公路、軍事等領(lǐng)域得到較廣泛的應(yīng)用，并慢慢開始形成一個(gè)產(chǎn)業(yè)。2.2.2國內(nèi)智能視頻應(yīng)用現(xiàn)狀分析當(dāng)前，國內(nèi)視頻監(jiān)控的主要需求依然來自于平安城市建設(shè)、行業(yè)延伸及民用市場開啟。伴隨著我國城鎮(zhèn)化的持續(xù)推進(jìn)，政府對平安城市、智慧城市建設(shè)及升級(jí)改造的重視，各行業(yè)對視頻監(jiān)控及視頻應(yīng)用需求的進(jìn)一步提升，居民對人身安全、財(cái)產(chǎn)安全的重視程度不斷提高，促進(jìn)視頻監(jiān)控行業(yè)市場規(guī)模繼續(xù)保持快速增長。此外，伴隨著“中國制造”、“互聯(lián)網(wǎng)+”的開展，視頻監(jiān)控也得到政策的大力支持。從發(fā)展勢頭來看，傳統(tǒng)的金融、能源市場趨于飽和，政府、交通市場還在持續(xù)快速增長，民用、醫(yī)療、教育等新興市場保持高速增長勢頭。就智慧城市建設(shè)而言，目前大城市的安防基礎(chǔ)建設(shè)工作已基本完成，中小城市正處于蓬勃發(fā)展階段，視頻監(jiān)控更多的向聯(lián)網(wǎng)化、智能化和高清化方向發(fā)展，同時(shí)隨著對數(shù)據(jù)和有效信息利用要求的提高，云存儲(chǔ)、大數(shù)據(jù)和云計(jì)算也開始發(fā)展。在智能交通領(lǐng)域，隨著智能手機(jī)和無線互聯(lián)網(wǎng)開始普及以來，互聯(lián)網(wǎng)的體驗(yàn)型應(yīng)用越來越滲透到智能交通中，此外，視頻智能分析、車聯(lián)網(wǎng)等技術(shù)不斷突破，不僅提高了公安交警的工作效率，也給普通民眾提供了更便利、更人性化的平臺(tái)。民用市場迎來發(fā)展期。隨著人們生活的水平提高，消費(fèi)者正在成為推動(dòng)消費(fèi)安防的重要力量，中小企業(yè)、商鋪、家庭逐漸成為常規(guī)安防需求的中堅(jiān)力量。目前，我國民用安防監(jiān)控只占了6%的市場份額，遠(yuǎn)遠(yuǎn)落后于發(fā)達(dá)國家（如美國民用安防監(jiān)控產(chǎn)值占據(jù)了整體的30%以上），具有非常強(qiáng)的發(fā)展?jié)摿?。隨著家庭市場的發(fā)展成熟，市場會(huì)向更高一級(jí)的使用便利化以及有序管理服務(wù)方向發(fā)展，家庭監(jiān)控將融合移動(dòng)監(jiān)控、云存儲(chǔ)、隱私保護(hù)以及綜合運(yùn)營服務(wù)，不單單是安全功能，同時(shí)也向個(gè)人價(jià)值的滿足和分享方向發(fā)展。2.3智能視頻技術(shù)發(fā)展趨勢2.3.1“大數(shù)據(jù)+云”的智能化視頻監(jiān)控進(jìn)入高清化、網(wǎng)絡(luò)化與智能化階段，一個(gè)城市每天從卡口攝像機(jī)產(chǎn)生的視頻數(shù)據(jù)就達(dá)到PB級(jí)。海量的高清視頻監(jiān)控?cái)?shù)據(jù)對網(wǎng)絡(luò)傳輸和后端存儲(chǔ)提出了新的挑戰(zhàn)，安防大數(shù)據(jù)時(shí)代，如何構(gòu)建以視頻應(yīng)用為核心，通過“大數(shù)據(jù)+云”技術(shù)滿足平安城市建設(shè)中的治安管理、城市管理、交通管理、應(yīng)急指揮等需求，同時(shí)發(fā)揮預(yù)防、發(fā)現(xiàn)、控制、打擊違法犯罪的作用，為案件偵破提供破案線索，固定違法犯罪證據(jù)等方面發(fā)揮人防、物防所不可替代的作用，對于提升城市可視化管理水平和政府應(yīng)急處置能力，搭建高效的社會(huì)治安防控體系，提升公安警務(wù)工作中的實(shí)戰(zhàn)效能，維護(hù)城市公共安全具有十分重大的意義。以車輛大數(shù)據(jù)技術(shù)在平安城市的應(yīng)用為例，大數(shù)據(jù)通過對海量數(shù)據(jù)的整合和挖掘，揭示傳統(tǒng)技術(shù)方式難以展現(xiàn)的關(guān)聯(lián)關(guān)系，還可以預(yù)警風(fēng)險(xiǎn)，及時(shí)切斷風(fēng)險(xiǎn)鏈。如針對堵車現(xiàn)象，實(shí)時(shí)采集車流數(shù)據(jù)，自動(dòng)控制信號(hào)燈，讓堵車能有所緩解，實(shí)現(xiàn)視頻監(jiān)控“大數(shù)據(jù)+云”的智能化應(yīng)用。2.3.2聯(lián)網(wǎng)共享的大平臺(tái)平安城市建設(shè)因?yàn)閰⑴c建設(shè)的企業(yè)眾多，在前期大建設(shè)階段，各個(gè)廠家因?yàn)樵O(shè)備協(xié)議、傳輸模式、編解碼方式、平臺(tái)操作系統(tǒng)各不相同，導(dǎo)致現(xiàn)階段的視頻監(jiān)控要實(shí)現(xiàn)設(shè)備和平臺(tái)的互聯(lián)互通，難度相當(dāng)?shù)拇?。雖然現(xiàn)在存量市場巨大，但同一個(gè)城市存在一二三類監(jiān)控點(diǎn)聯(lián)網(wǎng)接入難的問題，以深圳作為一線城市的代表為例，目前二三類點(diǎn)的攝像機(jī)的聯(lián)網(wǎng)接入就難以實(shí)現(xiàn)，其他城市在未來三到五年內(nèi)要想實(shí)現(xiàn)設(shè)備與平臺(tái)的互聯(lián)互通，難度就更大。然而不管困難有多大，未來平安城市建設(shè)以視頻監(jiān)控聯(lián)網(wǎng)共享的大平臺(tái)的趨勢不可抵抗，以一個(gè)大中型規(guī)模的城市為建設(shè)模型，大平臺(tái)模式可分為三級(jí)層次：一是以市公安局為一級(jí)視頻共享平臺(tái)，二是以區(qū)縣分局、派出所為二級(jí)視頻共享平臺(tái)，三是以各種視頻感知前端如治安卡口、布控球、車載監(jiān)控等接入三級(jí)管理平臺(tái)。并最終依托互聯(lián)網(wǎng)，以市級(jí)監(jiān)控平臺(tái)為基礎(chǔ)，建立與交警、市政管理等平臺(tái)進(jìn)行互聯(lián)互通，形成感、存、知、用一體化的綜合性大平臺(tái)。2.3.3.智能運(yùn)維的可管控在視頻監(jiān)控進(jìn)入“大數(shù)據(jù)+云”及聯(lián)網(wǎng)共享大平臺(tái)階段，對整個(gè)安防網(wǎng)的網(wǎng)絡(luò)架構(gòu)及后端服務(wù)器提出了嚴(yán)苛的要求。以存儲(chǔ)為例，要實(shí)現(xiàn)海量視頻存儲(chǔ)數(shù)據(jù)有價(jià)值信息的提取，勢必要對存儲(chǔ)系統(tǒng)的容量、擴(kuò)展性、性價(jià)比、性能、管理性、穩(wěn)定性等提出更高的要求。而聯(lián)網(wǎng)共享大平臺(tái)由于本身聯(lián)接的設(shè)備及平臺(tái)系統(tǒng)眾多，也需要一套可智能監(jiān)測自身運(yùn)行狀況的運(yùn)維系統(tǒng)，讓服務(wù)器主動(dòng)監(jiān)控在線情況、圖像情況、錄像完整情況等，即發(fā)現(xiàn)問題，并采用先進(jìn)的智能分析技術(shù)，對視頻應(yīng)用中常見的故障情況進(jìn)行智能診斷分析。平安城市的智能運(yùn)維系統(tǒng)可以對監(jiān)控視頻進(jìn)行智能診斷，讓管理人員掌握監(jiān)控點(diǎn)位攝像機(jī)的好壞及信號(hào)傳輸?shù)慕】禒顩r等，如監(jiān)測攝像機(jī)有沒有虛焦、過曝、遮擋等問題，以保證平安城市整個(gè)安防網(wǎng)絡(luò)本身是可管控的。2.3.4音視頻相關(guān)的智能硬件一般來說，智能硬件指的是具備信息采集、處理和連接能力，并可實(shí)現(xiàn)智能感知、交互、大數(shù)據(jù)服務(wù)等功能的新興終端，成為“互聯(lián)網(wǎng)＋”AI的重要載體。智能硬件是以平臺(tái)性底層軟硬件為基礎(chǔ)，以智能傳感互聯(lián)、人機(jī)交互、新型顯示及大數(shù)據(jù)處理等新一代信息技術(shù)為特征，以新設(shè)計(jì)、新材料、新工藝硬件為載體的新型智能終端產(chǎn)品及服務(wù)。從某種意義上說，基于AI智能分析的視頻上云網(wǎng)關(guān)硬件及系統(tǒng)由于可以通過人機(jī)交互自動(dòng)完成一系列服務(wù)和功能，因此可以被歸為智能硬件范疇。另一方面，智能硬件特征的視頻上云網(wǎng)關(guān)可以通過與其他智能硬件，如智能手機(jī)，通過二維碼建立連接，進(jìn)而進(jìn)行應(yīng)用間的交互，例如：監(jiān)控設(shè)備在線狀態(tài)，配置管理、數(shù)據(jù)交換等。視頻上云網(wǎng)關(guān)設(shè)備向智能化方向的轉(zhuǎn)變是一種必然的趨勢，也必然會(huì)帶來重大的技術(shù)和業(yè)務(wù)革新。2.4對產(chǎn)業(yè)發(fā)展的作用與影響視頻監(jiān)控系統(tǒng)不斷建設(shè)和快速發(fā)展，其在打擊犯罪、治安防范、社會(huì)管理、服務(wù)民生等方面發(fā)揮著越來越積極的作用。從當(dāng)前全國視頻監(jiān)控系統(tǒng)的部署情況來看，視頻上云已成星火燎原之勢。對產(chǎn)業(yè)化發(fā)展的作用與影響主要體現(xiàn)在以下五個(gè)方面：2.4.1提升資源使用效率計(jì)算和存儲(chǔ)的資源池化，可以大幅度的提升資源使用效率，實(shí)現(xiàn)資源的分時(shí)、跨域共享和按需調(diào)用，避免重復(fù)建設(shè)，同時(shí)實(shí)現(xiàn)資源的快速彈性擴(kuò)容，加快業(yè)務(wù)部署。2.4.2為數(shù)據(jù)的融通提供可能便于市、區(qū)、縣之間視頻監(jiān)控?cái)?shù)據(jù)的融通，形成“數(shù)據(jù)湖”，實(shí)現(xiàn)視頻監(jiān)控圖像信息共享，使跨市、區(qū)、縣的視頻追蹤辦案成為可能。在新形勢下，國家發(fā)改委、中綜辦、公安部等九部委在2015年聯(lián)合發(fā)布了996號(hào)文，對視頻監(jiān)控系統(tǒng)提出了“全域覆蓋、全網(wǎng)共享、全時(shí)可用、全程可控”等立體化防控體系建設(shè)的要求。為滿足“全網(wǎng)共享”的要求，傳統(tǒng)的視頻監(jiān)控系統(tǒng)采用煙囪式模式來建設(shè)，不同廠家系統(tǒng)間的視頻數(shù)據(jù)共享實(shí)現(xiàn)起來難度非常大。云平臺(tái)是解決數(shù)據(jù)共享最佳的模式，通過視頻上云來承載視頻監(jiān)控的圖像信息大數(shù)據(jù)，具有平滑擴(kuò)容、便于共享、便于處理、便于管控等優(yōu)點(diǎn)。2.4.3解決海量視頻大數(shù)據(jù)和AI的算力問題視頻監(jiān)控圖像信息大數(shù)據(jù)和AI的處理、分析需要用到超高性能計(jì)算能力，上云可以解決算力不足的問題。海量的視頻圖像信息，需要遠(yuǎn)超出普通數(shù)據(jù)處理技術(shù)的存儲(chǔ)、分析、搜索等能力。視頻大數(shù)據(jù)可以分析間接的人與人、物與物、人與物間的關(guān)系，這對視頻監(jiān)控系統(tǒng)的計(jì)算能力提出了非常高的挑戰(zhàn)。而視頻上云的方案，可為視頻監(jiān)控系統(tǒng)按需提供計(jì)算能力。例如某省大數(shù)據(jù)平臺(tái)，強(qiáng)大的計(jì)算能力支撐業(yè)務(wù)快速響應(yīng)，可在1分鐘內(nèi)實(shí)現(xiàn)億條過車數(shù)據(jù)分析。有一次發(fā)生山體滑坡，有車輛被掩埋。當(dāng)時(shí)通過大數(shù)據(jù)平臺(tái)匯聚75個(gè)收費(fèi)站、4042公里省內(nèi)高速、13.3萬輛車的信息，結(jié)合時(shí)空軌跡等信息準(zhǔn)確分析出被埋車輛車型、乘員、數(shù)量等信息，為搶險(xiǎn)工作提供有力支撐，而傳統(tǒng)的服務(wù)器集群方案無法滿足以上要求。2.4.4開放的云模式構(gòu)建繁榮的生態(tài)視頻上云是一種生態(tài)，向下可對接琳瑯滿目的不同廠家攝像頭，向上承載百花齊放的行業(yè)最優(yōu)算法和應(yīng)用。通過靈活組合，始終保持實(shí)戰(zhàn)能力的領(lǐng)先。采用通用服務(wù)器來構(gòu)建基礎(chǔ)設(shè)施是視頻云的基本能力，在此之上構(gòu)建基于OpenStack開放架構(gòu)的云平臺(tái)和基于Hadoop架構(gòu)的大數(shù)據(jù)平臺(tái)作為統(tǒng)一的安防云計(jì)算存儲(chǔ)環(huán)境，真正做到軟件與硬件解耦、前端與后端解耦、應(yīng)用與平臺(tái)解耦。對上支持各種算法和應(yīng)用的部署，讓各個(gè)廠商做自己擅長的事情；對下提供可靠、開放、易維護(hù)、易管理的統(tǒng)一接入服務(wù)和視頻轉(zhuǎn)碼服務(wù)，兼容各主流廠商的各種前端設(shè)備，滿足公安機(jī)關(guān)日常立體化防控的業(yè)務(wù)需求。視頻上云是平臺(tái)和生態(tài)基礎(chǔ)，開放、共享是必要基因。在某省，創(chuàng)新的組件化開發(fā)模式供警局敏捷開發(fā)了100多種通用組件方便各警種根據(jù)業(yè)務(wù)需要直接調(diào)用，提高了效率，達(dá)成優(yōu)異的實(shí)戰(zhàn)效果。2.4.5云端智能化比前端更強(qiáng)大、更豐富視頻上云建設(shè)的核心就是拉通共享，所有攝像頭及視頻數(shù)據(jù)資源應(yīng)該是隨需而動(dòng)，比如市區(qū)道路卡口的主要工作是車輛識(shí)別，但在重要安?；蚓o急抓捕行動(dòng)時(shí)，還需具備人臉識(shí)別功能，在前端攝像頭中無法內(nèi)置所有的算法，需要部署多類攝像頭才能滿足需求，而從云端實(shí)現(xiàn)多業(yè)務(wù)算法是更優(yōu)途徑。以上五大驅(qū)動(dòng)力使得越來越多的視頻監(jiān)控系統(tǒng)采用云模式進(jìn)行規(guī)劃、建設(shè)和部署，實(shí)現(xiàn)了資源的共享、數(shù)據(jù)的融通、算力的提升；而開放的生態(tài)和業(yè)務(wù)的智能，讓視頻監(jiān)控系統(tǒng)更好地為公安實(shí)戰(zhàn)服務(wù)，無論是城市安全還是商業(yè)優(yōu)化，視頻的未來都充滿希望，讓城市更安全，讓社會(huì)更安定。2.5產(chǎn)業(yè)關(guān)聯(lián)度分析2.5.1結(jié)合人工智能技術(shù)，以效率提升和價(jià)值創(chuàng)造賦能客戶在云計(jì)算、大數(shù)據(jù)與人工智能趨向三位一體的背景下，視頻上云在上傳、轉(zhuǎn)碼、分發(fā)、播放的基礎(chǔ)服務(wù)上，不斷探索新的增值服務(wù)，從視頻內(nèi)容審核到可以直接驅(qū)動(dòng)流量變現(xiàn)和內(nèi)容生產(chǎn)的視頻內(nèi)容理解和視頻內(nèi)容編輯。盡管目前"AI+"在客戶群體中的滲透程度相對有限，但考慮到人工智能技術(shù)的應(yīng)用將能夠帶來效率提升、價(jià)值創(chuàng)造的顯著作用，從而提升視頻云服務(wù)對客戶的價(jià)值，勢必會(huì)成為下一階段行業(yè)發(fā)展的重要方向。視頻內(nèi)容數(shù)量激增對于各類型的視頻平臺(tái)而言既是機(jī)會(huì)也是挑戰(zhàn)，2018年4月短視頻行業(yè)迎來最強(qiáng)監(jiān)管，低俗、暴力、血腥、色情等問題再度引起關(guān)注?，F(xiàn)階段單純的人工審核方式已經(jīng)顯現(xiàn)出瓶頸，結(jié)合人工智能的視頻內(nèi)容審核因大幅節(jié)約重復(fù)工作所帶來的人力成本，正逐漸成為視頻云服務(wù)的一項(xiàng)重要功能。人臉識(shí)別、事件識(shí)別、動(dòng)作識(shí)別、語音識(shí)別、文字識(shí)別、視頻指紋等人工智能增值服務(wù)迅速發(fā)展，未來將更廣泛的應(yīng)用在視頻云服務(wù)行業(yè)。全球經(jīng)濟(jì)正大步踏入數(shù)字經(jīng)濟(jì)時(shí)代，同時(shí)，企業(yè)逐步邁向扁平化、平臺(tái)化、生態(tài)化，管理模式正在發(fā)生深刻變革，視頻上云是大勢所趨。2.5.2構(gòu)建云-邊協(xié)同的智能云終端平臺(tái)采用“云、管、端”總體架構(gòu)，租用公有云服務(wù)，實(shí)現(xiàn)視頻監(jiān)控統(tǒng)一轉(zhuǎn)碼接入云端，開發(fā)云端視頻管理平臺(tái)，通過微信微博小程序等滿足社會(huì)公眾的高并發(fā)訪問，實(shí)現(xiàn)視頻秒播。2.6智能視頻市場需求分析全球行業(yè)數(shù)字化轉(zhuǎn)型的浪潮孕育興起，掀起了新一輪產(chǎn)業(yè)變革浪潮。據(jù)第三方分析師機(jī)構(gòu)統(tǒng)計(jì)，到2020年將有超過500億的終端與設(shè)備聯(lián)網(wǎng)，未來超過50%的數(shù)據(jù)需要在云端分析、處理與儲(chǔ)存，如何解決海量終端的聯(lián)接和管理，海量數(shù)據(jù)的實(shí)時(shí)分析和處理，成為保障行業(yè)數(shù)字化轉(zhuǎn)型的現(xiàn)實(shí)難題。特別是音視頻智能技術(shù)的普及應(yīng)用，使得城市的安防從過去簡單的安全防護(hù)系統(tǒng)向智慧城市綜合化體系演變。城市的安防項(xiàng)目涵蓋眾多的領(lǐng)域，有街道社區(qū)、樓宇建筑、銀行郵局、道路監(jiān)控、機(jī)動(dòng)車輛、警務(wù)人員、移動(dòng)物體、船只等。特別是針對重要場所，如：高速公路、機(jī)場、碼頭、水電氣廠、橋梁大壩、河道、地鐵、加油站等場所，引入智能視頻技術(shù)后可以通過無線移動(dòng)、軌跡跟蹤定位等手段建立全方位的立體防護(hù)。兼顧了整體城市管理系統(tǒng)、環(huán)保監(jiān)測系統(tǒng)、交通管理系統(tǒng)、應(yīng)急指揮系統(tǒng)等應(yīng)用的綜合體系。特別是車聯(lián)網(wǎng)的興起，車載視頻智能終端在公共交通管理上、車輛事故處理上、車輛偷盜防范上可以更加快捷準(zhǔn)確的跟蹤定位處理。2.6.1存儲(chǔ)資源消耗大且增長迅速視頻監(jiān)控業(yè)務(wù)極度消耗存儲(chǔ)資源，一個(gè)成規(guī)模的互聯(lián)網(wǎng)視頻監(jiān)控服務(wù)往往需要PB級(jí)甚至更多存儲(chǔ)資源，普通IDC或小云服務(wù)提供商有限的基礎(chǔ)設(shè)施很容易成為云視頻監(jiān)控業(yè)務(wù)爆發(fā)增長的瓶頸，一旦出現(xiàn)存儲(chǔ)瓶頸，擴(kuò)容難度大，遷移成本高。2.6.2對數(shù)據(jù)可靠性要求高監(jiān)控視頻數(shù)據(jù)是安防監(jiān)控業(yè)務(wù)的核心價(jià)值數(shù)據(jù)，必須不能丟失。尤其是在互聯(lián)網(wǎng)業(yè)務(wù)模式下，如果能做到視頻數(shù)據(jù)不丟失，安防監(jiān)控服務(wù)提供商就能向其終端用戶提供可靠的視頻存儲(chǔ)服務(wù)。2.6.3帶寬資源消耗巨大，且上行、下行流量不對稱7*24小時(shí)寫入視頻流的視頻監(jiān)控業(yè)務(wù)是重資產(chǎn)的業(yè)務(wù)，數(shù)萬級(jí)別攝像頭、數(shù)GB級(jí)別并發(fā)上傳流量帶來了巨大的帶寬成本。并且，視頻監(jiān)控業(yè)務(wù)有明顯的上行流量遠(yuǎn)大于下行流量的特點(diǎn)，而在互聯(lián)網(wǎng)類的業(yè)務(wù)模式下，下行流量才是行業(yè)的有效業(yè)務(wù)流量。在傳統(tǒng)IDC架構(gòu)中，流量不對稱的特點(diǎn)直接導(dǎo)致無效成本的增加。2.6.4用戶觀看體驗(yàn)在海量并發(fā)業(yè)務(wù)下難以保障流暢是視頻監(jiān)控最重要的用戶體驗(yàn)，數(shù)萬路視頻并發(fā)寫入、觀看需要優(yōu)質(zhì)的基礎(chǔ)設(shè)施、強(qiáng)大的產(chǎn)品性能，來保障視頻體驗(yàn)質(zhì)量。視頻流一般為分片存儲(chǔ)，任意分片寫入失敗，就會(huì)直接導(dǎo)致播放時(shí)卡頓。2.7應(yīng)用前景和預(yù)期效果基于AI智能分析的視頻上云網(wǎng)關(guān)設(shè)備及系統(tǒng)是基于視頻智能AI分析的一站式快速上云解決方案。企業(yè)可通過智能接入網(wǎng)關(guān)實(shí)現(xiàn)Internet就近加密接入，獲得更加智能、更加可靠、更加安全的上云體驗(yàn)，可實(shí)現(xiàn)線下機(jī)構(gòu)互通或線下機(jī)構(gòu)接入云數(shù)據(jù)中心。運(yùn)用煙火識(shí)別、車輛識(shí)別、車牌識(shí)別、人臉分析等技術(shù)，可廣泛應(yīng)用于消防、交通、園區(qū)、加油站等的智能云終端設(shè)備。從目前來看，視頻上云網(wǎng)關(guān)的應(yīng)用可分為安防類應(yīng)用和非安防類應(yīng)用兩大類，安防類應(yīng)用是目前市場上的主要應(yīng)用，具體包括：（1）高級(jí)視頻移動(dòng)偵測：在復(fù)雜的天氣環(huán)境中（例如雨雪、大霧、大風(fēng)等）精確地偵測和識(shí)別單個(gè)物體或多個(gè)物體的運(yùn)動(dòng)情況，包括運(yùn)動(dòng)方向、運(yùn)動(dòng)特征等。（2）物體追蹤：偵測到移動(dòng)物體之后，根據(jù)物體的運(yùn)動(dòng)情況自動(dòng)發(fā)送PTZ控制指令，使攝像機(jī)能自動(dòng)跟蹤物體，在物體超出該攝像機(jī)監(jiān)控范圍之后，自動(dòng)通知物體所在區(qū)域的攝像機(jī)繼續(xù)進(jìn)行追蹤。（3）人物面部識(shí)別：自動(dòng)識(shí)別人物的臉部特征，并經(jīng)與數(shù)據(jù)庫檔案的比較來識(shí)別或驗(yàn)證人物身份。（4）車輛識(shí)別：識(shí)別車輛的形狀、顏色、車牌號(hào)碼等特征，并反饋給監(jiān)控者，可用在被盜車輛追蹤等場景中。（5）遺留、遺棄物品檢測：當(dāng)一個(gè)物體（如箱子、包裹、車輛、人物等）在敏感區(qū)域停留的時(shí)間過長或超過了預(yù)定義的時(shí)間長度就產(chǎn)生報(bào)警，典型應(yīng)用場景包括機(jī)場、火車站、地鐵站等。（6）入侵探測：可感知設(shè)定區(qū)域內(nèi)突然出現(xiàn)和入侵的物體并及時(shí)報(bào)警，比如在戒備森嚴(yán)的軍事重地或銀行博物館等重要場所出現(xiàn)可疑人物等。（7）物品被盜或移動(dòng)檢測：當(dāng)監(jiān)控場景中的物體被盜或移動(dòng)，算法將自動(dòng)檢測這種動(dòng)作，常用于貴重物品和關(guān)鍵設(shè)備的監(jiān)控。（8）人體行為分析：在目標(biāo)檢測分類的基礎(chǔ)上，利用人體的各種行為特征對其進(jìn)行各種行為的描述和分析，提取那些危險(xiǎn)和有潛在危險(xiǎn)的行為，如打斗、搶奪和突然倒地等行為。（9）擁擠檢測：識(shí)別人群的整體運(yùn)動(dòng)特征，包括速度、方向等，以避免形成擁塞或及時(shí)發(fā)現(xiàn)異常情況，典型的應(yīng)用場景包括超級(jí)市場、火車站等人員聚集的地方。（10）焰火檢測：根據(jù)發(fā)生火情過程中煙火表現(xiàn)出的特征進(jìn)行煙火的實(shí)時(shí)檢測。除了安全相關(guān)應(yīng)用之外，視頻上云網(wǎng)關(guān)設(shè)備還可以應(yīng)用于一些非安全業(yè)務(wù)中，這些應(yīng)用主要面向零售、服務(wù)等行業(yè)，以提高服務(wù)水平和營業(yè)額，具體包括人數(shù)統(tǒng)計(jì)、人群控制、注意力控制和交通流量控制等。2.8重點(diǎn)應(yīng)用領(lǐng)域分析2.8.1平安城市基于AI智能分析的視頻上云網(wǎng)關(guān)需求近年來，隨著改革開放的進(jìn)一步深入，我國經(jīng)濟(jì)飛速發(fā)展，城鎮(zhèn)化速度進(jìn)一步加快，導(dǎo)致城鎮(zhèn)人口流動(dòng)化、密集化的趨勢愈發(fā)明顯，這給城市治安、交通及城市管理等諸多方面帶來了沉重壓力。為應(yīng)對社會(huì)發(fā)展給公安管理工作特別是預(yù)防犯罪和執(zhí)法工作帶來了嚴(yán)峻的挑戰(zhàn)，國家早在2004年就提出了創(chuàng)建平安城市、平安社會(huì)的活動(dòng)并啟動(dòng)了“科技強(qiáng)警示范城市”創(chuàng)建活動(dòng)，隨即從2005年開始在全國范圍內(nèi)開展城市監(jiān)控報(bào)警聯(lián)網(wǎng)系統(tǒng)建設(shè)“3111”試點(diǎn)工程。近年來全國上下更是掀起了平安城市建設(shè)的熱潮，2010年平安城市市場規(guī)模約700億，占安防市場總量的30%。近幾年以來國家平安城市相關(guān)的預(yù)算增長了70%，全國已有25個(gè)省份，218個(gè)城市，290多個(gè)區(qū)縣，2235個(gè)派出所安裝了視頻監(jiān)控。公安機(jī)關(guān)已建監(jiān)控系統(tǒng)2萬余套，省級(jí)監(jiān)控平臺(tái)20余套，實(shí)現(xiàn)聯(lián)網(wǎng)IPC40余萬臺(tái)，地市級(jí)平臺(tái)332套，實(shí)現(xiàn)聯(lián)網(wǎng)IPC60余萬臺(tái)。平安城市就是通過三防系統(tǒng)（技防系統(tǒng)、物防系統(tǒng)、人防系統(tǒng)）建設(shè)城市的平安和諧。它是一個(gè)特大型、綜合性非常強(qiáng)的管理系統(tǒng)，不僅需要滿足治安管理、城市管理、交通管理、應(yīng)急指揮等需求，而且還要兼顧災(zāi)難事故預(yù)警、安全生產(chǎn)監(jiān)控等方面對圖像監(jiān)控的需求，同時(shí)還要考慮各系統(tǒng)之間的聯(lián)動(dòng)。2.8.2園區(qū)智能安防基于AI智能分析的視頻上云網(wǎng)關(guān)需求從園區(qū)的類型來看，可以劃分為企業(yè)園、物流園、工業(yè)園等。工業(yè)園區(qū)安防系統(tǒng)通常由以下部分構(gòu)成：視頻監(jiān)控系統(tǒng)、入侵報(bào)警系統(tǒng)、門禁管理系統(tǒng)、電子巡更系統(tǒng)、停車管理系和綜合管理平臺(tái)。為園區(qū)周界、內(nèi)部道路、大廳、走廊、室內(nèi)提供全方位綜合安防保障，實(shí)現(xiàn)園區(qū)可視化、數(shù)字化、智能化管理，讓園區(qū)更智能，讓工作與生活更平安。視頻監(jiān)控系統(tǒng)企業(yè)工廠的視頻監(jiān)控系統(tǒng)主要實(shí)現(xiàn)對主要出入口、關(guān)鍵區(qū)域(如：倉庫、財(cái)務(wù)室)、車間、生產(chǎn)線的在線視頻監(jiān)控，重要區(qū)域?qū)崿F(xiàn)24小時(shí)不間斷錄像，預(yù)防事故、案件的發(fā)生，并且可以在事后進(jìn)行原因分析、證據(jù)定位。入侵報(bào)警系統(tǒng)入侵報(bào)警系統(tǒng)對非法入侵情況向安保人員進(jìn)行報(bào)警，通常由周界防范和防盜報(bào)警系統(tǒng)構(gòu)成，系統(tǒng)通過在廠區(qū)分布設(shè)置的報(bào)警探測器對廠區(qū)周界及重要區(qū)域進(jìn)行布防，實(shí)現(xiàn)非法入侵探測，一旦監(jiān)視區(qū)域內(nèi)發(fā)生非法入侵，報(bào)警探測器立即發(fā)出報(bào)警信號(hào)到保衛(wèi)中心。煙火檢測廠區(qū)、加油站是一個(gè)由儲(chǔ)存、輸送、消防、維修等子系統(tǒng)構(gòu)成的一個(gè)易燃、易爆、有毒的危險(xiǎn)場所。由于它存在易燃、易爆以及易腐蝕、有毒、易流失等不安全因素，危險(xiǎn)性很大。一旦發(fā)生事故，就可能造成人員傷亡和油料物資的大量損失，因此采取預(yù)防措施，加強(qiáng)明火管理，嚴(yán)防火種產(chǎn)生是輸油站安全管理的首要措施，煙火識(shí)別系統(tǒng)成為輸油站的首要選擇的智能防范措施。煙火檢測基于智能視頻分析和深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)技術(shù)，實(shí)現(xiàn)對監(jiān)控區(qū)域內(nèi)的煙和火煙進(jìn)行識(shí)別、實(shí)時(shí)分析報(bào)警。不依賴其他傳感設(shè)備，直接對視頻監(jiān)控區(qū)域的畫面的煙霧和火焰均可及時(shí)準(zhǔn)確識(shí)別。對煙霧和火焰實(shí)時(shí)分析報(bào)警，同時(shí)將報(bào)警信息快照和報(bào)警視頻存入數(shù)據(jù)庫，將報(bào)警信息及時(shí)推送給相關(guān)的管理人員，及時(shí)應(yīng)對。煙火檢測可協(xié)助管理人員，對廠區(qū)、輸油站內(nèi)的火焰做到全天二十四小時(shí)實(shí)時(shí)分析及時(shí)報(bào)警。門禁管理系統(tǒng)廠區(qū)的門禁管理系統(tǒng)通過讀卡器和電磁鎖控制人員的進(jìn)出，對人員在敏感區(qū)域的進(jìn)出加以記錄，同時(shí)能結(jié)合廠區(qū)考勤系統(tǒng)及消費(fèi)系統(tǒng)、停車管理系統(tǒng)等實(shí)現(xiàn)廠區(qū)一卡通功能。電子巡更系統(tǒng)電子巡更系統(tǒng)通過在廠區(qū)的主要干道、重要機(jī)房、倉庫、財(cái)務(wù)室等關(guān)鍵設(shè)置巡更點(diǎn)，安保人員在特定時(shí)間內(nèi)按設(shè)計(jì)好的線路進(jìn)行巡更，實(shí)現(xiàn)廠區(qū)安防的人防和技防相結(jié)合。該系統(tǒng)分為離線式、在線式兩種模式，離線式無需布線至中心，安裝方便，系統(tǒng)擴(kuò)展性好，但實(shí)時(shí)安全性不高；在線式通過巡更點(diǎn)與中心直接連接，能實(shí)時(shí)顯示巡檢人員的身份信息、地理位置等。停車管理系統(tǒng)停車管理系統(tǒng)可以實(shí)現(xiàn)對車輛的進(jìn)出和停放進(jìn)行有序管理，包括對廠區(qū)內(nèi)部車輛管理、外來訪客的臨時(shí)車輛管理。通過系統(tǒng)實(shí)現(xiàn)對進(jìn)出車輛的記錄、控制、計(jì)時(shí)及收費(fèi)等功能。綜合管理平臺(tái)綜合管理平臺(tái)將視頻監(jiān)控系統(tǒng)、入侵報(bào)警系統(tǒng)、門禁管理系統(tǒng)、電子巡更系統(tǒng)、停車管理系統(tǒng)有機(jī)結(jié)合起來，實(shí)現(xiàn)一體化集成管理和系統(tǒng)聯(lián)動(dòng)。例如：當(dāng)發(fā)生入侵報(bào)警時(shí)，可聯(lián)動(dòng)攝像機(jī)對報(bào)警區(qū)域進(jìn)行監(jiān)視；門禁的進(jìn)出記錄和視頻監(jiān)控可以有機(jī)結(jié)合起來，對門禁出入情況可關(guān)聯(lián)視頻監(jiān)視；視頻監(jiān)控和電子巡更、停車管理系統(tǒng)的有機(jī)結(jié)合等等。2.8.3智慧校園基于AI智能分析的視頻上云網(wǎng)關(guān)需求近年來，隨著各種校園安全事件頻發(fā)，學(xué)校人流集中，場地復(fù)雜難于管理，為預(yù)防、震懾犯罪，減少財(cái)產(chǎn)損失，保障師生員工的人身安全，完善校園安全防范體系、提高校園整體防控能力，改善學(xué)校管理體系，創(chuàng)建一個(gè)文明、安全、和諧、美麗的校園環(huán)境，亟需一套完善的解決方案，將最新的視頻監(jiān)控和智能技術(shù)應(yīng)用到校園的安全保障中，通過“人防、物防、技防”的有效結(jié)合，全方案保護(hù)學(xué)校是生的人身財(cái)產(chǎn)安全。目前，校園實(shí)行智能安防的主要需求有：透明食堂監(jiān)控為了保障學(xué)校視頻安全，預(yù)防不法案件的發(fā)生，目前需要重點(diǎn)監(jiān)控飲食加工操作規(guī)范、外來人員進(jìn)出食堂突發(fā)事件以及對視頻安全事故記錄取證；校園車輛卡口系統(tǒng)校園和社會(huì)外界融為一體，校園內(nèi)存在大量的社會(huì)車輛進(jìn)出，對于校園里的車輛管理和安全管理是個(gè)很大的隱患。為了解決這一問題，需要在校園內(nèi)部署卡口測速系統(tǒng)，對超速車輛、黑名單車輛抓拍布控，加強(qiáng)校園車輛管理，提高整個(gè)校園的安全管理水平；手機(jī)移動(dòng)監(jiān)控保證學(xué)校領(lǐng)導(dǎo)在外的時(shí)候，可以通過手機(jī)預(yù)覽學(xué)校緊急事件現(xiàn)場的實(shí)時(shí)圖像和歷史錄像；打通安防和這些其他業(yè)務(wù)系統(tǒng)的隔閡，實(shí)現(xiàn)安防與校園管理的融會(huì)互通也成為一個(gè)必要條件。校園安防正逐步將技術(shù)防控系統(tǒng)作為安保信息化建設(shè)其中一部分，逐步提升智能化水平，實(shí)現(xiàn)技防各子系統(tǒng)高度集成聯(lián)動(dòng)、海量數(shù)據(jù)智能化分析并自動(dòng)導(dǎo)出，真正意義上實(shí)現(xiàn)安保工作基礎(chǔ)平臺(tái)信息化。隨著安防監(jiān)控越來越靠近IT行業(yè)，安防項(xiàng)目很多數(shù)據(jù)傳輸和處理都要靠信息技術(shù)來完成。2.8.4高速視頻上云基于AI智能分析的視頻上云網(wǎng)關(guān)需求監(jiān)控視頻作為道路信息采集的一種手段，因其實(shí)時(shí)性、直觀性，對道路管理者掌握道路通行實(shí)景具有不可替代的作用，一是交通誘導(dǎo)，通過遠(yuǎn)程視頻監(jiān)控，可以實(shí)時(shí)采集路況信息和氣象信息，為交通誘導(dǎo)提供依據(jù)。二是事后取證，對道路、收費(fèi)站車道、收費(fèi)亭等日常工作、出入車輛的視頻圖像資料進(jìn)行存儲(chǔ)，以備交通事故、車輛闖卡等突發(fā)事件取證時(shí)查詢。三是應(yīng)急指揮，在突發(fā)交通事故等事件時(shí)，可以實(shí)時(shí)監(jiān)控，為遠(yuǎn)程應(yīng)急指揮提供幫助。為改善高速公路運(yùn)營管理效率，提升高速公路信息服務(wù)能力，以“互聯(lián)網(wǎng)+交通”為思路，創(chuàng)新采用“云、管、端”的總體架構(gòu)，將分散在各個(gè)路段管理的監(jiān)控視頻推送上云，建立云上統(tǒng)一的“可視”“可控”的視頻平臺(tái)。同時(shí)視頻上云網(wǎng)關(guān)為高速公路各級(jí)管理者提供實(shí)時(shí)、高清、便捷的視頻調(diào)看服務(wù)，同時(shí)向出行公眾提供低延時(shí)、大并發(fā)、可管控的安全視頻服務(wù)。第三章項(xiàng)目實(shí)施目標(biāo)和主要內(nèi)容3.1項(xiàng)目實(shí)施目標(biāo)本項(xiàng)目結(jié)合互聯(lián)網(wǎng)、人工智能、物聯(lián)網(wǎng)、大數(shù)據(jù)、智能語音、云計(jì)算等信息技術(shù)，研發(fā)基于AI智能分析的視頻上云網(wǎng)關(guān)硬件終端+軟件系統(tǒng)，視頻智能分析軟件、省級(jí)視頻聯(lián)網(wǎng)云平臺(tái)、智能物聯(lián)網(wǎng)聯(lián)網(wǎng)平臺(tái)、智能云組網(wǎng)服務(wù)平臺(tái)、視頻接入相關(guān)軟件、智能邊緣計(jì)算平臺(tái)，解決存儲(chǔ)資源消耗大且增長迅速，對數(shù)據(jù)可靠性要求高，帶寬資源消耗巨大，且上行、下行流量不對稱，用戶觀看體驗(yàn)在海量并發(fā)業(yè)務(wù)下難以保障的技術(shù)問題，并嵌入智能語音、煙火識(shí)別、車牌識(shí)別、車流分析、人臉識(shí)別、擁堵分析等模塊，實(shí)現(xiàn)Internet就近加密接入，獲得更加智能、更加可靠、更加安全的上云體驗(yàn)。經(jīng)過簡單配置即可實(shí)現(xiàn)視頻接入、視頻濃縮、視頻轉(zhuǎn)碼、智能組網(wǎng)、邊緣計(jì)算、人臉識(shí)別等技術(shù)目標(biāo)。3.2建設(shè)內(nèi)容與建設(shè)規(guī)?！盎贏I智能分析的視頻上云網(wǎng)關(guān)設(shè)備及系統(tǒng)”項(xiàng)目建設(shè)周期：2019年10月1日至2020年11月30日。該項(xiàng)目基于互聯(lián)網(wǎng)、視頻智能分析、物聯(lián)網(wǎng)、視頻大數(shù)據(jù)、智能語音、云計(jì)算等信息技術(shù)，融合視頻上云運(yùn)營理念，為客戶打造智能的終端設(shè)備、智享的用戶服務(wù)和智慧的運(yùn)維管理，是真正意義上的互聯(lián)網(wǎng)化、智能化的視頻上云解決方案。該項(xiàng)目在建設(shè)周期內(nèi)，計(jì)劃總投資200萬元，其中固定資產(chǎn)20萬元，項(xiàng)目建設(shè)完成，達(dá)產(chǎn)年預(yù)計(jì)新增產(chǎn)值380萬元，新增利潤50萬元，新增稅收18萬元。3.3技術(shù)方案該項(xiàng)目融合視頻上云運(yùn)營理念，為政企部門打造一套包含平臺(tái)+硬件的智能視頻快速上云一體化的解決方案，幫助政企部門通過智能視頻上云網(wǎng)關(guān)實(shí)現(xiàn)Internet就近加密接入，獲得更加智能、更加可靠、更加安全的上云體驗(yàn)，有效提高運(yùn)營效率，節(jié)省成本，增大利潤空間。對上云匯聚點(diǎn)的視頻系統(tǒng)開展上云接入條件改造后與云平臺(tái)直接對接，具備控制信令通過由云提供的云端VPN隧道傳輸、視頻流由互聯(lián)網(wǎng)通道傳輸?shù)裙δ?，并由云平臺(tái)向各地提供統(tǒng)一的“在線調(diào)取、共享分發(fā)、智能分析”等服務(wù)，同時(shí)具備調(diào)整為“路段-升級(jí)云平臺(tái)-部級(jí)云平臺(tái)”方式的能力，總體架構(gòu)如下圖：云端安全框架圖：3.3.1視頻上云網(wǎng)關(guān)設(shè)備及系統(tǒng)的設(shè)計(jì)視頻接入技術(shù)視頻源設(shè)備多種多樣，目前市場上有攝像機(jī)IPCamera、硬盤錄像機(jī)NVR、視頻編碼器、視頻服務(wù)器等各種視頻源設(shè)備，而這些設(shè)備目前經(jīng)過發(fā)展和市場改造，基本都已經(jīng)支持標(biāo)準(zhǔn)的RTSP/Onvif、國標(biāo)GB/T28181協(xié)議，而要將這些設(shè)備接入到視頻上云設(shè)備中，就需要設(shè)備能夠支持這一系列的行業(yè)標(biāo)準(zhǔn)協(xié)議。（其中國際標(biāo)準(zhǔn)RTSP/Onvif協(xié)議可通過EasyNVR流媒體服務(wù)器軟件接入，國標(biāo)GB/T28181協(xié)議可通過EasyGBS流媒體平臺(tái)接入，還可通過EasyRTMP流媒體推送軟件將RTMP、FLV視頻流，對接/推送到視頻上云設(shè)備中，如EasyDSS流媒體服務(wù)器軟件、EasyIOT智能物聯(lián)網(wǎng)服務(wù)平臺(tái)、EasyCVS省級(jí)視頻聯(lián)網(wǎng)云平臺(tái)等）。在通常情況下，視頻智能分析的原始數(shù)據(jù)源就是這些設(shè)備所生產(chǎn)的，他們具有編碼多樣化、碼率多樣化、幀率多樣化、編碼質(zhì)量多樣化等特點(diǎn)，這些視頻參數(shù)會(huì)給視頻源設(shè)備的接入帶來各種各樣的兼容性問題。同樣，在不同的應(yīng)用領(lǐng)域，對于視頻接入的要求也各不一樣，例如機(jī)場、火車站、交通等人流量密集區(qū)域視頻設(shè)備，就需要超高分辨率、超大碼率、超大數(shù)據(jù)量的實(shí)時(shí)視頻源，用于實(shí)時(shí)的人流量統(tǒng)計(jì)、人臉識(shí)別和車輛（車牌）分析。通過接入視頻監(jiān)控圖像，并存儲(chǔ)至云端視頻服務(wù)器，滿足視頻的實(shí)時(shí)推送和調(diào)看需求。視頻轉(zhuǎn)碼視頻上云網(wǎng)關(guān)通過集成轉(zhuǎn)碼工具，可以顯示上云匯聚點(diǎn)采集的視頻、圖片，在導(dǎo)入系統(tǒng)時(shí)統(tǒng)一轉(zhuǎn)化為標(biāo)準(zhǔn)格式視圖，在平臺(tái)中統(tǒng)一播放，為之后的視頻結(jié)構(gòu)化分析提供前期必要的視頻準(zhǔn)備工作。視頻編碼的歸一化是一切視頻結(jié)構(gòu)化分析和應(yīng)用的基礎(chǔ)，只有盡可能多地兼容多種視頻格式，才能實(shí)現(xiàn)視頻信息的深度應(yīng)用。目前上云網(wǎng)關(guān)支持視頻、音頻兩種文件形式的轉(zhuǎn)碼，其中支持80多種的視頻格式，并且兼容的范圍在持續(xù)增長。通過就媒體服務(wù)器進(jìn)行視頻轉(zhuǎn)碼，通過云視頻平臺(tái)的接口實(shí)時(shí)上報(bào)高清視頻的攝像機(jī)信息。視頻濃縮目前進(jìn)行視頻偵查作戰(zhàn)，主要還是依賴“人海戰(zhàn)術(shù)”。這種方式由于投入資源巨大，目前只能應(yīng)用于重特大案件中，無法應(yīng)用于一般性案件。隨著視頻資源質(zhì)量的提高，以及人像、機(jī)動(dòng)車等識(shí)別技術(shù)的成熟，可以通過自動(dòng)識(shí)別、自動(dòng)比對以及自動(dòng)預(yù)警的方式來提高視頻資料的利用效率，減輕人工工作壓力。通過平臺(tái)的濃縮處理工具可以快速實(shí)現(xiàn)視頻中運(yùn)動(dòng)目標(biāo)的動(dòng)靜分離，1個(gè)小時(shí)的視頻可以通過壓縮處理成幾分鐘的只包含運(yùn)動(dòng)目標(biāo)的視頻，且運(yùn)動(dòng)物體可以根據(jù)需要在同一時(shí)間集中播放，大大縮短民警查看視頻的時(shí)間。摘要分析經(jīng)過上云網(wǎng)關(guān)終端及系統(tǒng)，云端統(tǒng)一輸出標(biāo)準(zhǔn)的RTSP、RTMP、HLS、FLV格式直播流，云端智能分析采用模式識(shí)別、圖像分析比對等技術(shù)，自動(dòng)對視頻圖像進(jìn)行分析，提取結(jié)構(gòu)化信息描述，生成多種類型的索引：包括運(yùn)動(dòng)目標(biāo)索引、車輛索引、煙火等危險(xiǎn)物索引以及人臉?biāo)饕?。生成的索引能夠在時(shí)間軸上進(jìn)行標(biāo)記，支持人工標(biāo)注發(fā)現(xiàn)的線索信息，截取視頻片段，并作標(biāo)記，以便案件進(jìn)一步分析研判使用。視頻增強(qiáng)通過研究視頻圖像增強(qiáng)技術(shù)，不僅可以對實(shí)時(shí)視頻，也可以對歷史視頻中的模糊現(xiàn)象進(jìn)行清晰化處理。改善由于環(huán)境因素（霧天、奇偶場等）導(dǎo)致的圖像模糊現(xiàn)象。靈活的參數(shù)設(shè)置方案，實(shí)現(xiàn)畫面質(zhì)量即調(diào)即所得。常用于惡劣天氣下高速車輛設(shè)備、車牌識(shí)別及人臉識(shí)別，防控高速事件的發(fā)生。模糊圖片處理警用圖像處理系統(tǒng)主要包括常規(guī)功能、高級(jí)功能、特殊功能和序列圖像處理功能。常規(guī)功能主要涵蓋圖像幾何變換、圖像濾波、圖像特征、圖像運(yùn)算、圖像增強(qiáng)和圖像轉(zhuǎn)換形態(tài)學(xué)操作等圖像的基本操作功能。高級(jí)功能主要包括超分辨率、模糊處理、圖像復(fù)原、圖像融合、噪聲處理和顏色處理。特殊功能包括人像重建、去霧、色彩分離、移行和奇偶場。序列圖像處理主要包括穩(wěn)定化、超分辨率、多幀平均、多幀融合、手工配準(zhǔn)和低照度增強(qiáng)。人臉識(shí)別比對通過模式識(shí)別技術(shù)，快速提取視頻中運(yùn)動(dòng)目標(biāo)的人臉，與公安的高危人員庫進(jìn)行比對識(shí)別，一旦發(fā)現(xiàn)嫌疑人員，系統(tǒng)自動(dòng)產(chǎn)生報(bào)警，起到了提前預(yù)防和防范的目的。邊緣計(jì)算技術(shù)邊緣計(jì)算指的是在網(wǎng)絡(luò)邊緣結(jié)點(diǎn)來處理、分析數(shù)據(jù)。這里，我們給出邊緣結(jié)點(diǎn)的定義，邊緣結(jié)點(diǎn)指的就是在數(shù)據(jù)產(chǎn)生源頭和云中心之間任一具有計(jì)算資源和網(wǎng)絡(luò)資源的結(jié)點(diǎn)。比如，手機(jī)就是人與云中心之間的邊緣結(jié)點(diǎn)，網(wǎng)關(guān)是智能家居和云中心之間的邊緣結(jié)點(diǎn)。在理想環(huán)境中，邊緣計(jì)算指的就是在數(shù)據(jù)產(chǎn)生源附近分析、處理數(shù)據(jù)，沒有數(shù)據(jù)的流轉(zhuǎn)，進(jìn)而減少網(wǎng)絡(luò)流量和響應(yīng)時(shí)間。邊緣計(jì)算市場概況：驅(qū)動(dòng)因素云基礎(chǔ)設(shè)施上的負(fù)載越來越大不同行業(yè)有種類廣泛的應(yīng)用智能應(yīng)用的數(shù)量增加制約因素與邊緣計(jì)算有關(guān)的安全和隱私問題機(jī)會(huì)5G網(wǎng)絡(luò)出現(xiàn)挑戰(zhàn)不夠到位的行業(yè)標(biāo)準(zhǔn)和互操作性問題推動(dòng)因素：云服務(wù)的推動(dòng)：云中心具有強(qiáng)大的處理性能，能夠處理海量的數(shù)據(jù)。但是，將海量的數(shù)據(jù)傳送到云中心成了一個(gè)難題。云計(jì)算模型的系統(tǒng)性能瓶頸在于網(wǎng)絡(luò)帶寬的有限性，傳送海量數(shù)據(jù)需要一定的時(shí)間，云中心處理數(shù)據(jù)也需要一定的時(shí)間，這就會(huì)加大請求響應(yīng)時(shí)間，用戶體驗(yàn)極差。物聯(lián)網(wǎng)的推動(dòng)：現(xiàn)在幾乎所有的電子設(shè)備都可以連接到互聯(lián)網(wǎng)，這些電子設(shè)備會(huì)后產(chǎn)生海量的數(shù)據(jù)。傳統(tǒng)的云計(jì)算模型并不能及時(shí)有效的處理這些數(shù)據(jù)，在邊緣結(jié)點(diǎn)處理這些數(shù)據(jù)將會(huì)帶來極小的響應(yīng)時(shí)間、減輕網(wǎng)絡(luò)負(fù)載、保證用戶數(shù)據(jù)的私密性。終端設(shè)備的角色轉(zhuǎn)變：終端設(shè)備大部分時(shí)間都在扮演數(shù)據(jù)消費(fèi)者的角色，比如使用智能手機(jī)觀看愛奇藝、刷抖音等。然而，現(xiàn)在智能手機(jī)讓終端設(shè)備也有了生產(chǎn)數(shù)據(jù)的能力，比如在淘寶購買東西，在百度里搜索內(nèi)容這些都是終端節(jié)點(diǎn)產(chǎn)生的數(shù)據(jù)。智能云組網(wǎng)技術(shù)解決難題設(shè)備置于私有內(nèi)網(wǎng)，設(shè)備所在內(nèi)網(wǎng)無公網(wǎng)固定IP地址，無法在互聯(lián)網(wǎng)上被其他用戶和設(shè)備訪問到；設(shè)備置于私有內(nèi)網(wǎng)，設(shè)備所在內(nèi)網(wǎng)雖然有公網(wǎng)固定IP地址，但端口映射權(quán)限的開通遇到困難，網(wǎng)管不會(huì)、審批流程麻煩、端口資源不夠、映射端口不夠靈活，如何跳過路由器、防火墻，做自定義的端口映射；需要遠(yuǎn)程運(yùn)維內(nèi)網(wǎng)設(shè)備或者主機(jī)，即使主機(jī)既沒有公網(wǎng)固定IP，而且遠(yuǎn)程端口（例如22、3389等）未開放，如何做到對各種類型終端設(shè)備的指令控制；設(shè)備置于私有內(nèi)網(wǎng)，而且數(shù)量眾多，內(nèi)網(wǎng)多臺(tái)設(shè)備如何能夠統(tǒng)一組織到云端，實(shí)現(xiàn)云端的集中訪問和控制；在音視頻上云領(lǐng)域，內(nèi)網(wǎng)上行帶寬總是有限，如何借助云端帶寬和計(jì)算資源實(shí)現(xiàn)更大能力的數(shù)據(jù)分發(fā)；有的應(yīng)用場景下，常態(tài)情況無需端口映射，是否有方案能夠做到按需映射、按需組網(wǎng)；保護(hù)數(shù)據(jù)安全，表面上數(shù)據(jù)是從公網(wǎng)輸出，實(shí)際是內(nèi)網(wǎng)輸出的，云組網(wǎng)只做數(shù)據(jù)的代理轉(zhuǎn)發(fā)；主要內(nèi)容網(wǎng)絡(luò)穿透服務(wù)這里說到的網(wǎng)絡(luò)穿透，可能跟傳統(tǒng)意義上的p2p網(wǎng)絡(luò)穿透不是一回事，傳統(tǒng)意義的網(wǎng)絡(luò)穿透多指終端網(wǎng)絡(luò)（p即私有內(nèi)網(wǎng)）與終端網(wǎng)絡(luò)之間直接對等傳輸，不需要經(jīng)過第三方服務(wù)器進(jìn)行轉(zhuǎn)發(fā)的網(wǎng)絡(luò)傳輸方式，這里說到的EasyNTS智能云組網(wǎng)的網(wǎng)絡(luò)穿透是采用的服務(wù)轉(zhuǎn)發(fā)方式的穿透，穿透率100%，我們稱這種功能為云組網(wǎng)。只要EasyNTS云終端設(shè)備能連接到EasyNTS云組網(wǎng)，就可以建立起設(shè)備的云端組網(wǎng)，將設(shè)備的所有網(wǎng)絡(luò)能力在云端得到發(fā)布。動(dòng)態(tài)組網(wǎng)服務(wù)按照EasyNTS智能云組網(wǎng)網(wǎng)絡(luò)穿透的原理，數(shù)據(jù)的穿透實(shí)際采用的是EasyNTS智能云組網(wǎng)云端服務(wù)進(jìn)行的網(wǎng)絡(luò)數(shù)據(jù)轉(zhuǎn)發(fā)，并且所有的數(shù)據(jù)都會(huì)經(jīng)過EasyNTS智能云組網(wǎng)服務(wù)器進(jìn)行中轉(zhuǎn)傳輸，而且在EasyNTS智能云組網(wǎng)對外發(fā)布內(nèi)網(wǎng)每一臺(tái)設(shè)備的每一種網(wǎng)絡(luò)能力時(shí)（例如HTTP、RTSP、SSH、Telnet、RDP等），需要為每一臺(tái)設(shè)備都專門分配開通公網(wǎng)端口，單臺(tái)EasyNTS如果需要組網(wǎng)1萬臺(tái)設(shè)備服務(wù)，那么就需要EasyNTS云服務(wù)器同時(shí)開放1萬個(gè)端口對外，但是大部分情況下，例如我們的云端遠(yuǎn)程控制功能，只有每次需要遠(yuǎn)程ssh、telnet或者rdp的時(shí)候才需要開放端口，常態(tài)下是只要保持EasyNTS智能云組網(wǎng)服務(wù)與EasyNTS智能云終端的連接就可以了，于是，EasyNTS根據(jù)這種需求原則，基于MQTT加密協(xié)議研發(fā)出了EasyNTS動(dòng)態(tài)組網(wǎng)的功能，在某些應(yīng)用場景下，設(shè)備不需要開放端口時(shí)，只需要保持心跳連接，讓EasyNTS智能云組網(wǎng)服務(wù)器能向EasyNTS智能云終端發(fā)送指令即可，一旦需要開放任意端口，EasyNTS智能云組網(wǎng)服務(wù)會(huì)向EasyNTS智能云終端發(fā)送端口組網(wǎng)的指令，在瞬時(shí)間內(nèi)立即組網(wǎng)穿透成功，并在EasyNTS智能云組網(wǎng)服務(wù)端形成設(shè)備云端能力對外發(fā)布。遠(yuǎn)程運(yùn)維功能基于上述的“網(wǎng)絡(luò)穿透”和“動(dòng)態(tài)組網(wǎng)”的功能，充分發(fā)揮EasyNTS智能云組網(wǎng)服務(wù)的能力，應(yīng)用于各種各樣的應(yīng)用場景，可以將EasyNTS理解為PaaS(Platform-as-a-Service：平臺(tái)即服務(wù))能力，同時(shí)，我們基于EasyNTS本身的能力，也做了一些SaaS（Software-as-a-Service：軟件即服務(wù)）方面的擴(kuò)展，我們可以直接在EasyNTS智能云組網(wǎng)的后臺(tái)，通過ssh/telnet/rdp等方式直接遠(yuǎn)程控制設(shè)備，同時(shí)，基于這些遠(yuǎn)程連接，可直接向EasyNTS云終端設(shè)備傳輸文件和直接發(fā)送自定義的操作指令。0運(yùn)用技術(shù)列表基于AI智能分析的視頻上云網(wǎng)關(guān)硬件及系統(tǒng)涉及多個(gè)產(chǎn)品，如：云組網(wǎng)、省級(jí)視頻聯(lián)網(wǎng)、視頻上云網(wǎng)關(guān)系統(tǒng)、智能物聯(lián)網(wǎng)服務(wù)平臺(tái)、邊緣計(jì)算、智能分析、視頻大數(shù)據(jù)等，具體見下表：主要技術(shù)運(yùn)用產(chǎn)品產(chǎn)品特點(diǎn)相關(guān)知識(shí)成果智能組網(wǎng)EasyNTS智能云組網(wǎng)服務(wù)平臺(tái)V1.0EasyNTS智能云組網(wǎng)服務(wù)平臺(tái)是一整套的智能云組網(wǎng)產(chǎn)品，用戶可集成部署在自己的硬件終端和業(yè)務(wù)系統(tǒng)中，也可以根據(jù)需求直接配置在終端網(wǎng)絡(luò)現(xiàn)場，實(shí)現(xiàn)智能接入與智能管控、動(dòng)態(tài)組網(wǎng)、遠(yuǎn)程運(yùn)維、文件傳輸、遠(yuǎn)程指令調(diào)用等功能，從終端到云端，

形成了一整套的云組網(wǎng)解決方案，極大地解決現(xiàn)場無固定IP、端口不開放、系統(tǒng)權(quán)限不開放等問題；EasyNTS智能云組網(wǎng)服務(wù)平臺(tái)具有強(qiáng)大的服務(wù)器群組網(wǎng)能力，可以按需選擇需要組網(wǎng)的網(wǎng)絡(luò)成員實(shí)現(xiàn)點(diǎn)點(diǎn)互聯(lián)、智能動(dòng)態(tài)組網(wǎng)等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR0780934視頻接入EasyDSSEasyDSS流媒體解決方案采用業(yè)界優(yōu)秀的流媒體框架模式設(shè)計(jì)，服務(wù)運(yùn)行輕量、高效、穩(wěn)定、可靠、易維護(hù)，支持RTMP直播、RTMP推送、HTTP點(diǎn)播、HTTP-FLV直播、HLS直播，并支持關(guān)鍵幀緩沖，畫面秒開等多種特性，能夠接入Web、Android、iOS、H5、微信等全平臺(tái)客戶端，是移動(dòng)互聯(lián)網(wǎng)時(shí)代貼近企業(yè)點(diǎn)播/直播需求的一款接地氣的流媒體服務(wù)器，配套OBS、EasyRTMP等直播推流工具以及EasyPlayer等網(wǎng)絡(luò)播放器，可以形成一套完整的視頻直播、錄播解決方案，滿足用戶在各種行業(yè)場景的流媒體業(yè)務(wù)需求。軟件著作權(quán)：3個(gè)證件號(hào)：2018SR197280軟著檢測：1個(gè)編號(hào)：ASTC2018010490編號(hào)：ASTC2018010873EasyGBS流媒體平臺(tái)EasyGBS流媒體服務(wù)器提供的流轉(zhuǎn)發(fā)服務(wù)，負(fù)責(zé)將GB28181設(shè)備/平臺(tái)推送的PS流轉(zhuǎn)成ES流，然后提供RTSP、RTMP、FLV、HLS多種格式進(jìn)行分發(fā)，實(shí)現(xiàn)web瀏覽器、手機(jī)瀏覽器、微信、PC客戶端等各終端無插件播放。同時(shí)，EasyGBS流媒體服務(wù)器對外提供HTTPAPI接口，通過接口可以獲知流媒體轉(zhuǎn)發(fā)服務(wù)的運(yùn)行狀態(tài)信息，轉(zhuǎn)發(fā)會(huì)話信息，服務(wù)器配置和版本信息等。軟件著作權(quán)：1個(gè)證件號(hào)：2018SR891598視頻大數(shù)據(jù)EasyNVS視頻綜合管理平臺(tái)EasyNVS視頻綜合管理平臺(tái)是一套以視頻為核心的物聯(lián)網(wǎng)大數(shù)據(jù)智能調(diào)度與管控平臺(tái)，主要面向多個(gè)行業(yè)應(yīng)用，比如能源環(huán)保、智慧工地、電力等行業(yè)，是以視頻基礎(chǔ)平臺(tái)為核心，融合了前端各種傳感器數(shù)據(jù)的采集，包括后端的大數(shù)據(jù)智能分析（開關(guān)輔助識(shí)別、安全帽輔助識(shí)別、電力巡線檢測等），形成的一套視頻大數(shù)據(jù)平臺(tái)；EasyNVS視頻綜合管理平臺(tái)主要有覆蓋面廣、兼容性強(qiáng)、數(shù)據(jù)分析處理及時(shí)、聯(lián)動(dòng)預(yù)警機(jī)制完善、架構(gòu)可擴(kuò)展性高等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR1057002TSINGSEE視頻開放平臺(tái)TSINGSEE視頻開放平臺(tái)是一個(gè)可以為多種行業(yè)產(chǎn)品提供視頻能力解決方案的綜合PaaS平臺(tái)，TSINGSEE開放平臺(tái)包含了視頻各個(gè)行業(yè)所需的視頻分析算法、智能語音算法、視頻中間件、視頻SDK、視頻分析工具的能力開放平臺(tái)，用于整個(gè)流媒體音視頻領(lǐng)域，在工業(yè)與物聯(lián)網(wǎng)、公安安全與交通、廣電與通信、能源與環(huán)保等領(lǐng)域具有廣泛應(yīng)用；TSINGSEE視頻開放平臺(tái)具有覆蓋面廣、兼容性強(qiáng)、數(shù)據(jù)分析處理及時(shí)、聯(lián)動(dòng)預(yù)警機(jī)制完善、架構(gòu)可擴(kuò)展性高等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR1056994視頻對講EasyRTC視頻通話軟件EasyRTC視頻通話軟件是一款覆蓋全球的實(shí)時(shí)音視頻通話與會(huì)議軟件，結(jié)合了智能視頻、智能語音、窄帶傳輸、通道加密、數(shù)據(jù)加密等技術(shù)，可通過微信小程序、H5頁面、APP、PC客戶端等接入方式之間互通，

快速從零開始搭建實(shí)時(shí)音視頻通信，支持一對一、一對多等視頻通話，滿足語音視頻社交、在線教育和培訓(xùn)、視頻會(huì)議和遠(yuǎn)程醫(yī)療等場景；支持多終端接入方式之間互通，快速從零開始搭建實(shí)時(shí)音視頻通信平臺(tái)；

EasyRTC視頻通話軟件可以具有實(shí)時(shí)音視頻通話，支持語音會(huì)議、視頻會(huì)議、會(huì)議錄像、會(huì)議回放、旁路直播等技術(shù)特點(diǎn)

。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR1057014視頻會(huì)議EasyRTS應(yīng)急指揮管理平臺(tái)EasyRTS應(yīng)急指揮管理平臺(tái)是一套指揮調(diào)度平臺(tái)，也是以視頻為主，結(jié)合無線通信，這里的無線包含公網(wǎng)、LTE專網(wǎng)、自組網(wǎng)還有海事衛(wèi)星等通訊手段，在保證應(yīng)急的情況下通訊暢通，結(jié)合平臺(tái)集群調(diào)度、視頻智能調(diào)度、智能語音調(diào)度以及地圖調(diào)度等功能，可以實(shí)現(xiàn)任務(wù)下發(fā)等一系列調(diào)度功能。另外，平臺(tái)可以和現(xiàn)有的會(huì)議系統(tǒng)做一個(gè)融合，實(shí)現(xiàn)視頻的會(huì)商調(diào)度；EasyRTS應(yīng)急指揮管理平臺(tái)具有窄帶通信能力強(qiáng)、視頻智能分析速度快、智能語音交互友好、融合性強(qiáng)等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR1056989智能識(shí)別EasyDSS-Kernel高性能流媒體服務(wù)軟件V1.0EasyDSS-Kernel高性能流媒體服務(wù)軟件是一款應(yīng)用于AI視頻識(shí)別分析智能邊緣計(jì)算設(shè)備中的流媒體視頻服務(wù)軟件，EasyDSS-Kernel高性能流媒體服務(wù)軟件不僅是一款集成了AI人工智能的移動(dòng)偵測、人臉檢測、區(qū)域監(jiān)測算法，而且具有標(biāo)準(zhǔn)RTSP/Onvif/GB/T28181協(xié)議接入功能的視頻服務(wù)軟件，EasyDSS-Kernel提供一站式的視頻智能轉(zhuǎn)碼、點(diǎn)播、直播、錄像、檢索、時(shí)移回放的AI視頻服務(wù)；EasyDSS-Kernel高性能流媒體服務(wù)軟件具備架構(gòu)可擴(kuò)展性高、協(xié)議兼容性強(qiáng)、穩(wěn)定性高、操作簡單、檢測及時(shí)、智能分析速度快、傳輸可靠保障性高等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR0777379智能預(yù)警EasyRTMPLive視頻轉(zhuǎn)換服務(wù)軟件V1.0EasyRTMPLive視頻轉(zhuǎn)換服務(wù)軟件是包含在視頻分析設(shè)備中的一套邊緣計(jì)算型RTMP流分析軟件，應(yīng)用于車載終端中對駕駛員、危險(xiǎn)品、乘客行為管控的智能分析與實(shí)時(shí)上報(bào)預(yù)警軟件，包括基礎(chǔ)人臉、車牌的特征提取算法，危險(xiǎn)品的識(shí)別算法，還有針對不同類型車輛、車種特定的算法，比如司機(jī)的安全帶檢測、乘客人員異常舉動(dòng)檢測、疲勞駕駛檢測等。EasyRTMPLive視頻轉(zhuǎn)換服務(wù)軟件具有軟硬結(jié)合性強(qiáng)、視頻智能分析檢測速度快、預(yù)警機(jī)制全面、軟件運(yùn)行穩(wěn)定性高等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR0777639邊緣計(jì)算EasyEdge智能邊緣計(jì)算平臺(tái)V1.0EasyEdge智能邊緣計(jì)算平臺(tái)是一套針對安防場景：如平安城市、城管、安檢、環(huán)保等安防可視化需求的，結(jié)合無線圖傳、人工智能的算法的RTSP協(xié)議接入網(wǎng)關(guān)軟件，是專為適配邊緣側(cè)設(shè)備打造的一款輕量級(jí)物聯(lián)網(wǎng)操作系統(tǒng)，具備工業(yè)協(xié)議解析、數(shù)據(jù)過濾和分發(fā)等核心功能，具有跨平臺(tái)、易使用和二次開發(fā)等特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2020SR0029121智能分析EasyRTSPServer安防視頻智能服務(wù)軟件V1.0EasyRTSPServer安防視頻智能服務(wù)軟件由一套穩(wěn)定、高效、可靠、多平臺(tái)支持的RTSP流媒體智能服務(wù)軟件，支持多種音視頻編碼格式，適用于手機(jī)視頻服務(wù)，桌面視頻服務(wù)，攝像機(jī)視頻服務(wù)，通過該視頻服務(wù)可以進(jìn)行多種行業(yè)應(yīng)用場景類型視頻的智能分析，例如人臉分析、人臉比對、安全帽分析、車輛分析、行為分析等等；EasyRTSPServer安防視頻智能服務(wù)軟件具有兼容性強(qiáng)、穩(wěn)定性高、操作簡單、分析速度快等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR0778638EasyStreamClient視頻客戶端軟件EasyStreamClient視頻客戶端軟件是一款進(jìn)行標(biāo)準(zhǔn)音視頻流協(xié)議交互和智能分析的客戶端軟件，主要面向的是互聯(lián)網(wǎng)類直播的實(shí)時(shí)視頻分析鑒黃與語音言論管控，功能是將實(shí)時(shí)直播的互聯(lián)網(wǎng)視頻進(jìn)行人工智能的視頻分析，鑒別出違法、色情等視頻信息；對實(shí)時(shí)直播的語音進(jìn)行文字轉(zhuǎn)義，對敏感字樣進(jìn)行分析預(yù)警，提供和上報(bào)到第三方平臺(tái)接口；EasyStreamClient視頻客戶端軟件具有兼容性強(qiáng)、接入面廣、接口機(jī)制全面、視頻識(shí)別速度快、語音/文字轉(zhuǎn)換準(zhǔn)確等技術(shù)特點(diǎn)。軟件著作權(quán)：1個(gè)證件號(hào)：2019SR1057020EasyIVS視頻智能分析軟件EasyIVS視頻智能分析軟件是一款基于邊緣接入節(jié)點(diǎn)和視頻接入技術(shù)，面向監(jiān)控設(shè)備提供統(tǒng)一開放的視頻流接入、處理和分發(fā)服務(wù)。把視頻內(nèi)容接入云端，進(jìn)行存儲(chǔ)、錄制回看、全網(wǎng)分發(fā)。同時(shí)與智能視覺、視頻計(jì)算系統(tǒng)、機(jī)器學(xué)習(xí)平臺(tái)、生態(tài)合作伙伴能力集成，快速構(gòu)建利用計(jì)算機(jī)視覺和視頻分析的應(yīng)用程序和智能監(jiān)控解決方案。軟件著作權(quán)：1個(gè)證件號(hào)：2020SR0027611視頻上云EasyCVS省級(jí)視頻聯(lián)網(wǎng)云平臺(tái)EasyCVS省級(jí)視頻聯(lián)網(wǎng)云平臺(tái)是一套視頻綜合管理平臺(tái)，負(fù)責(zé)集中管控下轄的所有視頻接入上云網(wǎng)關(guān)，并做基本的設(shè)備管理、直播管理、設(shè)備控制（云臺(tái)、雨刷、聚焦等）、錄像管理、用戶管理、Token管理等，并作為一種視頻能力平臺(tái)對外提供視頻能力，包括對交通部的部級(jí)視頻云平臺(tái)提供能力服務(wù)，同時(shí)也會(huì)主動(dòng)級(jí)聯(lián)接入到部級(jí)視頻云平臺(tái)，接受統(tǒng)一管控；軟件著作權(quán)：1個(gè)證件號(hào)：2020SR0027604EasyCVR視頻上云網(wǎng)關(guān)軟件EasyCVR視頻上云網(wǎng)關(guān)軟件是一套視頻接入上云網(wǎng)關(guān)，類似于我們的EasyNVR智能云終端，主要的工作是做視頻設(shè)備的接入，例如視頻攝像機(jī)IPC、數(shù)字硬盤錄像機(jī)NVR，是一種網(wǎng)關(guān)的角色，承上啟下連接省級(jí)視頻云平臺(tái)與高速公路現(xiàn)場設(shè)備，不涉及具體業(yè)務(wù)。軟件著作權(quán)：1個(gè)證件號(hào)：2020SR0035132EasyIOT智能物聯(lián)網(wǎng)服務(wù)平臺(tái)EasyIOT智能物聯(lián)網(wǎng)服務(wù)平臺(tái)提供了一站式的設(shè)備接入、設(shè)備管理、監(jiān)控運(yùn)維、數(shù)據(jù)流轉(zhuǎn)、數(shù)據(jù)存儲(chǔ)等服務(wù)，數(shù)據(jù)按照實(shí)例維度隔離，可根據(jù)業(yè)務(wù)規(guī)模靈活提升規(guī)格，具備高可用性、高并發(fā)、高性價(jià)比的特性，是企業(yè)設(shè)備上云的首選。軟件著作權(quán)：1個(gè)證件號(hào)：2020SR00283573.3.2系統(tǒng)軟件設(shè)計(jì)云管控平臺(tái)指令對接接口攝像機(jī)信息統(tǒng)一管理云視頻平臺(tái)要對各分公司視頻的攝像機(jī)信息做統(tǒng)一的管理，這些攝像機(jī)信息來源于上云網(wǎng)關(guān)設(shè)備實(shí)時(shí)地將各分公司視頻的攝像機(jī)信息通過接口的上報(bào)接口管理推送視頻上云網(wǎng)關(guān)設(shè)備要具體推送的視頻圖像是由云視頻平臺(tái)通過接口向其指定的，通過接口，指定攝像機(jī)圖像開始推送以及停止推送設(shè)備狀態(tài)管理上云網(wǎng)關(guān)設(shè)備需定期地向云視頻平臺(tái)做狀態(tài)上報(bào)，以便云視頻平臺(tái)能及時(shí)了解上云網(wǎng)關(guān)設(shè)備的當(dāng)前系統(tǒng)狀態(tài)和負(fù)載情況云管控平臺(tái)指令接口定義攝像機(jī)信息注冊/修改接口接收數(shù)據(jù)上報(bào)方提供的攝像機(jī)列表信息，如果攝像機(jī)存在則對信息進(jìn)行修改，否則新增。該接口可以一次上報(bào)多條攝像機(jī)信息接口和訪問形式：http://[ip:port]/bms/service/video.VideoInformation?token=[xx]攝像機(jī)信息刪除接口接收數(shù)據(jù)上報(bào)方提供的刪除攝像機(jī)編號(hào)，刪除攝像機(jī)信息。該接口支持一次性刪多個(gè)攝像機(jī)信息接口和訪問形式：http://[ip:port]/bms/service/video.VideoInformationDel?cameraNum=xx,xx&token=xx視頻推送開始接口平臺(tái)通知上云網(wǎng)關(guān)設(shè)備開始啟動(dòng)指定的攝像機(jī)視頻推送，視頻上云網(wǎng)關(guān)設(shè)備處理后，向平臺(tái)返回處理結(jié)果接口和訪問形式：http://[ip:port]/bms/service/video.VideoTransBegin?cameraNum=xx&token=xx&videotype=1視頻推送停止接口平臺(tái)通知上云網(wǎng)關(guān)設(shè)備停止指定的攝像機(jī)視頻推送，視頻上云網(wǎng)關(guān)設(shè)備處理后，向平臺(tái)返回處理結(jié)果。推薦每次只停止一路接口和訪問形式：http://[ip:port]/bms/service/video.VideoTransFinish?cameraNum=xxxx&token=xx&videotype=1視頻上云網(wǎng)關(guān)設(shè)備狀態(tài)上報(bào)由視頻上云網(wǎng)關(guān)設(shè)備向平臺(tái)上報(bào)狀態(tài)信息使用，上云網(wǎng)關(guān)設(shè)備根據(jù)運(yùn)行狀態(tài)，實(shí)時(shí)上報(bào)運(yùn)行中所遇到的異?；驙顟B(tài)內(nèi)容。發(fā)送頻率每秒不超過3條。平臺(tái)收到上報(bào)內(nèi)容后，需要對上報(bào)內(nèi)容做出回應(yīng)，并記錄上報(bào)內(nèi)容。上報(bào)的攝像機(jī)推流狀態(tài)可以有多個(gè)。接口和訪問形式：http://[ip:port]/bms/service/video.TransStatusReport?pcTranscodID=xx&token=xx轉(zhuǎn)碼服務(wù)軟件統(tǒng)一媒體數(shù)據(jù)格式根據(jù)客戶端終端設(shè)備能力生成符合其解碼播放的媒體數(shù)據(jù)。以實(shí)現(xiàn)不同客戶端終端順利解碼播放根據(jù)客戶端終端網(wǎng)絡(luò)狀況，調(diào)整媒體數(shù)據(jù)的分辨率，幀率以適應(yīng)不同的網(wǎng)絡(luò)通信要求。輸入&輸出媒體數(shù)據(jù)接口上云網(wǎng)關(guān)設(shè)備中集成的轉(zhuǎn)碼服務(wù)軟件通過多種多媒體國際標(biāo)準(zhǔn)網(wǎng)絡(luò)協(xié)議接口從外部獲取需要轉(zhuǎn)碼的媒體數(shù)據(jù)，將轉(zhuǎn)碼之后的媒體數(shù)據(jù)通過多種多媒體國際標(biāo)準(zhǔn)協(xié)議推送到外部標(biāo)準(zhǔn)編解碼算法國際成熟的標(biāo)準(zhǔn)編解碼算法，可以適應(yīng)不同的硬件平臺(tái)，方便嵌入式移植。流媒體軟件多媒體轉(zhuǎn)發(fā)通信平臺(tái)核心軟件負(fù)責(zé)各類監(jiān)控設(shè)備的實(shí)時(shí)視頻、歷史回放視頻等的復(fù)制轉(zhuǎn)發(fā)與接入控制。實(shí)現(xiàn)不同的客戶端可以隨時(shí)隨地調(diào)看前端多種不同設(shè)備多媒體數(shù)據(jù)，實(shí)現(xiàn)單播復(fù)制轉(zhuǎn)發(fā)，組播流轉(zhuǎn)單播復(fù)制分發(fā)。多樣化私有協(xié)議&標(biāo)準(zhǔn)因特網(wǎng)多媒體通信協(xié)議支持多媒體國際標(biāo)準(zhǔn)，靈活性和適應(yīng)能力強(qiáng)，滿足多媒體融合需求，方便對不同種類的客戶端提供多媒體服務(wù)國際標(biāo)準(zhǔn)接口跨平臺(tái)技術(shù)軟件全部基于標(biāo)準(zhǔn)的C/C++語言編寫，可以在不同的CPU平臺(tái)上編譯運(yùn)行，可以非常容易的部署于各種高可靠性的嵌入式硬件設(shè)備中。3.3.3上云網(wǎng)關(guān)硬件設(shè)計(jì)產(chǎn)品設(shè)計(jì)視頻上云網(wǎng)關(guān)設(shè)備及系統(tǒng)主要分為兩大部分，硬件部分和軟件部分。硬件部分主要是視頻現(xiàn)場部署的終端節(jié)點(diǎn)的硬件組成，在硬件設(shè)計(jì)之前，我們需要對整個(gè)系統(tǒng)的研發(fā)有個(gè)整體的設(shè)計(jì)，這樣就需要我們做大量前期準(zhǔn)備工作。包括前期的功能設(shè)計(jì)，芯片選擇等等。還需要考慮到功耗，產(chǎn)品的體積，部署的簡易性，網(wǎng)絡(luò)天線的安裝位置，安置的方式等方面。根據(jù)現(xiàn)在的具體情況應(yīng)該考慮到以下特點(diǎn)：（1）放置在需要開闊干燥的區(qū)域，遠(yuǎn)離強(qiáng)信號(hào)干擾；（2）工作溫度：0～+60度；（3）相對濕度：小于80%RH；（4）工作電壓：電源適配器輸入電壓交流100-220V，輸出電壓直流9V；（5）系統(tǒng)功耗：小于10W。(根據(jù)工作環(huán)境場強(qiáng)的不同稍微有所不同)；（6）7*24小時(shí)不間斷穩(wěn)定運(yùn)行。根據(jù)以上特點(diǎn)，該設(shè)備應(yīng)該具有實(shí)時(shí)不間斷視頻采集、多通道接入、視頻智能分析、數(shù)據(jù)保存與管理、視頻參數(shù)云端上報(bào)、智能語音交互、監(jiān)測報(bào)警等功能特點(diǎn)。系統(tǒng)結(jié)構(gòu)及總體方案該設(shè)備的方案設(shè)計(jì)以微處理器為核心，使用各種GPU計(jì)算芯片、檢測芯片、語音交互模塊、操作系統(tǒng)模塊、網(wǎng)絡(luò)模塊、4G模塊等組成。通過網(wǎng)絡(luò)采集的視頻數(shù)字信號(hào)，再經(jīng)過GPU超強(qiáng)的視頻編解碼技術(shù)與人工智能的視頻分析技術(shù)，形成特定條件的人臉、行為、邊界區(qū)域等特征值，最后經(jīng)過軟件程序的判斷，實(shí)現(xiàn)分析預(yù)警的過程，當(dāng)監(jiān)測出有異常時(shí)，智能視頻上云網(wǎng)關(guān)設(shè)備將異常信號(hào)發(fā)送至云端集中管控平臺(tái)。該設(shè)備能夠?qū)崿F(xiàn)現(xiàn)場設(shè)備狀態(tài)、人流量情況、車流量情況、邊界區(qū)域作業(yè)人員情況、人員行為規(guī)范等諸多參數(shù)值的實(shí)時(shí)上報(bào)。硬件安裝要求單一機(jī)柜部署所有與數(shù)據(jù)上云相關(guān)的設(shè)備，需要安裝在同一個(gè)機(jī)柜中網(wǎng)絡(luò)接入要求視頻接入網(wǎng)關(guān)設(shè)備需要接入省部級(jí)業(yè)務(wù)平臺(tái)的監(jiān)控網(wǎng)，同時(shí)需要接入數(shù)據(jù)上云的運(yùn)營商寬帶網(wǎng)絡(luò)，以實(shí)現(xiàn)將監(jiān)控中心的監(jiān)控網(wǎng)段視頻接入轉(zhuǎn)碼并推送至視頻云平臺(tái)電源接入要求由于視頻上云網(wǎng)關(guān)設(shè)備轉(zhuǎn)碼計(jì)算量大，需要高功率的機(jī)房標(biāo)準(zhǔn)電源支持，以保障至少500W以上的視頻接入網(wǎng)關(guān)設(shè)備的用電負(fù)荷設(shè)備安裝順序要求上云的設(shè)備從下而上分別是網(wǎng)絡(luò)設(shè)備（電信光貓、路由器、交換機(jī)等）、視頻上云網(wǎng)關(guān)設(shè)備等順序安裝設(shè)備安裝間距要求設(shè)備的上下設(shè)備間距1U以上以保障設(shè)備及時(shí)散熱，延遲設(shè)備使用壽命硬件設(shè)備的調(diào)試本項(xiàng)目建設(shè)的視頻上云網(wǎng)關(guān)設(shè)備不是自成體系的獨(dú)立設(shè)備，是需要與上級(jí)信息中心的管控平臺(tái)實(shí)現(xiàn)指令控制、狀態(tài)推送等等，因此調(diào)試的工作主要為對接的工作，具體工作內(nèi)容說明如下：視頻上云網(wǎng)關(guān)設(shè)備的網(wǎng)絡(luò)調(diào)試，網(wǎng)絡(luò)需要同時(shí)聯(lián)調(diào)公有云資源（阿里云、騰訊云）以及監(jiān)控中心視頻監(jiān)控內(nèi)網(wǎng)，通過配置靜態(tài)路由方式進(jìn)行多網(wǎng)絡(luò)通信，最終實(shí)現(xiàn)視頻數(shù)據(jù)上云的網(wǎng)絡(luò)架構(gòu)將該視頻上云網(wǎng)關(guān)設(shè)備信息向控股信息中心的云控平臺(tái)注冊，以通知其設(shè)備上線，方便后續(xù)的攝像機(jī)列表推送、資源推送、狀態(tài)推送以及控制指令的執(zhí)行監(jiān)控視頻的點(diǎn)位信息采集，包括監(jiān)控點(diǎn)位的名稱、GPS坐標(biāo)、IP地址、端口號(hào)、用戶名、密碼、方向、線路號(hào)、視頻平臺(tái)內(nèi)的唯一標(biāo)示等等信息將第三條采集到的監(jiān)控點(diǎn)列表信息向中心云控平臺(tái)推送注冊，以達(dá)到視頻圖像資源共享最終實(shí)現(xiàn)視頻數(shù)據(jù)上云接收來自控股信息中心指令信息按照視頻上云的接口協(xié)議要求，進(jìn)行相應(yīng)的推送控制包括啟動(dòng)推流、停止推流、狀態(tài)推送、指令認(rèn)證、編碼參數(shù)調(diào)整等等，最終實(shí)現(xiàn)視頻數(shù)據(jù)上云3.4研發(fā)重點(diǎn)3.4.1基于AI智能分析的視頻上云網(wǎng)關(guān)軟件設(shè)計(jì)基于AI智能分析的視頻上云網(wǎng)關(guān)軟件是基于WebStorm、GoLand、VSCode、IntelliJ

IDEA、Visual

Studio開發(fā)工具，SQLite、MySQL數(shù)據(jù)庫系統(tǒng)，來實(shí)現(xiàn)能在多種系統(tǒng)平臺(tái)上穩(wěn)定運(yùn)行的應(yīng)用。中間件架構(gòu)軟件采用中間件架構(gòu)設(shè)計(jì)，滿足系統(tǒng)開放式接入和應(yīng)用體系要求，基于標(biāo)準(zhǔn)設(shè)計(jì)框架，能夠運(yùn)行于多種硬件平臺(tái)和操作系統(tǒng)之上，支持分布計(jì)算，提供跨網(wǎng)絡(luò)、硬件平臺(tái)和操作系統(tǒng)的透明性的應(yīng)用或服務(wù)的交互，支持標(biāo)準(zhǔn)的協(xié)議和接口，能夠快速支持各類設(shè)備的接入。分布式體系架構(gòu)軟件將采用分布式架構(gòu)設(shè)計(jì)，管理控制、流媒體和存儲(chǔ)均采取分布式架構(gòu)，下級(jí)如建設(shè)分中心平臺(tái)，則各下級(jí)節(jié)點(diǎn)的穩(wěn)定性不依賴于總控中心，單臺(tái)可自成系統(tǒng)，多臺(tái)互聯(lián)可形成更大的系統(tǒng)，每個(gè)系統(tǒng)節(jié)點(diǎn)都可實(shí)現(xiàn)區(qū)域自治，任何一個(gè)節(jié)點(diǎn)的故障都不會(huì)影響到其他節(jié)點(diǎn)。1）設(shè)備層設(shè)備層的設(shè)備主要包括攝像機(jī)設(shè)備、控制解碼器、云臺(tái)、網(wǎng)絡(luò)視頻編碼器等。它是整個(gè)系統(tǒng)的信號(hào)源，由它產(chǎn)生視頻信號(hào)，然后通過網(wǎng)線、編碼器等設(shè)備將信號(hào)傳輸?shù)狡脚_(tái)上。2）能力層能力層負(fù)責(zé)視頻轉(zhuǎn)分發(fā)、視頻存儲(chǔ)、報(bào)警轉(zhuǎn)發(fā)、矩陣解碼控制、設(shè)備控制信令轉(zhuǎn)發(fā)，以完成對前端設(shè)備的操作。能力層主要包括流媒體服務(wù)、存儲(chǔ)服務(wù)、消息服務(wù)、矩陣服務(wù)等。流媒體服務(wù)流媒體服務(wù)主要是用來接收來自設(shè)備層輸過來的實(shí)時(shí)視頻圖像，并轉(zhuǎn)發(fā)給多個(gè)客戶端、集中存儲(chǔ)服務(wù)、數(shù)字矩陣服務(wù)器進(jìn)行實(shí)時(shí)圖像瀏覽，避免客戶端直接訪問前端攝像機(jī)，降低網(wǎng)絡(luò)流量，降低數(shù)據(jù)對網(wǎng)絡(luò)的占用，實(shí)現(xiàn)在不同網(wǎng)絡(luò)帶寬條件下大規(guī)模視頻流媒體傳輸?shù)膬?yōu)化管理。存儲(chǔ)服務(wù)存儲(chǔ)服務(wù)提供對數(shù)字化視頻監(jiān)控系統(tǒng)的錄像集中存儲(chǔ)服務(wù)，實(shí)現(xiàn)對多臺(tái)編碼器傳輸過來的實(shí)時(shí)視頻圖像在監(jiān)控中心進(jìn)行集中錄像功能的綜合管理，保障大規(guī)模長時(shí)間視頻存儲(chǔ)系統(tǒng)的可靠性和穩(wěn)定性，支持中心專業(yè)存儲(chǔ)設(shè)備（如IPSAN磁盤陣列機(jī)）視頻流寫入。消息服務(wù)主要用于接收前端設(shè)備接口報(bào)警信息、事件內(nèi)容、狀態(tài)變化等信息，對不同類型的前端設(shè)備發(fā)出操作指令和控制信息，兼容各個(gè)子系統(tǒng)不同類型的通信方式和多種通信格式，它相當(dāng)于翻譯的角色。通過建立起一套統(tǒng)一的消息體系，利用先進(jìn)的XML語言，在各個(gè)前端采集設(shè)備的響應(yīng)之間建立起一座互連互通的橋梁。各個(gè)前端采集設(shè)備按照統(tǒng)一的標(biāo)準(zhǔn)接口通過消息服務(wù)器與中心平臺(tái)進(jìn)行信息交換和控制信令交換。矩陣服務(wù)矩陣服務(wù)可實(shí)現(xiàn)多路高清視頻信號(hào)輸出，同時(shí)提供手動(dòng)切換、自動(dòng)切換、分組切換、定時(shí)切換等多種切換方式，并且可以輸出多畫面分割圖像。不僅滿足用戶對電視墻監(jiān)看的需求，同時(shí)降低系統(tǒng)造價(jià)。3）展現(xiàn)層展現(xiàn)層承擔(dān)事物處理的中間環(huán)節(jié)，負(fù)責(zé)和控制數(shù)據(jù)庫操作，接受和處理客戶端請求，負(fù)責(zé)系統(tǒng)的業(yè)務(wù)邏輯處理以及提供各類應(yīng)用服務(wù)。應(yīng)用層主要包括了中心管理服務(wù)、WEB服務(wù)。中心管理服務(wù)中心管理服務(wù)器實(shí)現(xiàn)整個(gè)視頻平臺(tái)的站點(diǎn)架構(gòu)、用戶管理、設(shè)備配置、存儲(chǔ)設(shè)置、信息查詢等功能，提供用戶管理與權(quán)限管理雙向模式、界面的一站式管理、全面的權(quán)限管理，滿足多級(jí)別組織中架構(gòu)管理、權(quán)限分配、設(shè)備定義、設(shè)備配置、錄像設(shè)置、報(bào)警記錄、用戶操作、錄像查詢等管理功能，并提供WEB方式通過IE瀏覽器實(shí)現(xiàn)遠(yuǎn)程配置和管理。同時(shí)它具有電子地圖管理功能：包括電子地圖的信息應(yīng)分層提供，電子地圖應(yīng)能夠逐級(jí)放大及縮小地圖顯示。WEB服務(wù)WEB服務(wù)主要是給訪問客戶提供更為方便快捷的訪問方式，用戶無需安裝任何監(jiān)控軟件，即可實(shí)現(xiàn)通過瀏覽器方式的實(shí)時(shí)遠(yuǎn)程監(jiān)控，可將分布在不同地點(diǎn)的攝像機(jī)集中管理，分散在網(wǎng)絡(luò)中不同地點(diǎn)、不同使用權(quán)限的用戶可同時(shí)監(jiān)控同一現(xiàn)場，也可以任意選擇其他監(jiān)控現(xiàn)場，各用戶監(jiān)控不受影響，在Web瀏覽方式下，同樣能控制攝象機(jī)和云臺(tái)等控制對象，也可以同時(shí)實(shí)時(shí)監(jiān)控多個(gè)圖像管理子系統(tǒng)的視頻圖像。3.4.2基于AI視頻智能分析視頻人工智能方面，僅學(xué)習(xí)數(shù)據(jù)是不夠的。由于搜集到的各種視頻數(shù)據(jù)是不成體系的，會(huì)造成較高的維護(hù)成本，于是我們構(gòu)建了一套大數(shù)據(jù)知識(shí)庫自學(xué)習(xí)體系。主要分為三個(gè)模塊：1、視頻結(jié)構(gòu)化模塊：把視頻結(jié)構(gòu)化、組件化，把OS層要素和分割定位工作全部做完，把較大的圖片和視頻變成了隨時(shí)可被提取的小組件。我們很形象地把它叫做樂高。2、知識(shí)圖譜模塊：通過關(guān)聯(lián)知識(shí)圖譜中的政治人物，我們能快速將對應(yīng)的人物導(dǎo)進(jìn)視頻中。3、海量檢索的大數(shù)據(jù)檢索系統(tǒng)：與傳統(tǒng)主要針對文本內(nèi)容的檢索系統(tǒng)不同，我們的產(chǎn)品涉及人物特征、人臉特征、圖像特征、視頻特征，而特征上會(huì)有更復(fù)雜的系統(tǒng)結(jié)構(gòu)。所以系統(tǒng)不僅支持普通的全文檢索，還可以在富媒體數(shù)據(jù)，包括視覺特征基礎(chǔ)上能夠做檢索。3.4.3基于AI的智能語音智能語音方面，針對嵌入式人機(jī)語音交互系統(tǒng)的實(shí)用性需求，在噪聲魯棒性、解碼器和置信度、語音模糊檢索等關(guān)鍵核心技術(shù)進(jìn)行了一系列創(chuàng)新。我們進(jìn)行了很大程度上的創(chuàng)新，包括：1、研發(fā)了一種綜合考慮加性噪聲和信道畸變的模型補(bǔ)償算法，以改善語音交互系統(tǒng)中識(shí)別前端的噪聲魯棒性問題。在該算法中，我們先使用語音中的靜音段來估計(jì)加性噪聲，接著結(jié)合EM算法聯(lián)合估計(jì)信道函數(shù)，最后基于上述估計(jì)的表征加性噪聲和信道函數(shù)的相關(guān)參數(shù)，在倒譜域上對失配的聲學(xué)模型進(jìn)行聯(lián)合補(bǔ)償。該算法使得嵌入式語音識(shí)別系統(tǒng)在噪聲環(huán)境和信道失配場景下的識(shí)別效果均取得顯著提升。此外，該算法具備動(dòng)態(tài)跟蹤環(huán)境變化的特性，其效果和實(shí)用性一致優(yōu)于CMN規(guī)整、MLLR自適應(yīng)等傳統(tǒng)的語音識(shí)別噪聲魯棒性算法。提出了一種綜合考慮加性噪聲和信道畸變的模型補(bǔ)償算法，以提高嵌入式識(shí)別系統(tǒng)的魯棒性；2、另一方面，智能語音算法中我們采用了一種基于語言模型校正機(jī)制的語音識(shí)別解碼算法和一種基于音素聚類子空間的置信度判決算法，以緩解因?yàn)檫\(yùn)算資源受限而無法在嵌入式設(shè)備上進(jìn)行較復(fù)雜語音識(shí)別任務(wù)的問題。具體來說，我們在所提出的識(shí)別解碼算法中，用基于單樹詞典的搜索算法替代傳統(tǒng)的樹狀詞典拷貝算法，以改善傳統(tǒng)算法導(dǎo)致的搜索空間隨詞典規(guī)模指數(shù)級(jí)增長的效率問題，并進(jìn)一步在樹狀詞典的各節(jié)點(diǎn)處進(jìn)行語言模型得分的校正處理，以恢復(fù)單樹詞典所產(chǎn)生的搜索錯(cuò)誤，該方法最終在不影響識(shí)別性能的前提下使得解碼算法復(fù)雜度降低了一個(gè)數(shù)量級(jí)。另一方面，本文提出的置信度改進(jìn)算法主要針對識(shí)別后端的結(jié)果確認(rèn)模塊，該算法基于KL度量對原始音素全空間進(jìn)行“自下而上”方式的聚類，最終獲取信息量幾乎不損失、且更加緊致的音素子空間，并基于音素聚類子空間來估計(jì)置信度得分的規(guī)整項(xiàng)，在基本不影響置信度性能的前提下，同樣使得其運(yùn)算復(fù)雜度獲得了顯著下降。提出了一種基于語言模型校正機(jī)制的語音識(shí)別解碼算法和一種基于音素聚類子空間的置信度判決算法，顯著改善了語音識(shí)別在運(yùn)算資源受限的嵌入式設(shè)備上運(yùn)行的實(shí)用性問題；3、探索出了一種語音模糊檢索的系統(tǒng)解決方案，以滿足用戶對千萬量級(jí)以上文本列表集進(jìn)行語音查詢的典型需求。該方案綜合了二級(jí)倒排索引、分塊動(dòng)態(tài)規(guī)劃、識(shí)別重排序等核心算法并分別對其進(jìn)行針對性改進(jìn)，最終在響應(yīng)實(shí)時(shí)的前提下，使得用戶只需要輸入檢索文本列表中的片段、縮略或者其跨序組合即可將與之關(guān)聯(lián)的備選結(jié)果查詢出來。運(yùn)用該方案的實(shí)用化系統(tǒng)在支持用戶以自由語音方式進(jìn)行輸入的同時(shí)，具備了相當(dāng)高的檢索性能，明顯改善了人機(jī)語音的交互體驗(yàn)。一種語音模糊檢索的系統(tǒng)解決方案，明顯改善了用戶基于海量文本列表進(jìn)行語音查詢的交互體驗(yàn)。3.4.4實(shí)時(shí)視頻分析視頻上傳到云端后，通過消息服務(wù)通知云端流媒體服務(wù)器，獲取視頻后進(jìn)行指定的視頻分析，并把視頻分析結(jié)果實(shí)時(shí)通知用戶。智能的云視頻分析系統(tǒng)，可以有效的避免信息遺漏、使各種高危風(fēng)