智慧交通云平臺成功案例

智慧交通云平臺案例一、項目背景為提升道路交通科學(xué)管理水平，創(chuàng)新社會管理方式，加快公安信息化發(fā)展，更好地服務(wù)公安機關(guān)指揮疏導(dǎo)交通、防范交通事故、維護社會穩(wěn)定、打擊違法犯罪。實現(xiàn)對重點車輛的自動比對和動態(tài)管控、對異常車輛行蹤的自動研判預(yù)警、對特定車輛行車軌跡的自動生成、對重要節(jié)點道路交通信息的遠程再現(xiàn)、對基層單位和執(zhí)勤民警的勤務(wù)實施管理等建設(shè)目標，為交通管理、治安管控、偵查破案、巡邏防范、反恐處突等各項公安工作提供服務(wù)保障，某市公安局開展圖像資源庫和道路監(jiān)控綜合應(yīng)用系統(tǒng)建置項目?；诮煌ㄐ畔?shù)據(jù)量大和公安對系統(tǒng)實時性及可靠性的要求高,系統(tǒng)需要具備的功能和性能如下：海量歷史交通監(jiān)控數(shù)據(jù)匯總能夠?qū)η|級的海量歷史交通監(jiān)控數(shù)據(jù)進行匯總處理。海量原始交通監(jiān)控數(shù)據(jù)上報能夠?qū)η|級的海量上報交通監(jiān)控數(shù)據(jù)進行上報處理。海量原始數(shù)據(jù)實時入庫、生成索引能夠?qū)α髁砍^10000條/m的全量原始交通監(jiān)控數(shù)據(jù)流進行實時處理。海量數(shù)據(jù)存儲、計算能夠存儲千億級別的數(shù)據(jù)，并完成各種復(fù)雜業(yè)務(wù)應(yīng)用計算。千億級數(shù)據(jù)秒級查詢能力高效索引算法，智能化調(diào)度任務(wù)系統(tǒng)，滿足秒級查詢速度。秒級實時業(yè)務(wù)響應(yīng)高效實時數(shù)據(jù)通道，對于像實時監(jiān)控、告警等實時業(yè)務(wù)，提供秒級響應(yīng)時間。二、智慧交通云平臺解決方案cProc將海量數(shù)據(jù)分解到由大量X86架構(gòu)計算機構(gòu)成的低成本云計算平臺上進行實時處理，依靠分布式云處理軟件進行容錯，從而提升智慧交通云平臺海量數(shù)據(jù)分析的實時性和性價比。 1系統(tǒng)基本組成與構(gòu)架智慧交通云平臺是一個處于交管數(shù)據(jù)采集與交管數(shù)據(jù)監(jiān)測應(yīng)用之間的系統(tǒng)。從系統(tǒng)基本組成與構(gòu)架上來看，該共享平臺由7個主要部分組成：歷史數(shù)據(jù)匯總處理系統(tǒng)，上報數(shù)據(jù)上報系統(tǒng)，實時數(shù)據(jù)入庫系統(tǒng)，交管數(shù)據(jù)存儲系統(tǒng)，交管數(shù)據(jù)查詢分析應(yīng)用系統(tǒng)，數(shù)據(jù)管理系統(tǒng)以及系統(tǒng)管理。智慧交通云平臺的基本組成與構(gòu)架在基礎(chǔ)設(shè)施構(gòu)架上，該平臺將架構(gòu)將構(gòu)建在公安云計算平臺之上，利用公安所提供的計算資源、存儲資源和網(wǎng)絡(luò)資源，作為智慧交通云平臺的基礎(chǔ)設(shè)施和支撐平臺。交管數(shù)據(jù)通過cProc提供的數(shù)據(jù)寫入接口，實時寫入數(shù)據(jù)信息到云處理平臺。通過提供的查詢接口，可以高效、快速、準確的返回結(jié)果給客戶端。

2系統(tǒng)總體構(gòu)架與功能模塊基于以上基本的系統(tǒng)組成和功能構(gòu)架，系統(tǒng)的詳細總體構(gòu)架和功能模塊設(shè)計如圖所示。智慧交通云平臺總體構(gòu)架與功能模塊圖上圖中，自底向上分為五個層面。最下層是硬件平臺層，將使用市公安局云計算中心所提供的計算、存儲和網(wǎng)絡(luò)資源。從系統(tǒng)處理系統(tǒng)的角度看，這一層主要包括云存儲計算集群，此外還包括接口和管理服務(wù)器、包括用于實現(xiàn)客戶端訪問的Web服務(wù)器。第二層是系統(tǒng)軟件層，包括移動的云存儲系統(tǒng)軟件，綜合分析云計算軟件平臺，以及Web服務(wù)軟件等。云存儲系統(tǒng)將提供基于SybaseASE關(guān)系數(shù)據(jù)庫的結(jié)構(gòu)化數(shù)據(jù)存儲訪問能力，以及基于HDFS的分布式文件系統(tǒng)存儲訪問能力，分別提供基于JDBC/SQL的數(shù)據(jù)庫訪問接口以及HDFS訪問接口。綜合分析云計算軟件平臺可提供對HDFS、Hbase數(shù)據(jù)的訪問，并提供MapReduce編程模型和接口、以及非MapReduce模型的編程接口，以及用于實現(xiàn)并行計算任務(wù)負載均衡和服務(wù)器單點失效恢復(fù)的Zookeeper。第三層是智慧交通云平臺中的數(shù)據(jù)層，包括原始交管數(shù)據(jù)、索引數(shù)據(jù)、用于分析的中間數(shù)據(jù)、以及系統(tǒng)配置數(shù)據(jù)等。其中，原始交管數(shù)據(jù)、索引數(shù)據(jù)等海量數(shù)據(jù)將存儲在公安局云存儲系統(tǒng)的HDFS分布式文件系統(tǒng)中，用HDFS接口進行存儲和訪問處理；而其它用于分析的中間數(shù)據(jù)等數(shù)據(jù)量不大、但處理響應(yīng)性能要求較高的數(shù)據(jù)，將存儲在云存儲系統(tǒng)的關(guān)系數(shù)據(jù)庫系統(tǒng)中，用JDBC/SQL進行存儲和訪問處理。第四層是交管數(shù)據(jù)處理軟件層，主要完成智慧交通云平臺所需要提供的諸多功能，包括實時監(jiān)控、報警監(jiān)控、車輛軌跡查詢與回放、電子地圖、報警管理、布控管理、設(shè)備管理、事件檢測報警、流量統(tǒng)計和分析、系統(tǒng)管理等功能。最上層是客戶端用戶界面軟件，主要供用戶查詢和監(jiān)視相關(guān)的數(shù)據(jù)信息，除了事件檢測報警不需要用戶界面外，其它部分都需要實現(xiàn)對應(yīng)的用戶界面。三、實施效果基于云存儲和云計算的智慧交通云平臺，為公安提供了一個大流量數(shù)據(jù)入庫、海量數(shù)據(jù)存儲、實時數(shù)據(jù)分析、快速數(shù)據(jù)查詢的交通管控平臺。 1系統(tǒng)查詢界面系統(tǒng)采用B/S方式作為界面展示，用戶可以通過對所要的查詢條件進行輸入，點擊查詢后，系統(tǒng)能夠快速返回結(jié)果。 2提供大流量數(shù)據(jù)入庫能力，防止數(shù)據(jù)堆積對于流量超過10000條/m的實時交通監(jiān)控數(shù)據(jù)，傳統(tǒng)的關(guān)系數(shù)據(jù)庫已無法滿足要求。而智慧交通云平臺卻能通過大量計算機的并行計算，將交通監(jiān)控數(shù)據(jù)實時的存入云存儲系統(tǒng)。這樣可以避免因數(shù)據(jù)入庫能力的不足，造成的數(shù)據(jù)堆積。 3系統(tǒng)查詢性能指標查詢、統(tǒng)計操作的首次響應(yīng)時延小于1秒；對任何實時分析操作的反應(yīng)時間小于10秒；并發(fā)操作終端數(shù)大于30個；基于交管數(shù)據(jù)的統(tǒng)計，記錄5000萬條以內(nèi)，1秒可以統(tǒng)計完成。 4系統(tǒng)入庫吞吐量指標下圖為現(xiàn)場多次性能測試的平均值系統(tǒng)對于大數(shù)據(jù)量的讀寫，具有很好的自適應(yīng)和均衡能力。對于存儲內(nèi)容大小的直線上升，系統(tǒng)吞吐指標趨于平緩。四、客戶受益在該項目中，cProc以其優(yōu)異的性能和可靠