（信號與信息處理專業(yè)論文）基于sip協(xié)議的視頻監(jiān)控.pdf

獨創(chuàng)性聲明 本人聲明所呈交的學位論文是本人在導師指導下進行的研究工作及取得的 研究成果 據(jù)我所知 除了文中特別加以標注和致謝的地方外 論文中不包含其 他人已經(jīng)發(fā)表或撰寫過的研究成果 也不包含為獲得 或其他教育機構 的學位或證書而使用過的材料 與我一同工作的同志對本研究所做的任何貢獻均 已在論文中作了明確的說明并表示謝意 學位論文作者簽名 簽字日期 年 月 日 學位論文版權使用授權書 本學位論文作者完全了解 有關保留 使用學位論文的規(guī)定 有權保留并向國家有關部門或機構送交論文的復印件和磁盤 允許論文被查閱和 借閱 本人授權 可以將學位論文的全部或部分內(nèi)容編入有關數(shù)據(jù)庫進行 檢索 可以采用影印 縮印或掃描等復制手段保存 匯編學位論文 保密的學位論文在解密后適用本授權書 學位論文作者簽名 導師簽名 簽字日期 年 月 日 簽字日期 年 月 日 學位論文作者畢業(yè)去向 工作單位 電話 通訊地址 郵編 摘 要 i 摘摘 要要 隨著網(wǎng)絡技術的不斷發(fā)展以及人們安全意識的普遍提高 人們對視頻監(jiān)控產(chǎn) 品的要求也越來越高 會話初始化協(xié)議 sip session initiation protocol 是一種信 令控制協(xié)議 作為下一代網(wǎng)絡的核心協(xié)議 它提供了用戶定位 媒體參數(shù)協(xié)商等 基本的會話管理功能 通過把 sip 協(xié)議應用到視頻監(jiān)控終端 可以形成一個開放 的 智能的監(jiān)控系統(tǒng) 使隨時隨地的監(jiān)控變?yōu)榭赡?鑒于此 本文基于 z228 硬件平臺和嵌入式 linux 操作系統(tǒng) 設計并實現(xiàn)了 基于 sip 協(xié)議的視頻監(jiān)控終端 該終端具備 sip 用戶代理的基本功能 能夠發(fā)起 接收及終止呼叫并完成媒體參數(shù)的協(xié)商 同時它還完成終端的視頻數(shù)據(jù)的采集 mpeg 4 壓縮編碼及傳輸?shù)裙δ?本文首先對 sip 協(xié)議 軟交換平臺 實時傳輸協(xié)議 rtp real time transport protocol 及 mpeg 4 視頻壓縮標準做了介紹 接著介紹了系統(tǒng)的硬件平臺及軟件 架構 然后給出了視頻監(jiān)控系統(tǒng)的總體設計及模塊劃分 在重點研究 sip 協(xié)議的 基礎上 設計并實現(xiàn)了終端系統(tǒng)上 sip 模塊 此外 本文還較為詳細的介紹了終 端系統(tǒng)上視頻數(shù)據(jù)的采集 壓縮及傳輸?shù)饶K的設計與實現(xiàn) 最后對終端系統(tǒng)進 行了測試并給出了測試結果 關鍵詞 視頻監(jiān)控 z228 linux 會話初始化協(xié)議 實時傳輸協(xié)議 mpeg 4 abstract ii abstract with the continuous development of network technology and the general raise of people s safety consciousness people are requesting for higher quality video monitoring equipments session initiation protocol is a signaling control protocol as the core protocol of next generation network it can provide basic session management functions such as users positioning media parameters consultations etc by using the sip protocol to video monitoring terminal we can form an open intelligent monitoring system and make the monitoring at any time and in any place can be true in view of above basing on the z228 hardware platform and embedded linux os this thesis designs and implements a video monitoring terminal that supports sip protocol the terminal has the basic functionalities that a sip ua should have it can initiate and accept a session terminate a session that already exits and determine the media and the media parameters to be used it can also capture video data from the camera encode the data with mpeg 4 and transport the data to monitoring center the sip protocol soft switch platform rtp protocol mpeg 4 standard are introduced at first following the system s hardware platform and software architecture are introduced and then the system s overall design and module division are given secondly basing on detailed analyse of the sip protocol the thesis designs and achieves the sip module furthermore the designs and implementations of the video data collection compression and transmission modules on terminal are detailedly introduced too at last the thesis explains how to test the system and lists the result of the test keywords video monitoring z228 linux sip rtp mpeg 4 目 錄 iii 目目 錄錄 第一章 序論 i 1 1 視頻監(jiān)控系統(tǒng)概述 1 1 2 國內(nèi)外市場狀況 2 1 3 研究目的及意義 2 1 4 本文的主要內(nèi)容及組織結構 3 第二章 視頻監(jiān)控系統(tǒng)的相關技術 5 2 1 軟交換技術 5 2 1 1 軟交換簡述 5 2 1 2 軟交換的體系結構 5 2 1 3 軟交換的主要協(xié)議 6 2 2 sip 協(xié)議 8 2 2 1 sip 協(xié)議背景和功能 8 2 2 2 sip 的網(wǎng)絡結構 8 2 2 3 sip 的分層結構 9 2 2 4 sip 的消息格式 10 2 2 5 sip 會話流程 11 2 3 mpeg 4 編碼標準 12 2 3 1 mpeg 4 標準概述 12 2 3 2 mpeg 4 標準構成 13 2 3 3 mpeg 4 標準實現(xiàn)過程 14 2 4 rtp 協(xié)議 15 2 4 1 rtp 協(xié)議概述 15 2 4 2 實時傳輸協(xié)議 16 2 4 3 實時傳輸控制協(xié)議 17 第三章 硬件平臺及軟件架構 18 3 1 系統(tǒng)硬件平臺 18 3 1 1 arm 微處理器概述 18 3 1 2 z228 硬件平臺 18 目 錄 iv 3 2 系統(tǒng)軟件架構 20 3 2 1 嵌入式及 linux 概述 20 3 2 2 嵌入式系統(tǒng)軟件組成 22 3 2 3 z228 嵌入式系統(tǒng)開發(fā) 22 第四章 終端系統(tǒng)的設計與實現(xiàn) 25 4 1 總體設計及模塊劃分 25 4 1 1 監(jiān)控系統(tǒng)的總體設計 25 4 1 2 終端系統(tǒng)的模塊劃分 26 4 2 sip 模塊的實現(xiàn) 27 4 2 1 sip 協(xié)議棧 27 4 2 2 sip 模塊具體實現(xiàn) 29 4 3 視頻處理模塊的實現(xiàn) 36 4 3 1 視頻處理模塊的設計 36 4 3 2 視頻數(shù)據(jù)的采集 37 4 3 3 視頻數(shù)據(jù)的編碼 41 4 4 視頻傳輸模塊的實現(xiàn) 44 4 4 1 視頻傳輸模塊的設計 44 4 4 2 視頻傳輸模塊的實現(xiàn) 45 第五章 系統(tǒng)測試 48 5 1 測試環(huán)境 48 5 2 功能測試 48 5 2 1 系統(tǒng)簡要介紹 48 5 2 2 系統(tǒng)測試過程 49 5 3 互通性測試 52 第六章 總結與展望 55 參考文獻 56 致 謝 58 作者攻讀學位期間發(fā)表的論文 59 第一章 序 論 1 第一章第一章 序序 論論 1 1 視頻監(jiān)控系統(tǒng)概述視頻監(jiān)控系統(tǒng)概述 視頻監(jiān)控系統(tǒng)是安全防范系統(tǒng)的組成部分 它是一種防范能力較強的綜合系 統(tǒng) 視頻監(jiān)控以其直觀 方便 信息內(nèi)容豐富而廣泛應用于許多場合 隨著計算 機 網(wǎng)絡以及圖像處理等技術的發(fā)展 視頻監(jiān)控系統(tǒng)大致經(jīng)歷了模擬視頻監(jiān)控系 統(tǒng) 模擬 數(shù)字混合視頻監(jiān)控系統(tǒng)和網(wǎng)絡化視頻監(jiān)控系統(tǒng)等三個發(fā)展階段 第一代模擬視頻監(jiān)控系統(tǒng)也叫閉路電視監(jiān)控系統(tǒng) 其特點是全部通過模擬方 式將攝像機的視頻信號傳輸?shù)奖O(jiān)控中心 監(jiān)控中心通過視頻分配和合成設備將一 部分視頻信號在電視機等模擬顯示設備上輸出 并通過磁帶錄像設備進行錄像或 保存 第一代產(chǎn)品存在許多局限性 首先 有線模擬視頻信號的傳輸對距離十分 敏感 當傳輸距離大于一千米時 信號容易產(chǎn)生衰耗 畸變 群延時 并且易受 干擾 使圖像質(zhì)量下降 其次 有線模擬視頻監(jiān)控無法聯(lián)成網(wǎng)絡 只能以點對點 的方式監(jiān)視現(xiàn)場 使到布線工程量極大 另外 有線模擬視頻信號數(shù)據(jù)的存儲會 耗費大量的存儲介質(zhì) 如錄像帶 而且錄像資料的保存和查詢工作十分煩瑣 第二代模擬 數(shù)字混合視頻監(jiān)控系統(tǒng) 是從上個世紀 90 年代中期開始出現(xiàn) 以數(shù)字硬盤錄像 dvr 為主 替代了原來的模擬錄像機 將原來的磁帶存儲模式 轉變成數(shù)字存儲錄像 解決了監(jiān)控的模擬轉數(shù)字錄像和顯示 集合了錄像機 畫 面分割器等功能 跨出數(shù)字監(jiān)控的第一步 第二代產(chǎn)品的缺陷在于監(jiān)控點到監(jiān)控 中心的數(shù)據(jù)傳輸仍然采用模擬方式 要實現(xiàn)遠距離視頻傳輸需要鋪設 租用 光 纜 在光纜兩端安裝視頻光端機設備 系統(tǒng)建設成本高 不易維護 且維護費用 較大 目前 視頻監(jiān)控系統(tǒng)已經(jīng)發(fā)展到以數(shù)字化 網(wǎng)絡化為核心的第三代 與第一 代傳統(tǒng)閉路電視監(jiān)控系統(tǒng)及第二代模擬 數(shù)字混合視頻監(jiān)控系統(tǒng)相比 第三代監(jiān) 控系統(tǒng)基于 tcp ip 網(wǎng)絡協(xié)議 以分布式的概念出現(xiàn) 將監(jiān)控模式拓展為分散與 集中的相輔相成 拓展了監(jiān)控的范圍 與傳統(tǒng)的視頻監(jiān)控系統(tǒng)相比 基于網(wǎng)絡化 的視頻監(jiān)控系統(tǒng)具有如下優(yōu)點 1 數(shù)字化視頻可以在計算機網(wǎng)絡 局域網(wǎng)或廣域網(wǎng) 上傳輸圖像數(shù)據(jù) 基 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 2 本上不受距離限制 信號不易受干擾 可大幅度提高圖像品質(zhì)和穩(wěn)定性 2 數(shù)字視頻可利用計算機網(wǎng)絡聯(lián)網(wǎng) 網(wǎng)絡帶寬可復用 無須重復布線 3 數(shù)字化存儲成為可能 經(jīng)過壓縮的視頻數(shù)據(jù)可存儲在磁盤陣列中或保存在 光盤中 查詢十分簡便快捷 1 1 2 國內(nèi)外國內(nèi)外市場市場狀況狀況 據(jù)諾達咨詢公司發(fā)布的 2007 網(wǎng)絡視頻監(jiān)控業(yè)務研究報告 顯示 2006 年 中國網(wǎng)絡視頻監(jiān)控市場規(guī)模達 18 24 億元 2007 年中國網(wǎng)絡視頻監(jiān)控市場規(guī)模將 達到 26 36 億元 未來 5 年內(nèi) 網(wǎng)絡視頻監(jiān)控將保持約 38 的年增長率 預計 2011 年將達86 61億元 而且會有越來越多的網(wǎng)絡視頻監(jiān)控系統(tǒng)采用完全數(shù)字化技術 特別是在銀行 交通 工業(yè) 零售業(yè)等行業(yè)市場 以數(shù)字化視頻監(jiān)控為基礎的智 能視頻監(jiān)控技術將獲得長足發(fā)展 今年以來 網(wǎng)絡視頻監(jiān)控在物流 海關 衛(wèi)生 檢疫 能源 金融 防汛減災等領域應用廣泛 隨著 國家應急體系 平安城 市 平安建設 科技強警 等重大工程項目在全國不斷推進以及未來將在中 國舉辦的奧運會 世博會等重要國際活動持續(xù)拉動 市場前景一片看好 而國外視頻監(jiān)控業(yè)務主要應用在公共領域 行業(yè)用戶和個人用戶 在公共場 所 國外設置了眾多監(jiān)控設備 以加強對公共領域安全的控制能力 另外 在交 通 銀行 大型連鎖超市 居民住宅等領域都已經(jīng)得到了廣泛應用 在美 英等 國 個人使用視頻監(jiān)控主要是應用于住宅的安全防范和財產(chǎn)的監(jiān)控 目前 國內(nèi)外比較知名的網(wǎng)絡監(jiān)控開發(fā)商有杭州的?？低?松下電子 三 星電子等公司 1 3 研究目的及意義研究目的及意義 網(wǎng)絡化數(shù)字視頻監(jiān)控系統(tǒng)作為一種全新的視頻監(jiān)控系統(tǒng) 從根本上解決了以 往視頻監(jiān)控系統(tǒng)所存在的問題 使監(jiān)控系統(tǒng)的監(jiān)控范圍和監(jiān)控質(zhì)量都有了很大的 提高 但作為一種新興的視頻監(jiān)控系統(tǒng) 網(wǎng)絡視頻監(jiān)控系統(tǒng)也有著一些諸如圖像 質(zhì)量問題 安全問題 服務質(zhì)量問題等不足之處 而制約著網(wǎng)絡視頻監(jiān)控系統(tǒng)發(fā) 展的最大問題在于其標注化 其中包括信令控制協(xié)議標準化問題 比如遵循標準 的 sip 協(xié)議 http 協(xié)議 rtp 協(xié)議 流媒體轉發(fā)協(xié)議等 音頻壓縮 視頻壓縮 第一章 序 論 3 的標準化問題 dvr dvs ipcam 等接入平臺的標準化問題 球機 云臺 矩陣等設備控制協(xié)議的標準化問題 鑒于以上網(wǎng)絡視頻監(jiān)控系統(tǒng)所存在的問題 本文提出了一種以 sip 協(xié)議為信 令控制協(xié)議的嵌入式網(wǎng)絡視頻監(jiān)控終端的設計方案 該系統(tǒng)的網(wǎng)絡是以下一代網(wǎng)絡 ngn next generation network 為基礎 系 統(tǒng)采用嵌入式系統(tǒng)作為監(jiān)控終端的圖像采集及壓縮編碼 呼叫的建立與連接采用 sip 協(xié)議 使整個監(jiān)控系統(tǒng)具有清晰流暢的圖像 安全性能好 服務質(zhì)量好的特 點 真正意義上實現(xiàn)了全數(shù)字全網(wǎng)絡的視頻監(jiān)控系統(tǒng) 該系統(tǒng)的設計與研發(fā)的意義在于 1 采用 ngn 架構 ngn 具有支持快速靈活的新業(yè)務生成能力 這無疑將 是電信業(yè)關注的焦點 而安防用途的視頻監(jiān)控正是 ngn 可以提供的業(yè)務 2 利用軟交換平臺對網(wǎng)絡監(jiān)控進行管理和通信 增加了網(wǎng)絡的安全性及終 端的智能性 為下一代網(wǎng)絡的視頻監(jiān)控系統(tǒng)指明了方向 3 sip 協(xié)議是一種比較先進的會話管理協(xié)議 將 sip 協(xié)議運用到視頻監(jiān)控系 統(tǒng) 有利于拓展 sip 協(xié)議的使用范圍 同時也加速其標準化過程 4 嵌入式是當前研究的熱點之一 將嵌入式運用于視頻監(jiān)控領域?qū)ζ淦占?和發(fā)展也起到了一定的作用 1 4 本文的主要內(nèi)容及組織結構本文的主要內(nèi)容及組織結構 本課題主要結合安徽四創(chuàng)電子股份有限公司研發(fā)中心的 基于 ngn 架構的 視頻監(jiān)控終端系統(tǒng)的研究與實現(xiàn) 項目而展開的 在該項目中作者對 ngn 及軟 交換架構做了深入的學習和理解 在此基礎上分析了將 sip 協(xié)議應用到視頻監(jiān)控 終端的可行性 并結合圖像處理理論 計算機網(wǎng)絡技術及嵌入式系統(tǒng)開發(fā)的原理 完成對視頻監(jiān)控系統(tǒng)的總體分析 并最終開發(fā)出基于 sip 協(xié)議的視頻監(jiān)控終端系 統(tǒng) 最后搭建了系統(tǒng)的測試環(huán)境 對一些主要模塊進行了測試 本文主要組織結構如下 第一章 序論 介紹了視頻監(jiān)控系統(tǒng)的發(fā)展概況 國內(nèi)外市場狀況及本文的 研究目的和意義 第二章 視頻監(jiān)控系統(tǒng)的相關技術 介紹了視頻監(jiān)控系統(tǒng)的相關技術 主要 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 4 介紹了信令控制協(xié)議 網(wǎng)絡傳輸協(xié)議 ngn 軟交換技術及視頻編解碼算法 第三章 對現(xiàn)有的監(jiān)控平臺做了基本介紹 介紹了本課題所基于的硬件平臺 的總體架構及各模塊電路特點 并在此基礎上給出了系統(tǒng)的軟件架構 第四章 視頻監(jiān)控終端的實現(xiàn)過程 該章是本文的核心所在 在分析終端系 統(tǒng)的軟件架構的基礎上 重點闡述了 sip 協(xié)議在視頻監(jiān)控終端的實現(xiàn)過程 mpeg 4 視頻編碼算法標準及 rtp 協(xié)議在終端平臺上的設計與實現(xiàn) 第五章 系統(tǒng)測試 搭建了產(chǎn)品的測試環(huán)境 對產(chǎn)品的一些主要指標進行了 測試 第六章 總結全文并展望下階段的工作任務 第二章 視頻監(jiān)控系統(tǒng)的相關技術 5 第二章第二章 視頻監(jiān)控視頻監(jiān)控系統(tǒng)的系統(tǒng)的相關技術相關技術 2 1 軟交換技術軟交換技術 隨著計算機和通信技術的不斷發(fā)展 通過在一個公共的分組網(wǎng)絡中承載語 音 數(shù)據(jù)和圖像等多種業(yè)務已經(jīng)被越來越多的運營商和設備制造商所認同 在這 樣的業(yè)務驅(qū)動和網(wǎng)絡融合的趨勢下 誕生了 ngn 模型 實現(xiàn)在分組網(wǎng)絡中 采 用分布式的網(wǎng)絡結構 有效承載話音 數(shù)據(jù)和多媒體業(yè)務 而作為 ngn 的核心 技術 軟交換技術的發(fā)展因而受到越來越多的關注 2 2 1 1 軟交換簡述軟交換簡述 軟交換是 ngn 的控制功能實體 是 ngn 呼叫與控制的核心 為 ngn 具有 實時性要求的業(yè)務提供呼叫控制和連接控制功能 現(xiàn)階段的軟交換至少應具備以 下三個基本特點 1 集成分組網(wǎng)世界和電路交換網(wǎng)世界 2 具備匯接局和端局能力 3 呼叫控制與媒體層和業(yè)務層分離 在 ngn 模型中 軟交換設備位于控制層 提供多種業(yè)務的連接控制 路由 網(wǎng)絡資源管理 計費 認證等功能 軟交換設備與各種媒體網(wǎng)關 終端 應用服 務器 其他軟交換設備間采用標準協(xié)議相互通信 所以 簡單的看 軟交換是實 現(xiàn)傳統(tǒng)程控交換機的 呼叫控制 功能的實體 但傳統(tǒng)的 呼叫控制 功能是和 業(yè)務結合在一起的 不同的業(yè)務所需要的呼叫控制功能不同 這要求軟交換提供 的呼叫控制功能是各種業(yè)務的基本呼叫控制 2 2 1 2 軟交換的體系結構軟交換的體系結構 隨著 ip 網(wǎng)的迅速發(fā)展 軟交換體系將以 ip 網(wǎng)為骨干 在各種網(wǎng)絡相互融合 的基礎上 以一種統(tǒng)一的方式靈活地提供業(yè)務是目前頗受推崇的面向網(wǎng)絡融合的 新一代多媒體業(yè)務整體解決方案 它從功能上可以分為業(yè)務平面 控制平面 傳 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 6 輸平面和接入平面 它的網(wǎng)絡體系如圖 2 1 所示 圖 2 1 軟交換的網(wǎng)絡體系結構 接入平面 提供各種網(wǎng)絡和設備接入到核心骨干網(wǎng)的方式和手段 主要包括 信令網(wǎng)關 媒體網(wǎng)關 接入網(wǎng)關等多種接入設備 傳輸平面 負責提供各種信令和媒體流傳輸?shù)耐ǖ?網(wǎng)絡的核心傳輸網(wǎng)將是 ip 分組網(wǎng)絡 控制平面 主要提供呼叫控制 連接控制 協(xié)議處理等能力 并為業(yè)務平面 提供訪問底層各種網(wǎng)絡資源的開放接口 該平面的主要組成部分是軟交換設備 應用平面 利用底層的各種網(wǎng)絡資源為用戶提供豐富多樣的網(wǎng)絡業(yè)務 主要 包括應用服務器 application server 策略 管理服務器 policy server aaa 服務器 authority authentication and accounting server 等 可以看出 軟交換所采用的是分層 開放的體系結構 并將傳統(tǒng)交換機的功 能模塊分離成獨立的網(wǎng)絡實體 各實體間采用開放的協(xié)議或 api 接口 從而打破 了傳統(tǒng)電信網(wǎng)封閉的格局 實現(xiàn)了多種異構網(wǎng)絡間的融合 這種網(wǎng)絡的體系通過 將業(yè)務與呼叫控制分離 呼叫控制與承載分離 來實現(xiàn)相對獨立的業(yè)務體系 使 得上層業(yè)務與底層的異構網(wǎng)絡無關 靈活 有效地實現(xiàn)業(yè)務的提供 從而能夠滿 足用戶多樣的 不斷發(fā)展的業(yè)務需求 2 3 2 1 3 軟交換的主要協(xié)議軟交換的主要協(xié)議 軟交換技術的目標是建設一個能夠提供話音 數(shù)據(jù) 多媒體等多種業(yè)務的 第二章 視頻監(jiān)控系統(tǒng)的相關技術 7 集通信 信息 電子商務 娛樂于一體 滿足自由通信的分組融合網(wǎng)絡 為了實 現(xiàn)這一目標 ietf itu t isc ipcc 制定并不斷完善系列標準協(xié)議 如 h 248 megaco sip bicc sigtran h 323 等 下面對幾個主要協(xié)議做一簡單介紹 1 h 248 megaco h 248和megaco協(xié)議均稱為媒體網(wǎng)關控制協(xié)議 應用在媒體網(wǎng)關和h 248 megaco 與軟交換設備之間 兩個協(xié)議的內(nèi)容基本相同 只是 h 248 是由 itu 提出來的 而 megaco 是由 ietf 提出來的 且是雙方共同推薦的協(xié)議 它們 引入了 termination 終端 和 context 關聯(lián) 兩個抽象概念 在 termination 終 端 中 封裝了媒體流的參數(shù) modem 和承載能力參數(shù) 而 context 關聯(lián) 則表明了在一些 termination 終端 之間的相互連接關系 h 248 megaco 通 過 add modify subtract move 等 7 個命令完成對 termination 終端 和 context 關聯(lián) 之間的操作 從而完成了呼叫的建立和釋放 2 3 2 媒體網(wǎng)關控制協(xié)議 mgcp 媒體網(wǎng)關控制協(xié)議 mgcp 是由 ietf 提出來的 是簡單網(wǎng)關控制協(xié)議 sgcp 和 ip 設備控制協(xié)議 ipdc 相結合的產(chǎn)物 megaco 協(xié)議是對 mgcp 協(xié)議的進一步改進 完善和提高 mgcp 協(xié)議可以說是一個比較成熟的協(xié)議 協(xié) 議的內(nèi)容與 megaco 協(xié)議比較相似 目前軟交換系統(tǒng)設備大都支持該協(xié)議 其 不足也慢慢表現(xiàn)出來 將來可能要被 h 248 megaco 協(xié)議所取代 在軟交換系統(tǒng)中 mgcp 協(xié)議與 h 248 megaco 協(xié)議一樣 應用在媒體網(wǎng) 關和 mgcp 終端與軟交換設備之間 通過此協(xié)議來控制媒體網(wǎng)關和 mgcp 終端 上的媒體 控制流的連接 建立和釋放 2 3 3 會話初始化協(xié)議 sip 會話初始化協(xié)議 sip 是 ietf 提出的在 ip 網(wǎng)上進行多媒體通信的應用層 控制協(xié)議 以 internet 協(xié)議 http 為基礎 遵循 internet 的設計原則 基于對 等工作模式 利用 sip 可實現(xiàn)會話的連接 建立和釋放 并支持單播 組播和可 移動性 此外 sip 如果與 sdp 配合使用 可以動態(tài)地調(diào)整和修改會話屬性 如 通話帶寬 所傳輸?shù)拿襟w類型及編解碼格式 其具體內(nèi)容可參見 ietf rfc 2543 在軟交換系統(tǒng)中 sip 協(xié)議主要應用于軟交換與 sip 終端之間 也有的廠家 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 8 將sip協(xié)議應用于軟交換與應用服務器之間 提供基于sip協(xié)議實現(xiàn)的增值業(yè)務 總的來說 sip 協(xié)議主要應用于語音和數(shù)據(jù)相結合的業(yè)務 以及多媒體業(yè)務之間 的呼叫建立與釋放 特別是 sip 協(xié)議以其簡單 靈活的特點 使作為移動通信標 準化組織的 3gpp 已經(jīng)決定在其基礎上建立第三代移動通信的全 ip 網(wǎng)絡 并要 求未來的 3g 終端必須支持 sip 協(xié)議 3 2 2 sip 協(xié)議協(xié)議 2 2 1 sip 協(xié)議背景和功能協(xié)議背景和功能 sip session initiation protocol 即會話初始化協(xié)議 最初是由 ietf 工作組 于 1999 年提出的在基于 ip 網(wǎng)絡中實現(xiàn)實時通信應用的一種信令協(xié)議標準 它是 一個應用層的控制協(xié)議 可以用來建立 修改和終止多媒體會話進程 4 sip 協(xié)議的開發(fā)目的是用來幫助提供因特網(wǎng)的高級電話業(yè)務 而網(wǎng)絡電話 ip 電話 正在向一種正式的商業(yè)電話模式演進 sip 就是用來確保這種演進實 現(xiàn)而需要的 ngn 系列協(xié)議中重要的成員之一 也是 ip 多媒體子系統(tǒng)的核心協(xié)議 之一 總的來說 sip 從以下五個方面支持多媒體會話 1 用戶定位 判斷通信終端的位置 2 用戶可用性 判斷通信終端是否愿意參與會話 3 用戶能力 判斷將要使用的多媒體類型和媒體參數(shù) 4 會話建立 在通信雙方建立會話的所有參數(shù) 5 會話管理 包括傳輸和中止會話 修改會話參數(shù) 請求各種服務 5 2 2 2 sip 的網(wǎng)絡結構的網(wǎng)絡結構 sip 協(xié)議定義了兩類網(wǎng)絡元素 sip 用戶代理 user agent ua 和 sip 用戶服 務器 user server us 用戶代理是呼叫的終端系統(tǒng)元素 而用戶服務器是處理 與多個呼叫相關聯(lián)的網(wǎng)絡設備 其基本結構如圖 2 2 所示 第二章 視頻監(jiān)控系統(tǒng)的相關技術 9 圖 2 2 sip 網(wǎng)絡結構 用戶代理是一個用于和用戶交互的 sip 實體 又稱為 sip 終端 根據(jù) ua 在 會話中扮演角色的不同又可分為用戶代理客戶機 uac user agent client 和用戶 代理服務器 uas user agent server 兩種 其中前者用于發(fā)送呼叫請求 后者用 于響應呼叫請求 一個 sip 終端通常需要包括 uac 和 uas 6 服務器主要功能為地址解析和用戶定位 分為代理服務器 proxy server 重 定向服務器 redirect server 注冊服務器 register server 三種 1 代理服務器 可以當作一個客戶端或者一個服務器 具有解析能力 負 責接收用戶代理發(fā)來的請求 根據(jù)網(wǎng)絡策略將請求發(fā)給相應的服務器 并根據(jù)應 答對用戶做出相應 也可以將收到的消息改寫后再發(fā)出 2 重定向服務器 負責規(guī)劃 sip 呼叫路由 它將獲得的呼叫的下一跳地址 信息告訴呼叫方 呼叫方由此地址直接向下一跳發(fā)出申請 而重定向服務器則退 出這個呼叫控制過程 3 注冊服務器 用來完成 uas 的登錄 在 sip 系統(tǒng)中所有的 uas 都要在 網(wǎng)絡上注冊 登錄 以便 uac 通過服務器能找到 它的作用就是接收用戶端的 請求 完成用戶地址的注冊 5 6 2 2 3 sip 的的分層結構分層結構 sip 協(xié)議按照邏輯來劃分 從下到上可以分為四層 第一層是語法和編碼層 編碼方式是采用擴展的 backus naur form grammar bnf 范式 第二層是傳輸層 它定義了一個客戶端如何發(fā)送請求和接收應答 以及一個 服務器如何接收請求和發(fā)送應答 所有的 sip 要素都包含一個通訊層 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 10 第三層是事務層 事務是 sip 的基本組成部分 一個事務是客戶發(fā)送的一個 請求事務 通過通訊層 發(fā)送到一個服務器事務 連同服務器事務的所有的該請 求的應答發(fā)送回客戶端事務 事務層處理應用服務層的重發(fā) 匹配請求的應答 以及應用服務層的超時 任何一個用戶代理客戶端 user agent client uac 完成 的事情都是由一組事務構成的 用戶代理包含一個事務層 來實現(xiàn)有狀態(tài)的代理 服務器 無狀態(tài)的代理服務器并不包含事務層 事務層包含一個客戶元素 可以 認為是一個客戶事務 和一個服務器元素 可以認為是一個服務器事務 他們 都可以用一個有限狀態(tài)機來處理特定的請求 第四層是事務用戶層 tu 在事務層之上 每一個 sip 實體 除了無狀 態(tài)代理 都是一個事務用戶 當一個 tu 發(fā)出一個請求 它首先創(chuàng)建一個客戶事 務實例 client transaction instance 并且和請求一起發(fā)送 這包括了目標 ip 地址 端口號 以及發(fā)送請求的設備 tu 可以創(chuàng)建客戶事務 也可以取消客戶事務 當客戶取消一個事務 它請求服務器終止正在處理的事務 并且返回狀態(tài)到該事 務開始前的狀態(tài) 并且產(chǎn)生指定的該事務的錯誤報告 這是由 cancel 請求完 成的 這個請求有自己的事務 并且包含一個被取消的事務 7 8 2 2 4 sip 的消息格式的消息格式 sip 是一個基于文本的協(xié)議 sip 消息有兩種 客戶機到服務器的請求 request 服務器到客戶機的響應 response sip 消息由一個起始行 start line 一個或多個字段 field 組成的消息頭 一 個標志消息頭結束的空行 crlf 以及作為可選擇的消息體 message body 組 成 起始行又分為請求行 request line 和狀態(tài)行 status line 兩種 其中 請求行是請求消息的起始行 狀態(tài)行是響應消息的起始行 其格式如下 generic message start line message header crlf message body 請求行以方法 method 標記開始 后面是 request uri 和協(xié)議版本 sip version 最后以回車鍵結束 各個元素間用空格鍵字符間隔 即 第二章 視頻監(jiān)控系統(tǒng)的相關技術 11 request line method sp request uri sp sip version crlf sip 定義了以下幾種請求消息 invite 用于初始化一個呼叫 通常通過 sdp 協(xié)議攜帶會話的描述信息 從而可以在通話雙方間進行媒體協(xié)商 option 客戶端通過發(fā)送該請求獲取某一主機的性能參數(shù) ack 由客戶端發(fā)出 用來向服務器確認它已經(jīng)收到服務器的最后響應 bye 用于結束會話 客戶端可以用次請求向服務器表明它想釋放呼叫 register 主要用于客戶端向服務器登記注冊當前的位置 cancel 用于在接受到對方發(fā)出的響應前 取消已經(jīng)發(fā)出的請求 與請求消息相對應 sip 定義了一下六種狀態(tài)碼 1xx informational 表示發(fā)出的請求已被對方接受 正在處理 2xx uccess 表示對方已經(jīng)成功接收 解析和接受請求 3xx redirection 表示為完成呼叫請求 需要重定向請求 4xx client error 表示客戶端出現(xiàn)錯誤 5xx server error 表示服務器端出錯 不能執(zhí)行合法請求 6xx global failure 表示出現(xiàn)了全局故障 任何服務器都不能執(zhí)行請求 9 2 2 5 sip 會話流程會話流程 一個多媒體會話就是一組媒體提供者和接受者及從提供者到接受者之間的 媒體數(shù)據(jù)流 一個典型的 sip 會話流程如圖 2 3 所示 sip 協(xié)議以統(tǒng)一資源定位符 uri 來標識用戶 稱為 sip uri 它的形式和 emali 的形式相似 包括一個用戶名和一個主機名 在本例子中 bob 的 sip uri 為 sip bob b 其中 bob 是 bob 的注冊用戶名 而 b 是 bob 的 sip 服務提供者的域名 類似的 alice 的 sip uri 是 sip alice a 若 alice 要和 bob 進行會話 由于 alice 并不知道 bob 的當前服務器地址 所以 alice 把他的 invite f1 請求發(fā)送至其所在域的代理服務器 a proxy 代理服務器把 alice 的 invite f2 請求轉發(fā)給 bob 所在域的代理服務器 b proxy 并返回給 alice 一個 100 trying f3 消息 b proxy 收到 請求后 它把請求消息轉發(fā)給 bob 并返回給 a proxy 一個 100 trying 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 12 f5 消息 bob 收到 invite f4 請求后 首先產(chǎn)生一個 180 ringing f6 消息并發(fā) 送給代理服務器 a 代理服務器負責把 180 ringing f8 消息轉發(fā)給 alice 如果 bob 決定接收 alice 的請求 他便產(chǎn)生一個 200 ok f9 消息 并通 過代理服務器傳輸給 alice 當 alice 收到 bob 的 200ok f11 消息后 她再給 bob 發(fā)送一個 ack f12 消息 這樣會話就建立起來了 雙方可以進行媒體交互 此 后由于會話雙方都已經(jīng)知道了對方的聯(lián)系地址 所以 alice 可以直接把 ack 消 息發(fā)送給 bob 而不需要通過代理服務器轉發(fā) 最后當會話中的其中一個參與者 想結束會話時 在本例中為 bob 他直接給對方發(fā)送一個 bye f13 消息 alice 收到 bye 消息后 他給 bob 發(fā)送一個 200 ok f14 消息 這樣會話就結束了 3 8 圖 2 3 sip 會話流程 2 3 mpeg 4 編碼標準編碼標準 2 3 1 mpeg 4 標準概述標準概述 運動圖像專家組 mpeg 于 1999 年 2 月正式公布了 mpeg 4 iso iec14496 標準第一版本 同年年底 mpeg 4 第二版亦告底定 且于 2000 年年初正式成為 國際標準 10 mpeg 4 與 mpeg 1 和 mpeg 2 有很大的不同 mpeg 4 不只是具體壓縮算 法 它是針對數(shù)字電視 交互式繪圖應用 影音合成內(nèi)容 交互式多媒體 www 第二章 視頻監(jiān)控系統(tǒng)的相關技術 13 資料擷取與分散 等整合及壓縮技術的需求而制定的國際標準 mpeg 4 標準將 眾多的多媒體應用集成于一個完整的框架內(nèi) 旨在為多媒體通信及應用環(huán)境提供 標準的算法及工具 從而建立起一種能被多媒體傳輸 存儲 檢索等應用領域普 遍采用的統(tǒng)一數(shù)據(jù)格式 mpeg 4 標準同以前標準的最顯著的差別在于它是采用基于對象的編碼理 念 即在編碼時將一幅景物分成若干在時間和空間上相互聯(lián)系的視頻音頻對象 分別編碼后 再經(jīng)過復用傳輸?shù)浇邮斩?然后再對不同的對象分別解碼 從而組 合成所需要的視頻和音頻 這樣既方便我們對不同的對象采用不同的編碼方法和 表示方法 又有利于不同數(shù)據(jù)類型間的融合 并且這樣也可以方便的實現(xiàn)對于各 種對象的操作及編輯 10 11 2 3 2 mpeg 4 標準構成標準構成 1 dmif dmif 即多媒體傳送整體框架 它主要解決交互網(wǎng)絡中 廣播環(huán)境下以及磁 盤應用中多媒體應用的操作問題 通過 dmif mpeg 4 可以建立具有特殊品質(zhì) 服務 qos quality of service 的信道和面向每個基本流的帶寬 2 數(shù)據(jù)平面 mpeg 4 中的數(shù)據(jù)平面可以分為兩部分 傳輸關系部分和媒體關系部分 為 了使基本流和 av 對象在同一場景中出現(xiàn) mpeg 4 引用了對象描述 od 和流 圖桌面 smt 的概念 od 傳輸與特殊 av 對象相關的基本流的信息流圖 桌 面把每一個流與一個 cat channel association tag 相連 cat 可實現(xiàn)該流的 順利傳輸 3 緩沖區(qū)管理和實時識別 mpeg 4 定義了一個系統(tǒng)解碼模式 sdm 該解碼模式描述了一種理想的 處理比特流句法語義的解碼裝置 它要求特殊的緩沖區(qū)和實時模式 通過有效的 管理 可以更好地利用有限的緩沖區(qū)空間 4 音頻編碼 mpeg 4 的優(yōu)越之處在于 它不僅支持自然聲音 而且支持合成聲音 mpeg 4 的音頻部分將音頻的合成編碼和自然聲音的編碼相結合 并支持音頻的 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 14 對象特征 5 視頻編碼 與音頻編碼類似 mpbg 4 也支持對自然和合成的視覺對象的編碼 合成的 視覺對象包括 2d 3d 動畫和人面部表情動畫等 6 場景描述 mpeg 4 提供了一系列工具 用于組成場景中的一組對象 主要用于描述各 av 對象在一具體 av 場景坐標下 如何組織與同步等問題 一些必要的合成信 息就組成了場景描述 10 12 2 3 3 mpeg 4 標準實現(xiàn)過程標準實現(xiàn)過程 如圖 2 4 所示的 mepg 4 的視頻編碼過程中 mpeg 4 除了繼承第一代視頻 編碼算法以外 還主要出現(xiàn)了針對視頻對象平面 vop video object profile 的形 狀編碼以及紋理編碼和運動信息等編碼方式 13 14 dct 逆量化 量化 idct 預 測 開 關 預測1 預測2 預測3 幀 存 運 動 紋 理 編 碼 視 頻 多 路 合 成 運動估值 形狀編碼 任意形狀視頻 mpeg 4視頻流 圖 2 4 mepg 4 的視頻編碼過程 我們將原始視頻序列每一幀中的人 物或是計算機生成的 2d 3d 圖形等作 為個視頻對象 vo video object vo 的表面雖然往往是不規(guī)則和千變?nèi)f化的 但可將其視為一定視角下 n 個形狀規(guī)則的 具有一定紋理的剖面組合的連續(xù)運 動 這些剖面的組合就稱為 vop 它描述的是 vo 在一定視角條件下的表面特 性 按圖 2 4 所示的過程 原始視頻幀進入編碼系統(tǒng)后 經(jīng)分析確認出 n 個視覺 目的對象為編碼對象 將其作為 n 個 vo 將每個 vo 進行形狀 紋理和運動預 第二章 視頻監(jiān)控系統(tǒng)的相關技術 15 測編碼后 形成各個 vo 的 vop 數(shù)據(jù)流 與只能處理矩形幀序列的第一代視頻 編碼所不同的是 mpeg 4 編碼標準中的 vop 可以具有任意的形狀 當然也包 括了矩形 若 vop 為矩形 編碼系統(tǒng)就無須處理形狀信息而退化為類似于 mpeg 1 mepg 2 的傳統(tǒng)編碼系統(tǒng) 從而也實現(xiàn)了與傳統(tǒng)編碼系統(tǒng)的兼容 原 始視頻幀中未被作為 vo 的背景信息 仍然采用傳統(tǒng)的矩形 dct 變換編碼 而 vo 自身的一些諸如 vo 間位置 邏輯關系等 vo 場景描述信息也要進行單獨的 編碼 最后和 vop 數(shù)據(jù)流以及背景編碼信息一同在視頻復用器中進行合成 產(chǎn) 生 mepg 4 數(shù)據(jù)流 mpeg 4 數(shù)據(jù)流提供了視覺場景的分級描述 從上往下分別是 視覺對象序 列 vs visual object 明 sequence 視頻對象 vo video object 視頻對象層 vol video object layer 視頻對象平面組 gov group of vop 和視覺對象 平面 vop video object profile 這樣的分級編碼方式可以根據(jù)帶寬或者系統(tǒng)的 運算能力來有選擇地產(chǎn)生 mpeg 4 視頻流 也便于對 mpeg 4 數(shù)據(jù)流實現(xiàn)隨機 訪問和編輯 14 15 16 2 4 rtp 協(xié)議協(xié)議 2 4 1 rtp 協(xié)議概述協(xié)議概述 rtp real time protocol 實時傳輸協(xié)議 它是由 ietf 的音頻視頻傳輸工作 組 avt 負責開發(fā)的 并于 1996 年成為 rfc 正式文檔 它主要用于音頻 視頻等實時流媒體的傳送 17 rtp 為交互式音頻 視頻等具有實時特性的數(shù)據(jù)提供端到端的傳送服務 在 ip 網(wǎng)絡上 一般是在 udp 之上運行 rtp 協(xié)議 如果支持它的網(wǎng)絡能提供組 播功能 則 rtp 也可用組播將數(shù)據(jù)送給多個目的用戶 rtp 包括兩個關系十分密切的子協(xié)議 實時傳輸協(xié)議 rtp 用于傳輸實時數(shù)據(jù) 實時控制協(xié)議 rtcp 用于監(jiān)視網(wǎng)絡的服務質(zhì)量 并傳遞與會者會話中的 信息 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 16 2 4 2 實時傳輸協(xié)議實時傳輸協(xié)議 rtp 協(xié)議提供具有實時特征的 端到端的數(shù)據(jù)傳送服務 可用來傳送聲音 和運動圖像數(shù)據(jù) 在這項數(shù)據(jù)傳送服務中包含了裝載數(shù)據(jù)的標識符 序列計數(shù) 時間戳和傳送監(jiān)視 通常 rtp 的協(xié)議元是用 udp 協(xié)議元來裝載的 并利用 udp 的復用和校驗和來實現(xiàn) rtp 的復用 rtp 報文的報頭是固定的 有效數(shù)據(jù)可以是音頻或視頻數(shù)據(jù) 固定報頭的 rtp 報文結構如圖 2 5 所示 圖 2 5 固定報頭的 rtp 報文 rtp 報頭中各字段的含義如下 版本 v 用來標識 rtp 協(xié)議的版本 長度為 2 bit 當前版本為 2 填充 p 用于標記 長度為 1 bit 置 1 表示用戶數(shù)據(jù)最后加有填充位 擴展 x 置 1 表示 rtp 報頭后緊隨一個擴展報頭 長度為 1 bit csrc 計數(shù) cc 表示在定長的 rtp 報頭后的 csrc 標識符的數(shù)量 長 度為 4bit 標記 m 該標記的含義對于不同的有效負荷類型有不同的意義 由 rtp 配置文件對它進行定義和使用 其長度為 1bit 載荷類別 pt 它指示在用戶數(shù)據(jù)字段中承載數(shù)據(jù)的載荷類別 長度為 7bit 序號 sn 每發(fā)送一個 rtp 數(shù)據(jù)包該序號增加 1 該序號在接收方可用來 發(fā)現(xiàn)丟失的數(shù)據(jù)包和對到來的數(shù)據(jù)包進行排序 長度為 16bit 時間戳 ts 它用來表示 rtp 包中用戶數(shù)據(jù)段的第一個字節(jié)的采樣時刻 時間戳的時間表示應為線性單調(diào)遞增的 以便完成同步實現(xiàn)和抖動的計算 長度 為 32bit 同步源標識符 ssrc 用來標識一個同步源 此標識符是隨機選擇的 但 要保證同一 rtp 會話中的任意兩個 ssrc 各不相同 rtp 必須檢測并解決沖 突 長度為 32bit 第二章 視頻監(jiān)控系統(tǒng)的相關技術 17 提供源標識符 csrc 它可有 0 15 項標識符 每一項長度為 32 bit 其 項數(shù)由 cc 字段來確定 如果提供源多于 15 個 則只有 15 個被標識 17 18 2 4 3 實時傳輸控制協(xié)議實時傳輸控制協(xié)議 實時傳輸控制協(xié)議 rtcp real time control protocol 是 rtp 的控制協(xié)議 它用于監(jiān)視網(wǎng)絡的服務質(zhì)量和在正在進行的與會者會話中傳遞信息 rtcp 協(xié)議需要與 rtp 協(xié)議一起配合使用 當應用程序啟動一個 rtp 會話 時將同時占用兩個端口 分別供 rtp 和 rtcp 使用 rtp 本身并不能為按序傳 輸數(shù)據(jù)包提供可靠的保證 也不提供流量控制和擁塞控制 這些都由 rtcp 來負 責完成 通常 rtcp 會采用與 rtp 相同的分發(fā)機制 向會話中的所有成員周期 性地發(fā)送控制信息 應用程序通過接收這些數(shù)據(jù) 從中獲取會話參與者的相關資 料 以及網(wǎng)絡狀況 分組丟失概率等反饋信息 從而能夠?qū)Ψ召|(zhì)量進行控制或 者對網(wǎng)絡狀況進行診斷 rtcp 協(xié)議的功能是通過不同的 rtcp 數(shù)據(jù)報來實現(xiàn)的 主要有如下幾種類 型 sr 發(fā)送端報告 所謂發(fā)送端是指發(fā)出 rtp 數(shù)據(jù)報的應用程序或者終端 發(fā)送端同時也可以是接收端 rr 接收端報告 所謂接收端是指僅接收但不發(fā)送 rtp 數(shù)據(jù)報的應用程 序或者終端 sdes 源描述 主要功能是作為會話成員有關標識信息的載體 如用戶名 郵件地址 電話號碼等 此外還具有向會話成員傳達會話控制信息的功能 bye 通知離開 主要功能是指示某一個或者幾個源不再有效 即通知會 話中的其他成員自己將退出會話 app 由應用程序自己定義 解決了 rtcp 的擴展性問題 并且為協(xié)議的 實現(xiàn)者提供了很大的靈活性 rtcp 數(shù)據(jù)報攜帶有服務質(zhì)量監(jiān)控的必要信息 能夠?qū)Ψ召|(zhì)量進行動態(tài) 的調(diào)整 并能夠?qū)W(wǎng)絡擁塞進行有效的控制 由于 rtcp 數(shù)據(jù)報采用的是多播方 式 因此會話中的所有成員都可以通過 rtcp 數(shù)據(jù)報返回的控制信息 來了解其 他參與者的當前情況 17 18 基于 sip 協(xié)議的視頻監(jiān)控終端的研究與實現(xiàn) 18 第三章第三章 硬件平臺硬件平臺及軟件架構及軟件架構 3 1 系統(tǒng)硬件平臺系統(tǒng)硬件平臺 3 1 1 arm 微處理器概述微處理器概述 arm advanced risc machines 公司成立于 1991 年 它是全球領先的 16 32 位嵌入式 risc 微處理器解決方案的供應商 向全球各大領先電子公司提供高 性能 低成本和高效率的 risc 處理器 外設和系統(tǒng)芯片技術授權 其中包括 intel ibm lg 半導體 nec sony 菲利浦和國民半導體這樣的大公司 arm 的微處理器核技術廣泛用于便攜式通信產(chǎn)品 手持運算 多媒體和嵌入式 解決方案等領域 已成為 risc 標準 arm 微處理器目前包括 arm7 arm9 arm9e 和 arm10 等四個通用處 理器系列 每個系列都提供一套相對獨特的性能來滿足不通應用領域的需求 由 于其具有內(nèi)核耗電少 成本低 功能強等特點而被廣泛應用于移動通信 手持計 算和數(shù)據(jù)處理等嵌入式產(chǎn)品中 已經(jīng)成為業(yè)界系統(tǒng)開發(fā)首選方案之一 19 20 3 1 2 z228 硬件平臺硬件平臺 本課題所選用的硬件平臺是以上海杰得微電子公司的 z228 微處理器為核心 的嵌入式系統(tǒng) z228 是上海杰得微電子公司自主開發(fā)的多媒體應用處理器 是 中國第一款 0 13 微米的高度集成的低功耗的具有強大多媒體處理能力的 soc 芯片 z228 單芯片包含了 arm926ej cpu 和 mpeg