1-1 認(rèn)知車身組件

《ROS原理與技術(shù)應(yīng)用》能力模塊一掌握車身硬件的搭建方法

任務(wù)一認(rèn)知小車組件導(dǎo)入

2022年4月，因?yàn)樾鹿谝咔楣芸?，上海物資配送緊張。京東、美團(tuán)等企業(yè)從外地調(diào)撥大量自動駕駛車輛支援上海完成物資配送任務(wù)。

這些自動駕駛車輛為客戶提供訂單交付、為移動方艙醫(yī)院提供物資配送等服務(wù)，在一定程度上緩解了當(dāng)?shù)匚镔Y配送困境。這類車輛是如何實(shí)現(xiàn)自動駕駛的呢？目錄

CONTENTS0102自動駕駛汽車的發(fā)展史自動駕駛系統(tǒng)框架使用03自動駕駛的關(guān)鍵技術(shù)03ROS智能車的整體架構(gòu)新授一、自動駕駛汽車的發(fā)展歷史“美國奇跡”汽車FrancisP.Houdina發(fā)辮的該汽車通過無線電遙控的方式實(shí)現(xiàn)車輛方向盤、離合器等遠(yuǎn)程操作，是人類歷史上第一輛有證可查的自動駕駛汽車1925第一個基于攝像頭的自動駕駛汽車由日本的筑波工程研究實(shí)驗(yàn)室開發(fā)，這輛車內(nèi)配備了兩個攝像頭，并用模擬計(jì)算機(jī)技術(shù)進(jìn)行信號處理。時速能達(dá)到30公里，但需要高架軌道的輔助。1977FirebirdII概念車由通用公司展出，是世界上第一輛配備了汽車安全及自動導(dǎo)航系統(tǒng)的，神似火箭頭的概念車。19561984“動態(tài)視覺計(jì)算”項(xiàng)目ErnstDickmanns團(tuán)隊(duì)成功改裝了一輛奔馳S500轎車，配備了攝像頭和傳感器可以實(shí)時監(jiān)測道路環(huán)境。成功的在普通交通環(huán)境下自動駕駛了超過1000公里。一、自動駕駛汽車的發(fā)展歷史ARGO項(xiàng)目改裝汽車?yán)昧Ⅲw視覺系統(tǒng)和計(jì)算機(jī)制定的導(dǎo)航路線進(jìn)行了2000公里的長距離實(shí)驗(yàn)，其中94%路程使用自主駕駛，平均時速為90公里，最高時速123公里。1998谷歌改裝豐田普銳斯，進(jìn)入自動駕駛領(lǐng)域谷歌在DARPA的支持下，進(jìn)入自動駕駛，改裝的豐田普銳斯在太平洋沿岸行駛了1.4萬英里。使用了視頻系統(tǒng)、雷達(dá)和激光自動導(dǎo)航技術(shù)2009斯坦福改裝汽車穿越Mojave沙漠改裝的大眾途銳攜帶了攝像頭，配備激光測距儀、雷達(dá)遠(yuǎn)程視距、GPS傳感器以及英特爾奔騰M處理器20042014谷歌發(fā)布“完全自主設(shè)計(jì)”的自動駕駛原型車成品谷歌該款自動駕駛原型車在加利福尼亞州山景城的公路正式上路測試一、自動駕駛汽車的發(fā)展歷史單目攝像頭傳統(tǒng)汽車廠商也開始進(jìn)行自動駕駛汽車的研發(fā)奔馳在2021年12月，推出新一代S級、EQS純電動車的DrivePilot正式被批準(zhǔn)在德國高速公路上以低于60公里/小時的速度激活使用。這是全球首個真正意義上獲得政府許可，并大規(guī)模上市的L3級自動駕駛國內(nèi)毫末智行背靠長城汽車發(fā)展自動駕駛技術(shù)，2022獲得數(shù)億元A+輪融資毫末智行在2022年輔助駕駛系統(tǒng)出貨量將超過10萬套，覆蓋34款車型大約70個項(xiàng)目。此外，毫末智行還稱2022年開始將努力把產(chǎn)品搭載至除長城汽車之外多個品牌的車型，成為國內(nèi)自動駕駛頭部企業(yè)之一IT企業(yè)進(jìn)入自動駕駛系統(tǒng)，國內(nèi)的百度于百度發(fā)布了全新升級的自動駕駛出行服務(wù)平臺——“蘿卜快跑”2021年11月25日當(dāng)日接單，隨后陸續(xù)在長沙、滄州、北京、廣州、重慶和上海面向大眾全面開放了無人駕駛服務(wù)。到2021年第三季度，蘿卜快跑已向市場提供了11.5萬次乘車服務(wù)，百度也成為全球最大的自動駕駛出行服務(wù)提供商一、自動駕駛汽車的發(fā)展歷史小結(jié)：

自動駕駛一直屬于前沿技術(shù)，它的存在形式也是多種多樣的，一個世紀(jì)以來，國內(nèi)外無數(shù)的科學(xué)家們都在不斷地探索，自動駕駛能夠增強(qiáng)高速公路安全、緩解交通擁堵、減少空氣污染等有顯著優(yōu)勢。抓住了自動駕駛的技術(shù)優(yōu)勢就是引領(lǐng)了未來的潮流。二、自動駕駛系統(tǒng)框架的使用提供高效的開發(fā)支持靈活配置自動駕駛系統(tǒng)支持可視化工具的應(yīng)用

自動駕駛是非常復(fù)雜的系統(tǒng)，由傳感、感知、決策、車輛控制等幾個部分組成，每個部分又包含了若干個模塊，它們之間有著大量數(shù)據(jù)需要實(shí)時處理和反饋。

現(xiàn)階段自動駕駛技術(shù)的應(yīng)用想要整理這么多模塊和數(shù)據(jù)嗎，需要使用一個合適的自動駕駛系統(tǒng)框架來實(shí)現(xiàn)。使用自動駕駛系統(tǒng)框架能夠滿足如下需求：二、自動駕駛系統(tǒng)框架的使用（一）提供高效的開發(fā)支持

自動駕駛處于快速迭代和快速發(fā)展過程中，無論感知算法、決策算法還是整體技術(shù)開發(fā)，無論是以2D為主的視覺方案還是以3D為主的方案都在快速迭代中，對快速地構(gòu)建系統(tǒng)和功能驗(yàn)證有非常大的需求。

通過使用框架開發(fā)希望算法工程師能夠?qū)⒏嗑Ψ旁谒惴üδ艿难邪l(fā)上（如右圖中各節(jié)點(diǎn)的功能實(shí)現(xiàn)算法）

而諸如配置管理、部署運(yùn)行、底層通信等功能由框架來統(tǒng)一提供，這樣可以快速地構(gòu)建系統(tǒng)原型，驗(yàn)證算法和功能。ROS的計(jì)算圖結(jié)構(gòu)二、自動駕駛系統(tǒng)框架的使用（二）靈活配置自動駕駛系統(tǒng)

類似傳感、感知、決策等，本身都是包含了若干個功能相對獨(dú)立的自動駕駛算法模塊。

模塊之間只有數(shù)據(jù)依賴關(guān)系，對于框架來說，需要能夠在開發(fā)階段減少各個模塊之間的耦合，而在車上運(yùn)行階段能夠?qū)⒏鱾€模塊組合串聯(lián)起來，按模塊需求靈活配置自動駕駛系統(tǒng)。自動駕駛系統(tǒng)模塊構(gòu)成二、自動駕駛系統(tǒng)框架的使用（三）支持可視化工具的應(yīng)用

由于自動駕駛系統(tǒng)涉及大量圖像、主體算法，因此在調(diào)試過程中系統(tǒng)對各種可視化工具有非常強(qiáng)烈的需求，比如障礙物檢測算法，需要看圖像識別障礙物框得準(zhǔn)不準(zhǔn)，規(guī)劃路徑是否合理，定位算法也需要看調(diào)試時車是不是在正確位置上。三、自動駕駛的關(guān)鍵技術(shù)自動駕駛的關(guān)鍵技術(shù)主要體現(xiàn)在自動駕駛系統(tǒng)的感知、決策和控制三個環(huán)節(jié)。（一）感知

感知，即通過攝像頭、激光雷達(dá)、超聲波雷達(dá)、加速度計(jì)等多種傳感器獲取的信息，進(jìn)行綜合處理后，讓自動駕駛系統(tǒng)感知周圍的環(huán)境信息和車輛狀態(tài)信息。感知環(huán)節(jié)主要工作包括定位、物體識別和追蹤。其中，環(huán)境信息包括：道路的形狀、方向、曲率、坡度、車道、交通標(biāo)志、信號燈、其他車輛或行人的位置、大小、前進(jìn)方向和速度等。車輛狀態(tài)信息包括：車輛的前進(jìn)速度、加速度、轉(zhuǎn)向角度、車身位置及姿態(tài)等。多傳感器信息融合技術(shù)就是感知環(huán)節(jié)的關(guān)鍵技術(shù)之一。它能將多種傳感器獲得的環(huán)境信息進(jìn)行比對，并根據(jù)算法輸出融合結(jié)果。比如攝像頭和激光雷達(dá)感知到的同一車輛的大小、位置、前進(jìn)方向和速度信息進(jìn)行融合，保證同一車輛在不同傳感器中的時間和空間的一致。三、自動駕駛的關(guān)鍵技術(shù)（二）決策

決策，在整個自動駕駛系統(tǒng)中，決策單元扮演著“駕駛員大腦”的角色，主要完成行為預(yù)測、路徑規(guī)劃和避障工作，如圖所示。它具體包括：選取哪條車道、是否換道、是否跟車行駛、是否繞行、是否停車等。這個環(huán)節(jié)需要用到增強(qiáng)學(xué)習(xí)等關(guān)鍵技術(shù)。決策環(huán)節(jié)的主要工作（三）控制

控制，主要通過對轉(zhuǎn)向、驅(qū)動、制動三方面的控制，實(shí)現(xiàn)線控底盤執(zhí)行決策單元下發(fā)的目標(biāo)線速度和角速度。這個環(huán)節(jié)的關(guān)鍵是PID反饋控制等技術(shù)。PID反饋控制技術(shù)算法原理示意圖四、ROS智能車的整體架構(gòu)什么是ROS？

機(jī)器人操作系統(tǒng)（RobotOperatingSystem，ROS）最早是一個用于編寫機(jī)器人軟件的靈活框架，它集成了大量的工具、庫、協(xié)議，提供了類似操作系統(tǒng)所提供的功能，包括硬件抽象描述、底層驅(qū)動程序管理、共用功能的執(zhí)行、程序間的消息傳遞、程序發(fā)行包管理，可以極大簡化繁雜多樣的機(jī)器人平臺下的復(fù)雜任務(wù)創(chuàng)建與穩(wěn)定行為控制。ROS后來被各知名學(xué)術(shù)研究機(jī)構(gòu)和多家自動駕駛技術(shù)公司采用，已經(jīng)成為自動駕駛研究領(lǐng)域重要的系統(tǒng)框架。通過對ROS的學(xué)習(xí)和應(yīng)用可以更好理解自動駕駛技術(shù)。行云橋智慧貓ROS智能車

智慧貓ROS智能車，硬件使用了當(dāng)前自動駕駛技術(shù)中常用的深度攝像頭、單目攝像頭、單點(diǎn)激光雷達(dá)、單線激光雷達(dá)、IMU等多種傳感器。這些傳感器可以借助相應(yīng)功能包完成環(huán)境感知。智慧貓線控底盤則使用了控制精度較高的驅(qū)動電機(jī)，可以較好地根據(jù)決策單元下發(fā)的信號，準(zhǔn)確執(zhí)行自動駕駛?cè)蝿?wù)。四、ROS智能車的整體架構(gòu)行云橋智慧貓ROS智能車智慧貓線控底盤的電機(jī)編碼器信號可以轉(zhuǎn)換為里程計(jì)信息，并利用配合深度攝像頭獲取深度信息，完成環(huán)境感知激光雷達(dá)的深度信息經(jīng)過SLAM算法的處理，完成地圖構(gòu)建。在導(dǎo)航的時候，自主定位功能包amcl通過里程計(jì)信息或里程計(jì)+IMU等方式實(shí)現(xiàn)當(dāng)前小車的定位（感知）確定目標(biāo)位置后，導(dǎo)航路徑規(guī)劃功能包move_base則調(diào)用構(gòu)建后的地圖，以及當(dāng)前小車的位姿，并結(jié)合攝像頭獲取的障礙物信息來實(shí)現(xiàn)小車導(dǎo)航過程中最優(yōu)路徑規(guī)劃（決策模塊）321控制模塊：將運(yùn)動控制信息發(fā)送給底盤控制器（底盤控制單元），完成控制環(huán)節(jié)的任務(wù)4任務(wù)實(shí)施一、任務(wù)準(zhǔn)備（一）軟件、硬件準(zhǔn)備（二）安全要求及注意事項(xiàng)1.智慧貓ROS智能車11.認(rèn)知過程中注意不要損壞小車22.符合6S管理要求。

二、實(shí)施步驟（一）智慧貓整體結(jié)構(gòu)認(rèn)知

本課程選用了行云新能公司推出的“智慧貓ROS智能車”作為項(xiàng)目載體進(jìn)行自動駕駛系統(tǒng)原理與技術(shù)應(yīng)用的學(xué)習(xí)。智慧貓的線控底盤可以靈活搭配不同的功能模塊，適應(yīng)多種自動駕駛的應(yīng)用場景。例如搭載多功能貨艙的智慧貓，如圖所示。適應(yīng)多應(yīng)用場景的ROS智能車二、實(shí)施步驟（一）智慧貓整體結(jié)構(gòu)認(rèn)知ROS智能車由線控底盤、感知單元、決策單元以及功能模塊組成。其中線控底盤包括：底盤控制單元（也稱下位機(jī)）、電機(jī)驅(qū)動模塊、驅(qū)動電機(jī)、車輪和外殼等部件；感知單元包括單線激光雷達(dá)、單點(diǎn)激光雷達(dá)、單目攝像頭、深度攝像頭和IMU模塊等部件；決策單元也稱上位機(jī)，安裝在線控底盤內(nèi)部。二、實(shí)施步驟（一）智慧貓整體結(jié)構(gòu)認(rèn)知ROS智能車線控底盤包括USB擴(kuò)展器、電池模塊、車尾背光板、車尾接口板、決策單元、底盤控制單元。內(nèi)部結(jié)構(gòu)，如圖所示：二、實(shí)施步驟（二）智慧貓整體控制框架認(rèn)知

智慧貓ROS智能車依靠感知單元完成環(huán)境感知，并將獲取信息傳輸?shù)經(jīng)Q策單元。決策單元預(yù)裝了自動駕駛操作系統(tǒng)，通過該系統(tǒng)調(diào)用對應(yīng)的功能包，形成控制指令（線控底盤運(yùn)動