人工智能數(shù)據(jù)標(biāo)注實戰(zhàn)教程 課件 2.1圖像標(biāo)簽分類標(biāo)注

第二章

圖像任務(wù)標(biāo)注項目任務(wù)一

圖像標(biāo)簽分類標(biāo)注內(nèi)容概括概念典型應(yīng)用場景實踐標(biāo)注操作小結(jié)“人之情，目欲視色”--莊子1.概念圖像分類是根據(jù)圖像的語義信息將不同類別圖像區(qū)分開來，是計算機(jī)視覺中重要的基本問題，也是圖像檢測、圖像分割、物體跟蹤、行為分析等其他高層視覺任務(wù)的基礎(chǔ)。其核心思想便是從給定的分類集合中給圖像分配一個標(biāo)簽的任務(wù)。實際上，圖像分類的任務(wù)是分析一個輸入圖像并返回一個將圖像分類的標(biāo)簽。標(biāo)簽來自預(yù)定義的可能類別集。圖像分類在很多領(lǐng)域有廣泛應(yīng)用，包括安防領(lǐng)域的人臉識別和智能視頻分析等，交通領(lǐng)域的交通場景識別，互聯(lián)網(wǎng)領(lǐng)域基于內(nèi)容的圖像檢索和相冊自動歸類，醫(yī)學(xué)領(lǐng)域的圖像識別等。2.典型應(yīng)用場景2.典型應(yīng)用場景中醫(yī)藥數(shù)據(jù)領(lǐng)域廣泛應(yīng)用深度學(xué)習(xí)等新技術(shù)開展研究。中藥作為中醫(yī)藥的重要組成部分，其有著數(shù)千年的悠久歷史，底蘊(yùn)十分豐富。中國勞動人民幾千年來在與疾病作斗爭的過程中，通過實踐，不斷認(rèn)識，逐漸積累了豐富的醫(yī)藥知識。由于太古時期文字未興，這些知識只能依靠師承口授。后來有了文字，便逐漸記錄下來，出現(xiàn)了醫(yī)藥書籍，這些書籍起到了總結(jié)前人經(jīng)驗并便于流傳和推廣的作用。由于藥物中草類占大多數(shù)，所以記載藥物的書籍便稱為“本草”。據(jù)考證,素漢之際,本草流行已較多，但可惜這些本草都已亡佚，無可考察。現(xiàn)知的最早本草著作稱為《神農(nóng)本草經(jīng)》，著者不詳，根據(jù)其中記載的地名，可能是東漢醫(yī)家修訂前人著作而成。2.典型應(yīng)用場景人工智能技術(shù)的發(fā)展為中醫(yī)診斷手段帶來新的契機(jī)，隨著中醫(yī)傳統(tǒng)診斷方法現(xiàn)代化研究的深入，脈診儀、舌診儀、色診儀、聞診儀、經(jīng)絡(luò)儀等已成為新興的現(xiàn)代中醫(yī)診斷技術(shù)。人工智能具有獨立自主的診療能力，通過大數(shù)據(jù)學(xué)習(xí)可達(dá)到與中醫(yī)專家高度匹配的診療結(jié)果，以現(xiàn)代中醫(yī)診斷技術(shù)及其數(shù)據(jù)為支撐，基于案例推理模型，利用人體信息采集設(shè)備，應(yīng)用人工智能技術(shù)模擬中醫(yī)診斷過程，為醫(yī)生提供診療所需的知識、經(jīng)驗、方法等啟發(fā)醫(yī)生思維，輔助醫(yī)生診斷，實現(xiàn)中醫(yī)診斷技術(shù)的信息化、數(shù)字化、標(biāo)準(zhǔn)化。3.實踐標(biāo)注操作準(zhǔn)備數(shù)據(jù)此處準(zhǔn)備了30張動物圖像用于標(biāo)注，分別是10張雞的圖像，10張兔子的圖像，10張老鼠的圖像。3.實踐標(biāo)注操作創(chuàng)建項目打開label-studio，在頁面選擇“CreateProject”創(chuàng)建項目，命名為AnimalClassify，并添加相應(yīng)描述3.實踐標(biāo)注操作導(dǎo)入數(shù)據(jù)選擇“DataImport”，通過左上角的“UploadFiles”選擇準(zhǔn)備好的數(shù)據(jù)，進(jìn)行導(dǎo)入。右圖分別為導(dǎo)入數(shù)據(jù)前后的“DataImport”界面。3.實踐標(biāo)注操作LabelingSetup導(dǎo)入數(shù)據(jù)后，選擇界面上方的“LabelingSetup”，之后出現(xiàn)如圖所示界面，左邊列表為任務(wù)選擇列表，包括ComputerVision、NaturalLanguageProcessing、Audio/speechProcessing等，根據(jù)不同任務(wù)選擇選項，本次的圖片分類任務(wù)選擇第一項“ComputerVision”。之后界面右側(cè)會出現(xiàn)八個不同的任務(wù)選項，由于本節(jié)要進(jìn)行的是圖片分類任務(wù)，所以選擇第六個任務(wù)-“ImageClassification”。3.實踐標(biāo)注操作LabelingSetup選擇項目模板類型后，跳轉(zhuǎn)至如圖所示界面3.實踐標(biāo)注操作LabelingSetup在上述界面的左邊添加圖片中動物的分類，因為圖片分別有10張雞，10張兔子以及10張老鼠，故設(shè)置了三個英文標(biāo)簽，分別為：chicken、rabbit、rat。添加完標(biāo)簽后，便可點擊界面右上角的“Save”按鈕，跳轉(zhuǎn)至如圖所示界面，該界面中展示了所有載入的圖像。3.實踐標(biāo)注操作開始標(biāo)注任意點擊任務(wù)主界面的一張圖像，便可進(jìn)入該圖像的標(biāo)注界面。例如點擊，如圖所示的母雞圖片，在此界面可以根據(jù)該圖像所屬的標(biāo)簽類型，選擇對應(yīng)的標(biāo)簽，比如該圖像內(nèi)容是一只雞，則選擇對應(yīng)的chicken標(biāo)簽，選完之后，點擊右上角的“Submit”提交。3.實踐標(biāo)注操作開始標(biāo)注通過圖任務(wù)主界面點擊中上方位置的LabelAllTasks按鈕，則會進(jìn)入到如圖所示界面。于該界面中同樣可對圖片進(jìn)行標(biāo)注操作，打完標(biāo)簽后，點擊右上角的“Submit”按鈕即可跳轉(zhuǎn)到下一張圖像繼續(xù)標(biāo)注。3.實踐標(biāo)注操作開始標(biāo)注如果當(dāng)前圖片不屬于三個標(biāo)簽中的任一類或者該圖像不能確認(rèn)類別，則可點擊界面右上角的“Skip”按鈕，跳過該圖像的標(biāo)注過程。對于已經(jīng)標(biāo)記了的圖像，可在標(biāo)注界面通過左上角的<、>進(jìn)行圖像的切換選擇待修改圖像，更新該圖像的標(biāo)簽后，點擊右上角的Updata即可。3.實踐標(biāo)注操作開始標(biāo)注所有圖像標(biāo)注完成之后，便會跳轉(zhuǎn)到如圖所示界面，代表所有圖像均已處理完成。3.實踐標(biāo)注操作開始標(biāo)注點擊界面左上角的AnimalClassify便可查看圖片的標(biāo)注情況，如圖所示，其中第一列數(shù)據(jù)代表圖像id，第二列代表標(biāo)注時間，第三列代表標(biāo)注與否，1為標(biāo)注完成，0為未標(biāo)注，第四列代表是否跳過標(biāo)注，1代表跳過，0代表未跳過。3.實踐標(biāo)注操作導(dǎo)出結(jié)果若要導(dǎo)出最終的標(biāo)注結(jié)果，則可圖中“Export”按鈕，便會出現(xiàn)如圖所示界面，根據(jù)處理任務(wù)的不同會顯示不同文件生成結(jié)果，由于本節(jié)任務(wù)是圖像分類，所以，可以生成如圖所示的四類文件，若要導(dǎo)出哪種文件到本地，選中其后，點擊右下角“Export”即可。3.實踐標(biāo)注操作結(jié)果展示將所需文件導(dǎo)出到本地后，可以進(jìn)行查看，比如導(dǎo)出JSON格式文件，如圖所示，由于篇幅過大，所以只展示了部分?jǐn)?shù)據(jù)。[{

"id":90,

"annotations":[{

"id":91,

"completed_by":1,

"result":[{

"value":{"choices":["rat"]},

"id":"IkO1NcTGG_",

"from_name":"choice",

"to_name":"image",

"type":"choices",

"origin":"manual"}],

"was_cancelled":false,

"ground_truth":false,

"created_at":"2022-05-19T11:08:02.299987Z",

"updated_at":"2022-05-19T11:08:02.299987Z",

"lead_time":4.131,

"prediction":{},

"result_count":0,

"task":90,

"parent_prediction":null,

"parent_annotation":null}],………………

"file_upload":"ab51fbca-chickens007.jpg",

"drafts":[],

"predictions":[],

"data":{"image":"\/data\/upload\/9\/ab51fbca-chickens007.jpg"},

"meta":{},

"created_at":"2022-05-19T10:56:03.092880Z",

"updated_at":"20