適合教室內(nèi)姿態(tài)估計的標(biāo)注規(guī)范

2DB21/TXXXXX—2021適合教室內(nèi)姿態(tài)估計的標(biāo)注規(guī)范本文件規(guī)定了教室環(huán)境中人體以及桌面、門窗等物體的視頻圖像標(biāo)注要求。本文件適用于采用計算機(jī)技術(shù)自動識別教室內(nèi)人體、物體和人體姿態(tài)等應(yīng)用。2規(guī)范性引用文件本文件沒有規(guī)范性引用文件。3術(shù)語和定義下列術(shù)語和定義適用于本文件。3.1不可預(yù)測unpredictable需要標(biāo)注的目標(biāo)處于攝像頭非背立面且被遮擋，無法估計出該目標(biāo)的具體位置；或需要標(biāo)注的目標(biāo)處于攝像頭背立面。3.2關(guān)鍵點(diǎn)keypoint影響人體姿態(tài)的各個關(guān)節(jié)點(diǎn)稱為人體關(guān)鍵點(diǎn)。3.3互遮擋inter-occluded需要標(biāo)注的同一類物體之間的遮擋關(guān)系稱為互遮擋。3.4可見visible需要標(biāo)注的目標(biāo)處于攝像頭非背立面且無遮擋稱為可見。3.5可預(yù)測predictable需要標(biāo)注的目標(biāo)處于攝像頭非背立面且被遮擋，但是可以通過參照點(diǎn)或者其他部位估計出其位置。3.6輪廓silhouette指構(gòu)成人體或者物體外緣的線條稱為輪廓。3.7人體姿態(tài)估計humanposeestimation根據(jù)輸入圖像或視頻計算其中人體各個部位的狀態(tài)，部位狀態(tài)通常由人體關(guān)節(jié)點(diǎn)的位置坐標(biāo)和置信度表示。3.83DB21/TXXXX—2021攝像頭背立面backelevationofcamera以教室中攝像頭的位置和人體坐姿為參照，二維圖像中人體和物體不可見的一面為攝像頭背立面。3.9攝像頭非背立面non-backelevationofcamera以教室中攝像頭的位置和人體坐姿為參照，二維圖像中人體和物體可見的一面為攝像頭非背立面。3.10它遮擋other–occluded其它類物體遮擋了需要標(biāo)注的目標(biāo)稱為它遮擋。3.11無遮擋unoccluded需要標(biāo)注的人體部位或者物體未被其他人體或物體遮擋。4教室內(nèi)人體標(biāo)注要求4.1通則教室內(nèi)人體標(biāo)注應(yīng)標(biāo)出圖像中對分析人體行為具有關(guān)鍵意義的信息，包括人體輪廓、人體關(guān)鍵點(diǎn)和手部、頭部。4.2人體輪廓標(biāo)注要求4.2.1基本要求人體輪廓的標(biāo)注樣式：從可見人體的邊緣上選取若干采樣點(diǎn)，采樣點(diǎn)盡量包括所有拐點(diǎn)，連接相鄰采樣點(diǎn)擬合人體輪廓，最后首尾相連構(gòu)成閉環(huán)，并記錄采樣點(diǎn)坐標(biāo)序列。標(biāo)注人體輪廓時要保證輪廓的內(nèi)部為要標(biāo)注的人體；若待標(biāo)注對象處于圖像邊緣，應(yīng)盡量靠近圖像內(nèi)部標(biāo)注，不應(yīng)標(biāo)注在圖像邊緣處或外部。人體輪廓標(biāo)注應(yīng)找出人體的最大連通部分，標(biāo)注后的人體輪廓曲線應(yīng)構(gòu)成一個閉環(huán)，且不可交叉。根據(jù)被拍攝目標(biāo)的遮擋關(guān)系，本文件分別從無遮擋、互遮擋和它遮擋三種情況給出人體輪廓的標(biāo)注樣式4.2.2人體輪廓無遮擋標(biāo)注無遮擋表示沒有人或物體遮擋需要標(biāo)注的人體目標(biāo)，圖像中人體目標(biāo)基本可見。按輪廓標(biāo)注樣式對人體輪廓進(jìn)行標(biāo)注即可。標(biāo)注樣式如圖1和圖2所示。4DB21/TXXXXX—2021圖1無遮擋人體輪廓標(biāo)注（1）圖2無遮擋人體輪廓標(biāo)注（2）4.2.3人體輪廓互遮擋標(biāo)注互遮擋是指由于多個人體目標(biāo)在圖像中部分重疊，導(dǎo)致待標(biāo)注的人體目標(biāo)部分不可見，這種情況下只需對可見的人體部分進(jìn)行標(biāo)注。特別規(guī)定：標(biāo)注時應(yīng)將衣服包含在人體輪廓線內(nèi)；應(yīng)將凸出的頭發(fā)或飾品排除在輪廓外，保持頭部輪廓盡量平滑并將其擬合成圓弧形。標(biāo)注樣式如圖3、圖4和5所示。5DB21/TXXXX—2021圖3互遮擋人體輪廓標(biāo)注（1）圖4互遮擋人體輪廓標(biāo)注（2）圖5互遮擋人體輪廓標(biāo)注（3）4.2.4人體輪廓它遮擋標(biāo)注DB21/TXXXXX—2021它遮擋是指桌子、試卷或者其他物體遮擋了待標(biāo)注的人體目標(biāo)。當(dāng)人體圖像被遮擋的面積較大，無法通過人體結(jié)構(gòu)特征推測被遮擋人體部位的位置時，應(yīng)只需標(biāo)注可見的人體部分，標(biāo)注樣式如圖6-7所示。當(dāng)遮擋物比較細(xì)小不影響人體的可見性時，應(yīng)將其忽略。標(biāo)注樣式如圖8、圖9所示，圖中的窗框和桌腿遮擋了待標(biāo)注人體目標(biāo)的胳膊和腿，但是可以通過人體連通性完整的標(biāo)注出這些部位的輪廓。標(biāo)注時人手中的紙、包等物品不屬于人體輪廓，標(biāo)注樣式如圖10所示，圖中考生手中的紙張在標(biāo)注時應(yīng)被排除在人體輪廓之外。圖6它遮擋人體輪廓標(biāo)注（1）圖7它遮擋人體輪廓標(biāo)注（2）6圖8它遮擋人體輪廓標(biāo)注（3）7DB21/TXXXX—2021圖9它遮擋人體輪廓標(biāo)注（4）圖10它遮擋人體輪廓標(biāo)注（5）4.3人體關(guān)鍵點(diǎn)標(biāo)注要求4.3.1基本要求關(guān)鍵點(diǎn)是人體圖像中比較明顯的標(biāo)記點(diǎn)或關(guān)節(jié)點(diǎn)。標(biāo)注過程中應(yīng)明確人體的各個關(guān)鍵點(diǎn)的位置和該點(diǎn)的可見度。關(guān)鍵點(diǎn)(x,y)為圖像中的二維坐標(biāo)，可見度v∈{0,1,2}。其中，可見度v=0表示這個關(guān)鍵點(diǎn)不可見且不可預(yù)測，無法標(biāo)注，此時x=y=0；可見度v=1表示這個關(guān)鍵點(diǎn)不可見，但是可以通過預(yù)測標(biāo)注，(x,y)取關(guān)鍵點(diǎn)的預(yù)測坐標(biāo)值；可見度v=2表示該關(guān)鍵點(diǎn)可見可標(biāo)注，(x,y)取關(guān)鍵點(diǎn)的實際坐標(biāo)值。本文件共設(shè)置了17個需標(biāo)注的關(guān)鍵點(diǎn)，并約定了其在圖像中標(biāo)注的顏色，如表1所示：8DB21/TXXXXX—2021表1人體關(guān)鍵點(diǎn)及標(biāo)注樣式表RGB1002003450060708900特別說明，下列情況無需標(biāo)注：a)關(guān)鍵點(diǎn)不在人體輪廓內(nèi)；b)鼻子、眼睛和耳朵關(guān)鍵點(diǎn)處于攝像頭背立面；c)鼻子、眼睛、耳朵、肩部、肘部、腕部、髖部、膝部和踝部關(guān)鍵點(diǎn)不可預(yù)測。眼睛關(guān)鍵點(diǎn)和耳朵關(guān)鍵點(diǎn)的標(biāo)注方式一致，將其統(tǒng)稱為頭部。關(guān)鍵點(diǎn)的標(biāo)注以目標(biāo)人體正面朝向為正方向，即根據(jù)人體實際的左右方向標(biāo)注人體的左右軀體。人物所穿著貼身衣服為身體一部分，人體關(guān)鍵點(diǎn)標(biāo)注模型如圖11和圖12所示。9DB21/TXXXX—2021圖11人體關(guān)鍵點(diǎn)示意圖圖12教室中真人標(biāo)注4.3.2鼻子關(guān)鍵點(diǎn)4.3.2.1基本要求標(biāo)注位置應(yīng)為鼻子的幾何中心點(diǎn)。4.3.2.2鼻子關(guān)鍵點(diǎn)可見DB21/TXXXXX—2021鼻子部位完全可見或部分可見時，關(guān)鍵點(diǎn)可見，可見度值應(yīng)為2。完全可見的標(biāo)注樣式如圖13和14所示；部分可見的標(biāo)注樣式如圖15所示，圖中鼻子被口罩部分遮擋但基本可見，標(biāo)注時可以根據(jù)口罩和鼻子的位置，推測出關(guān)鍵點(diǎn)的位置。圖13鼻子關(guān)鍵點(diǎn)可見標(biāo)注（1）圖14鼻子關(guān)鍵點(diǎn)可見標(biāo)注（2）圖15鼻子關(guān)鍵點(diǎn)可見標(biāo)注（3）DB21/TXXXX—20214.3.2.3鼻子關(guān)鍵點(diǎn)可預(yù)測鼻子關(guān)鍵點(diǎn)可預(yù)測是指鼻子在圖像中不是明顯可見但可預(yù)測出其位置，關(guān)鍵點(diǎn)的可見度值為1。本文件按以下三種情況對鼻子關(guān)鍵點(diǎn)的位置進(jìn)行預(yù)測：a)人體面部可見但鼻子部位完全被遮擋，此時將關(guān)鍵點(diǎn)標(biāo)注在遮擋物的適當(dāng)位置上，標(biāo)注樣式如b)人體面部部分可見，此時將關(guān)鍵點(diǎn)標(biāo)注在面部中心偏下位置，標(biāo)注樣式如圖17所示；c)人體面部完全不可見，此時需推測面部平面位置并根據(jù)頭部朝向確定鼻子關(guān)鍵點(diǎn)的位置，標(biāo)注樣式如圖18所示。圖中人物臉部被完全遮擋，標(biāo)注時首先根據(jù)坐姿推測出臉部平面的位置，再通過脖子與頭部中心的位置推測頭部的轉(zhuǎn)向情況，完成關(guān)鍵點(diǎn)的標(biāo)注。圖16鼻子關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（1）圖17鼻子關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（2）圖18鼻子關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（3）11DB21/TXXXXX—20214.3.2.4鼻子關(guān)鍵點(diǎn)不可預(yù)測鼻子位置不可預(yù)測時關(guān)鍵點(diǎn)無需標(biāo)注，關(guān)鍵點(diǎn)的可見度值為0。鼻子關(guān)鍵點(diǎn)不可預(yù)測分為以下三種情況：a)由于攝像頭像素過低導(dǎo)致無法看清楚人臉的轉(zhuǎn)向情況，無法預(yù)測關(guān)鍵點(diǎn)的位置，標(biāo)注樣式如圖19所示；b)人體被遮擋導(dǎo)致鼻子不在所標(biāo)注的輪廓線內(nèi)，關(guān)鍵點(diǎn)無需預(yù)測，標(biāo)注樣式如圖20所示；c)鼻子處于攝像頭背立面，關(guān)鍵點(diǎn)不可預(yù)測，標(biāo)注樣式如圖21所示。圖19鼻子關(guān)鍵點(diǎn)無法預(yù)測標(biāo)注圖20鼻子關(guān)鍵點(diǎn)不在輪廓線內(nèi)標(biāo)注DB21/TXXXX—2021圖21鼻子關(guān)鍵點(diǎn)處于攝像頭背立面標(biāo)注4.3.3頭部關(guān)鍵點(diǎn)4.3.3.1基本要求頭部主要包括左眼、右眼、左耳和右耳4個關(guān)鍵點(diǎn)，標(biāo)注位置為各個部位的幾何中心點(diǎn)，眼睛關(guān)鍵點(diǎn)的位置為眼球中心，耳朵關(guān)鍵點(diǎn)的位置為耳洞中心。人體處于攝像頭非背立面的情況下，對以上關(guān)鍵點(diǎn)進(jìn)行標(biāo)注。4.3.3.2頭部關(guān)鍵點(diǎn)可見眼睛和耳朵完全可見或部分可見情況下，可依次標(biāo)出可見關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)的可見度值為2。圖22中的男生左右眼和左右耳清晰可見，可直接標(biāo)注；圖23中男生左右眼眉可見，左右眼關(guān)鍵點(diǎn)標(biāo)在眼眉下邊緣的眼球上，左右耳關(guān)鍵點(diǎn)標(biāo)注在耳朵輪廓中心點(diǎn)位置。圖22頭部關(guān)鍵點(diǎn)可見標(biāo)注（1）圖23頭部關(guān)鍵點(diǎn)可見標(biāo)注（2）4.3.3.3頭部關(guān)鍵點(diǎn)可預(yù)測頭部關(guān)鍵點(diǎn)可預(yù)測是指當(dāng)關(guān)鍵點(diǎn)在圖像中處于攝像頭非背立面且被其他物體完全遮擋，或由于像素DB21/TXXXXX—2021過低導(dǎo)致關(guān)鍵點(diǎn)無法從圖像中清晰看到時，可以根據(jù)其他部位或者參照物（如眼鏡、口罩等）估計出該關(guān)鍵點(diǎn)的位置。圖24、圖25中，人物佩戴了眼鏡，可將眼鏡作為參照物推測出眼睛關(guān)鍵點(diǎn)位置；圖26中無參照物，可以通過相鄰部位推測出耳朵關(guān)鍵點(diǎn)的位置。圖24頭部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（1）圖25頭部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（2）圖26頭部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（3）4.3.3.4頭部關(guān)鍵點(diǎn)不可預(yù)測頭部關(guān)鍵點(diǎn)不可預(yù)測可以分為四種情況：DB21/TXXXX—2021a)由于攝像頭像素過低無法看清楚人臉的轉(zhuǎn)向情況，導(dǎo)致關(guān)鍵點(diǎn)位置無法預(yù)測；b)人體被遮擋導(dǎo)致關(guān)鍵點(diǎn)不可預(yù)測；c)關(guān)鍵點(diǎn)不在所標(biāo)注的輪廓線內(nèi)；d)關(guān)鍵點(diǎn)處于攝像頭背立面。以上情況頭部關(guān)鍵點(diǎn)無需標(biāo)注，關(guān)鍵點(diǎn)的可見度值為0，標(biāo)注樣式如圖27、圖28、圖29和圖30所示。圖27頭部關(guān)鍵點(diǎn)不可預(yù)測標(biāo)注（1）圖29頭部關(guān)鍵點(diǎn)不可預(yù)測標(biāo)注（3）4.3.4肩部關(guān)鍵點(diǎn)圖28頭部關(guān)鍵點(diǎn)不可預(yù)測標(biāo)注（2）圖30頭部關(guān)鍵點(diǎn)不可預(yù)測標(biāo)注（4）4.3.4.1基本要求肩部包括左肩和右肩兩個關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)標(biāo)注位置為肩關(guān)節(jié)中心點(diǎn)。本文件分別從可見、可預(yù)測和不可預(yù)測三種情況給出標(biāo)注樣式。由于需要通過肩部關(guān)鍵點(diǎn)確定人體整體位置，因此當(dāng)肩部關(guān)鍵點(diǎn)不可見時應(yīng)盡可能對其位置進(jìn)行預(yù)測。4.3.4.2肩部關(guān)鍵點(diǎn)可見肩部在圖像中清晰可見時，直接標(biāo)注即可，關(guān)鍵點(diǎn)可見度值為2。肩部可見標(biāo)注樣式如圖31所示。DB21/TXXXXX—2021圖31肩部關(guān)鍵點(diǎn)可見標(biāo)注4.3.4.3肩部關(guān)鍵點(diǎn)可預(yù)測肩部關(guān)鍵點(diǎn)可預(yù)測是指由于攝像頭的角度不同，有些情況下只能見到一側(cè)肩部，而需要對另一側(cè)肩部進(jìn)行預(yù)測，預(yù)測獲得關(guān)鍵點(diǎn)可見度值為1。標(biāo)注樣式如圖32、圖33所示。圖中只能看到左（右）肩的關(guān)鍵點(diǎn)，可以按如下方法進(jìn)行預(yù)測：如果右（左）肘可見，首先找到右（左）肘的位置，根據(jù)右（左）肘位置沿著上臂向上繪制一條直線，然后在左（右）肩部與脖子中心繪制一條直線（特別提示：可以通過人體坐姿繪制此條線，若為正坐姿則此連接線應(yīng)與桌子的邊線平行，若坐姿不正可根據(jù)身體轉(zhuǎn)向進(jìn)行方向調(diào)整），兩條線的相交點(diǎn)即為預(yù)測的右（左）肩部的關(guān)鍵點(diǎn)。圖32肩部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（1）圖33肩部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（2）DB21/TXXXX—20214.3.4.4肩部關(guān)鍵點(diǎn)不可預(yù)測肩部關(guān)鍵點(diǎn)不可預(yù)測是指由于攝像頭的角度等原因，肩部被其他物體完全遮擋無法推測位置，或無法找到兩條符合上一節(jié)要求的直線，這兩種情況下關(guān)鍵點(diǎn)的可見度值為0。肩部不可預(yù)測標(biāo)注樣式如圖34、圖35所示。圖34肩部關(guān)鍵點(diǎn)不可預(yù)測標(biāo)注（1）圖35肩部關(guān)鍵點(diǎn)不可預(yù)測標(biāo)注（2）4.3.5肘部關(guān)鍵點(diǎn)4.3.5.1基本要求肘部包括左肘和右肘兩個關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)標(biāo)注位置為肘部中心點(diǎn)。下面分別從可見、可預(yù)測和不可預(yù)測三種情況給出標(biāo)注樣式。4.3.5.2肘部關(guān)鍵點(diǎn)可見肘部在圖像中完全可見時可直接在關(guān)節(jié)中心點(diǎn)標(biāo)注，關(guān)鍵點(diǎn)的可見度值為2。肘部關(guān)節(jié)都可見的標(biāo)注樣式如圖36-37所示。DB21/TXXXXX—2021圖36肘部關(guān)鍵點(diǎn)可見標(biāo)注（1）圖37肘部關(guān)鍵點(diǎn)可見標(biāo)注（2）4.3.5.3肘部關(guān)鍵點(diǎn)可預(yù)測肘部關(guān)鍵點(diǎn)可預(yù)測是指肘部被完全遮擋，但是可通過相鄰部位推測其位置，關(guān)鍵點(diǎn)的可見度值為1。圖38中人物的右肘不可見，但可以根據(jù)右臂的方向和位置進(jìn)行推測。圖39中，右肘被左手遮擋，可根據(jù)人體結(jié)構(gòu)推測出其位置；左肘被外套遮擋，可根據(jù)左手臂的方向和位置推測出左肘關(guān)鍵點(diǎn)的位置。圖38肘部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（1）DB21/TXXXX—2021圖39肘部關(guān)鍵點(diǎn)可預(yù)測注（2）4.3.5.4肘部關(guān)鍵點(diǎn)不可預(yù)測肘部關(guān)鍵點(diǎn)不可預(yù)測是指肘部完全被遮擋且無法推測出具體位置，這種情況關(guān)鍵點(diǎn)的可見度值為0。4.3.6腕部關(guān)鍵點(diǎn)4.3.6.1基本要求腕部包括左腕和右腕兩個關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)標(biāo)注位置為腕部中心點(diǎn)。4.3.6.2腕部關(guān)鍵點(diǎn)可見當(dāng)腕部在圖像中完全可見時可直接進(jìn)行標(biāo)注，也可以通過手部推測出手腕的位置，可見度值為2。特別規(guī)定：手表對手腕的遮擋可以忽略，此時關(guān)鍵點(diǎn)的狀態(tài)為可見。腕部可見標(biāo)注樣式如圖40所示。圖40腕部關(guān)鍵點(diǎn)可見標(biāo)注DB21/TXXXXX—20214.3.6.3腕部關(guān)鍵點(diǎn)可預(yù)測腕部關(guān)鍵點(diǎn)可預(yù)測是指腕部在被完全遮擋的情況下，可以根據(jù)其他部位推測出該部位的位置，關(guān)鍵點(diǎn)的可見度值為1。腕部可預(yù)測標(biāo)注樣式如圖41所示，圖中右腕的位置可根據(jù)右手及右肘的位置進(jìn)行推測。圖41腕部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注4.3.6.4腕部關(guān)鍵點(diǎn)不可預(yù)測腕部關(guān)鍵點(diǎn)不可預(yù)測是指腕部完全被遮擋且無法推測其位置，關(guān)鍵點(diǎn)的可見度值為0。4.3.7髖部關(guān)鍵點(diǎn)4.3.7.1基本要求髖部包括左髖和右髖兩個關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)標(biāo)注位置為髖部中心點(diǎn)，即軀干和大腿部位分界線的中心點(diǎn)。下面分別從可見、可預(yù)測和不可預(yù)測三種情況給出標(biāo)注樣式。4.3.7.2髖部關(guān)鍵點(diǎn)可見髖部關(guān)鍵點(diǎn)可見是指髖部在圖像中可見，在部位分界線中心點(diǎn)進(jìn)行標(biāo)注即可，關(guān)鍵點(diǎn)的可見度值為2，標(biāo)注樣式如圖42、圖43所示。DB21/TXXXX—2021圖42髖部關(guān)鍵點(diǎn)可見標(biāo)注（1）圖43髖部關(guān)鍵點(diǎn)可見標(biāo)注（2）4.3.7.3髖部關(guān)鍵點(diǎn)可預(yù)測髖部關(guān)鍵點(diǎn)可預(yù)測是指髖部完全被遮擋或無法看清身體部位明顯分界線，可以通過其他可見的身體部位推測出髖部關(guān)鍵點(diǎn)的位置，關(guān)鍵點(diǎn)的可見度值為1，標(biāo)注樣式如圖44所示，圖中左髖部被左臂遮擋，可以通過可見的右髖位置以及腹部方位來推測關(guān)鍵點(diǎn)的位置。圖45中未見明顯分界線，可以通過其他可見的身體部位推測出髖部關(guān)鍵點(diǎn)的位置。DB21/TXXXXX—2021圖44髖部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（1）圖45髖部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注（2）4.3.7.4髖部關(guān)鍵點(diǎn)不可預(yù)測髖部關(guān)鍵點(diǎn)不可預(yù)測是指髖部完全被遮擋且無法推測出具體位置，關(guān)鍵點(diǎn)的可見度值為0。4.3.8膝部關(guān)鍵點(diǎn)4.3.8.1基本要求膝部關(guān)鍵點(diǎn)包括左膝和右膝兩個關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)標(biāo)注位置為膝部中心點(diǎn)，即大小腿分界線中心點(diǎn)。下面分別從可見、可預(yù)測和不可預(yù)測三種情況給出標(biāo)注樣式。4.3.8.2膝部關(guān)鍵點(diǎn)可見膝部關(guān)鍵點(diǎn)可見是指膝部在圖像中完全可見，在部位分界線中心點(diǎn)進(jìn)行標(biāo)注即可，關(guān)鍵點(diǎn)的可見度值為2。標(biāo)注樣式如圖46所示。DB21/TXXXX—2021圖46膝部關(guān)鍵點(diǎn)可見標(biāo)注4.3.8.3膝部關(guān)鍵點(diǎn)可預(yù)測膝部關(guān)鍵點(diǎn)可預(yù)測是指關(guān)鍵點(diǎn)被完全遮擋或身體部位分界線不是清晰可見，但可通過其他可見的身體部位推測出其位置，關(guān)鍵點(diǎn)的可見度值為1。標(biāo)注樣式如圖47所示，圖中膝部不可見，膝部以下的部位可見，則可以根據(jù)小腿的位置推測出膝關(guān)節(jié)所在的位置。圖47膝部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注4.3.8.4膝部關(guān)鍵點(diǎn)不可預(yù)測膝部關(guān)鍵點(diǎn)不可預(yù)測是指膝部完全被遮擋且無法推測出具體位置，關(guān)鍵點(diǎn)的可見度值為0。4.3.9踝部關(guān)鍵點(diǎn)4.3.9.1基本要求踝部關(guān)鍵點(diǎn)包括左踝和右踝兩個關(guān)鍵點(diǎn)，關(guān)鍵點(diǎn)標(biāo)注位置為踝部中心點(diǎn)，即小腿和腳部分界線的中心點(diǎn)。下面分別從可見、可預(yù)測和不可預(yù)測三種情況給出標(biāo)注樣式。DB21/TXXXXX—20214.3.9.2踝部關(guān)鍵點(diǎn)可見踝部關(guān)鍵點(diǎn)可見是指踝部在圖像中完全可見，在部位分界線中心點(diǎn)進(jìn)行標(biāo)注即可，關(guān)鍵點(diǎn)的可見度值為2，標(biāo)注樣式如圖48、圖49所示。圖48踝部關(guān)鍵點(diǎn)可見標(biāo)注（1）圖49踝部關(guān)鍵點(diǎn)可見標(biāo)注（2）4.3.9.3踝部關(guān)鍵點(diǎn)可預(yù)測踝關(guān)節(jié)可預(yù)測是指關(guān)鍵點(diǎn)被遮擋或身體部位分界線不是清晰可見，可根據(jù)腿部或腳部的位置和方向預(yù)測出踝關(guān)節(jié)的位置，關(guān)鍵點(diǎn)的可見度值為1。標(biāo)注樣式如圖50所示，圖中踝部關(guān)鍵點(diǎn)不可見，但可通過腿部與腳部位置推測出關(guān)鍵點(diǎn)所在位置。DB21/TXXXX—2021圖50踝部關(guān)鍵點(diǎn)可預(yù)測標(biāo)注4.3.9.4踝部關(guān)鍵點(diǎn)不可預(yù)測踝部關(guān)鍵點(diǎn)不可預(yù)測是指踝部完全被遮擋且無法推測出具體位置，這種情況下關(guān)鍵點(diǎn)的可見度值為4.4手部頭部標(biāo)注要求4.4.1基本要求為了更精確的識別動作，應(yīng)標(biāo)注出人體的左手、右手和頭部，采用外接矩形的形式進(jìn)行標(biāo)注，外接矩形分別將左手、右手和頭部完全框住。下面分別從部位無遮擋、有遮擋可標(biāo)注和有遮擋不可標(biāo)注三種情況給出標(biāo)注樣式。三個部位的標(biāo)注樣式設(shè)置如下：頭部：紅色外接矩形；左手：綠色外接矩形；右手：藍(lán)色外接矩形。4.4.2手部頭部無遮擋標(biāo)注當(dāng)待標(biāo)注部位在圖像中可見時，直接采用相應(yīng)的外接矩形進(jìn)行標(biāo)注即可，標(biāo)注樣式如圖51所示。圖51手部頭部無遮擋標(biāo)注4.4.3手部頭部有遮擋可標(biāo)注DB21/TXXXXX—2021由于攝像頭拍攝角度等原因，人體的頭部或手部可能被其他人體部位或物體遮擋，此時可根據(jù)可見的頭部或手部推測被遮擋的部位，也可通過其他相鄰部位的信息推測出待標(biāo)注部位的位置。標(biāo)注樣式如圖52所示，圖中左手不可見，但可根據(jù)可見的部位信息推測其位置。圖52手部頭部有遮擋可標(biāo)注4.4.4手部頭部有遮擋不可標(biāo)注由于攝像頭拍攝角度等原因，人體的頭部或手部可能被其他人體部位或物體遮擋，如果無法根據(jù)可見的頭部或手部推測出不可見部位的位置，也不能通過相鄰部位信息推測出待標(biāo)注部位的位置，則不進(jìn)行標(biāo)注，標(biāo)注樣式如圖53所示，圖中頭部和右手可見，左手在桌面以下無需標(biāo)注。圖53手部頭部有遮擋不可標(biāo)注5教室內(nèi)物體標(biāo)注要求5.1通則需要標(biāo)注的教室內(nèi)物體包括：桌面、門和窗戶，標(biāo)注形式為物體的外圍輪廓，輪廓的采樣點(diǎn)數(shù)不少于4個，且只能有一個閉合區(qū)域。5.2桌面輪廓標(biāo)注要求5.2.1基本要求DB21/TXXXX—2021為了獲得桌面的范圍和位置，需要標(biāo)注的桌面包括考生的桌面及教室前面的講臺桌面，兩種輪廓標(biāo)注要求相同。標(biāo)注桌面輪廓時，應(yīng)只標(biāo)注桌面的最大可見連通部分，并且標(biāo)注后的輪廓只能有一個閉合區(qū)域。按遮擋關(guān)系可分為無遮擋標(biāo)注和它遮擋標(biāo)注兩種情況。5.2.2桌面無遮擋標(biāo)注無遮擋表示要標(biāo)注的桌面未被明顯遮擋或部分遮擋但可預(yù)測，標(biāo)注樣例如圖54、圖55和圖56所示。圖54中桌面四角清晰可見，可直接標(biāo)注；圖55中桌面四角清晰可見，桌面中間放有物體，但未阻斷連接四個桌角的平行四邊形閉環(huán)，可直接標(biāo)注；圖56中僅有一個桌角被部分遮擋但可預(yù)測出該桌角的位置，可直接標(biāo)注。圖54桌面無遮擋標(biāo)注（1）圖55桌面無遮擋標(biāo)注（2）圖56桌面無遮擋標(biāo)注（3）27DB21/TXXXXX—20215.2.3桌面它遮擋標(biāo)注它遮擋是指桌面被其他人或物體遮擋（試卷除外當(dāng)遮擋面積較大時，標(biāo)注桌面的可見部分即可。若桌子被其他人或物體遮擋分成多個可見部分則標(biāo)注面積最大的可見連通部分?？忌淖烂姹黄渌矬w遮擋的標(biāo)注樣式如圖57-59所示。圖57桌面它遮擋標(biāo)注（1）圖58桌面它遮擋標(biāo)注（2）圖59桌面它遮擋標(biāo)注（3）DB21/TXXXX—20215.3門輪廓標(biāo)注要求5.3.1基本要求為了獲得門的范圍和位置進(jìn)而更好地進(jìn)行跟蹤和預(yù)測人的行為，標(biāo)注門輪廓時應(yīng)標(biāo)注門的最大可見連通部分，并且標(biāo)注后的輪廓只能有一個閉合區(qū)域。5.3.2門輪廓標(biāo)注在標(biāo)注門的輪廓時，沿著圖像中可見的門框標(biāo)注成一個閉環(huán)即可。如果出現(xiàn)其他人物或者他物體遮擋時，在門的范圍內(nèi)