Kinect-原理及開(kāi)發(fā)心得課件

Kinect原理及開(kāi)發(fā)心得Kinect原理及開(kāi)發(fā)心得工作流程kinect傳感器手勢(shì)聲音位置主機(jī)kinectsdk應(yīng)用程序顏色數(shù)據(jù)流深度數(shù)據(jù)流聲音數(shù)據(jù)流2工作流程kinect傳感器手勢(shì)聲音位置主機(jī)kinectsd安裝環(huán)境硬件需求：2.66-GHz

DirectX?9.0c

2GBofRAM

軟件需求：開(kāi)發(fā)軟件：MicrosoftVisualStudio?2012ExpressorotherVisualStudio2012edition開(kāi)發(fā)環(huán)境：Microsoft.NETFramework4.5

KinectforWindowsSDK的下載地址：/en-us/kinectforwindows//fwlink/?LinkID=323589操作系統(tǒng)：Windows7(x86orx64)3安裝環(huán)境3安裝步驟1.硬件安裝下面的圖片是Kinect和ACAdapter/PowerSupply：4安裝步驟1.硬件安裝4軟件安裝步驟2.KinectSDK安裝KinectSDK的安裝過(guò)程非常簡(jiǎn)單，無(wú)需任何設(shè)置，直接安裝即可。5軟件安裝步驟2.KinectSDK安裝5安裝步驟3.環(huán)境測(cè)試KinectSDK安裝完成后，我們將Kinect轉(zhuǎn)接口的USB接口插入到PC中。PC會(huì)發(fā)現(xiàn)新硬件，并且自動(dòng)查找驅(qū)動(dòng)程序安裝。下圖是安裝完成后的示意圖：6安裝步驟3.環(huán)境測(cè)試6安裝步驟4.測(cè)試程序我們打開(kāi)KinectSDK中自帶的SampleSkeletalViewer就可以很方便地檢測(cè)Kinect設(shè)備是否與PC已經(jīng)連接好了。7安裝步驟4.測(cè)試程序7圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？

景深圖8圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？景深圖8NUI骨骼跟蹤kinect根據(jù)像素的變化識(shí)別出20個(gè)人體關(guān)鍵點(diǎn)根據(jù)20個(gè)關(guān)鍵點(diǎn)生成人體骨骼系統(tǒng)在生成20個(gè)骨骼關(guān)鍵點(diǎn)后，kinect有一個(gè)跟蹤模塊自動(dòng)跟蹤20個(gè)點(diǎn)的坐標(biāo)位置骨骼跟蹤系統(tǒng)：同時(shí)識(shí)別6個(gè)人，只有2個(gè)人能進(jìn)行動(dòng)作追蹤9NUI骨骼跟蹤kinect根據(jù)像素的變化識(shí)別出20個(gè)人體關(guān)圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流10圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流10helloworld獲取骨骼流從骨骼流中獲取20個(gè)關(guān)鍵點(diǎn)動(dòng)作處理11helloworld獲取骨骼流從骨骼流中獲取動(dòng)作處理11獲取骨骼流人體骨骼數(shù)據(jù)流2個(gè)tracked狀態(tài)人體，包括20個(gè)點(diǎn)的精準(zhǔn)捕捉初始化骨骼數(shù)據(jù)流//Linq語(yǔ)法，查找離Kinect最近的、被跟蹤的骨骼SkeletonclosestSkeleton=(fromsinallSkeletonswheres.TrackingState==SkeletonTrackingState.Tracked&&s.Joints[JointType.Head].TrackingState==JointTrackingState.Trackedselects).OrderBy(s=>s.Joints[JointType.Head].Position.Z).FirstOrDefault();returnclosestSkeleton;

12獲取骨骼流人體骨骼數(shù)據(jù)流1220個(gè)關(guān)鍵點(diǎn)動(dòng)作處理SkeletonPointhead=s.Joints[JointType.Head].Position;頭部坐標(biāo)SkeletonPointleftshoulder=s.Joints[JointType.ShoulderLeft].Position;左肩坐標(biāo)SkeletonPointleftHand=s.Joints[JointType.HandLeft].Position;左手坐標(biāo)//左手舉起boolisLeftHandRaised=(leftHand.Y-leftshoulder.Y)>0.2;//左手伸出boolisLeftHandStretched=(leftshoulder.X-leftHand.X)>0.4;1320個(gè)關(guān)鍵點(diǎn)動(dòng)作處理13感謝您的關(guān)注感謝您的關(guān)注Kinect原理及開(kāi)發(fā)心得Kinect原理及開(kāi)發(fā)心得工作流程kinect傳感器手勢(shì)聲音位置主機(jī)kinectsdk應(yīng)用程序顏色數(shù)據(jù)流深度數(shù)據(jù)流聲音數(shù)據(jù)流16工作流程kinect傳感器手勢(shì)聲音位置主機(jī)kinectsd安裝環(huán)境硬件需求：2.66-GHz

DirectX?9.0c

2GBofRAM

軟件需求：開(kāi)發(fā)軟件：MicrosoftVisualStudio?2012ExpressorotherVisualStudio2012edition開(kāi)發(fā)環(huán)境：Microsoft.NETFramework4.5

KinectforWindowsSDK的下載地址：/en-us/kinectforwindows//fwlink/?LinkID=323589操作系統(tǒng)：Windows7(x86orx64)17安裝環(huán)境3安裝步驟1.硬件安裝下面的圖片是Kinect和ACAdapter/PowerSupply：18安裝步驟1.硬件安裝4軟件安裝步驟2.KinectSDK安裝KinectSDK的安裝過(guò)程非常簡(jiǎn)單，無(wú)需任何設(shè)置，直接安裝即可。19軟件安裝步驟2.KinectSDK安裝5安裝步驟3.環(huán)境測(cè)試KinectSDK安裝完成后，我們將Kinect轉(zhuǎn)接口的USB接口插入到PC中。PC會(huì)發(fā)現(xiàn)新硬件，并且自動(dòng)查找驅(qū)動(dòng)程序安裝。下圖是安裝完成后的示意圖：20安裝步驟3.環(huán)境測(cè)試6安裝步驟4.測(cè)試程序我們打開(kāi)KinectSDK中自帶的SampleSkeletalViewer就可以很方便地檢測(cè)Kinect設(shè)備是否與PC已經(jīng)連接好了。21安裝步驟4.測(cè)試程序7圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？

景深圖22圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？景深圖8NUI骨骼跟蹤kinect根據(jù)像素的變化識(shí)別出20個(gè)人體關(guān)鍵點(diǎn)根據(jù)20個(gè)關(guān)鍵點(diǎn)生成人體骨骼系統(tǒng)在生成20個(gè)骨骼關(guān)鍵點(diǎn)后，kinect有一個(gè)跟蹤模塊自動(dòng)跟蹤20個(gè)點(diǎn)的坐標(biāo)位置骨骼跟蹤系統(tǒng)：同時(shí)識(shí)別6個(gè)人，只有2個(gè)人能進(jìn)行動(dòng)作追蹤23NUI骨骼跟蹤kinect根據(jù)像素的變化識(shí)別出20個(gè)人體關(guān)圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流24圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流10helloworld獲取骨骼流從骨骼流中獲取20個(gè)關(guān)鍵點(diǎn)動(dòng)作處理25helloworld獲取骨骼流從骨骼流中獲取動(dòng)作處理11獲取骨骼流人體骨骼數(shù)據(jù)流2個(gè)tracked狀態(tài)人體，包括20個(gè)點(diǎn)的精準(zhǔn)捕捉初始化骨骼數(shù)據(jù)流//Linq語(yǔ)法，查找離Kinect最近的、被跟蹤的骨骼SkeletonclosestSkeleton=(fromsinallSkeletonswheres.TrackingState==SkeletonTrackingState.Tracked&&s.Joints[JointType.Head].TrackingState==JointTrackingState.Trackedselects).OrderBy(s=>s.Joints[JointType.Head].Position.Z).FirstOrDefault();returnclosestSkeleton;

26獲取骨骼流人體骨骼數(shù)據(jù)流1220個(gè)關(guān)鍵點(diǎn)動(dòng)作處理SkeletonPointhead=s.Joints[JointType.Head].Position;頭部坐標(biāo)SkeletonPointleftshoulder=s.Joints[JointType.ShoulderLeft].Position;左肩坐標(biāo)SkeletonPointleftHand=s.Joints[Jo