Kinect-原理及開發(fā)心得課件

Kinect原理及開發(fā)心得Kinect原理及開發(fā)心得工作流程kinect傳感器手勢聲音位置主機kinectsdk應(yīng)用程序顏色數(shù)據(jù)流深度數(shù)據(jù)流聲音數(shù)據(jù)流2工作流程kinect傳感器手勢聲音位置主機kinectsd安裝環(huán)境硬件需求：2.66-GHz

DirectX?9.0c

2GBofRAM

軟件需求：開發(fā)軟件：MicrosoftVisualStudio?2012ExpressorotherVisualStudio2012edition開發(fā)環(huán)境：Microsoft.NETFramework4.5

KinectforWindowsSDK的下載地址：/en-us/kinectforwindows//fwlink/?LinkID=323589操作系統(tǒng)：Windows7(x86orx64)3安裝環(huán)境3安裝步驟1.硬件安裝下面的圖片是Kinect和ACAdapter/PowerSupply：4安裝步驟1.硬件安裝4軟件安裝步驟2.KinectSDK安裝KinectSDK的安裝過程非常簡單，無需任何設(shè)置，直接安裝即可。5軟件安裝步驟2.KinectSDK安裝5安裝步驟3.環(huán)境測試KinectSDK安裝完成后，我們將Kinect轉(zhuǎn)接口的USB接口插入到PC中。PC會發(fā)現(xiàn)新硬件，并且自動查找驅(qū)動程序安裝。下圖是安裝完成后的示意圖：6安裝步驟3.環(huán)境測試6安裝步驟4.測試程序我們打開KinectSDK中自帶的SampleSkeletalViewer就可以很方便地檢測Kinect設(shè)備是否與PC已經(jīng)連接好了。7安裝步驟4.測試程序7圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？

景深圖8圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？景深圖8NUI骨骼跟蹤kinect根據(jù)像素的變化識別出20個人體關(guān)鍵點根據(jù)20個關(guān)鍵點生成人體骨骼系統(tǒng)在生成20個骨骼關(guān)鍵點后，kinect有一個跟蹤模塊自動跟蹤20個點的坐標(biāo)位置骨骼跟蹤系統(tǒng)：同時識別6個人，只有2個人能進行動作追蹤9NUI骨骼跟蹤kinect根據(jù)像素的變化識別出20個人體關(guān)圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流10圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流10helloworld獲取骨骼流從骨骼流中獲取20個關(guān)鍵點動作處理11helloworld獲取骨骼流從骨骼流中獲取動作處理11獲取骨骼流人體骨骼數(shù)據(jù)流2個tracked狀態(tài)人體，包括20個點的精準(zhǔn)捕捉初始化骨骼數(shù)據(jù)流//Linq語法，查找離Kinect最近的、被跟蹤的骨骼SkeletonclosestSkeleton=(fromsinallSkeletonswheres.TrackingState==SkeletonTrackingState.Tracked&&s.Joints[JointType.Head].TrackingState==JointTrackingState.Trackedselects).OrderBy(s=>s.Joints[JointType.Head].Position.Z).FirstOrDefault();returnclosestSkeleton;

12獲取骨骼流人體骨骼數(shù)據(jù)流1220個關(guān)鍵點動作處理SkeletonPointhead=s.Joints[JointType.Head].Position;頭部坐標(biāo)SkeletonPointleftshoulder=s.Joints[JointType.ShoulderLeft].Position;左肩坐標(biāo)SkeletonPointleftHand=s.Joints[JointType.HandLeft].Position;左手坐標(biāo)//左手舉起boolisLeftHandRaised=(leftHand.Y-leftshoulder.Y)>0.2;//左手伸出boolisLeftHandStretched=(leftshoulder.X-leftHand.X)>0.4;1320個關(guān)鍵點動作處理13感謝您的關(guān)注感謝您的關(guān)注Kinect原理及開發(fā)心得Kinect原理及開發(fā)心得工作流程kinect傳感器手勢聲音位置主機kinectsdk應(yīng)用程序顏色數(shù)據(jù)流深度數(shù)據(jù)流聲音數(shù)據(jù)流16工作流程kinect傳感器手勢聲音位置主機kinectsd安裝環(huán)境硬件需求：2.66-GHz

DirectX?9.0c

2GBofRAM

軟件需求：開發(fā)軟件：MicrosoftVisualStudio?2012ExpressorotherVisualStudio2012edition開發(fā)環(huán)境：Microsoft.NETFramework4.5

KinectforWindowsSDK的下載地址：/en-us/kinectforwindows//fwlink/?LinkID=323589操作系統(tǒng)：Windows7(x86orx64)17安裝環(huán)境3安裝步驟1.硬件安裝下面的圖片是Kinect和ACAdapter/PowerSupply：18安裝步驟1.硬件安裝4軟件安裝步驟2.KinectSDK安裝KinectSDK的安裝過程非常簡單，無需任何設(shè)置，直接安裝即可。19軟件安裝步驟2.KinectSDK安裝5安裝步驟3.環(huán)境測試KinectSDK安裝完成后，我們將Kinect轉(zhuǎn)接口的USB接口插入到PC中。PC會發(fā)現(xiàn)新硬件，并且自動查找驅(qū)動程序安裝。下圖是安裝完成后的示意圖：20安裝步驟3.環(huán)境測試6安裝步驟4.測試程序我們打開KinectSDK中自帶的SampleSkeletalViewer就可以很方便地檢測Kinect設(shè)備是否與PC已經(jīng)連接好了。21安裝步驟4.測試程序7圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？

景深圖22圖像數(shù)據(jù)流+景深數(shù)據(jù)流=？景深圖8NUI骨骼跟蹤kinect根據(jù)像素的變化識別出20個人體關(guān)鍵點根據(jù)20個關(guān)鍵點生成人體骨骼系統(tǒng)在生成20個骨骼關(guān)鍵點后，kinect有一個跟蹤模塊自動跟蹤20個點的坐標(biāo)位置骨骼跟蹤系統(tǒng)：同時識別6個人，只有2個人能進行動作追蹤23NUI骨骼跟蹤kinect根據(jù)像素的變化識別出20個人體關(guān)圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流24圖像數(shù)據(jù)流+景深數(shù)據(jù)流=骨骼數(shù)據(jù)流10helloworld獲取骨骼流從骨骼流中獲取20個關(guān)鍵點動作處理25helloworld獲取骨骼流從骨骼流中獲取動作處理11獲取骨骼流人體骨骼數(shù)據(jù)流2個tracked狀態(tài)人體，包括20個點的精準(zhǔn)捕捉初始化骨骼數(shù)據(jù)流//Linq語法，查找離Kinect最近的、被跟蹤的骨骼SkeletonclosestSkeleton=(fromsinallSkeletonswheres.TrackingState==SkeletonTrackingState.Tracked&&s.Joints[JointType.Head].TrackingState==JointTrackingState.Trackedselects).OrderBy(s=>s.Joints[JointType.Head].Position.Z).FirstOrDefault();returnclosestSkeleton;

26獲取骨骼流人體骨骼數(shù)據(jù)流1220個關(guān)鍵點動作處理SkeletonPointhead=s.Joints[JointType.Head].Position;頭部坐標(biāo)SkeletonPointleftshoulder=s.Joints[JointType.ShoulderLeft].Position;左肩坐標(biāo)SkeletonPointleftHand=s.Joints[Jo