38
Kinect for Windowsおよび Depthセンサーの動向 中村 薫 20121220SI2012

Kinect for Windows およびDepthセンサーの動向

Embed Size (px)

DESCRIPTION

2012年12月20日に行われた、第13回 計測自動制御学会 システムインテグレーション部門でお話したスライドです http://www.si-sice.org/si2012/

Citation preview

Page 1: Kinect for Windows およびDepthセンサーの動向

Kinect for WindowsおよびDepthセンサーの動向

中村薫2012年12月20日

SI2012

Page 2: Kinect for Windows およびDepthセンサーの動向

自己紹介中村 薫(なかむら かおる)

http://www.naturalsoftware.jp/

[email protected]

Copyright © 2012 Natural Software.jp All rights reserved. 2

Page 3: Kinect for Windows およびDepthセンサーの動向

アジェンダ

• Kinect界隈の現状と動向

• Depthセンサーの動向

Copyright © 2012 Natural Software.jp All rights reserved. 3

Page 4: Kinect for Windows およびDepthセンサーの動向

KINECT界隈の現状と動向

Copyright © 2012 Natural Software.jp All rights reserved. 4

Page 5: Kinect for Windows およびDepthセンサーの動向

Kinectとは

• Microsoft社が発売しているXbox 360ゲーム機のコントローラー

• ゲームを操作する際に、「コントローラーを持つ必要がない」ことが特長

Copyright © 2012 Natural Software.jp All rights reserved. 5

Page 6: Kinect for Windows およびDepthセンサーの動向

Kinectとは

• 2010年11月にXbox 360のコントローラーとして発売開始

• 2012年01月の時点で1,800万台

• 2012年02月にWindows向けのKinectが発売された(Kinect for Windows)

Copyright © 2012 Natural Software.jp All rights reserved. 6

Page 7: Kinect for Windows およびDepthセンサーの動向

Kinect for Windows

http://msdn.microsoft.com/en-us/library/hh855355.aspx

Copyright © 2012 Natural Software.jp All rights reserved. 7

Page 8: Kinect for Windows およびDepthセンサーの動向

Kinect for Windows

http://msdn.microsoft.com/en-us/library/jj131033.aspx

Copyright © 2012 Natural Software.jp All rights reserved. 8

Page 9: Kinect for Windows およびDepthセンサーの動向

Kinect for Windows の機能

Kinect から送られてくるデータは次の3種類

• Image Stream

• Depth Stream

• Audio Stream

Copyright © 2012 Natural Software.jp All rights reserved. 9

http://msdn.microsoft.com/en-us/library/jj131023.aspx

Page 10: Kinect for Windows およびDepthセンサーの動向

イメージ・ストリーム

Copyright © 2012 Natural Software.jp All rights reserved. 10

Page 11: Kinect for Windows およびDepthセンサーの動向

赤外線画像の取得

Copyright © 2012 Natural Software.jp All rights reserved. 12

Page 12: Kinect for Windows およびDepthセンサーの動向

RGBカメラの設定

Copyright © 2012 Natural Software.jp All rights reserved. 14

Page 13: Kinect for Windows およびDepthセンサーの動向

Depth Stream

• 通常モードでは0.8m-4mを認識

• Nearモードでは0.4m-3mを認識

• 拡張モードで4m以上の認識をサポート

Copyright © 2012 Natural Software.jp All rights reserved. 15

Page 14: Kinect for Windows およびDepthセンサーの動向

拡張された距離データ

Copyright © 2012 Natural Software.jp All rights reserved. 16

Page 15: Kinect for Windows およびDepthセンサーの動向

プレイヤーおよび骨格の追跡

• 6人のプレイヤーを追跡

• そのうち2人までの骨格を追跡

• 拡張された距離データの恩恵はない模様

Copyright © 2012 Natural Software.jp All rights reserved. 17

http://msdn.microsoft.com/en-us/library/hh973074.aspx

Page 16: Kinect for Windows およびDepthセンサーの動向

骨格の追跡

• 通常モードでは20点を追跡

• Seatedモードでは10点を追跡

Copyright © 2012 Natural Software.jp All rights reserved. 18

http://msdn.microsoft.com/en-us/library/hh973077.aspx

Page 17: Kinect for Windows およびDepthセンサーの動向

Audio Stream

• 音声はPCMデータ

• 音源方向はKinectを中心に左右50度ずつ

Copyright © 2012 Natural Software.jp All rights reserved. 19

Page 18: Kinect for Windows およびDepthセンサーの動向

チルトモーター及び加速センサー

可動範囲は上下27度ずつ

Copyright © 2012 Natural Software.jp All rights reserved. 20

http://msdn.microsoft.com/en-us/library/hh973071.aspx

Page 19: Kinect for Windows およびDepthセンサーの動向

顔追跡(Face Tracking)

Copyright © 2012 Natural Software.jp All rights reserved. 21

Page 20: Kinect for Windows およびDepthセンサーの動向

音声認識

Copyright © 2012 Natural Software.jp All rights reserved. 22

Page 21: Kinect for Windows およびDepthセンサーの動向

Kinect Studio

Copyright © 2012 Natural Software.jp All rights reserved. 23

Page 22: Kinect for Windows およびDepthセンサーの動向

仮想マシンをサポート

Copyright © 2012 Natural Software.jp All rights reserved. 24

Page 23: Kinect for Windows およびDepthセンサーの動向

Windows Embedded で Kinect を使う

Kinect for Windows のサポート対象OSにはWindows Embedded が含まれています

Windows EmbeddedStandard 7

Windows EmbeddedPOSReady 7

http://www.microsoft.com/en-us/kinectforwindows/purchase/sensor_setup.aspx

専用機器向けにカスタマイズが可能なOS

POS, デジタルサイネージ等で利用可能

Page 24: Kinect for Windows およびDepthセンサーの動向

KINECT界隈の現状

Copyright © 2012 Natural Software.jp All rights reserved. 26

Page 25: Kinect for Windows およびDepthセンサーの動向

仮想試着

http://www.facebook.com/photo.php?fbid=3392874617478

Copyright © 2012 Natural Software.jp All rights reserved. 29

Page 26: Kinect for Windows およびDepthセンサーの動向

空中ディスプレイCopyright © 2012 Natural Software.jp All rights reserved. 30

Page 27: Kinect for Windows およびDepthセンサーの動向

現実世界へのインタラクション

Copyright © 2012 Natural Software.jp All rights reserved. 31

http://www.naturalsoftware.jp/blog/7906

Page 28: Kinect for Windows およびDepthセンサーの動向

さまざまなDEPTHセンサー

Copyright © 2012 Natural Software.jp All rights reserved. 32

Page 29: Kinect for Windows およびDepthセンサーの動向

さまざまなDepthセンサー

• Depthセンサーの種類と特長

• SDKの種類と特長

Copyright © 2012 Natural Software.jp All rights reserved. 33

Page 30: Kinect for Windows およびDepthセンサーの動向

Kinect for Windows SDK

Copyright © 2012 Natural Software.jp All rights reserved. 34

http://www.youtube.com/watch?v=quGhaggn3cQ

Page 31: Kinect for Windows およびDepthセンサーの動向

OpenNI + PCL

Copyright © 2012 Natural Software.jp All rights reserved. 35

http://www.youtube.com/watch?v=AjjSZufyprU

Page 32: Kinect for Windows およびDepthセンサーの動向

SoftKinetcセンサー+iisu SDK

Copyright © 2012 Natural Software.jp All rights reserved. 36

http://www.youtube.com/watch?v=5LvhdFudp50

Page 33: Kinect for Windows およびDepthセンサーの動向

Intel Perceptual Computing SDK

Copyright © 2012 Natural Software.jp All rights reserved. 37

http://www.itmedia.co.jp/news/articles/1209/12/news031.html

Page 34: Kinect for Windows およびDepthセンサーの動向

時代は指先のインタフェースへ

Copyright © 2012 Natural Software.jp All rights reserved. 38

http://www.youtube.com/watch?v=5LvhdFudp50

Page 35: Kinect for Windows およびDepthセンサーの動向

2013年の目玉(1)

Copyright © 2012 Natural Software.jp All rights reserved. 39https://www.youtube.com/watch?v=_d6KuiuteIAhttps://leapmotion.com/

Page 36: Kinect for Windows およびDepthセンサーの動向

2013年の目玉(2)

Copyright © 2012 Natural Software.jp All rights reserved. 40

http://www.primesense.com/news/honey-i-shrunk-the-sensor/

Page 37: Kinect for Windows およびDepthセンサーの動向

Kinect for WindowsSDK

OpenNI DepthSense SDK DepthSense SDK

PCSDKiisu SDKNITE

デバイスアクセス

ジェスチャーライブラリ

デバイスとSDKの対応

デバイス

kinect-mssdk-openni-bridge

Page 38: Kinect for Windows およびDepthセンサーの動向

用途に合ったセンサーを選択する時代へ

Copyright © 2012 Natural Software.jp All rights reserved. 42