34
Kinect,RealSenseの概要と さまざまな使い方 2015/09/12@広島工業大学 中村 薫

KinectやRealSenseの概要とさまざまな使い方

Embed Size (px)

Citation preview

Page 1: KinectやRealSenseの概要とさまざまな使い方

Kinect,RealSenseの概要とさまざまな使い方

2015/09/12@広島工業大学

中村 薫

Page 2: KinectやRealSenseの概要とさまざまな使い方

センサー?

Copyright © 2015 Natural Software All rights reserved.

Page 3: KinectやRealSenseの概要とさまざまな使い方

Depthセンサー

Copyright © 2015 Natural Software All rights reserved.

Page 4: KinectやRealSenseの概要とさまざまな使い方

自己紹介

中村 薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発

講演、ハンズオンセミナー

執筆など

Microsoft MVP for Kinect for Windows

http://www.naturalsoftware.jp/

[email protected]

Copyright © 2015 Natural Software All rights reserved.

Page 5: KinectやRealSenseの概要とさまざまな使い方

Copyright © 2015 Natural Software All rights reserved.

Page 6: KinectやRealSenseの概要とさまざまな使い方

Tokyo MotionControl Network

https://www.facebook.com/TokyoMotioncontrolNetwork

Copyright © 2015 Natural Software.jp All rights reserved. 6

Page 7: KinectやRealSenseの概要とさまざまな使い方

Copyright © 2015 Natural Software All rights reserved.

Page 8: KinectやRealSenseの概要とさまざまな使い方

様々な業界から、自分たちの問題を解決する手段に使えそうなアイデア

Copyright © 2015 Natural Software All rights reserved.

Page 9: KinectやRealSenseの概要とさまざまな使い方

大きな流れ・1

Copyright © 2015 Natural Software.jp All rights reserved. 9

Page 10: KinectやRealSenseの概要とさまざまな使い方

大きな流れ・1

Copyright © 2015 Natural Software.jp All rights reserved. 10

Microsoft Intel

Apple Google

Page 11: KinectやRealSenseの概要とさまざまな使い方

大きな流れ・1

Copyright © 2015 Natural Software.jp All rights reserved. 11

Microsoft Intel

Apple Google

Windows Hello

Project Tango

Page 12: KinectやRealSenseの概要とさまざまな使い方

Windows Hello

Copyright © 2015 Natural Software All rights reserved.

https://www.youtube.com/watch?v=yBb76e53hno

Page 13: KinectやRealSenseの概要とさまざまな使い方

Project Tango

Copyright © 2015 Natural Software All rights reserved.

http://www.engadget.com/2015/08/18/google-intel-realsense-tango/

Page 14: KinectやRealSenseの概要とさまざまな使い方

Project Tango

Copyright © 2015 Natural Software All rights reserved.https://twitter.com/warapuri/status/631838671054991360

Page 15: KinectやRealSenseの概要とさまざまな使い方

紹介するDepthセンサー

Copyright © 2015 Natural Software.jp All rights reserved. 15

MicrosoftKinect v2

Intel

Apple Google

Windows Hello

Project Tango

Page 16: KinectやRealSenseの概要とさまざまな使い方

Kinect v2

16Copyright © 2015 Natural Software.jp All rights reserved.

Page 17: KinectやRealSenseの概要とさまざまな使い方

Kinect v2

•2014年10月に正式版リリース

•さまざまなWindows環境に対応• Windowsストア

• Windowsデスクトップ

• Unity

Copyright © 2015 Natural Software.jp All rights reserved.

http://www.microsoftstore.com/store/msjp/ja_JP/pdp/productID.298959900

17

Page 18: KinectやRealSenseの概要とさまざまな使い方

Kinect v2

Color:カラー画像 Depth:距離データ

Body:体の情報(関節など)

Copyright © 2015 Natural Software.jp All rights reserved.

Audio:音声データ

Infrared:赤外線画像

PlayerIndex:プレイヤー番号

18

Page 19: KinectやRealSenseの概要とさまざまな使い方

Kinect v2

Control:ユーザーインタフェース(NUI)

Fusion:3次元モデルの再構築

Face:顔の情報(表情など)

Copyright © 2015 Natural Software.jp All rights reserved.

HD Face:高精度の顔情報(3Dモデルなど)

Speech:音声コマンド認識

Gesture:ユーザー定義のジェスチャー

19

Page 20: KinectやRealSenseの概要とさまざまな使い方

Kinect v2

Kinect Studio:Kinectデータの記録と再生

Visual Gesture Builder:ポーズやジェスチャーの作成

Copyright © 2015 Natural Software.jp All rights reserved.

Kinect v2 Configuration Verifier:

ハードウェアが要求を満たしているかチェックする

20

Page 21: KinectやRealSenseの概要とさまざまな使い方

インテル RealSense テクノロジー

21Copyright © 2015 Natural Software.jp All rights reserved.

Page 22: KinectやRealSenseの概要とさまざまな使い方

インテル RealSense テクノロジー

• 手指や顔の表情を認識できる

• インテル RealSense SDKを利用する

• インテル RealSense カメラが3Dを担当

• コンピューターへの内蔵化が進む

Copyright © 2015 Natural Software.jp All rights reserved.

http://click.intel.com/intelr-realsensetm-developer-kit.html22

Page 23: KinectやRealSenseの概要とさまざまな使い方

インテル RealSense カメラの種類

Copyright © 2015 Natural Software.jp All rights reserved.

https://software.intel.com/en-us/realsense/home

23

Page 24: KinectやRealSenseの概要とさまざまな使い方

インテル RealSense SDK

Color/Depth/IR Stream Facial AnalysisEmotion

Copyright © 2015 Natural Software.jp All rights reserved. 24

Hand and Finger Tracking Gesture and Pose Depth Mask

Page 25: KinectやRealSenseの概要とさまざまな使い方

インテル RealSense SDK

Segmentation Object Tracking(AR) 3D Scan

Copyright © 2015 Natural Software.jp All rights reserved. 25

Speech Recognition Voice Synthesis

"Nothing to say?"

Eye Tracking

Page 26: KinectやRealSenseの概要とさまざまな使い方

事例

Copyright © 2015 Natural Software All rights reserved.

Page 27: KinectやRealSenseの概要とさまざまな使い方

エンタメ

Copyright © 2015 Natural Software All rights reserved.

http://www.naturalsoftware.jp/entry/2014/09/07/120940

Page 28: KinectやRealSenseの概要とさまざまな使い方

認証

Copyright © 2015 Natural Software All rights reserved.

https://www.youtube.com/watch?v=yBb76e53hno

Page 29: KinectやRealSenseの概要とさまざまな使い方

3Dスキャン

Copyright © 2015 Natural Software All rights reserved.

https://www.youtube.com/watch?v=nJOyqaBQg74

Page 30: KinectやRealSenseの概要とさまざまな使い方

3Dスキャン

Copyright © 2015 Natural Software All rights reserved. http://innovation-i.jp/

Page 31: KinectやRealSenseの概要とさまざまな使い方

フェイススキャン

Copyright © 2015 Natural Software All rights reserved.

Page 32: KinectやRealSenseの概要とさまざまな使い方

医療、リハビリ

Copyright © 2015 Natural Software All rights reserved.

https://www.youtube.com/watch?v=KVhdJgnPak4

Page 33: KinectやRealSenseの概要とさまざまな使い方

様々な業界から、自分たちの問題を解決する手段に使えそうなアイデア

Copyright © 2015 Natural Software All rights reserved.

Page 34: KinectやRealSenseの概要とさまざまな使い方

www.naturalsoftware.jp

Copyright © 2015 Natural Software All rights reserved.