61
モーションセンサーの 現状と2014年の予測 中村 薫 2014/2/14 目黒雅叙園 デベロッパーズサミット2014 [14-C-5]

DevSumi 2014[14-C-5]

Embed Size (px)

DESCRIPTION

Developers Summit 2014 [14-C-5] 「モーションセンサーの現状と2014年の予測」

Citation preview

Page 1: DevSumi 2014[14-C-5]

モーションセンサーの現状と2014年の予測

中村薫2014/2/14 目黒雅叙園

デベロッパーズサミット2014 [14-C-5]

Page 2: DevSumi 2014[14-C-5]

自己紹介

中村 薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発

講演、ハンズオンセミナー

執筆など

Microsoft MVP for Visual Studio ALM

[email protected]

Copyright © 2014 Natural Software.jp All rights reserved.

Page 3: DevSumi 2014[14-C-5]

なぜセンサー?

Copyright © 2014 Natural Software.jp All rights reserved.

Page 4: DevSumi 2014[14-C-5]

登場するセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Xtion/Carmine Creative Senze3D

Leap MotionKinect v2

Page 5: DevSumi 2014[14-C-5]

なぜセンサー?

• センサー価格の低下

• Web、モバイルに続く価値

Copyright © 2014 Natural Software.jp All rights reserved.

Page 6: DevSumi 2014[14-C-5]

モーションセンサー界隈の現状

Copyright © 2014 Natural Software.jp All rights reserved.

Page 7: DevSumi 2014[14-C-5]

センサーを使った事例

• さまざまなセンサーを使った事例が数多く出てきました。

• センサーのコミュニティもできました。

Copyright © 2014 Natural Software.jp All rights reserved.

Page 8: DevSumi 2014[14-C-5]

Tokyo MotionControl Network

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.facebook.com/TokyoMotionControlNetwork

Page 9: DevSumi 2014[14-C-5]

Copyright © 2014 Natural Software.jp All rights reserved.

Page 10: DevSumi 2014[14-C-5]

Copyright © 2014 Natural Software.jp All rights reserved.

Page 11: DevSumi 2014[14-C-5]

サイネージ

Copyright © 2014 Natural Software.jp All rights reserved.

Page 12: DevSumi 2014[14-C-5]

空中ディスプレイKinect, Leap Motion, Intel PerC

Copyright © 2014 Natural Software.jp All rights reserved.

Page 13: DevSumi 2014[14-C-5]

現実世界へのインタラクション階段+マッピング+Kinect

http://www.youtube.com/watch?v=h8wZnY_jWF8

Copyright © 2014 Natural Software.jp All rights reserved.

Page 14: DevSumi 2014[14-C-5]

Photo by Ben Lorph

Kinect x 8台

Copyright © 2014 Natural Software.jp All rights reserved.

Page 15: DevSumi 2014[14-C-5]

舞踊+マッピング+Kinect

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.youtube.com/watch?v=rxNJMij-nKU

Page 16: DevSumi 2014[14-C-5]

さまざまなセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Page 17: DevSumi 2014[14-C-5]

利用できるセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Xtion/Carmine Creative Senze3D

Leap MotionKinect v2

Page 18: DevSumi 2014[14-C-5]

利用できるセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Xtion/Carmine Creative Senze3D

Leap MotionKinect v2

全身 手指

Page 19: DevSumi 2014[14-C-5]

Kinect

• NUIのさきがけ

• Xbox用のほかにWindows用のセンサーがある

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.xbox.com/ja-JP/xbox360

Page 20: DevSumi 2014[14-C-5]

Kinect for Windows SDK

Color Stream Depth Stream

Player Tracking Skeleton Tracking

Audio Stream

Copyright © 2014 Natural Software.jp All rights reserved.

Page 21: DevSumi 2014[14-C-5]

Kinect v2

• Xbox One に同梱された新しいKinect

• Kinect for Windows v2 Developer Preview の配布が始まっている

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.xbox.com/ja-JP/xbox-one/meet-xbox-one

Page 22: DevSumi 2014[14-C-5]

Kinect for Windows v2

• Xbox Oneに付属のKinectと同等

• 2014年夏にリリース予定

• Kinect for Windows v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Copyright © 2014 Natural Software.jp All rights reserved.

Page 23: DevSumi 2014[14-C-5]

Kinect for Windows SDK v2

Color Stream Depth Stream Skeleton Tracking

Copyright © 2014 Natural Software.jp All rights reserved.

Page 24: DevSumi 2014[14-C-5]

Carmine/Xtion

• Kinect互換センサー

• Mac OSなどWindows以外でも利用可能

• 開発元のPrimeSense社がApple社に買収されたため、今度の動向に注目

Copyright © 2014 Natural Software.jp All rights reserved.

Page 25: DevSumi 2014[14-C-5]

OpenNI 2.x and NiTE 2.x

Color Stream Depth Stream Gesture

User Tracking Skeleton Tracking Hand Tracking

Copyright © 2014 Natural Software.jp All rights reserved.

Page 26: DevSumi 2014[14-C-5]

Creative Senze3D

• 手指を認識できるセンサー

• Intel Perceptual Computing SDK を利用する

• コンピューターへの内蔵化を予定

Copyright © 2014 Natural Software.jp All rights reserved.

Page 27: DevSumi 2014[14-C-5]

Intel Perceptual Computing SDK

Color Stream Hand and Finger Tracking Gesture and Pose

Facial Analysis Speech Recognition Voice Synthesis

"Nothing to say?"

Copyright © 2014 Natural Software.jp All rights reserved.

Page 28: DevSumi 2014[14-C-5]

Intel Perceptual Computing Challenge

Copyright © 2014 Natural Software.jp All rights reserved.

Page 29: DevSumi 2014[14-C-5]

インテルRealSenseテクノロジー

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.intel.com/content/www/us/en/architecture-and-technology/realsense-overview.html

Page 30: DevSumi 2014[14-C-5]

Leap Motion

• 指先を高精度で検出

• 使いやすいソフトウェア

• ハードウェアの内蔵化が進んでいる

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.leapmotion.com/

Page 31: DevSumi 2014[14-C-5]

Leap Motion SDK

Hand and Finger Tracking Gesture

http://www.buildinsider.net/small/leapmotionfirstimp/01

Touch

Copyright © 2014 Natural Software.jp All rights reserved.

Page 32: DevSumi 2014[14-C-5]

センサーの仕様比較

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Kinect v2 Carmine Senze3D Leap

用途 中距離 中距離 中距離 近距離 近距離

センシング Light Coding TOF Light Coding TOF ステレオカメラ

Color画像 ○ ○ ○ ○ ×

Depth画像 ○ ○ ○ ○ ×

全身骨格検出 ○ ○ ○ × ×

手指検出 × △(一部) × ○ ○

ジェスチャー △(入力支援) × ○ ○ ○

音声入力 ○ △(未実装) × ○ ×

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Page 33: DevSumi 2014[14-C-5]

KINECT V2について

Copyright © 2014 Natural Software.jp All rights reserved.

Page 34: DevSumi 2014[14-C-5]

Kinect for Windows v2の要求仕様

対応OS Windows 8, Windows 8.1

開発環境 Visual Studio 2012(C++, C#)

CPU Core i7 2.5GHz以上 64bit CPU

メモリ 4GB以上

USB USB 3.0

グラフィック DirectX 11 対応のグラフィックカード

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Page 35: DevSumi 2014[14-C-5]

Kinect for Windows v2の仕様

Colorカメラ解像度 1920 x 1080

Depthカメラ解像度

512 x 424

Depthセンシング TOF(Tome of Fright)

Depth範囲 0.5m~4.5m

スケルトン認識 6人まで

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Page 36: DevSumi 2014[14-C-5]

KINECT V2 DEMO

Copyright © 2014 Natural Software.jp All rights reserved.

Page 37: DevSumi 2014[14-C-5]

2014年の予測

Copyright © 2014 Natural Software.jp All rights reserved.

Page 38: DevSumi 2014[14-C-5]

新しいデバイス

Copyright © 2014 Natural Software.jp All rights reserved.

http://makezine.com/2014/01/12/make-editors-highlights-and-picks-from-ces-2014/

http://mobilesyrup.com/2014/01/09/thalmic-labs-shoots-to-kill-with-ces-demo-first-look/

Page 39: DevSumi 2014[14-C-5]

内蔵化

センサーの内蔵化が進むでしょう。

• Leap Motion

• Intel Perceptual Computing SDK対応センサー

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.leapmotion.com/

Page 40: DevSumi 2014[14-C-5]

インテルRealSenseテクノロジー

Copyright © 2014 Natural Software.jp All rights reserved.

Page 41: DevSumi 2014[14-C-5]

SoftKinetick社

Copyright © 2014 Natural Software.jp All rights reserved.

Page 42: DevSumi 2014[14-C-5]

SoftKinetick社

Copyright © 2014 Natural Software.jp All rights reserved.

Page 43: DevSumi 2014[14-C-5]

その先へ

Copyright © 2014 Natural Software.jp All rights reserved.

Page 44: DevSumi 2014[14-C-5]

モバイル

• iOSやAndroid対応のセンサーが発売され、モバイルでのセンサー利用が可能になるでしょう。

Copyright © 2014 Natural Software.jp All rights reserved.

http://makezine.com/2014/01/12/make-editors-highlights-and-picks-from-ces-2014/

Page 45: DevSumi 2014[14-C-5]

Web

• センサーSDKのブラウザ対応が進んでいます。Webやクラウドとセンサーの連携が進んでいくでしょう。

Copyright © 2014 Natural Software.jp All rights reserved.

Page 46: DevSumi 2014[14-C-5]

ウェアラブル

http://blogs.independent.co.uk/2013/01/03/tech-battlegrounds-in-2013/Copyright © 2014 Natural Software.jp All rights reserved.

Page 47: DevSumi 2014[14-C-5]

センサー,モバイル,ウェアラブルの融合

http://www.kickstarter.com/projects/551975293/meta-the-most-advanced-augmented-reality-interfaceCopyright © 2014 Natural Software.jp All rights reserved.

Page 48: DevSumi 2014[14-C-5]

Meta Pro

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.redorbit.com/news/technology/1113032110/metapro-augmented-reality-glasses-121913/

Page 49: DevSumi 2014[14-C-5]

Oculus Rift(オキュラス・リフト)

http://www.oculusvr.com/Copyright © 2014 Natural Software.jp All rights reserved.

Page 50: DevSumi 2014[14-C-5]

出力装置の進化

Copyright © 2014 Natural Software.jp All rights reserved.

Page 51: DevSumi 2014[14-C-5]

ディスプレイを越えて

Copyright © 2014 Natural Software.jp All rights reserved.

Page 52: DevSumi 2014[14-C-5]

http://www.youtube.com/watch?v=h8wZnY_jWF8Copyright © 2014 Natural Software.jp All rights reserved.

Page 53: DevSumi 2014[14-C-5]

Oculus Rift(オキュラス・リフト)

http://www.oculusvr.com/Copyright © 2014 Natural Software.jp All rights reserved.

Page 54: DevSumi 2014[14-C-5]

Copyright © 2014 Natural Software.jp All rights reserved.

Page 55: DevSumi 2014[14-C-5]

Copyright © 2014 Natural Software.jp All rights reserved.

Page 56: DevSumi 2014[14-C-5]

OCULUS RIFT DEMO

Copyright © 2014 Natural Software.jp All rights reserved.

Page 57: DevSumi 2014[14-C-5]

触覚を得る

Copyright © 2014 Natural Software.jp All rights reserved.

Page 58: DevSumi 2014[14-C-5]

http://www.youtube.com/watch?v=xaFBjUJj00M

Copyright © 2014 Natural Software.jp All rights reserved.

Page 59: DevSumi 2014[14-C-5]

http://www.youtube.com/watch?v=CE4WsYncNa4

Copyright © 2014 Natural Software.jp All rights reserved.

Page 60: DevSumi 2014[14-C-5]

謝辞

• 機材提供

–東京エレクトロンデバイス 茂出木さん

• OculusJump

– Unity 伊藤さん

• OculusTheta

– @MobileHackerzさん

Copyright © 2014 Natural Software.jp All rights reserved.

Page 61: DevSumi 2014[14-C-5]

既存技術と新規技術の組み合わせの先に

新しい何かが生まれる

Copyright © 2014 Natural Software.jp All rights reserved.