DevSumi 2014[14-C-5]

Preview:

DESCRIPTION

Developers Summit 2014 [14-C-5] 「モーションセンサーの現状と2014年の予測」

Citation preview

モーションセンサーの現状と2014年の予測

中村薫2014/2/14 目黒雅叙園

デベロッパーズサミット2014 [14-C-5]

自己紹介

中村 薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発

講演、ハンズオンセミナー

執筆など

Microsoft MVP for Visual Studio ALM

kaorun55@naturalsoftware.jp

Copyright © 2014 Natural Software.jp All rights reserved.

なぜセンサー?

Copyright © 2014 Natural Software.jp All rights reserved.

登場するセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Xtion/Carmine Creative Senze3D

Leap MotionKinect v2

なぜセンサー?

• センサー価格の低下

• Web、モバイルに続く価値

Copyright © 2014 Natural Software.jp All rights reserved.

モーションセンサー界隈の現状

Copyright © 2014 Natural Software.jp All rights reserved.

センサーを使った事例

• さまざまなセンサーを使った事例が数多く出てきました。

• センサーのコミュニティもできました。

Copyright © 2014 Natural Software.jp All rights reserved.

Tokyo MotionControl Network

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.facebook.com/TokyoMotionControlNetwork

Copyright © 2014 Natural Software.jp All rights reserved.

Copyright © 2014 Natural Software.jp All rights reserved.

サイネージ

Copyright © 2014 Natural Software.jp All rights reserved.

空中ディスプレイKinect, Leap Motion, Intel PerC

Copyright © 2014 Natural Software.jp All rights reserved.

現実世界へのインタラクション階段+マッピング+Kinect

http://www.youtube.com/watch?v=h8wZnY_jWF8

Copyright © 2014 Natural Software.jp All rights reserved.

Photo by Ben Lorph

Kinect x 8台

Copyright © 2014 Natural Software.jp All rights reserved.

舞踊+マッピング+Kinect

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.youtube.com/watch?v=rxNJMij-nKU

さまざまなセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

利用できるセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Xtion/Carmine Creative Senze3D

Leap MotionKinect v2

利用できるセンサー

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Xtion/Carmine Creative Senze3D

Leap MotionKinect v2

全身 手指

Kinect

• NUIのさきがけ

• Xbox用のほかにWindows用のセンサーがある

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.xbox.com/ja-JP/xbox360

Kinect for Windows SDK

Color Stream Depth Stream

Player Tracking Skeleton Tracking

Audio Stream

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect v2

• Xbox One に同梱された新しいKinect

• Kinect for Windows v2 Developer Preview の配布が始まっている

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.xbox.com/ja-JP/xbox-one/meet-xbox-one

Kinect for Windows v2

• Xbox Oneに付属のKinectと同等

• 2014年夏にリリース予定

• Kinect for Windows v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect for Windows SDK v2

Color Stream Depth Stream Skeleton Tracking

Copyright © 2014 Natural Software.jp All rights reserved.

Carmine/Xtion

• Kinect互換センサー

• Mac OSなどWindows以外でも利用可能

• 開発元のPrimeSense社がApple社に買収されたため、今度の動向に注目

Copyright © 2014 Natural Software.jp All rights reserved.

OpenNI 2.x and NiTE 2.x

Color Stream Depth Stream Gesture

User Tracking Skeleton Tracking Hand Tracking

Copyright © 2014 Natural Software.jp All rights reserved.

Creative Senze3D

• 手指を認識できるセンサー

• Intel Perceptual Computing SDK を利用する

• コンピューターへの内蔵化を予定

Copyright © 2014 Natural Software.jp All rights reserved.

Intel Perceptual Computing SDK

Color Stream Hand and Finger Tracking Gesture and Pose

Facial Analysis Speech Recognition Voice Synthesis

"Nothing to say?"

Copyright © 2014 Natural Software.jp All rights reserved.

Intel Perceptual Computing Challenge

Copyright © 2014 Natural Software.jp All rights reserved.

インテルRealSenseテクノロジー

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.intel.com/content/www/us/en/architecture-and-technology/realsense-overview.html

Leap Motion

• 指先を高精度で検出

• 使いやすいソフトウェア

• ハードウェアの内蔵化が進んでいる

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.leapmotion.com/

Leap Motion SDK

Hand and Finger Tracking Gesture

http://www.buildinsider.net/small/leapmotionfirstimp/01

Touch

Copyright © 2014 Natural Software.jp All rights reserved.

センサーの仕様比較

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect Kinect v2 Carmine Senze3D Leap

用途 中距離 中距離 中距離 近距離 近距離

センシング Light Coding TOF Light Coding TOF ステレオカメラ

Color画像 ○ ○ ○ ○ ×

Depth画像 ○ ○ ○ ○ ×

全身骨格検出 ○ ○ ○ × ×

手指検出 × △(一部) × ○ ○

ジェスチャー △(入力支援) × ○ ○ ○

音声入力 ○ △(未実装) × ○ ×

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

KINECT V2について

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect for Windows v2の要求仕様

対応OS Windows 8, Windows 8.1

開発環境 Visual Studio 2012(C++, C#)

CPU Core i7 2.5GHz以上 64bit CPU

メモリ 4GB以上

USB USB 3.0

グラフィック DirectX 11 対応のグラフィックカード

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Kinect for Windows v2の仕様

Colorカメラ解像度 1920 x 1080

Depthカメラ解像度

512 x 424

Depthセンシング TOF(Tome of Fright)

Depth範囲 0.5m~4.5m

スケルトン認識 6人まで

Copyright © 2014 Natural Software.jp All rights reserved.

Kinect v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

KINECT V2 DEMO

Copyright © 2014 Natural Software.jp All rights reserved.

2014年の予測

Copyright © 2014 Natural Software.jp All rights reserved.

新しいデバイス

Copyright © 2014 Natural Software.jp All rights reserved.

http://makezine.com/2014/01/12/make-editors-highlights-and-picks-from-ces-2014/

http://mobilesyrup.com/2014/01/09/thalmic-labs-shoots-to-kill-with-ces-demo-first-look/

内蔵化

センサーの内蔵化が進むでしょう。

• Leap Motion

• Intel Perceptual Computing SDK対応センサー

Copyright © 2014 Natural Software.jp All rights reserved.

https://www.leapmotion.com/

インテルRealSenseテクノロジー

Copyright © 2014 Natural Software.jp All rights reserved.

SoftKinetick社

Copyright © 2014 Natural Software.jp All rights reserved.

SoftKinetick社

Copyright © 2014 Natural Software.jp All rights reserved.

その先へ

Copyright © 2014 Natural Software.jp All rights reserved.

モバイル

• iOSやAndroid対応のセンサーが発売され、モバイルでのセンサー利用が可能になるでしょう。

Copyright © 2014 Natural Software.jp All rights reserved.

http://makezine.com/2014/01/12/make-editors-highlights-and-picks-from-ces-2014/

Web

• センサーSDKのブラウザ対応が進んでいます。Webやクラウドとセンサーの連携が進んでいくでしょう。

Copyright © 2014 Natural Software.jp All rights reserved.

ウェアラブル

http://blogs.independent.co.uk/2013/01/03/tech-battlegrounds-in-2013/Copyright © 2014 Natural Software.jp All rights reserved.

センサー,モバイル,ウェアラブルの融合

http://www.kickstarter.com/projects/551975293/meta-the-most-advanced-augmented-reality-interfaceCopyright © 2014 Natural Software.jp All rights reserved.

Meta Pro

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.redorbit.com/news/technology/1113032110/metapro-augmented-reality-glasses-121913/

Oculus Rift(オキュラス・リフト)

http://www.oculusvr.com/Copyright © 2014 Natural Software.jp All rights reserved.

出力装置の進化

Copyright © 2014 Natural Software.jp All rights reserved.

ディスプレイを越えて

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.youtube.com/watch?v=h8wZnY_jWF8Copyright © 2014 Natural Software.jp All rights reserved.

Oculus Rift(オキュラス・リフト)

http://www.oculusvr.com/Copyright © 2014 Natural Software.jp All rights reserved.

Copyright © 2014 Natural Software.jp All rights reserved.

Copyright © 2014 Natural Software.jp All rights reserved.

OCULUS RIFT DEMO

Copyright © 2014 Natural Software.jp All rights reserved.

触覚を得る

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.youtube.com/watch?v=xaFBjUJj00M

Copyright © 2014 Natural Software.jp All rights reserved.

http://www.youtube.com/watch?v=CE4WsYncNa4

Copyright © 2014 Natural Software.jp All rights reserved.

謝辞

• 機材提供

–東京エレクトロンデバイス 茂出木さん

• OculusJump

– Unity 伊藤さん

• OculusTheta

– @MobileHackerzさん

Copyright © 2014 Natural Software.jp All rights reserved.

既存技術と新規技術の組み合わせの先に

新しい何かが生まれる

Copyright © 2014 Natural Software.jp All rights reserved.

Recommended