ウェアラブルデバイスとモーションセンサーの融合

2014/10/03 第７７回ISIT定期交流会

Natural Software 中村薫

自己紹介

中村薫フリーランスで主にDepthセンサー系の仕事をしています

アプリケーション開発、講演、ハンズオンセミナー、執筆など

Microsoft MVP for Kinect for Windows

kaorun55@naturalsoftware.jp

Tokyo MotionControl Network

https://www.facebook.com/TokyoMotioncontrolNetwork

今日の目的

• Depthセンサーについて知ってもらう

• Depthセンサーとウェアラブルデバイスの可能性について一緒に考えたい

大きな流れ・1

Microsoft Intel

Apple Google

大きな流れ・2

Intel RealSense Leap Motion

なぜDepthセンサー？

• センサーの低価格化

• Web,モバイルに続く価値の提供

事例

医療

リハビリ

http://monoist.atmarkit.co.jp/mn/articles/1310/02/news063_2.html

仮想試着

http://www.facebook.com/photo.php?fbid=3392874617478

現実世界へのインタラクション

http://www.naturalsoftware.jp/blog/7906

Photo by Ben Lorph

Kinect x 8台

DEPTHセンサーの用途

NUIとは

• Natural User Interfaceの略で、より直感的にコンピューターと対話するインタフェース

• タッチパネル入力、音声入力、Kinectなどセンサーを使った入力、ペン入力など

CUIからNUIへ

3Dスキャン

3Dスキャンの概要

• センサーから得られた空間情報をコンピューター上で再構築し、3Dモデル化する

• 距離データを活用する

3Dスキャン

センサーを利用したパターン(1)

さまざまなセンサー&デバイス

お品書き

Kinect for Windows v2 Leap Motion v2

Intel RealSense

Structure Sensor Oculus Rift

Kinect for Windows v2

• Xbox Oneに付属のKinectと同等

• 2014年7月時点でオープンベータとしてリリース(センサーはリリース版)

http://www.microsoftstore.com/store/msjp/ja_JP/pdp/productID.298959900

Intel RealSense

• 主に手指を認識できるセンサー

• 顔の検出や音声認識も搭載

• コンピューターへの内蔵化を予定

Intel RealSenseテクノロジー

Leap Motion

• 指先を高精度で検出

• 使いやすいソフトウェア

• ハードウェアの内蔵化が進んでいる

https://www.leapmotion.com/

Structure Sensor

• Kinect v1とほぼ同じセンサー

• iSense 3Dとしても販売

• iOS対応

デバイスの実行環境(OS)

Windows Mac OSX Linux iOS Android

Kinect for Windows v2 ○ × × × ×

Intel RealSense ○ × × × ○

Leap Motion ○ ○ ○ × △

Structure Sensor ○ ○ ○ ○ ×

Kinect for Windows v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

凡例○：公式サポート △：将来的にサポート予定 ×：未サポート

Intel RealSenseのソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

デバイスの特長

距離全身の骨格検出手指の検出 3D スキャン

Kinect for Windows v2 中距離(0.5m-8m) ○ △ ○

Intel RealSense 近距離(0.2m-1.2m) × ○ ○

Leap Motion 近距離(0.07m-0.7m) × ○ ×

Structure Sensor 中距離(0.4m-3.5m) △ ○ ○

Kinect for Windows v2のソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

凡例○：公式サポート △：将来的にサポート予定 ×：未サポート

Intel RealSenseのソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります。

Oculus Rift

• 非透過型のヘッドマウントディスプレイ

• 両目の視差を利用した立体視を体験できる

• 現在、開発者プレビュー段階

Senz3D+Oculus Rift

Leap Motion + Oculus Rift

行動誘導の研究

https://www.youtube.com/watch?v=ldEyGeSw4M8

ウェアラブルとの融合

ウェアラブル

センサー,モバイル,ウェアラブルの融合

Meta Pro

http://www.redorbit.com/news/technology/1113032110/metapro-augmented-reality-glasses-121913/

Depthセンサーの弱点を補う

今できること

Depthセンサー+ウェアラブルのアイデア

• VRとの併用

• ARとの併用

• 距離を測る

• 3Dスキャンする

• より自然な記録(カメラ)

www.naturalsoftware.jp

ウェアラブルデバイスとモーションセンサーの融合

Technology

金融活動における情報ネットワークと金融仲介業（I · 2010-03-17 · 金融活動における情報ネットワークと金融仲介業（i） ――金融ネットワークの経済学入門――

AR技術とウェアラブルデバイスの活用による現場 …jad.fujitsu.com/exhibit/ceatec/pdf/id_09.pdfFuture Innovation Wearable Technology ~Augmented Reality Technology

衍生金融工具 —— 金融工程入门

台灣金融科技發展與金融轉型做法及成果°灣金融科技... · 金融轉型—金管會策略三面向建構金融科技創新應用環境促進金融服務數位轉型、創新加值升級

Part 1 Money and Finance 貨幣と金融 Chapter 3 Financial Structure and Financial System 　金融構造と金融システム

第六章金融市场与金融工具

第 4 章金融商品与金融市场

金融市場ウィークリー - mizuho-ri.co.jp2 金融市場ウィークリー（2019年3月22日号） Ⅰ．経済・金融市場動向～金融市場レビュー～日米金利

金融概论

Our Ubike The economic in our life 金融二 102302001 林倢伃金融二 102302008 蔡丹桂金融二 102302024 林泓均金融二 102302042 楊士鴻金融二 102302050 林育如

PC・スマートフォン用3次元モーションセンサー MicroSmartusudasouken.com/pdf/MS8_CATALOG.pdf · U-BRAIN MicroSmart / PC・スマートフォン用3次元モーションセンサー

Margin Application(融資融券合約書)

Unlock The Full Potential Of Your Training...Unlock The Full Potential Of Your Training トレーニングの質、量を管理するウェアラブルデバイス YOU CAN’T IMPROVE

第 8 章金融市场与金融工程

金融機関の働き方のデザイン - Bank of Japan...2018年7月25日金融機構局金融高度化センター金融高度化セミナー「金融機関の働き方」金融機関の働き方のデザイン

後金融海嘯時代金融發展現況與展望

金融商品をめぐる...38 39 金融商品をめぐる金融商品をめぐる環境変化と適切な金融行動環境変化と適切な金融行動直接金融の拡大と適切な金融行動の重要性

514 诉融网 -商业融资计划书

房颤消融技术新进展：标测与消融技术

5つの疾病リスクを同時にチェックする機能を全て …...3 4．対応ウェアラブルデバイスの拡大歩数計測機能で連携利用できるウェアラブルデバイスの対応デバイスに、ムーヴバンドおよびOMRON