18
KinectV2×Unityなら ゲームからヘルスケアまで 東京エレクトロンデバイス株式会社主催 Kinect for Windows V2 最新情報セミナー (2014924/26) 株式会社システムフレンド 前本 知志

KinectV2×Unityなら ゲームからヘルスケアまで

Embed Size (px)

DESCRIPTION

東京エレクトロンデバイス株式会社主催 Kinect for Windows V2 最新情報セミナー (2014年9月24日/26日) にてお話をさせて頂いた時の資料です。

Citation preview

Page 1: KinectV2×Unityなら ゲームからヘルスケアまで

KinectV2×Unityならゲームからヘルスケアまで

東京エレクトロンデバイス株式会社主催

Kinect for Windows V2 最新情報セミナー

(2014年9月24日/26日)

株式会社システムフレンド前本知志

Page 2: KinectV2×Unityなら ゲームからヘルスケアまで

2

自己紹介

・仙台生まれ、広島育ち、3.5年前に東京へ転勤してきました。

・Tokyo MotionControl Network 発起人の一人

・業務アプリケーション開発、学校向けグループウェア開発をはじめ、ARスマートフォンアプリやコンシューマー向けWebサービスなどを担当しています。NUI分野では4年以上前からKINECTを使った開発を行っています。

・たまにエアー書道ではテレビ出演をしています2013年1月6日 東京MX TV 「Tokyo, Boy」 新年スペシャル2013年8月26日 日本テレビ 「NEWS ZERO」

Page 3: KinectV2×Unityなら ゲームからヘルスケアまで

3

会社紹介

・所在地:広島県広島市と東京都。

・現在の中心事業はOSS(EC-CUBE)によるECサイト構築、グループウェア構築。

・先進分野として、NUI・KINECTアプリ開発、Windows8アプリ開発、ARを使ったスマートフォンアプリ開発(iOS/Android/Windows Phone)など行っています。

・書籍の執筆を行っています。

・ASCII.jpでインタビュー記事が掲載されています

・CodeZineに連載を寄稿しています。

http://www.systemfriend.co.jp/kinect_nui

Page 4: KinectV2×Unityなら ゲームからヘルスケアまで

4

Kinect, Leap Motion, RealSense, etc...

これら3D認識技術に興味のあるマーケッター、デザイナー、ディベロッパー等のネットワークを構築するコミュニティ

これら3D認識技術により、SF映画の世界が現実のものになりつつあります。

一方で、「面白いけれど…何に使えば良いの?」との疑問が常に付きまとい、実用化までの道のりには課題もあります。

今回このTokyo MotionControl Networkにより、デザイナー、開発者、ユーザー、その予備軍の間でネットワークを実現して、センサー&デバイス業界全体を盛り上げることを目的に2013年夏より活動を開始しました。

https://www.facebook.com/TokyoMotioncontrolNetwork

Tokyo MotionControl Network

Page 5: KinectV2×Unityなら ゲームからヘルスケアまで

5

KINECT V2 × Unity

KINECT V2のUnityサポート

Page 6: KinectV2×Unityなら ゲームからヘルスケアまで

6

KINECT V2 × Unity

Unityは開発環境を備えた3D/2Dゲームエンジン。

KINECT V2 SDK (Developer Preview 2014 April版)でUnity Pro用のプラグインが提供されています。

“This is preliminary software and/or hardware and APIs are preliminary and subject to change.””ソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります”

Page 7: KinectV2×Unityなら ゲームからヘルスケアまで

7

KINECT V2 × Unity

これらを扱えます。• 骨格情報(BodyManager)• RGBカラー映像(ColorManager)• 深度情報(DepthManager)• 赤外線映像(InfraredManger)• 上記組み合わせ同時使用(MultiFrameManager)

Page 8: KinectV2×Unityなら ゲームからヘルスケアまで

8

KINECT V2 × Unity

Unityが公式サポートとなることで拡がる可能性

• 高度な3Dゲームを作りやすくなります。

• 環境シミュレーションやカタログ、ヘルスケア用コンテンツなど

ゲームに限らない分野で印象的なプレゼンテーションが可能に。

• 既にUnityのノウハウをもつ多くのゲームクリエイターの参入によ

るナレッジの拡大・共有。

MicrosoftよりVisual Studio用プラグインも登場し開発環境の強化も進められています。• Visual Studio 2013 Tools for Unity• MicrosoftがSyntaxTreeを買収してUnity用プラグインUnityVSをVisual Studioに統合

Page 9: KinectV2×Unityなら ゲームからヘルスケアまで

9

アプリケーション紹介

エアー書道・奏<KANADE>http://www.systemfriend.co.jp/airshodou-kanade

Page 10: KinectV2×Unityなら ゲームからヘルスケアまで

10

アプリケーション紹介

開発の動機

KINECT V2という新しい武器を使って Kinectコンテンツにありがちな課題を解決して誰でも楽しめるものを作りたい!

<Kinectコンテンツあるある>

1. 体格が合わないとうまく遊べない

2. 遊び方を理解してスキルがないと遊べない

3. 残るものがない

Page 11: KinectV2×Unityなら ゲームからヘルスケアまで

11

アプリケーション紹介

1. 体格が合わないとうまく遊べない

あなたの動きはアバター「Unityちゃん」の動きにそのまま反映され、書を描き、気持ちの良い音を奏でます。アバター操作なので小さな子どもさんでも大きな大人でも、身長、手足の長さに関係なく楽しく体験ができるコンテンツです。書道はUnityちゃんをとりまく円形の見えない紙に右手をあてることで紙に筆をつける動きになり線を描けます。

弊社製品「エアーシンセ」のノウハウを活かしました。

Page 12: KinectV2×Unityなら ゲームからヘルスケアまで

12

アプリケーション紹介

2. 遊び方を理解してスキルがないと遊べない

「エアー書道・奏」は、初めての方で綺麗な字が描けなくても視覚や聴覚で楽しめる要素を強化した、「楽しい全身運動」を促進するものを目指しています。

描くときにサウンドを鳴らす「SoundWall」が配置されているので、筆を滑らせると気持ちの良いサウンドの奏<KANADE>を作ることができます。

「うまい下手より楽しい体験!」

AIR SHODOUは難しすぎて上手な書道はなかなかできず、すごいけど楽しくありませんでした(爆)

Page 13: KinectV2×Unityなら ゲームからヘルスケアまで

13

アプリケーション紹介

3. 残るものがない

イベント用に自動印刷プログラムを用意。張り出せば書道コンテストが楽しめます。

2013年 FabCafeでの外国人向けエアー書道イベント

エアー書道オンラインTシャツショップとの連携も検討中

Unity Web Playerを利用した完全リプレイ表示もWebブラウザ上で可能とする予定です。

http://airshodou.jp/

Page 14: KinectV2×Unityなら ゲームからヘルスケアまで

14

アプリケーション紹介

今後の展示予定

• 9/24夜<終了>株式会社GMOドメインレジストリ様の外国人向けパーティ

• 10/1~3 国際福祉機器展某社ブース連携展示→ 出展者ご都合により来年2月ごろに変更

• 2014年10月~2015年3月東京大学 健康と医学の博物館 全国主要都市ツアー

キャラクターの変更や演出のカスタマイズ可能です。イベント用途などぜひお問い合わせください。

Page 15: KinectV2×Unityなら ゲームからヘルスケアまで

15

楽しいだけじゃないんです

ヘルスケア・医療への応用

Page 16: KinectV2×Unityなら ゲームからヘルスケアまで

16

楽しいだけじゃないんです片麻痺機能回復テストシステム 広島県および国の支援事業として開発中

骨格認識に加え高精度になったIR画像認識で補完し精度向上

ノウハウを活かして既存のヘルスケア・医療機器へのセンサー(主にKINECT V2)

連携機能を開発する案件もいくつか動いています。

http://www.systemfriend.co.jp/node/534

Page 17: KinectV2×Unityなら ゲームからヘルスケアまで

17

楽しいだけじゃないんです

実は本日展示中です!

第4回 大阪医療機器協会医療機器開発・販路開拓マッチング商談会

2014年9月26日(金) 11:00 ~ 17:30

大阪産業創造館(産創館)4Fイベントホール〒541-0053 大阪府大阪市中央区本町1丁目4-5

Page 18: KinectV2×Unityなら ゲームからヘルスケアまで

18

デモをご体験ください

デモンストレーションを展示しています。どうぞご体験ください。

<重要なお知らせ>デモはWindows Embedded OS搭載の

組み込みPCで動作しています。