Upload
satoshi-maemoto
View
2.287
Download
0
Embed Size (px)
DESCRIPTION
東京エレクトロンデバイス株式会社主催 Kinect for Windows V2 最新情報セミナー (2014年9月24日/26日) にてお話をさせて頂いた時の資料です。
Citation preview
KinectV2×Unityならゲームからヘルスケアまで
東京エレクトロンデバイス株式会社主催
Kinect for Windows V2 最新情報セミナー
(2014年9月24日/26日)
株式会社システムフレンド前本知志
2
自己紹介
・仙台生まれ、広島育ち、3.5年前に東京へ転勤してきました。
・Tokyo MotionControl Network 発起人の一人
・業務アプリケーション開発、学校向けグループウェア開発をはじめ、ARスマートフォンアプリやコンシューマー向けWebサービスなどを担当しています。NUI分野では4年以上前からKINECTを使った開発を行っています。
・たまにエアー書道ではテレビ出演をしています2013年1月6日 東京MX TV 「Tokyo, Boy」 新年スペシャル2013年8月26日 日本テレビ 「NEWS ZERO」
3
会社紹介
・所在地:広島県広島市と東京都。
・現在の中心事業はOSS(EC-CUBE)によるECサイト構築、グループウェア構築。
・先進分野として、NUI・KINECTアプリ開発、Windows8アプリ開発、ARを使ったスマートフォンアプリ開発(iOS/Android/Windows Phone)など行っています。
・書籍の執筆を行っています。
・ASCII.jpでインタビュー記事が掲載されています
・CodeZineに連載を寄稿しています。
http://www.systemfriend.co.jp/kinect_nui
4
Kinect, Leap Motion, RealSense, etc...
これら3D認識技術に興味のあるマーケッター、デザイナー、ディベロッパー等のネットワークを構築するコミュニティ
これら3D認識技術により、SF映画の世界が現実のものになりつつあります。
一方で、「面白いけれど…何に使えば良いの?」との疑問が常に付きまとい、実用化までの道のりには課題もあります。
今回このTokyo MotionControl Networkにより、デザイナー、開発者、ユーザー、その予備軍の間でネットワークを実現して、センサー&デバイス業界全体を盛り上げることを目的に2013年夏より活動を開始しました。
https://www.facebook.com/TokyoMotioncontrolNetwork
Tokyo MotionControl Network
5
KINECT V2 × Unity
KINECT V2のUnityサポート
6
KINECT V2 × Unity
Unityは開発環境を備えた3D/2Dゲームエンジン。
KINECT V2 SDK (Developer Preview 2014 April版)でUnity Pro用のプラグインが提供されています。
“This is preliminary software and/or hardware and APIs are preliminary and subject to change.””ソフトウェアやハードウェア、APIは暫定的なものであり正式版では変更される可能性があります”
7
KINECT V2 × Unity
これらを扱えます。• 骨格情報(BodyManager)• RGBカラー映像(ColorManager)• 深度情報(DepthManager)• 赤外線映像(InfraredManger)• 上記組み合わせ同時使用(MultiFrameManager)
8
KINECT V2 × Unity
Unityが公式サポートとなることで拡がる可能性
• 高度な3Dゲームを作りやすくなります。
• 環境シミュレーションやカタログ、ヘルスケア用コンテンツなど
ゲームに限らない分野で印象的なプレゼンテーションが可能に。
• 既にUnityのノウハウをもつ多くのゲームクリエイターの参入によ
るナレッジの拡大・共有。
MicrosoftよりVisual Studio用プラグインも登場し開発環境の強化も進められています。• Visual Studio 2013 Tools for Unity• MicrosoftがSyntaxTreeを買収してUnity用プラグインUnityVSをVisual Studioに統合
9
アプリケーション紹介
エアー書道・奏<KANADE>http://www.systemfriend.co.jp/airshodou-kanade
10
アプリケーション紹介
開発の動機
KINECT V2という新しい武器を使って Kinectコンテンツにありがちな課題を解決して誰でも楽しめるものを作りたい!
<Kinectコンテンツあるある>
1. 体格が合わないとうまく遊べない
2. 遊び方を理解してスキルがないと遊べない
3. 残るものがない
11
アプリケーション紹介
1. 体格が合わないとうまく遊べない
あなたの動きはアバター「Unityちゃん」の動きにそのまま反映され、書を描き、気持ちの良い音を奏でます。アバター操作なので小さな子どもさんでも大きな大人でも、身長、手足の長さに関係なく楽しく体験ができるコンテンツです。書道はUnityちゃんをとりまく円形の見えない紙に右手をあてることで紙に筆をつける動きになり線を描けます。
弊社製品「エアーシンセ」のノウハウを活かしました。
12
アプリケーション紹介
2. 遊び方を理解してスキルがないと遊べない
「エアー書道・奏」は、初めての方で綺麗な字が描けなくても視覚や聴覚で楽しめる要素を強化した、「楽しい全身運動」を促進するものを目指しています。
描くときにサウンドを鳴らす「SoundWall」が配置されているので、筆を滑らせると気持ちの良いサウンドの奏<KANADE>を作ることができます。
↓
「うまい下手より楽しい体験!」
AIR SHODOUは難しすぎて上手な書道はなかなかできず、すごいけど楽しくありませんでした(爆)
13
アプリケーション紹介
3. 残るものがない
イベント用に自動印刷プログラムを用意。張り出せば書道コンテストが楽しめます。
2013年 FabCafeでの外国人向けエアー書道イベント
エアー書道オンラインTシャツショップとの連携も検討中
Unity Web Playerを利用した完全リプレイ表示もWebブラウザ上で可能とする予定です。
http://airshodou.jp/
14
アプリケーション紹介
今後の展示予定
• 9/24夜<終了>株式会社GMOドメインレジストリ様の外国人向けパーティ
• 10/1~3 国際福祉機器展某社ブース連携展示→ 出展者ご都合により来年2月ごろに変更
• 2014年10月~2015年3月東京大学 健康と医学の博物館 全国主要都市ツアー
キャラクターの変更や演出のカスタマイズ可能です。イベント用途などぜひお問い合わせください。
15
楽しいだけじゃないんです
ヘルスケア・医療への応用
16
楽しいだけじゃないんです片麻痺機能回復テストシステム 広島県および国の支援事業として開発中
骨格認識に加え高精度になったIR画像認識で補完し精度向上
ノウハウを活かして既存のヘルスケア・医療機器へのセンサー(主にKINECT V2)
連携機能を開発する案件もいくつか動いています。
http://www.systemfriend.co.jp/node/534
17
楽しいだけじゃないんです
実は本日展示中です!
第4回 大阪医療機器協会医療機器開発・販路開拓マッチング商談会
2014年9月26日(金) 11:00 ~ 17:30
大阪産業創造館(産創館)4Fイベントホール〒541-0053 大阪府大阪市中央区本町1丁目4-5
18
デモをご体験ください
デモンストレーションを展示しています。どうぞご体験ください。
<重要なお知らせ>デモはWindows Embedded OS搭載の
組み込みPCで動作しています。