20
link b3 amy advisor tomoyan 車内における人間関係推定システム

車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

  • Upload
    others

  • View
    0

  • Download
    0

Embed Size (px)

Citation preview

Page 1: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

l ink b3 amy

advisor tomoyan

車内における人間関係推定システム

Page 2: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

概要

� 車内の雰囲気から人間関係を推定するシステムの提案

サッカーして 遊んだよ!

今日は何が 食べたい?

オムライスが いいな!

学校はどうかな?

Page 3: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

エアコン

ナビ・テレビ

ラジオ

ライト・ワイパーのタイミング

シート・ミラー・ハンドル の位置

自動車の空間適応

音楽

タイヤの空気圧

Page 4: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

既存研究

� Lexus Personalized Settings ¡  http://www.lexus.com/pdf/service/

GS_with_nav_LPS.pdf#search='vehicle+personalize+setting’ � Vehicle personalization system (2013)

¡  GM Global Technology Operations LLC ¡  Jenne-Tai Wang, Rochester, MI (US)

� A music recommendation app for drivers. (Mobicom ‘14) ¡  Xiping Hu, Jun-qi Deng, Wenyan Hu, Georgios Fotopoulos, Edith

C.-H. Ngai, Zhengguo Sheng, Min Liang, Xitong Li, Victor C. M. Leung, Sidney Fels

Page 5: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

問題意識

� 現在自動車の空間適応関連の研究では、ドライバーしか考慮していないことが多い。 ¡ 同乗者や雰囲気によって空間の使い方が変わる

Page 6: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

目的

� 環境にあった空間適応を行うために、雰囲気から人間関係を推定する

わらわら

サッカーして 遊んだよ!

今日は何が 食べたい?

オムライスが いいな!

学校はどうかな?

Family

Page 7: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

想定アプリケーション

� 音楽選択アプリケーション ¡ 雰囲気・関係に合った音楽で空間をデザイン

� 座席調節アプリケーション ¡ 大人数の時は座席を遠慮気味に、など

� 空調調節アプリケーション ¡ 大人数で盛り上がってる時はエアコン強め、など

Page 8: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

想定環境

� 車内 ¡ 人数の限られた空間

Page 9: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

機能要件

� 乗車人数判定 � レベル測定

¡ 家族・友達 ¡ 騒がしい・大人しい

Page 10: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

人間関係の定義 (関連研究)

� 人間関係におけるつながり感の定量化に向けた一検討 ¡  個人属性・コミュニケーション属性・イベント属性 ¡  好き⇔嫌い、和む⇔イライラする、親密的⇔表面的、 (など計10種)

� ネットワーク・ヒューマンインターフェースの総合的な研究開発 ¡  人間同士の距離 ¡  仲が良い・悪い、親子関係、兄弟関係

� 行動特性からみた関係の親密さ ¡  関係の長さ・過ごす頻度・通話時間・話題の多様性 ¡  男〜友達・恋人、女〜友達・恋人

Page 11: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

こどdも家族

老夫婦

人間関係の定義

友達 家族

騒 が し い

大 人 し い

はっちゃけ友

旅行帰りおつかれ友

大人家族 カップル

Page 12: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

アプローチ1/3

� 圧力センサを使用し、乗車人数を把握 ¡ シート部分に設置

Page 13: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

アプローチ 2/3

� マイクを使用し、周波数(Hz)・音量(dB)検知 ¡ テンションレベル (会話の音量から) ¡ 男女レベル (周波数から)

÷ 男性平均- 500Hz ÷ 女性平均- 800Hz

Page 14: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

アプローチ 3/3

� それぞれのレベル・乗車人数を参考に、人間関係を推定する

Page 15: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

実装環境

� Raspberry Pi ¡ Debian

� Sensor ¡ 圧力センサ ¡ マイク

� Languages ¡ Java

Page 16: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

システム構成図

Raspberry Pi

人間関係判定 モジュール

周波数測定 モジュール

音量測定 モジュール

マイク 圧力センサ

人間関係出力

モジュール

圧力測定 モジュール

周波数情報(Hz) 音量情報(dB) 圧力情報

人数測定 モジュール

人数情報

人間関係情報

レベル測定モジュール

各レベル情報

テンション判断 モジュール

男女レベル判断 モジュール

Page 17: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

実験

� 14グループ用意(2人x6、3人x4、4人x4) ¡ 判定する

÷ 友達・家族、騒がしい・大人しい

� 場所 ¡ 4席椅子を用意 ¡ 静かな部屋(車内を想定)

Page 18: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

評価手法

� 定量的評価 ¡ 分析結果が雰囲気に合っていたか調査

÷ 各カテゴリーの的中率

Page 19: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

まとめ

� 音声認識による各種レベル測定から車内の雰囲気を検知し、人間関係を推定するシステムの提案

Page 20: 車内における人間関係推定システムamy/slide.pdf · 遊んだよ! 今日は何が ... Raspberry Pi 人間関係判定 モジュール 周波数測定 モジュール

人間関係の定義

友達 (1)  はっちゃけ友

騒がしくしている 持続的な会話 テンションMax

(2) カップル

テンションMedium 男女共にいる 2人 (3) おつかれ友

無音に近い 男女問わない

家族 (4) こども家族

子供が騒いでいる 3人以上

(5) おとな家族 テンションMedium 男女共にいる

(6) 老夫婦

無音に近い 男女共にいる

2人