16
Twilio 老親通話見守りシステム ほっと*伝心 オレオレ詐欺被害事前検知 遠隔口座停止依頼支援システム

Twilio smart communicationaward2016_syatabe

  • Upload
    -

  • View
    76

  • Download
    2

Embed Size (px)

Citation preview

Page 1: Twilio smart communicationaward2016_syatabe

Twilio 老親通話見守りシステムほっと*伝心

オレオレ詐欺被害事前検知

遠隔口座停止依頼支援システム

Page 2: Twilio smart communicationaward2016_syatabe

OVERVIEWCollaboration with: Twilio (電話API)

AWS (WEB/AP/DBサーバ)

RaspberrPi+Julius(音声認識クライアント)

RAPIRO(見守りロボット)

システム概要: 見守りシステムのユーザ(=子)は事前にNGワードを登録(“振込”、“口座番号”、“刑事” 、“蟹” 等)

廉価な音声認識デバイスを茶の間の電話の近辺に設置して老親の通話を常時見守りを行う

老親が通話中にNGワードの発声が検知されたら、子の携帯電話等に即時アラート通知

子の携帯電話からの操作により、通話内容の音声/SMS伝送等が可能

必要があれば、遠隔口座停止依頼支援システムで、老親の口座の緊急停止依頼が可能

かわいらしい見守りロボットの外観で、違和感なく茶の間に設置できる。

Page 3: Twilio smart communicationaward2016_syatabe

SYSTEM OVERVIEW◆NGワード登録システム 事前にNGワードをWEB画面から登録する機能(“振込”、“口座番号”、“刑事”、“蟹” 等)

◆NGワード感知 & アラート通知システム 老親が通話中にNGワードが発声されたら、子の携帯・スマホ等に即時アラート通知機能

◆音声・SMS伝送システム 通話内容の音声/SMS伝送機能

◆遠隔口座停止依頼支援システム 子の携帯・スマホから老親の口座の緊急停止依頼サポート機能

Page 4: Twilio smart communicationaward2016_syatabe

本システムが解決する社会的課題 -1

近年、判断力が低下したお年寄りを標的にした電話詐欺の被害が、後を絶たない

老親がオレオレ詐欺被害にあってしまった

『 常時通話内容を見守り!』で課題解決!

本システムで常時見守りを行う事により、被害を未然に防止する効果がある

Page 5: Twilio smart communicationaward2016_syatabe

本システムが解決する社会的課題 -2

判断力が低下した老親を見守る必要に迫られて一時的に職を辞したが、再就職が困難

老親支援・見守りための退職、再就職の困難

『 離れた職場からでも遠隔見守り!』で課題解決!

本システムで常時見守りを行う事により、安心して仕事が継続できる

Page 6: Twilio smart communicationaward2016_syatabe

本システムが解決する社会的課題 -3

老親が作成した口座情報や変更情報を把握しておらず、老親の詐欺被害は感知できたが、

口座停止操作が間に合わなかった!

複数口座の情報を把握しきれず、口座停止操作の失敗

本システムで金融機関の口座情報を一元管理する事により、スピーディーに全口座停止。

被害額を最小限に。

『 複数口座情報を一元管理!』で課題解決!

Page 7: Twilio smart communicationaward2016_syatabe

ARCHITECTURE

Page 8: Twilio smart communicationaward2016_syatabe

IOT+WEB ARCHITECTURE

マイクディバイス

DB(PostgreSQL)

WEB/AP(Apache・Tom)

Julius(日本語音声認識サービス)

Raspberry Pi(見守りクライント-RAPIROに搭載)AWS(EC2インスタンス)

WEBアプリ②通話内容にNGワードを検知したら、サーバ上のシステムに通知

◆音声認識サーバを常時起動

NGワードマスタ

NGワード辞書ロード

口座情報マスタ

顧客マスタワード判定アプリ

①マイクから集音

金融機関子(見守り者)

NGワード通知

金融機関リストに順次発信

アラート通知

口座停止依頼

Page 9: Twilio smart communicationaward2016_syatabe

WEB ARCHITECTURE

<ログイン・管理画面・口座照会画面>

AWS

管理する老親の口座情報や、NGワードの管理ができるWEBインタフェース DB

Apache

Web Server

Web service

APIs

Tomcat

Ap Server

Page 10: Twilio smart communicationaward2016_syatabe

PROGRESS & DELIVERABLES

(1)ログイン・認証(2)管理ツール(NGワード、口座情報、顧客情報)(3)見守り者へのアラート通知機能(4)口座停止支援・金融機関自動発信機能(5)音声、SMS伝送機能

機能実装

(1)RaspberryPi環境構築手順書(2)音声認識サーバ構築手順書(3)WEB/AP/DBサーバ構築手順書(4)DB論理設計書・ER図・CRUD図(5)ユーザインタフェース設計書

設計書

予定成果物/機能 結果成果物

Page 11: Twilio smart communicationaward2016_syatabe

システム構成図

機器 ハード ソフト 備考

Web/APサーバ ○ Apache -

Web/APサーバ ○ Tomcat Servlet/JSP

DBサーバ - Postgrs WEB/APサーバ配置

音声認識サーバ ○ Julius 自作制御スクリプト(Ruby)

音声発話サーバ ○ OpenJTalk 自作制御スクリプト(bash)

WebSocketサーバ ○ Node.js -

WebSocketサーバ ○ WebSocket.js -

SSH(全筐体) - Openssh リモートShell起動(expectコマンド)

nokogiriライブラリ - ○ Ruby-XMLParser

dictation-kitgrammar-kit

- ○音声認識・コーパスライブラリ

RAPIRO(ロボット) ○ - Arduino基盤

Page 12: Twilio smart communicationaward2016_syatabe

CHALLENGE FOR THE FUTURE・筐体デザイン(クライアント基盤)

→ 様々な環境に簡易に設置可能なデザイン設計

・国際化対応

→ 日本語だけではなく様々な言語に対応

・バッテリー

→ 太陽光電池の採用など長期運用を見据えた設計

・金融機関との連携

→ Fintechが進み銀行APIがオープン化されれば、より利便性の高い機能を搭載可能

Page 13: Twilio smart communicationaward2016_syatabe

【参考】オレオレ詐欺などの被害状況-1

警視庁:振り込め詐欺を始めとする特殊詐欺の被害状況https://www.npa.go.jp/safetylife/seianki31/higaijoukyou.html

Page 14: Twilio smart communicationaward2016_syatabe

【参考】オレオレ詐欺などの被害状況-2(前年対比)

Page 15: Twilio smart communicationaward2016_syatabe

【参考】オレオレ詐欺などの被害状況-3(経年比較)

Page 16: Twilio smart communicationaward2016_syatabe

デモンストレーション