Upload
others
View
0
Download
0
Embed Size (px)
Citation preview
目次
1. 利用環境 3p
※本マニュアル内に記載のURLやPepper fo Bizの会員ページは 2017年07月07日現在有効なものです。
2. Web管理画面の使い方 6p
3. ロボアプリの設定 17p
4. アプリの使い方 32p
5. うまく動かない場合 42p
- -2
2.2 学習データの確認 8p
2.7 Pepper連携
13p
2.3 動作確認 9p
2.4 ログの確認
10p2.5 ユーザー辞書
11p2.6 設定
12p
2.1 ログイン 7p
1.2 利用契約を行う
- -5
以下の順序でTalkQAの契約を行い、TalkQAを導入・運用します。
以下の連絡先にお問い合わせください。
エクスウェア株式会社 〒140-0001
東京都品川区北品川1-11-1 寿ビル4F Tel:03-6864-0005 Fax:03-3474-0761Mail:[email protected]
エクスウェアから提供する以下のようなフォーマットに、自動化したい問い合せ業務の質問事項、回答内容を埋めます。
1.2 TalkQAの 契約を行う
データのチェックとAIトレーニングを行いながら、ログの確認を行い動作の確認を行います。
*ご要望により質問数は変動します。
*
①TalkQAの契約
②学習データの作成
③動作確認
2.1 ログイン
- -7
TalkQA管理サイト(https://app-talkqa.it-momonga.com/talkqa/user/)にアクセスます。
①②
③
①メールアドレス登録されたメールアドレスを入力してください。
②パスワード登録されたパスワードを入力してください。
③ログインボタン登録されたアカウントにログインすることができます。
2.2学習データの確認
- -8
左側にある回答一覧ボタンを選択します。
①回答一覧登録した回答を一覧で表示します。
②質問一覧ボタン1つの回答に対して、以下のように登録した質問を一覧で表示することができます。
③ダウンロードボタン全ての学習したデータのcsvファイルとimgファイルが入っているzipファイルをダウンロードすることができます。
sample@aa(sampleClassifier)
① ②
③
(sampleClassifier) sample@aa
2.3 動作確認
- -9
左側にある動作確認ボタンを選択します。
①質問入力欄動作確認用にPepperに質問したい質問を入力できます。
②質問送信ボタン質問入力後、質問送信ボタンをクリックすることで回答が表示されます。
③回答欄入力に対してPepperが回答する回答文と、回答が質問に対して正しい割合である確信度が表示されます。また、画像が登録されている場合は画像データを文字データに変換したものも表示されます。
④フィードバックボタン質問に対して正しい回答が得られたか否かを選択して送信します。正しい場合は「はい」、間違っている場合は「いいえ」を選択してください。
*①〜④までの動作確認の結果はログデータとして表示されます。
(sampleClassifier) sample@aa
①
③
④
②
2.4 ログの確認
- -10
左側にあるログボタンを選択します。
sample@aa(sampleClassifier)
①
②
③
①表示期間検索期間を選択し検索することで、指定した期間のログを表示できます。
②ログ質問をした日時・質問内容・回答内容・フィードバックのログを表示します。フィードバックが「はい」の場合は「この回答は役に立ちました ○」が、フィードバックが「いいえ」の場合は「この回答は役に立ちませんでした ×」が表示され、フィードバックを回答しなかった場合は何も表示されません。
③ダウンロードボタン質問した日時・質問内容・回答内容・確信度・フィードバック・クライアントが記録された csv ファイルをダウンロードすることができます。
2.5 ユーザー辞書
- -11
(sampleClassifier) sample@aa
左側にあるユーザー辞書ボタンを選択します。
①
③
②
④
①変換前の単語一覧と②変換後の単語一覧質問した際、①に登録してある文字列を対応する②の文字列に変換し、実際に問い合わせをします。
③アップロードボタン以下の形式の変換前と変換後の2列csvファイルをアップロードすることでユーザー辞書を登録することができます。ユーザー辞書を全削除したい場合は、空のファイルをアップロードしてください。
④ダウンロードボタン以下の形式の登録してある変換前と変換後の単語のユーザー辞書のcsvファイルをダウンロードすることができます。
変換前の単語1 変換後の単語1
変換前の単語2 変換後の単語2
変換前の単語3 変換後の単語3
2.6 設定
- -12
左側にある設定ボタンを選択します。
sampleClassifiersampleClassifier
①
②
③
④
①分類器編集現在学習に使用している分類器名の表示とその編集ができます。
②確信度設定*・確信度〇〇以上は「自信があります」と回答する。Webブラウザ上のTalkQAのチャットの設定であるため、TalkQA for Pepper では設定値に関わらず登録した回答を回答します。(「自信があります」とは回答しません。)・確信度〇〇未満は「質問を認識できませんでした」と回答する。TalkQA for Pepperでは質問に対する回答の確信度が設定値未満の場合は登録した質問として認識できないとし、ネットワークから取得した回答(フリートーク)を回答します。(「質問を認識できませんでした」とは回答しません。)③チャット質問ログ表示設定Webブラウザ上のTalkQAのチャット質問ログの表示設定であるため、TalkQA for Pepper では使用しません。
④更新ボタン①〜③の変更を設定に更新します。
*登録回答数によって調整が必要な場合があります。
(sampleClassifier) sample@aa
2.7 Pepper連携
- -13
Pepper連携を選択した後、待機画像を選択します。
(sampleClassifier) sample@aa
①
②
③
①画像ファイルアップロードボタン待機時の画像をアップロードできます。ファイルの種類はjpg(jpeg)・png・gifです。また、ファイルの縦横の最大サイズはそれぞれ800px・1280pxです。
②待機時画像確認待機時にPepperのタブレットに表示される画像を確認することができます。何もアップロードせずにPepperと同期した場合は上記のTalkQAのロゴ画像が表示されます。
③削除ボタンアップロードしてある画像を削除します。
- -14
Pepper連携を選択した後、セリフを選択します。
(sampleClassifier) sample@aa
①
②
③ ④ ⑤
①聞き取り開始時セリフQA機能を開始するときに表示・発話するセリフを表示します。1件のみ登録することができます。編集ボタンを選択することでセリフとタグ調整*を編集・登録できます。
②待機時セリフ待機画面でランダムに表示・発話するセリフを表示します。編集ボタンを選択することでセリフとタグ調整*を編集・登録できます。100件まで登録することができます。
③削除ボタン登録してある聞き取り開始時セリフと待機時セリフを削除します。
2.7 Pepper連携
- -15
*「セリフ」:タブレットに表示されるセリフです。 「タグ調整」:Pepperが発話するセリフです。
【タグ調整記載例】・pau:Pepperの発話の一時停止です。ミリ秒単位で指定できます。
(例) \pau=1000\ こんにちは!
・rspd:Pepperの発話するスピードです。50〜200までの速さを 指定できます。指定がない場合は105です。(例) \rspd=105\ こんにちは!
・vct:Pepperの声の高さです。50〜400までの高さを指定できます。 指定がない場合は135です。 (例) \vct=145\ こんにちは!
④アップロードボタン聞き取り開始時セリフと待機時セリフのあるcsvファイルをアップロードできます。ファイルは以下の形式になっています。
⑤ダウンロードボタン聞き取り開始時セリフと待機時セリフのあるcsvファイルをダウンロードできます。ファイルは以下の形式になっています。
待機時セリフ1(セリフ) 待機時セリフ1(タグ調整)
待機時セリフ2(セリフ) 待機時セリフ2(タグ調整)
待機時セリフ3(セリフ) 待機時セリフ3(タグ調整)
2.7 Pepper連携
- -16
Pepper連携を選択した後、PepperIDを選択します。
(sampleClassifier) sample@aa
①
①PepperID登録されているPepperの個体IDを表示します。Pepperがアカウントと同期が成功するとこの画面にIDが表示されます。IDの横にある×ボタンをクリックすることで登録を解除することができます。
2.7 Pepper連携
ロボアプリ「TalkQA」をPepperにインストールする
本作業はウェブブラウザ上で行います
ブラウザで「http://www.softbank.jp/robot/biz/cloud-service/」にアクセスします。
「ロボアプリ配信管理」をクリックします。
SBRアカウント/アルデバランアカウント 作成時に登録したメールアドレス・パスワードを入力し、「サインイン」をクリックします。
3. ロボアプリの設定
- -18
カテゴリ「ロボアプリマーケット for Biz」を選択し、アプリリストより「[Market] TalkQA for Pepper」を選択します。
右上の「配信開始」ボタンをクリックします。
3. ロボアプリの設定
- -19
3. ロボアプリの設定
本作業はPepper上で行います。
Pepper の基本設定画面を開きます。
「すべてのアプリケーションは最新版です」と表示されましたらインストール完了です。
アップデートが開始されます。
左から3番目の「アップデート」アイコンをタップします。
- -20
2.5.5.5
3. ロボアプリの設定
お仕事かんたん生成で お仕事を作成する
本作業はウェブブラウザ上で行います
ブラウザで「http://www.softbank.jp/robot/biz/cloud-service/」にアクセスします。
「お仕事かんたん生成」をクリックします。
SBRアカウント/アルデバランアカウント 作成時に登録したメールアドレス・パスワードを入力し、「サインイン」をクリックします。
- -21
既存のお仕事と区別するために、任意でお仕事名を変更します。「次へ進む」をクリックし、「メニュー」設定画面へ遷移します。(呼び込み/待機、挨拶は任意で設定してください)
TalkQA
3. ロボアプリの設定
- -23
3. ロボアプリの設定
- -24
・メニュー画面表示中のPepperのセリフ設定します。「メニュー開始時トーク」右の鉛筆アイコンをクリックします。
セリフ(例:TalkQA)を入力し、「OK」をクリックします。
ビヘイビアパスを下記の通りに変更し、「OK」をクリックします。
ビヘイビアパス:biz_market_xware_talk_qa_app/behavior_1
3. ロボアプリの設定
- -27
biz_market_xware_talk_qa_app/behavior_1
「次へ進む」をクリックします。(締めトークは任意で設定してください)
3. ロボアプリの設定
- -28
お仕事の期間を「指定しない」、Pepperにお仕事を配信しますか?については「全てのロボットに配信」を選択し、完了ボタンをクリックします。
※ロボットごとに個別で配信設定が必要な場合は「手動で個別に配信」を選択し、次ページ「「手動で個別に配信」を選択した場合」の手順にしたがって配信設定を行ってください。
「お仕事リスト」タブをクリックすると、お仕事のステータスが「配信データ転送中」に変更されています。
反映させたいお仕事を選択し、チェックボックスにチェックが入ったら「OK」をクリックします。
5分ほど経過すると、ステータスが「配信中」に変更されます。
3. ロボアプリの設定
- -30
「手動で個別に配信」を選択した場合
TalkQA
作成したお仕事がPepperに配信されましたら、Pepper本体の管理メニュー「お仕事選択」より作成したお仕事を選択し、アプリを起動してください。
※お仕事選択方法につきまして詳しくはこちらをご参照くださいPepperが実行するお仕事を設定する(スタッフ)http://help.mb.softbank.jp/robot/pepper-for-biz/pc/06-07.html
3. ロボアプリの設定
- -31
起動方法
初期同期画面
TalkQA for Pepper のアプリを初めて実行する時は初期同期画面が表示
されます。なお、2回目のアプリ実行から初期同期画面ではなく、待機画面
が表示されます。
①ユーザ名ユーザ名を入力してください。
②パスワードパスワードを入力してください。
③パスワード表示/非表示ボタンボタンをタッチすることで入力してあるパスワードを表示/非表示すすことができます。
④同期ボタンボタンをタッチすることで①②で入力したアカウントの設定と同期することができます。
手順2で設定したお仕事のマイアプリから起動してください。
4. アプリの使い方
- -33
①
②③
④
一定時間間隔*1で待機時のセリフ*2をタブレットに表示し、Pepperが同じ内
容を発話します。
「画面をタッチする」または「Pepperに近づく」と音声認識画面に遷移しま
す。
*1 待機時セリフの間隔はアプリの設定画面で変更できます。
*2 待機時セリフと待機時の画像はWeb管理画面で登録できます。
待機画面
- -34
4. アプリの使い方
音声認識画面
この画面を表示している間はPepperが音声を認識します。
①質問例登録された質問が例としてランダムに出力されます。
②戻るボタンタップすると音声認識画面が終了し待機画面に戻ります。
- -35
4. アプリの使い方
①
②
質問回答画面
①認識した質問音声で認識した質問が表示されます。
②回答枠認識した質問に対する回答が表示されます。
・TalkQA からの回答の確信度が高い場合
登録された回答を枠内に表示します。
画像が登録されている場合:画像が表示され、登録した回答をPepperが読み上
げます。
画像が登録されていない場合:登録した回答文を表示し、Pepperが読み上げま
す。
「Pepperが読み終わる」または「次へをタップする」とフィードバック画面に遷移し
ます。
・TalkQA からの回答の確信度が低い場合
雑談内容を回答の枠内に表示し、Pepperが読み上げます。
「Pepperが読み終わる」または「次へをタップする」と音声認識画面に遷移しま
す。
- -36
4. アプリの使い方
①
②
フィードバック画面
登録された回答を読み上げた後に、フィードバック画面に遷移します。
Pepperが聞きとった質問に対する回答が正しい場合は「はい」、
間違っている場合は「いいえ」をタップまたは音声で回答してください。Pepperは以下の言葉に対応します。
また、「はい」の場合は、頭タッチでも回答できます。
回答正解 回答不正解
はい いいえ
合っている 違う
合っています 違います
この結果はログデータとして記録され、Web管理画面から確認できます。
- -37
4. アプリの使い方
設定画面
①同期ボタンタップすると同期確認モーダルが出力され、OKボタンをタップすると同期できます。同期成功後は最終同期日時の項目の日時が更新されます。
②音量変更ボタンタップするとスライダーの調整によって音量を変更できます。
③待機時セリフの間隔変更ボタンタップするとキーパッドによって間隔(0〜300秒)を変更できます。ただし、0〜4秒に設定した場合は、5秒ほど待機することになります。
・表示方法
全ての画面の左上を約4秒長押し*すると設定画面に遷移します。* 押している間に画面遷移があった場合は、押し直す必要があります。
- -38
4. アプリの使い方
①
②
③
④
⑤
⑦ ⑥
設定画面
④待機時セリフの発音確認ボタン待機時セリフ数の項目に同期している待機時セリフの数が表示されます。その隣の発音確認ボタンをタップすると、待機時セリフ一覧のモーダルが出力されます。発音を確認したいセリフがある場合は、そのセリフの隣の再生マークをタップしてください。タップしたセリフをPepperが発話します。このセリフはWeb管理画面で変更できます。
⑤アプリ終了ボタンの表示/非表示切替ボタンタップするとON/OFFの切替ができ、設定画面とユーザ切替画面以外の全画面の右上に、アプリ終了ボタンを表示することができます。アプリ終了ボタンをタップするとアプリが終了します。
- -39
4. アプリの使い方
⑥ユーザ切替ボタンタップするとユーザー切替画面に遷移します。
⑦アプリへ戻るボタンタップすると待機画面に戻ります。
ユーザー切替画面
ユーザー切替画面で異なるユーザのコンテンツを同期することができます。初回同
期画面と同じようにWeb管理画面で登録したユーザ名と
パスワードを入力して同期ボタンをタップすると同期ができます。
①戻るボタンタップすると設定画面の戻ります。同期前に左上の戻るボタンをタップすると既に同期してある内容が反映された設定
画面に戻ります。
同期後に左上の戻るボタンをタップすると新しく同期した内容が反映された設定画
面に戻ります。
- -40
4. アプリの使い方
①
- -43
5. うまく動かない場合
・TalkQAが起動しません。
お仕事かんたん生成にて、マイアプリとして登録してあるビヘイビアパスに誤りが無いかご確認くださ
い。
TalkQAのビヘイビアパスは以下の通りです。
ビヘイビアパス:biz_market_xware_talk_qa_app/behavior_1
・その他のお問い合わせ
その他ご不明点等ございましたら下記よりお問い合わせください。
Tel:03-6864-0005 (土日祝日、年末年始を除く10:00〜17:00)Mail:[email protected]フォーム:https://www.talkqa.com/contact/index.html
・Pepperが同期できません・回答しません。
ネットワーク接続がない時、または接続が不安定な場合はTalkQAのコンテンツ同期すること、及び質
問に対して回答することができなくなります。
本事象が発生した場合は Pepper のネットワーク接続設定をご確認ください。