Actions on Googleのアプリを作ってみた

社内勉強会用のActions on Google入門な内容の発表資料です。

Transcript

1. Actions on Googleのアプリを 作ってみた 2018/02/23 Sosuke Okubo
2. 起
3. Google Home mini 年末の投げ売りの時に購入してはみた ものの、エンジニアらしいことができて いないので、とりあえずなんか作ろうと 思った。 という話。
4. 承
5. 調査1：Google Homeで独自の何かをさせる方 法 • Actions on Google ◦ 会話を介してやりとりができる • IFTTT ◦ 任意の言葉にIFTTTに連携できる（トリガーのみ） • google-home-notifer ◦ 任意の言葉をGoogle Homeに喋らせることができる（アクションのみ）
6. 調査2：Actions on Googleアプリを作る方法 • テンプレート ◦ トリビア、クイズなどいくつかテンプレートが用意されている • Dialogflow ◦ DIalogflow（旧API.ai）というチャットボット作成環境を使う ◦ NLU（自然言語理解）エンジンが用意されているので、一番難しいであろうユーザーの発話から アクションに割り振るところをサポートしてくれる • Actions SDK ◦ 短い会話で行う単純なアクションを行う場合や、自前の NLUを使うぜ！という硬派な人向け
7. というわけで、今回は、 Actions on Google + Dialogflow
8. 作るもの 川崎市のゴミ分別を手伝ってくれるアプリ
9. なぜならそこにデータがあったから
10. 転
11. 全体図 3. ゴミの分別情 報を検索 4. 見つかったゴミ分別方法の情報を 返却 2. 文法を理解してユーザーが知りた いゴミの種類をFunctionsに渡す 5. 返答を組み立てて返す 6. ユーザーに回 答を返す 1. ユーザーとの会話 からゴミ分別アプリを 起動
12. Actions on Google 1. プロジェクトを作成 2. Dialogflowを使うことを選択
13. Dialogflow 1. Intentsを設定 2. Entitiesを設定 3. FulfillmentにCloud Functionsを 指定
14. Intents 1つの目的（アクション）を持った会話の まとまり 適用する文法を定義し、Entityを抽出し たり、Fulfillmentを呼び出すなどの応 答を設定することができる 今回はゴミの種類を抽出し、Fulfilment としてCloud Functionsを呼び出すよう に設定
15. Entities アプリの中で利用するキーワードの設定 色や数字などのよく利用されるものにつ いては最初から定義されている JSONやCSVで入力可能 今回は、ゴミの名前を定義
16. Fulfillment 所謂ビジネスロジック Webhookで外部サービスに解析した会 話の内容を渡して処理をしてもらう 今回はCloud Functionsで該当のゴミの 情報を検索し返答する処理を作成
17. Firebase 1. Firestoreにゴミの分別方法DBを 構築 2. 上記を検索するFunctions追加
18. 結
19. デモ
20. 今後やりたいこと • クオリティの向上 ◦ （）問題 ◦ 会話のデザインの見直し • アプリリリース • Alexaスキル化
21. ご静聴ありがとうございました！