【ショート版】 AWSを駆使して特許出願に至ったVUIの「音声レビュー・ログデータ収集・分析システム」の話

by show

Slide 1

Slide 1 text

2019/05/09 AAJUG 関東支部 Vol.3 - re:cap Alexa Day 2019@スペースアルファ三宮【ショート版】 AWSを駆使して特許出願に至ったVUIの「音声レビュー・ログデータ収集・分析システム」の話 1

Slide 2

Slide 2 text

発表の前に 2 ・この資料は後日公開予定です。・メモるよりは #AAJUG でツイート！・セッション内容のシステムは今後変更される可能性があります。むしろリクエスト、ディスカッションください。・本システムの権利はSmartHacks社から僕に移譲されてます。

Slide 3

Slide 3 text

@surumegohan smartmacchiato.life/ [email protected] surumegohan.hatenablog.com/ Twitter Blog Gmail Web 3 フリーランス VUIプロデューサー/エンジニア宮崎翔平

Slide 4

Slide 4 text

@surumegohan smartmacchiato.life/ [email protected] surumegohan.hatenablog.com/ Twitter Blog Gmail Web 4 フリーランス VUIプロデューサー/エンジニア

Slide 5

Slide 5 text

経歴 5 DBA QA・SET DevOps推進 #AAJUG

Slide 6

Slide 6 text

経歴 6 元DBA・QAエンジニア・DevOps推進 → 2018年4月にVUI（スマートスピーカー）に専念したくサクッと無職 → フリーランス → 某社CTO内定、大人の事情で白紙 #AAJUG

Slide 7

Slide 7 text

3つのコミュニティを運営中 7 ・Amazon Alexa Japan User Group (AAJUG) 関東支部・2019年から関東支部発足・主催 https://aajug.connpass.com/ ・3か月に1回開催、2019年3月で1周年・300人以上が集まる回もある https://kotodama.connpass.com/ ・2019年4月で8回目の開催・150人以上が集まる回もある https://iotlt.connpass.com/ #AAJUG

Slide 8

Slide 8 text

今まで作成したAlexaスキルの一部 ※公開済みのみ 8 #AAJUG

Slide 9

Slide 9 text

9 本日は技術的な話を中心にします

Slide 10

Slide 10 text

10 ・VUIに対する悩み、課題・課題へのソリューション・システム構成・Amazon QuickSightの機械学習対応本日は技術的な話を中心にします

Slide 11

Slide 11 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova AWS Lambda Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon CloudWatch Amazon API Gateway ERRORだけ抜き取るエラー通知が飛ぶ。 AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ERRORや障害時のみ通知するための動作・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用 Amazon CloudWatch API Gatewayを突破したらすべて CloudWatchにログをためておくシステム構成概要 Amazon API Gateway AWS Lambda 11 ※動いた段階の構成。現在は一部異なります。 #AAJUG

Slide 12

Slide 12 text

ダッシュボード 12 #AAJUG

Slide 13

Slide 13 text

Slide 14

Slide 14 text

VUIに関してこんなお悩みありませんか？ 14

Slide 15

Slide 15 text

こんな悩みありませんか？ 15 ・VUIやスマートスピーカーに興味あるんだけど、どういう音声サービスを見習って作ればいいのかわからない #AAJUG

Slide 16

Slide 16 text

こんな悩みありませんか？ 16 ・VUIやスマートスピーカーに興味あるんだけど、どういう音声サービスを見習って作ればいいのかわからない・音声サービス（スキル）作成を誰かに依頼したいけど、人気サービスをリリースしている人・企業がわからない #AAJUG

Slide 17

Slide 17 text

こんな悩みありませんか？ 17 ・VUIやスマートスピーカーに興味あるんだけど、どういう音声サービスを見習って作ればいいのかわからない・音声サービス（スキル）作成を誰かに依頼したいけど、人気サービスをリリースしている人・企業がわからない・既に音声サービスを公開したけど、ユーザーの満足度がわからない #AAJUG

Slide 18

Slide 18 text

こんな悩みありませんか？ 18 ・VUIやスマートスピーカーに興味あるんだけど、どういう音声サービスを見習って作ればいいのかわからない・音声サービス（スキル）作成を誰かに依頼したいけど、人気サービスをリリースしている人・企業がわからない・既に音声サービスを公開したけど、ユーザーの満足度がわからない・自分の音声サービスが、他者のサービスと比較できなくて改善できない #AAJUG

Slide 19

Slide 19 text

そのような方々へのセッションです！ 19

Slide 20

Slide 20 text

2018年11月7日にリリース 20 #AAJUG

Slide 21

Slide 21 text

21 #AAJUG 動画中はツイートチャンス！ https://www.youtube.com/watch?v=8I4eQMEBeaA

Slide 22

Slide 22 text

VUIの悲しい現実をご紹介 22 #AAJUG

Slide 23

Slide 23 text

Amazonのスキルストアレビュー数？ 23 UUがリリース2週間で数百人 #VOT

Slide 24

Slide 24 text

Amazonのスキルストアレビュー数 2 24 #VOT UUが数百人の一方で・・

Slide 25

Slide 25 text

2 件ってなんだよ！ © タイトル：ブラックジャックによろしく著作者名: 佐藤秀峰 25

Slide 26

Slide 26 text

ユーザーからのフィードバックが欲しい！それは、たとえネガティブでも良い 26 何かのサービス、アプリを公開したら #AAJUG

Slide 27

Slide 27 text

ユーザーからのフィードバックが欲しい！それは、たとえネガティブでも良い 27 何かのサービス、アプリを公開したら無反応が一番嫌だ・困る・怖い #AAJUG

Slide 28

Slide 28 text

このスキルでは結城琴葉ちゃんから美少女ボイスで音声でのレビューとコメントを求められる 28 だが策はある

Slide 29

Slide 29 text

音声によるレビューの結果 118件 ※重複ユーザーも存在 ※公開約2週間後 ※βテストやAmazon社の審査時の数字も含まれる 29 #AAJUG

Slide 30

Slide 30 text

2 件ってなんだったんだよ！ © タイトル：ブラックジャックによろしく著作者名: 佐藤秀峰 30 #AAJUG

Slide 31

Slide 31 text

音声によるフリーコメントの一部・とってもいいスキルでした 31 #AAJUG

Slide 32

Slide 32 text

音声によるフリーコメントの一部・とってもいいスキルでした・星7つ 32 #AAJUG

Slide 33

Slide 33 text

音声によるフリーコメントの一部・とってもいいスキルでした・星7つ・魂スキルでしたとっても良かったです ※楽しい？・大好きです・かわいらしいキャラクターで素晴らしいと思います・天海丸matlock 欲しい ※展開がまどろっこしい? 33 まさにお客様の「声」 #AAJUG

Slide 34

Slide 34 text

もちろん美少女でなくともフィードバックはもらえる 34 「ストップ」と話しかけると「いいね」「いまいち」「ストップ」を求められる仕組み ※2018年6月リリース #AAJUG

Slide 35

Slide 35 text

35 公開から約2か月後の集計結果合計186件リリース後しばらくは「いいね」が多かったがいつのまにか「いまいち」に逆転 #AAJUG

Slide 36

Slide 36 text

つまり・・スキル（音声サービス）に対するレビューとコメントを、そのまま声でやれば 36 #AAJUG

Slide 37

Slide 37 text

つまり・・スキル（音声サービス）に対するレビューとコメントを、そのまま声でやればまさしく「お客様の声」が個人情報なしで拾える可能性が高まる 37 #AAJUG

Slide 38

Slide 38 text

つまり・・いちいちスマホ・PC を開かない 38 #AAJUG

Slide 39

Slide 39 text

なのに・・ Google社、Amazon社、LINE社どこも日本でやってないな？ 39 #AAJUG

Slide 40

Slide 40 text

僕のモットーないなら創ればいい 40 #AAJUG

Slide 41

Slide 41 text

Slide 42

Slide 42 text

コンセプト 42 ・API化・インテントの使用状況・★いくつ・フリーコメント・時間・カテゴリ・作成ツールデータ収集・SQLで検索・BIツールでグラフ化・Webページに反映分析・可視化・VUIでユーザが違和感を持たない応答速度・プラットフォームに依存しない設計こだわり部分 #AAJUG

Slide 43

Slide 43 text

調査&Try-Errorを繰り返す 43 ・データレイク・データウェアハウス #AAJUG

Slide 44

Slide 44 text

44 https://aws.amazon.com/jp/start-ups/loft/tokyo/ スタートアップとデベロッパーのための場 AWS Loft Tokyoにてエキスパートの方々に相談しながら・・・ Twitterハッシュタグ #AWSLoft #AAJUG

Slide 45

Slide 45 text

45 データ処理等のイベントは重宝 #AAJUG

Slide 46

Slide 46 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova AWS Lambda Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon CloudWatch Amazon API Gateway ERRORだけ抜き取るエラー通知が飛ぶ。 AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ERRORや障害時のみ通知するための動作・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用 Amazon CloudWatch API Gatewayを突破したらすべて CloudWatchにログをためておくシステム構成概要 Amazon API Gateway AWS Lambda 46 ※動いた段階の構成。現在は一部異なります。 #AAJUG

Slide 47

Slide 47 text

特許出願できた 47 弁理士さんとのやりとりとか、書類とか大変でしたないモノを比較・可視化まで創ってしまったので ※ 1つのスキル（音声サービス）単体で音声のレビュー&コメントを実装するのはご自由に。ただ、このシステムを利用すると可視化まで既に仕組みができているので便利です。 #AAJUG

Slide 48

Slide 48 text

48 ここから、技術的な話をします

Slide 49

Slide 49 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova AWS Lambda Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon CloudWatch Amazon API Gateway ERRORだけ抜き取るエラー通知が飛ぶ。 AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ERRORや障害時のみ通知するための動作・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用 Amazon CloudWatch API Gatewayを突破したらすべて CloudWatchにログをためておくシステム構成概要 Amazon API Gateway AWS Lambda 49 ※動いた段階の構成。現在は一部異なります。 #AAJUG

Slide 50

Slide 50 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用アラート系は本質ではないので別として Amazon API Gateway AWS Lambda 50 アラート系 #AAJUG

Slide 51

Slide 51 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用まずは登録部分 Amazon API Gateway AWS Lambda 51 アラート系 #AAJUG

Slide 52

Slide 52 text

必要情報をいれるとSHAのIDを付与 52 Alexaスキル申請の情報入力を強く推奨・音声サービス名称（スキル名、アプリ名）例：VUIあるある・開発者名例：surumegohan ・SHAユーザのメールアドレス1アカウント例：[email protected] ・スキル開発に使用しているツール例：Alexa Console+Lambda、ASK CLI .. #AAJUG

Slide 53

Slide 53 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用スキル作成時 Amazon API Gateway AWS Lambda 53 アラート系 #AAJUG

Slide 54

Slide 54 text

スキルに組み込むやり方 54 今から話す箇所は導入ガイドに「VUIあるある」のソースコードと共に書いてあります ※VUIのあるある話も併せて確認できてお得 #AAJUG

Slide 55

Slide 55 text

音声のレビューを使うなら 55 1から5の整数値の範囲のみ受け付けるように実装を実施してください・インテント名 SHAVoiceReviewIntent ・インテントスロット名前：SHAVoiceReviewNumber スロットタイプ：AMAZON.NUMBER #AAJUG

Slide 56

Slide 56 text

音声のフリーコメントを使うなら 56 音声によるフリーコメント機能を導入する場合、以下の条件で実装を実施してください・インテント名 SHAVoiceFreeCommentIntent ・インテントスロット名前：SHAVoiceFreeComment スロットタイプ：AMAZON.SearchQuery #AAJUG

Slide 57

Slide 57 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用 API Gatewayの呼び出し Amazon API Gateway AWS Lambda 57 アラート系 #AAJUG

Slide 58

Slide 58 text

58 API GatewayにhandlerInputをPOST SHAIDとメールアドレスを含める問題なければ 200が返ってくるそれ以外はそれなりのエラーが返ってくる #AAJUG

Slide 59

Slide 59 text

59 各インテントの発話タイミング前等に含めるスキルの特性によりレビューやコメントの実装は義務ではないですが・LaunchRequest ・各種Intent ・STOP、CANCEL、HELP に入れてもらうと、呼び出された時間や利用状況のログを公平に比較できる逆にインチキしてそうなスキルは報告してくれればSHAから外すなどの対応をする予定 #AAJUG

Slide 60

Slide 60 text

なんでそんな認証方式？ 60

Slide 61

Slide 61 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用 Cognitoなりアカウントリンクなりも検討した Amazon API Gateway AWS Lambda 61 Amazon Cognito #AAJUG

Slide 62

Slide 62 text

以下の理由でやめた 62 ・SHA利用の全音声サービスが、認証方式に対応するのは非現実的 #AAJUG

Slide 63

Slide 63 text

以下の理由でやめた 63 ・SHA利用の全音声サービスが、認証方式に対応するのは非現実的・個人情報等はとりたくない #AAJUG

Slide 64

Slide 64 text

以下の理由でやめた 64 ・SHA利用の全音声サービスが、認証方式に対応するのは非現実的・個人情報等はとりたくない・何よりVUIとして、各種ログ取得のためにスキルのユーザーへの遅延は論外 #AAJUG

Slide 65

Slide 65 text

情熱、思想、理念、頭脳、気品、優雅さ、勤勉さ 65 速さが足りない！！そして何よりも－－－－ #AAJUG

Slide 66

Slide 66 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用なのでレスポンスとデータ格納を分割する Amazon API Gateway AWS Lambda 66 アラート系 #AAJUG

Slide 67

Slide 67 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用データ格納箇所 Amazon API Gateway AWS Lambda 67 アラート系 #AAJUG

Slide 68

Slide 68 text

データ格納は・・・ 68 検討・苦労した箇所 #AAJUG

Slide 69

Slide 69 text

1データごとに格納していられないので 69 Kinesisシリーズで一旦溜めて、まとめてS3へ Amazon Kinesis Firehose S3 bucket AWS Lambda #AAJUG

Slide 70

Slide 70 text

一番はじめ 70 RDS（PostgreSQL）に入れたい ※オンプレ脳 #AAJUG

Slide 71

Slide 71 text

なぜPostgreSQLか 71 ・今までOracleと同等以上に扱って使ってきた #AAJUG

Slide 72

Slide 72 text

なぜPostgreSQLか 72 ・今までOracleと同等以上に扱って使ってきた・将来的にビッグデータとしてRedShiftを考慮するとPostgreSQLの方が相性がいい #AAJUG

Slide 73

Slide 73 text

しかし 73 Lambdaで直接RDSに格納するのは相性悪すぎる #AAJUG

Slide 74

Slide 74 text

案1 オンプレDBA経験 74 PostgreSQLならpgpool-IIでコネクションプールを使えばいけるか！？ #AAJUG

Slide 75

Slide 75 text

案1 やめた 75 ・事例がなさすぎる・下手したらEC2 on PostgreSQLになる・サチる ※飽和状態になる #AAJUG

Slide 76

Slide 76 text

案2 76 ※公式ページの説明文 AWS Glue は抽出、変換、ロード (ETL) を行う完全マネージド型のサービスで、お客様の分析用データの準備とロードを簡単にします。 AWS Glue Glueをかませればいけるか！？ #AAJUG

Slide 77

Slide 77 text

案2 77 罠を踏んだ #AAJUG

Slide 78

Slide 78 text

案2 78 罠を踏んだ・対象データが1件（CSV1行）のみの場合に動かない → 1件は極めて稀だが運用中の可能性がゼロではない #AAJUG

Slide 79

Slide 79 text

案2 79 罠を踏んだ・対象データが1件（CSV1行）のみの場合に動かない → 1件は極めて稀だが運用中の可能性がゼロではない・PySparkの生成がエラーになることがある ※PySpark：要するに大量データの高速処理するやつ今日は深くは語らないです Python＋Apache Spark #AAJUG

Slide 80

Slide 80 text

案2 80 SHAでデータ格納のためにGlueを用いるには・運用が高額すぎる・使いこなせる人が身近にあんまりいない #AAJUG

Slide 81

Slide 81 text

案3 81 DBを持たないで素直にAthenaでSQL検索すればいいじゃないサーバレス万歳 S3 bucket Amazon Athena #AAJUG

Slide 82

Slide 82 text

82 Athenaは構わないが、どのような角度でデータ分析が必要になるのか想像がつかない #AAJUG 案3

Slide 83

Slide 83 text

Athena案維持費は最安値の可能性 83 Amazon Kinesis Firehose S3 bucket AWS Lambda Parquet形式変換 Amazon Athena 検索 Amazon QuickSight #AAJUG

Slide 84

Slide 84 text

Athena案けども・・ 84 Amazon Kinesis Firehose S3 bucket AWS Lambda Parquet形式変換 Amazon Athena ここにお金がかかる検索 Amazon QuickSight #AAJUG

Slide 85

Slide 85 text

Athena案けども・・ 85 Amazon Kinesis Firehose S3 bucket AWS Lambda Parquet形式変換 Amazon Athena ここにお金がかかる検索どのように分析されるか未知数であるためパーティション化が難しい Amazon QuickSight #AAJUG

Slide 86

Slide 86 text

案3 ここで長期的に考える 86 長期的に見て、後からRedShiftを使用することになると VUIのデータが流れてる状態でマイグレーションする可能性がある #AAJUG

Slide 87

Slide 87 text

案3 ここで長期的に考える 87 長期的に見て、後からRedShiftを使用することになると VUIのデータが流れてる状態でマイグレーションする可能性があるフリーランスの僕が抜けた後に苦労しそう #AAJUG

Slide 88

Slide 88 text

案4 はじめからRedShift 88 ・ Amazon Redshift ・データ分析をBIツールでやるなら、やはりRedShift #AAJUG

Slide 89

Slide 89 text

案4 はじめからRedShift 89 ・ Amazon Redshift ・データ分析をBIツールでやるなら、やはりRedShift ・列指向 #AAJUG

Slide 90

Slide 90 text

案4 はじめからRedShift 90 ・ Amazon Redshift ・データ分析をBIツールでやるなら、やはりRedShift ・列指向 → レビュー、フィードバックコメント、人気度（AlexaのsessionId）をそれぞれ独立列で管理できる #AAJUG

Slide 91

Slide 91 text

案4 はじめからRedShift 91 ・ Amazon Redshift ・データ分析をBIツールでやるなら、やはりRedShift ・列指向 → レビュー、フィードバックコメント、人気度（AlexaのsessionId）をそれぞれ独立列で管理できる・きちんと設計すれば速い → ショートクエリ判断、リザルトキャッシュ etc #AAJUG

Slide 92

Slide 92 text

結果、素直にFirehoseからRedShift 92 Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用 Amazon API Gateway AWS Lambda 92 アラート系 #AAJUG

Slide 93

Slide 93 text

Alexa skill AWS Lambda システムユーザのアレクサのスキル Clova Amazon Kinesis Firehose S3 bucket Amazon DynamoDB Amazon Redshift Webページに音声レビュー結果を表示 Amazon API Gateway AWS Lambda まず認証だけやる AWS cloud 3 4 5 6 9 10 11-2 12 13 14 15 ・認証情報 Webページから認証情報発行 1 2 7 8 Amazon QuickSight AWS Lambda 10 12 invoke Amazon Kinesis Firehose S3 bucket 11-1 12 データをCSV形式に変換して流す想定される格納データの生データのまま生データ保管用分析画面箇所 Amazon API Gateway AWS Lambda 93 アラート系 #AAJUG

Slide 94

Slide 94 text

ダッシュボードのツールといえば 94 ・Re:dash ・Metabase ・Kibana ・Pentaho etc.. #AAJUG

Slide 95

Slide 95 text

サーバレスで運用不要のBIサービス 95 Amazon QuickSight #AAJUG

Slide 96

Slide 96 text

ダッシュボード 96 #AAJUG

Slide 97

Slide 97 text

ダッシュボード 97 #AAJUG

Slide 98

Slide 98 text

98 Amazon QuickSightの機械学習

Slide 99

Slide 99 text

例1：人気が高すぎる場合の異常値検知 99 #AAJUG

Slide 100

Slide 100 text

100 #AAJUG

Slide 101

Slide 101 text

101 異常（異常値）が発見されるとタイムリーにEメールでアラートを送信 #AAJUG

Slide 102

Slide 102 text

102 誤った情報だった by Amazon サポート #AAJUG

Slide 103

Slide 103 text

やるとしたら・・ 103 Amazon Redshift Amazon CloudWatch event (time-based) AWS Lambda email notification Amazon SNS #AAJUG

Slide 104

Slide 104 text

例２：スキルの伸びしろ予測 104 #AAJUG

Slide 105

Slide 105 text

欠点 105 ・QuickSightの仕様上、 1グラフごとにしか機械学習の予測ができない #AAJUG

Slide 106

Slide 106 text

欠点 106 ・QuickSightの仕様上、 1グラフごとにしか機械学習の予測ができない現状だとスキル毎にRedShiftのViewと QuickSightのダッシュボードを作る・・？ #AAJUG

Slide 107

Slide 107 text

2018年11月7日リリースもちろん情報収集する旨をAmazonに伝えた上での審査一発通過 107 そんなシステムを使ったサンプル #AAJUG

Slide 108

Slide 108 text

https://smartmacchiato.life/vuiaruaru.html 108 Webページで音声によるレビュー&コメント結果を表示 #AAJUG

Slide 109

Slide 109 text

109 #AAJUG

Slide 110

Slide 110 text

このシステムのメリット１．スキルの利用頻度や、音声でのレビューやコメントが公平に可視化される仕組みが用意してあるのでスクラッチしなくていい２．自分の音声サービスが、ユーザがどのように対話をしているか（インテントを呼び出しているか）認識できる ※グラフの作り方次第３．自分以外の音声サービスの利用状況と比較できる → 自分・自社のKPIの指標にするもよし人気サービスのリリース者を探して開発依頼をするもよし ※既に様々な企業・団体・個人がβ版利用宣言済４．同じロジックのスキルを作成し、GoogleでもAmazonでもLINEでもプラットフォームをまたがった比較ができる ※作成中 110 #AAJUG

Slide 111

Slide 111 text

Slide 112

Slide 112 text

このシステムのメリット１．スキルの利用頻度や、音声でのレビューやコメントが公平に可視化される仕組みが用意してあるのでスクラッチしなくていい２．自分の音声サービスが、ユーザがどのように対話をしているか（インテントを呼び出しているか）認識できる ※グラフの作り方次第３．自分以外の音声サービスの利用状況と比較できる → 自分・自社のKPIの指標にするもよし人気サービスのリリース者を探して開発依頼をするもよし ※既に様々な企業・団体・個人がβ版利用中４．同じロジックのスキルを作成し、GoogleでもAmazonでもLINEでもプラットフォームをまたがった比較ができる ※作成中 112 #AAJUG

Slide 113

Slide 113 text

このシステムのメリット１．スキルの利用頻度や、音声でのレビューやコメントが公平に可視化される仕組みが用意してあるのでスクラッチしなくていい２．自分の音声サービスが、ユーザがどのように対話をしているか（インテントを呼び出しているか）認識できる ※グラフの作り方次第３．自分以外の音声サービスの利用状況と比較できる → 自分・自社のKPIの指標にするもよし人気サービスのリリース者を探して開発依頼をするもよし ※既に様々な企業・団体・個人がβ版利用中４．同じロジックのスキルを作成し、GoogleでもAmazonでもLINEでもプラットフォームをまたがった比較ができる ※作成中 113 #AAJUG

Slide 114

Slide 114 text

今後の展望１．LINE Clova対応 114 #AAJUG

Slide 115

Slide 115 text

今後の展望１．LINE Clova対応２．Actions on Google対応 115 #AAJUG

Slide 116

Slide 116 text

今後の展望１．LINE Clova対応２．Actions on Google対応３．先週と今週の利用頻度を比較して通知 116 #AAJUG

Slide 117

Slide 117 text

そして何よりみんなで切磋琢磨するようになるので、 VUI業界のスキル（音声サービス）の品質が向上される未来が描ける！！ by VUIプロデューサー 117 #AAJUG

Slide 118

Slide 118 text

まとめ 118 【可視化】・スキル（音声サービス）のログ・音声でのレビュー&感想ご関心ある方はお声がけを #AAJUG

Slide 119

Slide 119 text

「VUIあるある」のソースコードと利用ドキュメント公開予定ご関心がある方は懇親会で！ ※もちろんメールやTwitter等で連絡をいただいても構わないです 119 #AAJUG

Slide 120

Slide 120 text

宣伝 120 #AAJUG アイリッジ社の会議室利用可