Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
Kingyo AI Naviアプリ開発 / Kingyo AI Navi App
moonlight-aska
June 30, 2019
0
220
Kingyo AI Naviアプリ開発 / Kingyo AI Navi App
2019年6月30日開催の「【奈良】GCPUG in Nara #4 ~ 奈良1周年!! IoT × GCP ~」のLT資料です.
moonlight-aska
June 30, 2019
Tweet
Share
More Decks by moonlight-aska
See All by moonlight-aska
Kingo AI Navi LINEをもっと使い倒せ!!
aska
0
32
Depth画像で物体検知やってみたー。/ Objects Detection with Depth Images
aska
0
230
AutoML Vision Edgeで金魚分類モデルを学習してみた / Kingyo Classification Model with AutoML Vision Edge
aska
0
230
AutoML Vision Edge + ML Kit for Firebase ⇒ Kingyo Classification
aska
1
350
Kingyo AI Navi
aska
0
300
ピープルカウンタ、その後。/ People Counter
aska
0
320
物体検出をPythonで動かしてみる! / Try using YOLOv3 in Python
aska
0
610
ML Kitでちょびっと金魚AI / Recognition of goldfish type using ML Kit
aska
0
210
機械学習のための音声信号処理(基礎編)/ Speech Signal Processing
aska
0
710
Featured
See All Featured
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
29
4.3k
How to Ace a Technical Interview
jacobian
265
21k
The Pragmatic Product Professional
lauravandoore
19
2.9k
Atom: Resistance is Futile
akmur
255
20k
KATA
mclloyd
7
8.6k
Why Our Code Smells
bkeepers
PRO
324
54k
Git: the NoSQL Database
bkeepers
PRO
415
59k
Web Components: a chance to create the future
zenorocha
303
40k
Unsuck your backbone
ammeep
659
55k
How To Stay Up To Date on Web Technology
chriscoyier
780
250k
Faster Mobile Websites
deanohume
294
28k
Designing the Hi-DPI Web
ddemaree
272
32k
Transcript
GCPUG in Nara #4 LT Kingyo AI Navi アプリ開発 2019.6.30
CODE for YAMATOKORIYAMA Moonlight 明日香
自己紹介 Facebook moonlight.aska Twitter @moonlight_aska Blog みらいテックラボ http://mirai-tec.hatenablog.com NARA
鶴田 彰 (昔の)得意分野 : パターン認識(音声, 画像, etc) ユーザ適応(レコメンド, etc) コミュニティ活動 : GCPUG NARA Organizer CODE for YAMATOKORIYAMA
金魚の街「大和郡山市」 金魚の水槽やオブジェなどが街中にあふれている. まだまだ金魚をアピールできる余地がある. 2018年 金魚愛[AI]育成プロジェクト発足
2019.3.16 アイデア部門 金賞受賞!!
Kingyo AI Naviとは ① 金魚にカメラをかざすと, 金魚の種類を推定!
Kingyo AI Naviとは ② 金魚の特長・飼い方と 必要な道具がわかる! などなど ③ 金魚の入手先(生息地)や関連 スポットをマップ上に表示
今日お話しすること 「LINE Bot × GCP」で アプリ化を考えてみた話!!
なぜLINE Bot? ネイティブアプリ メリット少ないとそもそもインストールさえされない!! AndroidとiPhoneの両方作成が必要. LINE Botの枠組み利用
Kingyo AI Naviに友達申請するだけ!! LINEアプリはAndroid, iPhoneどちらでも利用可.
システム構成 金魚の種類判定 質問文のタイプ判定 金魚, 郡山市情報
試したこと 金魚画像を送って種類判定 文字による問い合せの質問タイプの判定 判定結果に基づいた応答文表示 LINE Messaging APIのメッセージの表示タイプ調査
金魚の種別判定 22種類 約940サンプル (Data Augmentationで約10000サンプルに) 学習時間5時間で 0.928
質問文のタイプ判定 質問文 ・金魚の育て方 ・金魚の病気 ・郡山のイベント ・金魚スポット : 入力のゆらぎ対応 例) 金魚の育て方
(を教えて) きんぎょ キンギョ 金魚 育て方 飼い方 飼育方法 飼育法 : × Entities ー 教えて わかる? : × 組み合わせの表現に対応!!
LINEのメッセージオブジェクト テキストメッセージ 画像/動画/音声メッセージ 位置情報メッセージ スタンプメッセージ
テンプレートメッセージ (ボタンテンプレート) テンプレートメッセージ (確認テンプレート) テンプレートメッセージ (カルーセルテンプレート)
デモ デモ
現状の課題 仕様面: ユーザが友達申請してくれるような魅力あるアプリ仕様を策 定する. 問い合わせで対応する範囲が決まっていない. 技術面: 金魚種類判定の際にAutoML
Visionからのレスポンスが遅い. 応答で表示する情報について, 最新情報をどのように取得す るか? GCE ⇒ Cloud Functionsに移行すべきか?
今後やってくこと Kingo AI Naviアプリの仕様明確化と開発 イベントで収集した金魚画像データの活用 金魚関連情報の収集と活用 Kingo
AI Navi実現プロジェクト
17 Thank You!