Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
HMCC2019 Emoji SANPO
Search
Takuya Mukohira
February 22, 2019
Programming
0
3.2k
HMCC2019 Emoji SANPO
Takuya Mukohira
February 22, 2019
Tweet
Share
More Decks by Takuya Mukohira
See All by Takuya Mukohira
Podcasting Guide 2024
mktakuya
3
1.3k
『インタプリタの作り方』の紹介 / Let's enjoy crafting interpreters
mktakuya
1
1.2k
マネジメントとコミュニケーションとプロトコルと / kichijojipm-34
mktakuya
1
910
自分の道具を自作してつくる喜びを体感しよう、Railsで。 〜4年続いたPodcastを実例に〜 / Kaigi on Rails 2023
mktakuya
1
2.2k
Podcast配信システムを自作したら捗った話 / kichijojipm-28
mktakuya
0
2.7k
趣味と趣味の掛け算で技術を学んでいく話 / 2020-11-27
mktakuya
0
350
ゆるふわなPodcastのすすめ / kichijojipm-22
mktakuya
0
1.3k
コーチLT / Rails Girls Tokyo 12th
mktakuya
1
1.1k
プログラミングと一人暮らし 〜Nature Remoで遊ぶ編〜 / prolt-2019
mktakuya
1
340
Other Decks in Programming
See All in Programming
GitHub Copilot and GitHub Codespaces Hands-on
ymd65536
1
130
Azure AI Foundryではじめてのマルチエージェントワークフロー
seosoft
0
140
Webの外へ飛び出せ NativePHPが切り拓くPHPの未来
takuyakatsusa
2
440
イベントストーミング図からコードへの変換手順 / Procedure for Converting Event Storming Diagrams to Code
nrslib
1
500
すべてのコンテキストを、 ユーザー価値に変える
applism118
2
950
童醫院敏捷轉型的實踐經驗
cclai999
0
200
5つのアンチパターンから学ぶLT設計
narihara
1
120
Modern Angular with Signals and Signal Store:New Rules for Your Architecture @enterJS Advanced Angular Day 2025
manfredsteyer
PRO
0
140
Cline指示通りに動かない? AI小説エージェントで学ぶ指示書の書き方と自動アップデートの仕組み
kamomeashizawa
1
580
deno-redisの紹介とJSRパッケージの運用について (toranoana.deno #21)
uki00a
0
150
技術同人誌をMCP Serverにしてみた
74th
1
440
C++20 射影変換
faithandbrave
0
540
Featured
See All Featured
Designing for humans not robots
tammielis
253
25k
Making Projects Easy
brettharned
116
6.3k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
252
21k
Scaling GitHub
holman
459
140k
A Modern Web Designer's Workflow
chriscoyier
694
190k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
130
19k
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
15
1.5k
Designing Experiences People Love
moore
142
24k
Building Better People: How to give real-time feedback that sticks.
wjessup
367
19k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
29
9.5k
Adopting Sorbet at Scale
ufuk
77
9.4k
Facilitating Awesome Meetings
lara
54
6.4k
Transcript
Emoji SANPO 直感で絵文字を選ぶと お出かけ先を提案してくれるアプリケーション 苫小牧高専 ソフトウェアテクノロジー部 向平 卓矢 水野 琴未
2019/02/22 北海道学生アプリコンテスト2019
検索
検索 • キーワードなどを条件に設定し、 それに合ったデータを探し出すこと。 ※出典: ASCIIデジタル用語辞典
テキスト検索
音声検索
画像検索
いろいろな検索 • テキスト検索 ・ユーザが入力したキーワードで検索 • 音声検索 ・ユーザの音声を認識して、キーワードで検索 • 画像検索 ・ユーザの画像を認識して似た画像を検索
いろいろな検索 • テキスト検索 ・ユーザが入力したキーワードで検索 • 音声検索 ・ユーザの音声を認識して、キーワードで検索 • 画像検索 ・ユーザの画像を認識して似た画像を検索
絵文字検索
絵文字検索 • 私たちが提案する、新しい検索方法 • ユーザが今の気分を絵文字で表現し、 その絵文字をもとに検索できる • 既存のものとは一味違った 検索UIを提供する
世界共通語 Emoji • 日本のケータイ絵文字から始まり、 世界共通語「Emoji」へ • 言葉では表しにくい感情の表現や、 単体で意味を持つ文字として便利
世界共通語 Emoji • 日本のケータイ絵文字から始まり、 世界共通語「Emoji」へ • 言葉では表しにくい感情の表現や、 単体で意味を持つ文字として便利 「絵文字で何かおもしろいことをしたい!」 という思いから絵文字検索が生まれました
絵文字検索 絵文字検索 ユーザの感情 気分に合った コンテンツ 絵文字で入力 提供
絵文字検索 絵文字検索 ユーザの感情 気分に合った コンテンツ 絵文字で入力 提供 言葉の壁を超えた直感での検索が可能に
絵文字検索の仕組み • コンテンツの感情を分析、絵文字でタグ付け • 感情分析システムにはDeepMojiと Google Cloudを使用しRubyでAPI化 入力 絵文字登録 コンテンツ
感情分析システム 絵文字検索エンジン
感情で検索 キーワードで検索
Emoji SANPO
Emoji SANPO 【コンセプト】 直感で絵文字を選ぶと お出かけ先を提案してく れるアプリケーション
絵文字検索 • TOP画面には絵文字の 一覧が表示 • 絵文字を選択し場所を 検索
絵文字を地図に表示 • 検索した絵文字に関連し た場所を地図上に絵文字 で表示 • 場所の詳細画面では、そ の場所に関連した他の絵 文字も見ることができる
地図アプリと連携 • 「この場所に行く」 のボタンから地図アプ リに飛べる
絵文字レビュー • 訪れた場所に絵文字で レビューをつける • 絵文字レビューで集め たデータで検索の精度 が高まる 絵文字レビューする
絵文字コレクション • レビューをした絵文字 はコレクション機能で 確認できる • ユーザの継続利用のた めにゲーム性を付加
Demo
絵文字タグ付けの仕組み DeepMojiを利用して、レビュー文から絵文字を出力、場所と紐付け Google Translation APIを利用し、レビューを英訳 Google Maps Platformを利用し、場所情報を取得 Google Places
APIを利用して、場所に紐づくレビューを取得 ユーザからの絵文字レビューを利用し、データを強化する
絵文字検索で 場所を探す!
絵文字検索で 場所を探す! 実際に場所に 行く!
絵文字検索で 場所を探す! 実際に場所に 行く! 絵文字レビュー で検索精度向上!
絵文字検索で 場所を探す! 実際に場所に 行く! 絵文字レビュー で検索精度向上!
利用した技術 • サーバサイド ・Ruby 2.5 / Ruby on Rails 5.2.1
• クライアントサイド ・Swift 4.1 / UIKit • その他使用したAPIやライブラリ ・Google Maps Platform ・DeepMoji
絵文字検索の未来 • Emoji SANPOでは、場所の絵文字検索を 可能にした • テキストや音声、動画に関する感情分析の 研究も盛んに行われている • 将来的には、テキストや画像に次ぐ
第三の検索として利用されていく
絵文字検索の未来
絵文字検索の未来 様々なコンテンツに対応可能!
Emoji SANPO 直感で絵文字を選ぶと お出かけ先を提案してくれるアプリケーション 苫小牧高専 ソフトウェアテクノロジー部 向平 卓矢 水野 琴未
END◦