Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
クックパッド検索結果新着順の改善
Search
しげひさ
March 17, 2024
Technology
0
230
クックパッド検索結果新着順の改善
2024/3/14 のアソビューさんのイベントで発表させていただいた資料です
しげひさ
March 17, 2024
Tweet
Share
More Decks by しげひさ
See All by しげひさ
クックパッドが取り組むレシピレコメンドの面白さと難しさ
naokishigehisa
6
2.3k
Other Decks in Technology
See All in Technology
エンジニアの育成を支える爆速フィードバック文化
sansantech
PRO
3
1.1k
30分でわかる『アジャイルデータモデリング』
hanon52_
10
2.9k
Oracle Cloud Infrastructure:2025年2月度サービス・アップデート
oracle4engineer
PRO
1
330
Swiftの “private” を テストする / Testing Swift "private"
yutailang0119
0
140
AI エージェント開発を支える MaaS としての Azure AI Foundry
ryohtaka
6
630
(機械学習システムでも) SLO から始める信頼性構築 - ゆる SRE#9 2025/02/21
daigo0927
0
200
データ資産をシームレスに伝達するためのイベント駆動型アーキテクチャ
kakehashi
PRO
2
600
Reading Code Is Harder Than Writing It
trishagee
2
110
運用しているアプリケーションのDBのリプレイスをやってみた
miura55
1
830
ESXi で仮想化した ARM 環境で LLM を動作させてみるぞ
unnowataru
0
130
OpenID Connect for Identity Assurance の概要と翻訳版のご紹介 / 20250219-BizDay17-OIDC4IDA-Intro
oidfj
0
370
依存パッケージの更新はコツコツが勝つコツ! / phpcon_nagoya2025
blue_goheimochi
3
180
Featured
See All Featured
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
507
140k
The Art of Programming - Codeland 2020
erikaheidi
53
13k
Bootstrapping a Software Product
garrettdimon
PRO
306
110k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
27
1.9k
The World Runs on Bad Software
bkeepers
PRO
67
11k
YesSQL, Process and Tooling at Scale
rocio
172
14k
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
Reflections from 52 weeks, 52 projects
jeffersonlam
348
20k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
27
1.6k
Product Roadmaps are Hard
iamctodd
PRO
50
11k
Agile that works and the tools we love
rasmusluckow
328
21k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
33
2.8k
Transcript
© 2023 Cookpad Inc. クックパッド 検索結果新着順の改善 クックパッド株式会社 レシピ事業部 重久直輝
• 重久直輝 • クックパッド株式会社2022年新卒 • レシピ事業部サーバーサイドエンジニア • 料理好き • 日本酒もっと好き
• 最近猫を飼い始めました © 2023 Cookpad Inc. 2 自己紹介 @naoki_shigehisa @naoki-shigehisa
• 新着順検索結果をユーザーの行動ログを利用して改善 • RedshiftとDynamoDBを活用してシュッと実装 • 特に改善できたクエリでは、レシピへの遷移率が 約 35% → 50%
と大きく上昇 © 2023 Cookpad Inc. 3 3行まとめ
• プレミアムサービスに登録していないユー ザーが見れる唯一の検索結果 ◦ クックパッドを使うユーザーのほとんどが 目にする • 基本的には検索にヒットするレシピをシンプル に新しい順で見せていた ©
2023 Cookpad Inc. 4 クックパッドの新着順とは Web app
• ユーザー投稿物のため、どうしても品質にはばら つきがある ◦ なかなか良いレシピに出会えない... • しかし確実に新着順に掲載されることがレシピ投 稿者の強いモチベーションになっており、下手に手 を入れることができていなかった ©
2023 Cookpad Inc. 5 新着順の課題感
• クックパッドを使うほとんどのユーザーが見る 検索結果新着順の品質を向上 させること • ただし、レシピ作者のモチベーションは失わないようにしたい © 2023 Cookpad Inc.
6 施策の目的
• 新着順の品質を向上させたい ➡ 新しいレシピの中で、ユーザーの反応が良いレシピを選定して表 示 • レシピ作者のモチベは失わないようにしたい ➡ 選定したレシピと本来の新着レシピを混ぜて表示 ©
2023 Cookpad Inc. 7 実現方法
• 1ヶ月以内に公開されたレシピを対象にユーザーのログから推定 • 対象レシピの中から長時間閲覧したユーザーの数が多いレシピを選定 ◦ 長時間閲覧されたレシピの大半は実際に作っていたか、作る候補には入って いたと仮定 © 2023 Cookpad
Inc. 8 実現方法 新しい&良いレシピの選定
• 計算には対象クエリで検索したユー ザーのログだけを利用 ◦ 例えば、「ねぎ」の検索結果におけ る良いレシピは「ねぎ」で検索した ユーザーの行動から判定 ◦ 「ねぎ」で検索したユーザーの大半 は薬味としてねぎを使っているだ
けのレシピは求めていない © 2023 Cookpad Inc. 9 実現方法 新しい&良いレシピの選定
• 選定したレシピを指定した位置に明示的に差し込み ◦ 2つの意図を明示的に反映 ▪ レシピをさがすユーザーに良いレシピに出会って欲しい ▪ レシピ作者のモチベーションを維持したい © 2023
Cookpad Inc. 10 実現方法 選定したレシピと新着レシピを混ぜて表示
© 2023 Cookpad Inc. 11 実現方法 選定したレシピと新着レシピを混ぜて表示 Good • 実現したい状態を確実に実現 できる
• ロールバックが容易 Bad • 結果が不自然になりやすい 差し込み Good • 結果が自然になりやすい • 結果に関わるロジックが計算 式に集約される Bad • 計算式の調整が難しい ブースト 初手の検証として差し込みを選択
• Redshift上で計算した差し込むレシピ のIDをDynamoDBで保持 • DynamoDBに保持されたレシピのID を利用して検索結果のリランクを行っ た © 2023 Cookpad
Inc. 12 設計 全体像
• 対象クエリで検索したユーザーの反応 を使って計算 • クックパッドではRedshiftにユーザーの 行動ログを溜めていた • SQLを書くだけで簡単に実現できた © 2023
Cookpad Inc. 13 設計 新しい&良いレシピの選定
• 検索クエリに対して差し込むレシピのIDを保 持 ◦ 単純に検索クエリで引けば良いだけか つ、リクエスト量が多い ➡ 高速に情報を取り出せ、安価で スケーラブルなDynamoDBを採用 ◦
このIDを使って検索サーバーの検索結 果をリランク © 2023 Cookpad Inc. 14 設計 選定したレシピと新着レシピを混ぜて表示
• 検索サーバーでは各レシピの情報を保 持していたが、今回のリランクのために はレシピとクエリの組み合わせに対し てスコアを持ちたかったため、検索サー バーではなく外部のストレージで情報を 保持 © 2023 Cookpad
Inc. 15 設計 選定したレシピと新着レシピを混ぜて表示
• 新着順に反応のよかったレシピが 差し込まれるようになった © 2023 Cookpad Inc. 16 結果 差し込みレシピ
差し込みレシピ 差し込みレシピ
• 施策が適用できたクエリにおいて、レシピへの遷移率が大きく上昇 ◦ 効果の大きかったクエリでは、レシピへの遷移率が約 35% → 50% と15%程上 昇した ◦
※ 検索流量やそもそものレシピの流量が少ないクエリは効果が期待できな かったため、適用外としていた © 2023 Cookpad Inc. 17 結果
• ユーザーの行動ログを利用することで、ユーザーニーズに合ったレシピを表示する ことができた • 明示的な差し込みを行うことで施策の評価が確実にできた ◦ 効果が出なかった場合でも、いやここが甘かったから、、、のように迷走するこ とがない状態になっていた • RedshiftやDynamoDBを適切に利用することで、簡単に素早く検証を行うことがで
きた © 2023 Cookpad Inc. 18 振り返り