Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
クックパッド検索結果新着順の改善
Search
しげひさ
March 17, 2024
Technology
0
270
クックパッド検索結果新着順の改善
2024/3/14 のアソビューさんのイベントで発表させていただいた資料です
しげひさ
March 17, 2024
Tweet
Share
More Decks by しげひさ
See All by しげひさ
クックパッドが取り組むレシピレコメンドの面白さと難しさ
naokishigehisa
6
2.6k
Other Decks in Technology
See All in Technology
帳票構造化タスクにおけるLLMファインチューニングの性能評価
yosukeyoshida
1
200
AI駆動開発 with MixLeap Study【大阪支部 #3】
lycorptech_jp
PRO
0
290
会社もクラウドも違うけど 通じたコスト削減テクニック/Cost optimization strategies effective regardless of company or cloud provider
aeonpeople
2
410
AIエージェントを支える設計
tkikuchi1002
12
2.7k
相互運用可能な学修歴クレデンシャルに向けた標準技術と国際動向
fujie
0
140
AI時代の知識創造 ─GeminiとSECIモデルで読み解く “暗黙知”と創造の境界線
nyagasan
0
180
少人数でも回る! DevinとPlaybookで支える運用改善
ishikawa_pro
5
2k
From Live Coding to Vibe Coding with Firebase Studio
firebasethailand
1
340
GMOペパボのデータ基盤とデータ活用の現在地 / Current State of GMO Pepabo's Data Infrastructure and Data Utilization
zaimy
2
140
MCPと認可まわりの話 / mcp_and_authorization
convto
2
350
隙間時間で爆速開発! Claude Code × Vibe Coding で作るマニュアル自動生成サービス
akitomonam
2
240
「手を動かした者だけが世界を変える」ソフトウェア開発だけではない開発者人生
onishi
15
8k
Featured
See All Featured
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
331
22k
Thoughts on Productivity
jonyablonski
69
4.8k
Into the Great Unknown - MozCon
thekraken
40
1.9k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
30
2.2k
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
Bash Introduction
62gerente
613
210k
Statistics for Hackers
jakevdp
799
220k
What's in a price? How to price your products and services
michaelherold
246
12k
Dealing with People You Can't Stand - Big Design 2015
cassininazir
367
26k
Building Better People: How to give real-time feedback that sticks.
wjessup
367
19k
A Modern Web Designer's Workflow
chriscoyier
695
190k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
130
19k
Transcript
© 2023 Cookpad Inc. クックパッド 検索結果新着順の改善 クックパッド株式会社 レシピ事業部 重久直輝
• 重久直輝 • クックパッド株式会社2022年新卒 • レシピ事業部サーバーサイドエンジニア • 料理好き • 日本酒もっと好き
• 最近猫を飼い始めました © 2023 Cookpad Inc. 2 自己紹介 @naoki_shigehisa @naoki-shigehisa
• 新着順検索結果をユーザーの行動ログを利用して改善 • RedshiftとDynamoDBを活用してシュッと実装 • 特に改善できたクエリでは、レシピへの遷移率が 約 35% → 50%
と大きく上昇 © 2023 Cookpad Inc. 3 3行まとめ
• プレミアムサービスに登録していないユー ザーが見れる唯一の検索結果 ◦ クックパッドを使うユーザーのほとんどが 目にする • 基本的には検索にヒットするレシピをシンプル に新しい順で見せていた ©
2023 Cookpad Inc. 4 クックパッドの新着順とは Web app
• ユーザー投稿物のため、どうしても品質にはばら つきがある ◦ なかなか良いレシピに出会えない... • しかし確実に新着順に掲載されることがレシピ投 稿者の強いモチベーションになっており、下手に手 を入れることができていなかった ©
2023 Cookpad Inc. 5 新着順の課題感
• クックパッドを使うほとんどのユーザーが見る 検索結果新着順の品質を向上 させること • ただし、レシピ作者のモチベーションは失わないようにしたい © 2023 Cookpad Inc.
6 施策の目的
• 新着順の品質を向上させたい ➡ 新しいレシピの中で、ユーザーの反応が良いレシピを選定して表 示 • レシピ作者のモチベは失わないようにしたい ➡ 選定したレシピと本来の新着レシピを混ぜて表示 ©
2023 Cookpad Inc. 7 実現方法
• 1ヶ月以内に公開されたレシピを対象にユーザーのログから推定 • 対象レシピの中から長時間閲覧したユーザーの数が多いレシピを選定 ◦ 長時間閲覧されたレシピの大半は実際に作っていたか、作る候補には入って いたと仮定 © 2023 Cookpad
Inc. 8 実現方法 新しい&良いレシピの選定
• 計算には対象クエリで検索したユー ザーのログだけを利用 ◦ 例えば、「ねぎ」の検索結果におけ る良いレシピは「ねぎ」で検索した ユーザーの行動から判定 ◦ 「ねぎ」で検索したユーザーの大半 は薬味としてねぎを使っているだ
けのレシピは求めていない © 2023 Cookpad Inc. 9 実現方法 新しい&良いレシピの選定
• 選定したレシピを指定した位置に明示的に差し込み ◦ 2つの意図を明示的に反映 ▪ レシピをさがすユーザーに良いレシピに出会って欲しい ▪ レシピ作者のモチベーションを維持したい © 2023
Cookpad Inc. 10 実現方法 選定したレシピと新着レシピを混ぜて表示
© 2023 Cookpad Inc. 11 実現方法 選定したレシピと新着レシピを混ぜて表示 Good • 実現したい状態を確実に実現 できる
• ロールバックが容易 Bad • 結果が不自然になりやすい 差し込み Good • 結果が自然になりやすい • 結果に関わるロジックが計算 式に集約される Bad • 計算式の調整が難しい ブースト 初手の検証として差し込みを選択
• Redshift上で計算した差し込むレシピ のIDをDynamoDBで保持 • DynamoDBに保持されたレシピのID を利用して検索結果のリランクを行っ た © 2023 Cookpad
Inc. 12 設計 全体像
• 対象クエリで検索したユーザーの反応 を使って計算 • クックパッドではRedshiftにユーザーの 行動ログを溜めていた • SQLを書くだけで簡単に実現できた © 2023
Cookpad Inc. 13 設計 新しい&良いレシピの選定
• 検索クエリに対して差し込むレシピのIDを保 持 ◦ 単純に検索クエリで引けば良いだけか つ、リクエスト量が多い ➡ 高速に情報を取り出せ、安価で スケーラブルなDynamoDBを採用 ◦
このIDを使って検索サーバーの検索結 果をリランク © 2023 Cookpad Inc. 14 設計 選定したレシピと新着レシピを混ぜて表示
• 検索サーバーでは各レシピの情報を保 持していたが、今回のリランクのために はレシピとクエリの組み合わせに対し てスコアを持ちたかったため、検索サー バーではなく外部のストレージで情報を 保持 © 2023 Cookpad
Inc. 15 設計 選定したレシピと新着レシピを混ぜて表示
• 新着順に反応のよかったレシピが 差し込まれるようになった © 2023 Cookpad Inc. 16 結果 差し込みレシピ
差し込みレシピ 差し込みレシピ
• 施策が適用できたクエリにおいて、レシピへの遷移率が大きく上昇 ◦ 効果の大きかったクエリでは、レシピへの遷移率が約 35% → 50% と15%程上 昇した ◦
※ 検索流量やそもそものレシピの流量が少ないクエリは効果が期待できな かったため、適用外としていた © 2023 Cookpad Inc. 17 結果
• ユーザーの行動ログを利用することで、ユーザーニーズに合ったレシピを表示する ことができた • 明示的な差し込みを行うことで施策の評価が確実にできた ◦ 効果が出なかった場合でも、いやここが甘かったから、、、のように迷走するこ とがない状態になっていた • RedshiftやDynamoDBを適切に利用することで、簡単に素早く検証を行うことがで
きた © 2023 Cookpad Inc. 18 振り返り