Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
実務のデータ分析でハマったことと対策 / Kichijoji.pm 31
Search
Higuchi kokoro
November 22, 2022
Business
1
2.2k
実務のデータ分析でハマったことと対策 / Kichijoji.pm 31
#kichijojipm
Higuchi kokoro
November 22, 2022
Tweet
Share
More Decks by Higuchi kokoro
See All by Higuchi kokoro
ダッシュボードを使ってもらうには、 現場へのヒアリングが重要だと 改めて気づいた話
zerebom
3
1.4k
非同期処理でLLMにもっと働いてもらおう
zerebom
2
1.1k
使い回しやすい 2-stage recommender systemの デザインパターンを考えて実装した話
zerebom
3
1.2k
WantedlyでFeature Storeを導入する際に考えたこと
zerebom
4
4.8k
論文紹介: Cross-Market Product Recommendation
zerebom
1
120
Pythonでのパッケージング: エコシステムの理解と現場での活用 PyCon APAC2023
zerebom
2
1.5k
LLMを活用した推薦システムの改善: 課題と初期導入のアプローチ
zerebom
4
3.9k
ChatGPTとの会話のデータ分析: 開発対話を最適化するための指針と特性
zerebom
1
2.1k
RecSys2022 論文読み会 | 【紹介】Tutorial: Psychology-informed Recommender Systems
zerebom
0
790
Other Decks in Business
See All in Business
d.team company deck
dteam
0
1.5k
再発防止の呪い for 表参道ゆるMeetup #1 / The curse of recurrence prevention
pinkumohikan
1
170
peraichi_deck_240610
peraichi_recruit
0
12k
20240607_CMCMishima_1
hideki_ojima
0
150
IRODORIの便り【2023 Annual Report】
irodori_group
0
180
新卒向けの内定者研修説明資料抜粋
kkkmm999999
0
180
事業計画及び成長可能性に関する事項 2024年6月25日
cynd
0
210
AnyMind Group Company Deck (JP)
anymind
1
100k
BEX Solution
benly1014
0
130
AICU Inc. - Creating people who create - AiSalon Tokyo-June2024
o_ob
0
430
株式会社ユビレジ_採用ピッチ資料 / Ubiregi_CompanyProfile
ubiregi_saiyo
0
4.5k
Will AI Overviews Kill SEO
ryanjones
1
540
Featured
See All Featured
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
73
15k
Thoughts on Productivity
jonyablonski
62
4k
[RailsConf 2023] Rails as a piece of cake
palkan
31
4.2k
No one is an island. Learnings from fostering a developers community.
thoeni
16
2.2k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
34
6.2k
Fantastic passwords and where to find them - at NoRuKo
philnash
40
2.6k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
24
1.7k
Testing 201, or: Great Expectations
jmmastey
32
6.8k
Practical Orchestrator
shlominoach
184
9.9k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
155
14k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
119
18k
Facilitating Awesome Meetings
lara
44
5.7k
Transcript
実務のデータ分析でハマった ことと対策 吉祥寺.pm31
自己紹介 📝 名前: - Higuchi Kokoro 📝 所属: - Wantedly
📊 職種 - Data Scientict @ 新卒2年目 🧑💻 お仕事 - Wantedly Visitの推薦の改善 👾 趣味 - 🎾 🏂 🍺 🧖♂️ ♨️ 🛫 アカウント: twitter: @zerebom_3 GitHub: @zerebom
本日のネタ (来年に向けて)データ分析タスクで、迷子にならないよう対策した話 背景 事業課題は役員→マネージャー→メンバーと経由して抽象度が下がって渡される 課題発見から始める、高い抽象度のタスクに挑戦も 迷子になることもしばしば
ハマったことと対策
ハマったこと: 集計したもののアクションに起こせない 例: 施策リリース以降、ユーザのプロフィール入力率低下 リリース前後の入力率をみるも、なだらかな変化で原因が判別できない 対策: 答えが出せる粒度まで集計を細かくする 入力率の低下傾向が見られるか? → 主観が入る
& 原因を特定できない リリースしたプラットフォームだけ低下したか? → Yes, Noを出せる
ハマったこと: 集計したものの人に説明できない GitHub issueで時系列に結果をまとめるも、集計により前提がひっくり返る 「この結果はもう古くて…」のように都度説明し、支離滅裂に 対策: どこを前提にしているか立ち戻れるようにする ツリー構造にしてどこまで調べたかわかるように 仮説と事実を分ける 各仮説の確信度をメモる
ハマったこと: 答えが出せないのに、時間をかけすぎた 新しい推薦モデルが、いくつか精度劣化する可能性があった ケースをログデータから再現しようとするも不正確・時間がかかる 対策: データ分析は数ある手法の一つであると認識する データと分析経験があるとついデータを触りがち Howの一つに過ぎない。ほかで仮説の確信度をあげられないか検討 ex) ヒアリング,
実際に製品を触る, A/Bテスト
まとめ 対策 解が出せるまで問題を細かくする どこまで前提か立ち戻れるようにする データ分析は手法の一つであると認識する 学び 伝わないなら価値は生めない 手段より目的