Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
推薦のためのdata pipelineのモニタリングとロギング
Search
Hazumi Ichijo
April 16, 2019
Programming
3
5.5k
推薦のためのdata pipelineのモニタリングとロギング
Hazumi Ichijo
April 16, 2019
Tweet
Share
More Decks by Hazumi Ichijo
See All by Hazumi Ichijo
RailsとRidgepoleの マイグレを120倍早くする
hazumirr
0
43
CIを整備してメンテナンスを生成AIに任せる
hazumirr
0
490
病院の情報フローを理解して、 予約〜会計の見え方が変わった話
hazumirr
0
1.5k
Rubyのコード削除したい時 僕がやること
hazumirr
0
220
テーブル駆動テストと状態
hazumirr
4
2k
オンラインテストしようと思った その日に開始できる環境を目指して
hazumirr
0
990
推薦によるプロダクト改善とマイクロサービスが噛み合った話
hazumirr
2
4.3k
ChatGPTで僕が知っていることまとめ
hazumirr
3
3k
プロダクトチームとどう 協業し分析環境を改善するか
hazumirr
2
1.5k
Other Decks in Programming
See All in Programming
SwiftでMCPサーバーを作ろう!
giginet
PRO
2
220
書き捨てではなく継続開発可能なコードをAIコーディングエージェントで書くために意識していること
shuyakinjo
0
170
「次に何を学べばいいか分からない」あなたへ──若手エンジニアのための学習地図
panda_program
3
710
Understanding Kotlin Multiplatform
l2hyunwoo
0
250
あまり知られていない MCP 仕様たち / MCP specifications that aren’t widely known
ktr_0731
0
210
#QiitaBash TDDで(自分の)開発がどう変わったか
ryosukedtomita
1
350
新しいモバイルアプリ勉強会(仮)について
uetyo
1
240
Flutterと Vibe Coding で個人開発!
hyshu
1
210
LLMは麻雀を知らなすぎるから俺が教育してやる
po3rin
3
1.9k
AWS Summit Japan 2024と2025の比較/はじめてのKiro、今あなたは岐路に立つ
satoshi256kbyte
1
260
JetBrainsのAI機能の紹介 #jjug
yusuke
0
180
階層化自動テストで開発に機動力を
ickx
1
460
Featured
See All Featured
Thoughts on Productivity
jonyablonski
69
4.8k
Principles of Awesome APIs and How to Build Them.
keavy
126
17k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
130
19k
How to Ace a Technical Interview
jacobian
278
23k
Measuring & Analyzing Core Web Vitals
bluesmoon
7
540
Building Adaptive Systems
keathley
43
2.7k
Rebuilding a faster, lazier Slack
samanthasiow
83
9.1k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
34
3.1k
jQuery: Nuts, Bolts and Bling
dougneiner
63
7.8k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
29
1.8k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
332
22k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
50k
Transcript
©2019 Wantedly, Inc. ਪનͷͨΊͷdata pipelineͷ ϞχλϦϯάͱϩΪϯά Apr 16, 2019 -
Hazumi Ichijo Data Pipeline Casual Talk #2
©2018 Wantedly, Inc. ࣗݾհ Ұᑍ!IB[VNJSS!SFSPTU %BUB&OHJOFFSJO8BOUFEMZ (P 3BJMT 3FBDUʜ ւಓग़
©2019 Wantedly, Inc. ͳͥϞχλϦϯάɾϩΪϯά͢Δ͔ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ͲΕ͘Β͍कΔ͖͔
ԿΛ͖͔͢
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC σʔλ σʔλ
σʔλ αʔϏε
©2019 Wantedly, Inc. ͕ൃੜͨ͠ͱ͖Ͳ͏͠·͢ʁ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ ʁ ʁ ʁ
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕ ؾ͖ͮʹ͍͘
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠ൃੜ࣌ʹඋ͑Δ
©2019 Wantedly, Inc. ԿΛϞχλϦϯάɾϩΪϯά͢Δʁ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠कΕΔΑ͏ʹ͢Δ
©2019 Wantedly, Inc. ΞϓϦέʔγϣϯ w δϣϒ࣮ߦ࣌ͷ࣮ߦঢ়گͷʢྫֶशʣ w ΦϯϥΠϯධՁͷ w
ॻ͖ग़͠ઌʹσʔλ͕ॻ͖ࠐ·Ε͔ͨ w Τϥʔ௨ w Կʹ͕͔͔࣌ؒΔ͔ Πϯϑϥ w δϣϒ͕ޭ͔ͨ͠ɾࣦഊ͔ͨ͠ɾ࣮ߦ͞Ε͔ͨ w ઃఆ͍ͯ͠Δ࣌ؒʹ࣮ߦ͞Ε͔ͨ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϞχλϦϯά
©2019 Wantedly, Inc. w ॲཧͷ༰͕Θ͔Δͷʢྫ42-ʣ w δϣϒͷ։࢝ɾऴྃ w ॻ͖ग़ͨ͠σʔλ w
FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϩΪϯά
©2019 Wantedly, Inc. ͲΕ͘Β͍कΒΕΔ͖ͷʁ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ ͦͦͦͷσʔλͷॏཁ͕Θ͔Δඞཁ͕͋Δ
©2019 Wantedly, Inc. ԿΛ͖͔͢
©2019 Wantedly, Inc. ॏཁΛͰ͖Δ͚ͩ໌֬ʹ͓ͯ͘͠ ϞχλϦϯάɾϩΪϯάͷ߲ચ͍ग़͠ ΠϯϑϥνʔϜͱڠྗͯ͠ɺ༧Ί w
ॏཁΛ͑Δ w ϞχλϦϯάɾϩΪϯάͷλεΫͷׂΓৼΓΛߦ͏ w ͕ൃੜͨ࣌͠ɺͲ͏͍ͬͨϑϩʔͰ֬ೝ͢Δ͔ɺͲ͏ରॲ ͢Δ͔Λ͑ΔඞཁͰ͋Ε࣮ࡍʹϦϋʔαϧΛߦ͏ ԿΛ͖͔͢