Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
推薦のためのdata pipelineのモニタリングとロギング
Search
Hazumi Ichijo
April 16, 2019
Programming
3
5.1k
推薦のためのdata pipelineのモニタリングとロギング
Hazumi Ichijo
April 16, 2019
Tweet
Share
More Decks by Hazumi Ichijo
See All by Hazumi Ichijo
Rubyのコード削除したい時 僕がやること
hazumirr
0
88
テーブル駆動テストと状態
hazumirr
4
1.7k
オンラインテストしようと思った その日に開始できる環境を目指して
hazumirr
0
760
推薦によるプロダクト改善とマイクロサービスが噛み合った話
hazumirr
2
3.4k
ChatGPTで僕が知っていることまとめ
hazumirr
3
2.9k
プロダクトチームとどう 協業し分析環境を改善するか
hazumirr
2
1.3k
bqv速習会
hazumirr
6
6.1k
Protobuf on Rails Tips
hazumirr
1
820
Before Chaos Engineering
hazumirr
1
720
Other Decks in Programming
See All in Programming
Let's learn code review
riofujimon
2
580
スキーマ駆動開発による品質とスピードの両立 - 私達は何故、スキーマを書くのか
kentaroutakeda
0
180
Anthropic Cookbook のおすすめレシピ
schroneko
7
1.1k
Polars入門
daikikatsuragawa
1
180
VS Code をプロダクトにどう取り込むか
onomax
1
720
はてなにおける CSS Modules、及び CSS Modules に足りないもの / CSS Modules in Hatena, and CSS Modules missing parts
mizdra
7
970
Micro Frontends for Java Microservices - Utah JUG 2024
mraible
PRO
1
110
"config" ってなんだ? / What is "config"?
okashoi
0
320
検証も兼ねて個人開発でHonoとかと向き合った話
hanetsuki
1
1.3k
OpenAPIを中心に考えるAPI開発入門 / Introduction to API Development with a Focus on OpenAPI
seike460
PRO
2
180
Go製Webアプリケーションのエラーとの向き合い方大全、あるいはやっぱりスタックトレース欲しいやん / Kyoto.go #50
utgwkk
6
1.8k
AWS CDKコントリビュートTIPS / aws-cdk-contribution-tips
gotok365
4
380
Featured
See All Featured
Building Your Own Lightsaber
phodgson
100
5.7k
Design by the Numbers
sachag
274
18k
Writing Fast Ruby
sferik
622
60k
The Brand Is Dead. Long Live the Brand.
mthomps
49
29k
Fontdeck: Realign not Redesign
paulrobertlloyd
76
4.9k
Keith and Marios Guide to Fast Websites
keithpitt
408
22k
Designing for Performance
lara
601
67k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
14
1.5k
Code Review Best Practice
trishagee
56
15k
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
275
13k
Statistics for Hackers
jakevdp
790
220k
Thoughts on Productivity
jonyablonski
60
3.9k
Transcript
©2019 Wantedly, Inc. ਪનͷͨΊͷdata pipelineͷ ϞχλϦϯάͱϩΪϯά Apr 16, 2019 -
Hazumi Ichijo Data Pipeline Casual Talk #2
©2018 Wantedly, Inc. ࣗݾհ Ұᑍ!IB[VNJSS!SFSPTU %BUB&OHJOFFSJO8BOUFEMZ (P 3BJMT 3FBDUʜ ւಓग़
©2019 Wantedly, Inc. ͳͥϞχλϦϯάɾϩΪϯά͢Δ͔ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ͲΕ͘Β͍कΔ͖͔
ԿΛ͖͔͢
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC σʔλ σʔλ
σʔλ αʔϏε
©2019 Wantedly, Inc. ͕ൃੜͨ͠ͱ͖Ͳ͏͠·͢ʁ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ ʁ ʁ ʁ
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕ ؾ͖ͮʹ͍͘
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠ൃੜ࣌ʹඋ͑Δ
©2019 Wantedly, Inc. ԿΛϞχλϦϯάɾϩΪϯά͢Δʁ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠कΕΔΑ͏ʹ͢Δ
©2019 Wantedly, Inc. ΞϓϦέʔγϣϯ w δϣϒ࣮ߦ࣌ͷ࣮ߦঢ়گͷʢྫֶशʣ w ΦϯϥΠϯධՁͷ w
ॻ͖ग़͠ઌʹσʔλ͕ॻ͖ࠐ·Ε͔ͨ w Τϥʔ௨ w Կʹ͕͔͔࣌ؒΔ͔ Πϯϑϥ w δϣϒ͕ޭ͔ͨ͠ɾࣦഊ͔ͨ͠ɾ࣮ߦ͞Ε͔ͨ w ઃఆ͍ͯ͠Δ࣌ؒʹ࣮ߦ͞Ε͔ͨ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϞχλϦϯά
©2019 Wantedly, Inc. w ॲཧͷ༰͕Θ͔Δͷʢྫ42-ʣ w δϣϒͷ։࢝ɾऴྃ w ॻ͖ग़ͨ͠σʔλ w
FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϩΪϯά
©2019 Wantedly, Inc. ͲΕ͘Β͍कΒΕΔ͖ͷʁ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ ͦͦͦͷσʔλͷॏཁ͕Θ͔Δඞཁ͕͋Δ
©2019 Wantedly, Inc. ԿΛ͖͔͢
©2019 Wantedly, Inc. ॏཁΛͰ͖Δ͚ͩ໌֬ʹ͓ͯ͘͠ ϞχλϦϯάɾϩΪϯάͷ߲ચ͍ग़͠ ΠϯϑϥνʔϜͱڠྗͯ͠ɺ༧Ί w
ॏཁΛ͑Δ w ϞχλϦϯάɾϩΪϯάͷλεΫͷׂΓৼΓΛߦ͏ w ͕ൃੜͨ࣌͠ɺͲ͏͍ͬͨϑϩʔͰ֬ೝ͢Δ͔ɺͲ͏ରॲ ͢Δ͔Λ͑ΔඞཁͰ͋Ε࣮ࡍʹϦϋʔαϧΛߦ͏ ԿΛ͖͔͢