Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
推薦のためのdata pipelineのモニタリングとロギング
Search
Hazumi Ichijo
April 16, 2019
Programming
3
5.3k
推薦のためのdata pipelineのモニタリングとロギング
Hazumi Ichijo
April 16, 2019
Tweet
Share
More Decks by Hazumi Ichijo
See All by Hazumi Ichijo
Rubyのコード削除したい時 僕がやること
hazumirr
0
170
テーブル駆動テストと状態
hazumirr
4
1.9k
オンラインテストしようと思った その日に開始できる環境を目指して
hazumirr
0
930
推薦によるプロダクト改善とマイクロサービスが噛み合った話
hazumirr
2
4k
ChatGPTで僕が知っていることまとめ
hazumirr
3
3k
プロダクトチームとどう 協業し分析環境を改善するか
hazumirr
2
1.5k
bqv速習会
hazumirr
6
6.7k
Protobuf on Rails Tips
hazumirr
1
930
Before Chaos Engineering
hazumirr
1
790
Other Decks in Programming
See All in Programming
traP の部内 ISUCON とそれを支えるポータル / PISCON Portal
ikura_hamu
0
180
functionalなアプローチで動的要素を排除する
ryopeko
0
170
ecspresso, ecschedule, lambroll を PipeCDプラグインとして動かしてみた (プロトタイプ) / Running ecspresso, ecschedule, and lambroll as PipeCD Plugins (prototype)
tkikuc
2
1k
カンファレンス動画鑑賞会のススメ / Osaka.swift #1
hironytic
0
150
はてなにおけるfujiwara-wareの活用やecspressoのCI/CD構成 / Fujiwara Tech Conference 2025
cohalz
0
1.7k
月刊 競技プログラミングをお仕事に役立てるには
terryu16
1
1.2k
快速入門可觀測性
blueswen
0
490
生成AIでGitHubソースコード取得して仕様書を作成
shukob
0
620
Beyond ORM
77web
11
1.5k
ESLintプラグインを使用してCDKのセオリーを適用する
yamanashi_ren01
2
170
ゼロからの、レトロゲームエンジンの作り方
tokujiros
2
910
どうして手を動かすよりもチーム内のコードレビューを優先するべきなのか
okashoi
3
860
Featured
See All Featured
Rebuilding a faster, lazier Slack
samanthasiow
79
8.8k
Build The Right Thing And Hit Your Dates
maggiecrowley
33
2.5k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
10
860
Put a Button on it: Removing Barriers to Going Fast.
kastner
59
3.6k
Designing for Performance
lara
604
68k
Refactoring Trust on Your Teams (GOTO; Chicago 2020)
rmw
33
2.7k
Why Our Code Smells
bkeepers
PRO
335
57k
A designer walks into a library…
pauljervisheath
205
24k
StorybookのUI Testing Handbookを読んだ
zakiyama
28
5.4k
The Language of Interfaces
destraynor
155
24k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
666
120k
GraphQLの誤解/rethinking-graphql
sonatard
68
10k
Transcript
©2019 Wantedly, Inc. ਪનͷͨΊͷdata pipelineͷ ϞχλϦϯάͱϩΪϯά Apr 16, 2019 -
Hazumi Ichijo Data Pipeline Casual Talk #2
©2018 Wantedly, Inc. ࣗݾհ Ұᑍ!IB[VNJSS!SFSPTU %BUB&OHJOFFSJO8BOUFEMZ (P 3BJMT 3FBDUʜ ւಓग़
©2019 Wantedly, Inc. ͳͥϞχλϦϯάɾϩΪϯά͢Δ͔ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ͲΕ͘Β͍कΔ͖͔
ԿΛ͖͔͢
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC σʔλ σʔλ
σʔλ αʔϏε
©2019 Wantedly, Inc. ͕ൃੜͨ͠ͱ͖Ͳ͏͠·͢ʁ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ ʁ ʁ ʁ
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕ ؾ͖ͮʹ͍͘
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠ൃੜ࣌ʹඋ͑Δ
©2019 Wantedly, Inc. ԿΛϞχλϦϯάɾϩΪϯά͢Δʁ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠कΕΔΑ͏ʹ͢Δ
©2019 Wantedly, Inc. ΞϓϦέʔγϣϯ w δϣϒ࣮ߦ࣌ͷ࣮ߦঢ়گͷʢྫֶशʣ w ΦϯϥΠϯධՁͷ w
ॻ͖ग़͠ઌʹσʔλ͕ॻ͖ࠐ·Ε͔ͨ w Τϥʔ௨ w Կʹ͕͔͔࣌ؒΔ͔ Πϯϑϥ w δϣϒ͕ޭ͔ͨ͠ɾࣦഊ͔ͨ͠ɾ࣮ߦ͞Ε͔ͨ w ઃఆ͍ͯ͠Δ࣌ؒʹ࣮ߦ͞Ε͔ͨ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϞχλϦϯά
©2019 Wantedly, Inc. w ॲཧͷ༰͕Θ͔Δͷʢྫ42-ʣ w δϣϒͷ։࢝ɾऴྃ w ॻ͖ग़ͨ͠σʔλ w
FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϩΪϯά
©2019 Wantedly, Inc. ͲΕ͘Β͍कΒΕΔ͖ͷʁ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ ͦͦͦͷσʔλͷॏཁ͕Θ͔Δඞཁ͕͋Δ
©2019 Wantedly, Inc. ԿΛ͖͔͢
©2019 Wantedly, Inc. ॏཁΛͰ͖Δ͚ͩ໌֬ʹ͓ͯ͘͠ ϞχλϦϯάɾϩΪϯάͷ߲ચ͍ग़͠ ΠϯϑϥνʔϜͱڠྗͯ͠ɺ༧Ί w
ॏཁΛ͑Δ w ϞχλϦϯάɾϩΪϯάͷλεΫͷׂΓৼΓΛߦ͏ w ͕ൃੜͨ࣌͠ɺͲ͏͍ͬͨϑϩʔͰ֬ೝ͢Δ͔ɺͲ͏ରॲ ͢Δ͔Λ͑ΔඞཁͰ͋Ε࣮ࡍʹϦϋʔαϧΛߦ͏ ԿΛ͖͔͢