Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
スタンバイにおけるSLOの、これまでとこれから
Search
スタンバイ
June 15, 2022
0
800
スタンバイにおけるSLOの、これまでとこれから
スタンバイ
June 15, 2022
Tweet
Share
More Decks by スタンバイ
See All by スタンバイ
スタンバイ会社紹介資料
stanby_inc
0
19k
Amazon Aurora のインフラコストを55%削減した話
stanby_inc
0
4.4k
スタンバイQAのテスト自動化導入
stanby_inc
0
530
検索エンジンをVespaへ移行しています
stanby_inc
0
920
どうするLeSS - スクラムフェス三河2023.9.16
stanby_inc
1
1.5k
スタンバイにおける自然言語処理の利用
stanby_inc
0
1.1k
マイクロサービスアーキテクチャな組織_システムにSLOを導入している話.pdf
stanby_inc
3
1.9k
スタンバイにおけるECS on Fargateから EKS on Fargateへ移行した話
stanby_inc
1
1.4k
Featured
See All Featured
The Invisible Side of Design
smashingmag
299
50k
Building an army of robots
kneath
303
45k
Gamification - CAS2011
davidbonilla
80
5.1k
Visualization
eitanlees
146
15k
Music & Morning Musume
bryan
46
6.3k
Speed Design
sergeychernyshev
27
790
Rails Girls Zürich Keynote
gr2m
94
13k
How to Ace a Technical Interview
jacobian
276
23k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
21
2.5k
Keith and Marios Guide to Fast Websites
keithpitt
411
22k
YesSQL, Process and Tooling at Scale
rocio
172
14k
Optimizing for Happiness
mojombo
376
70k
Transcript
スタンバイにおけるSLOの、 これまでとこれから 2022年6月15日 1
自己紹介 小林良太郎 2021年3月 スタンバイ入社 30まで飲食→COBOLer→Oracle DBA→インフラエンジニア→SRE
好きな技術:パケットの気持ちを 考えること 苦手な技術:正規表現 2
会社概要 株式会社スタンバイは、Zホールディングス株式会社と株式会社ビジョナルによる合弁事業会社です 社名 株式会社スタンバイ 事業内容 求人検索エンジン「スタンバイ」の運営 住所 東京都渋谷区 設立 2019年11月12日
資本金 1億円 株式保有割合 Zホールディングス60%、ビジョナル40% Yahoo! JAPAN LINE ZOZOTOWN PayPay etc BIZREACH HRMOS M&Aサクシード トラボックス etc 3
提供サービス スタンバイは全国の仕事情報からニーズにあった 最適な求人を探すことができる求人検索エンジンです。 職種やキーワードと希望の勤務地を入れれば、すぐに仕事 が探せます。さらに、正社員・派遣・アルバイト・パートな どの働き方や、給与、応募条件などのこだわり条件を絞り 込んで求人を探すことができます。 より多くの仕事情報を、より早く、より便利に ユーザーにお届けできるよう開発に取り組んでおります。 求人検索エンジン
4 https://jp.stanby.com 技術観点での仕組み:スタンバイの検索の仕組み(Stanby Tech Blog)
アジェンダ スタンバイにおける今までのSLO スタンバイにおけるこれからのSLO 5
今までのSLO Observability Conference 2022で発表しました 6 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO SREチームは各チームに基盤や仕組みを提供 7 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO -課題- 気合を入れてつくったSLOを半年運用して出た課題 8 https://event.cloudnativedays.jp/o11y2022/talks/1368
今までのSLO -改善- ツールの統合やオーナーシップ重要性を認識 9 https://event.cloudnativedays.jp/o11y2022/talks/1368
あれから3ヶ月 大きな進捗はありません 10
SLO導入準備 Datadogでのログ管理を本番導入 ◦ EKS → Firelens → Firehose →
Datadog のルート ◦ 全てのログをインデックス化してパケ死 ▪ 障害調査用にエラーのログだけをIndex化 ▪ ログからCustomMetricsを作ってSLO監視はそのメトリクスを見るようにした 11 https://docs.datadoghq.com/ja/account_management/billing/log_management/ https://docs.datadoghq.com/ja/logs/logs_to_metrics/
SLO導入準備 DatadogのIncident管理機能を本格導入 12 https://docs.datadoghq.com/ja/monitors/incident_management/incident_details
SLO導入準備 DatadogのIncident管理機能でMTTRやインシデント対応した人を可 視化できることに気づく 13
SLOのこれから 他チームに運用してもらうので、導入しやすく成果が見えやすい形にして提案 ◦ ツールを統合し、可視化しやすいようにする チーム間でSLO運用のフェーズや課題が異なるので柔軟に対応 ◦ これから導入するチームや導入したSLOを改善したいチームなどなど、それぞれの課題をヒ アリングしてステップアップしていく
目指すところ ◦ サステナブルなシステムとエンジニアの幸福 ◦ ビジネスニーズの充足と顧客の幸福 14
None