Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
家族アルバム みてねにおけるGrafana活用術 / Grafana Meetup Japan...
Search
Isao Shimizu
April 24, 2024
Technology
2
1.8k
家族アルバム みてねにおけるGrafana活用術 / Grafana Meetup Japan Vol.1 LT
2024.4.24
Grafana Meetup Japan #1 LT
Isao Shimizu
April 24, 2024
Tweet
Share
More Decks by Isao Shimizu
See All by Isao Shimizu
Notion x ポストモーテムで広げる組織の学び / Notion x Postmortem
isaoshimizu
1
220
New Relicを活用したSREの最初のステップ / NRUG OKINAWA VOL.3
isaoshimizu
3
960
「家族アルバム みてね」における運用管理・ オブザーバビリティの全貌 / Overview of Operation Management and Observability in FamilyAlbum
isaoshimizu
5
500
約10年間MIXIのインフラを 支えてきたPagerDutyの活用事例 / PagerDuty on Tour 2024
isaoshimizu
6
1.2k
家族アルバム みてねで直面してきた技術的負債 / MIXI KAG 2024
isaoshimizu
18
9k
今年1年のEKS運用振り返り/3-shake SRE Tech Talk
isaoshimizu
2
380
ポストモーテムの基礎知識と最新事例 / Fundamentals of Postmortem
isaoshimizu
11
3k
全世界1,800万人が利用する「家族アルバム みてね」におけるNew Relic活用法 / FutureStack Tokyo 2023
isaoshimizu
1
580
『家族アルバム みてね』で計測しているSLIの事例 / SLI as measured in FamilyAlbum
isaoshimizu
4
790
Other Decks in Technology
See All in Technology
いつの間にか入れ替わってる!?新しいAWS Security Hubとは?
cmusudakeisuke
0
130
「クラウドコスト絶対削減」を支える技術—FinOpsを超えた徹底的なクラウドコスト削減の実践論
delta_tech
4
170
SEQUENCE object comparison - db tech showcase 2025 LT2
nori_shinoda
0
150
20250705 Headlamp: 專注可擴展性的 Kubernetes 用戶界面
pichuang
0
270
B2C&B2B&社内向けサービスを抱える開発組織におけるサービス価値を最大化するイニシアチブ管理
belongadmin
2
7.1k
【5分でわかる】セーフィー エンジニア向け会社紹介
safie_recruit
0
27k
高速なプロダクト開発を実現、創業期から掲げるエンタープライズアーキテクチャ
kawauso
2
9.5k
freeeのアクセシビリティの現在地 / freee's Current Position on Accessibility
ymrl
2
200
自律的なスケーリング手法FASTにおけるVPoEとしてのアカウンタビリティ / dev-productivity-con-2025
yoshikiiida
2
17k
united airlines ™®️ USA Contact Numbers: Complete 2025 Support Guide
flyunitedhelp
1
340
SmartNewsにおける 1000+ノード規模 K8s基盤 でのコスト最適化 – Spot・Gravitonの大規模導入への挑戦
vsanna2
0
140
LangChain Interrupt & LangChain Ambassadors meetingレポート
os1ma
2
320
Featured
See All Featured
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
507
140k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
161
15k
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
107
19k
Java REST API Framework Comparison - PWX 2021
mraible
31
8.7k
It's Worth the Effort
3n
185
28k
[RailsConf 2023] Rails as a piece of cake
palkan
55
5.7k
Documentation Writing (for coders)
carmenintech
72
4.9k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
130
19k
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
PRO
181
54k
RailsConf 2023
tenderlove
30
1.1k
jQuery: Nuts, Bolts and Bling
dougneiner
63
7.8k
Transcript
©MIXI ©MIXI 家族アルバム みてねにおける Grafana活用術 Grafana Meetup Japan #1 LT
Vantageスタジオ みてねプロダクト開発部 プラットフォームグループ 清水 勲
2 ©MIXI About me 週末は社会人吹奏楽団での活動(楽団長、トロンボーン約30年、たまに指揮者) キャンプとクラフトビールが好き New Relic User Group
運営 清水 勲 @isaoshimizu 家族アルバム みてね Engineering Manager(SRE/CRE/セキュリティ) SIer時代(受託・自社開発) SNS「mixi」 モンスター ストライクなど みてね 2003年 2011年 2014年 2018年 2024年 新卒入社 ミクシィ(現MIXI)入社 C/C++/C#/PHP/Python/iOS/AWS Fedora/MySQL/LXC /OpenStack Linux/MySQL/Ruby AWS/MySQL/Ruby 2022年1月〜EM
©MIXI 家族アルバム みてね
©MIXI 家族アルバム みてねはスマホで撮った子どもの写真や動画を家族と共有し、 コミュニケーションして楽しむ家族アルバムサービスです。
©MIXI 家族アルバム みてねでは 直近6年くらい Grafana が大活躍しています!
©MIXI 家族アルバム みてねにおける オブザーバビリティの変遷
7 ©MIXI 家族アルバム みてねにおけるオブザーバビリティの変遷 Amazon CloudWatch コンソール サービスリリース SREチーム設立 New
Relic APM Grafana New Relic Infrastructure 現在 Prometheus 2015年 2018年 2024年 EKS移行 完了 2021年 以降はGrafanaのデータソースとしての利用が多い New Relic Mobile
8 ©MIXI 家族アルバム みてねにおけるオブザーバビリティの全体像 Amazon EKS Kubernetes Prometheus New Relic
Rails New Relic Ruby agent Grafana Node Exporter Amazon CloudWatch Amazon Managed Service for Prometheus Grafana Loki Promtail ユーザーの端末上 のアプリ New Relic Mobile モニタリング環境 Fluent Bit Amazon Data Firehose Amazon S3 Amazon Athena GCS BigQuery ETL処理 データの流れ Amazon Aurora Amazon RDS Performance Insights
©MIXI なぜ Grafana?
10 ©MIXI なぜ Grafana? 圧倒的な使い勝手の良さ • 画面遷移、操作が軽い、グラフ描画が速い • グラフが美しい、種類が豊富 •
マネジメントコンソールの認証を通らなくて良い(別の認証を使える) • 様々なデータソースを扱える(CloudWatch以外にもGoogle、Prometheus、Loki、Tempoなど) • Persistent URL / Shortened URL での共有が楽(Slackでのコミュニケーションなど) • アップデートが簡単(Helm Chartのバージョン上げるだけ。マイグレーション簡単) • SSO対応(アカウント棚卸し簡単) • オートリフレッシュ • アノテーション(グラフにコメントできる) • Explore機能(Prometheusのクエリをサクッと試すとか)
©MIXI Grafana 活用シーン
12 ©MIXI Grafana 活用シーン • 毎日の朝会でダッシュボードをチーム全員で眺める(SREチーム、Data Engineeringチームなど) ◦ 各グラフのトレンドの変化を見る ▪
例:AWSコスト、LBリクエスト数とエラー数、Aurora/DynamoDB/ElastiCacheの負荷、 SES/SNSの送信数とエラー数、ジョブキューの滞留状態、ノード数、Pod数、OOMKilled等 • アラート発報時 ◦ New Relicも併用しつつ、Grafanaのダッシュボードを見て、アラート内容から関連箇所のグラフ を確認する • ログ確認 ◦ Lokiを介して開発環境、本番環境のログを見る • 施策ごとのダッシュボード ◦ 規模の大きめな施策時に個別のダッシュボードを作り、施策に関わるメトリクスをモニタリングで きるように
©MIXI Grafana のおかげで 数々の問題を解決してきました
©MIXI Grafana 大好きです!
©MIXI