Stackdriver MonitoringのAlert設定はコード管理が可能か/Stackdriver Alert coding

Stackdriver Monitoringの Alert設定はコード管理が可能か株式会社リクルートライフスタイル吉⽥和弘 2019年1⽉15⽇ GCPUG Tokyo Stackdriver
Day

⾃⼰紹介吉⽥和弘所属 : 株式会社リクルートライフスタイル Airメイト SREチーム GCP歴 :
ちょうど2年趣味 : スノーボード、餃⼦

担当プロダクト・飲⾷店経営サジェスト・店舗の集客、売上から⽇報まで店舗経営をサポート・AirレジなどのAirシリーズの1つなど

担当プロダクト技術的特徴・アプリ部分はGAEをフル活⽤・監視は Stackdriver Monitoringを利⽤・Stackdriverは他にも Trace, Logging, Error
Reporting などを活⽤

本題

突然ですが... 監視アラートの設定ってちゃんと管理していますか？

アラート設定の管理ドキュメントで監視設定を定義して設定は⼿動で⾏っているところが多いのではないでしょうか? 実は我々もそうでした

アラート設定の管理抱えていた課題 1. 多くのGCPサービスを利⽤しているので監視設定が複雑構成図の⼀部を抜粋

アラート設定の管理抱えていた課題 2. 絶賛開発継続中なので監視設定の追加、変更が度々発⽣する・その度に⼿動で変更作業・2⼈でクロスチェック・1つ,2つなら⼿動でもいいが⼤量に変更したいときは地獄

アラート設定の管理抱えていた課題 3. 「このアラート設定って前からこうだっけ?」問題・stackdriver側で変更⽇時はとっているがどこが変更されたのか・いつからその設定だったのか

アラート設定の管理アラート設定もコード化もしてちゃんと管理しよう

アラート設定の管理(検討) ・Cloud Deployment Manager →Stackdriver⾮対応

アラート設定の管理(検討) ・gcloudコマンド or API ・gcloudコマンド・API 公式ドキュメント: バックアップ https://cloud.google.com/monitoring/alerts/using-alerting- api?authuser=3&hl=ja#api-backup-policies
リストア https://cloud.google.com/monitoring/alerts/using-alerting- api?authuser=3&hl=ja#api-restore-policies $ gcloud alpha monitoring policies create --policy-from-file $ gcloud alpha monitoring policies update --policy-from-file

アラート設定の管理(検討) ・gcloudコマンド or API →出来そう！けどそもそも設定ファイルをYAML or JSONで管理するの⾟い (1環境あたり1000⾏over) 何度も同じこと書かないといけない

アラート設定の管理(検討) ・Terraform ・2018年12⽉にTerraformがStackdriver Alertに対応・変数が使えるのでコード量が減らせる・もともと他のGCPリソースも Terraformで管理していたので学習コスト低・GCPの他リソースと同じデプロイパイプラインにのせられる

アラート設定の管理(検討)

アラート設定の管理(結論) Stackdriver Monitoringの Alert設定はコード管理することが可能その場合はTerraformなどのサードパーティツールを利⽤したほうが運⽤性は⾼くなる

注意点ただしアラート設定はパラメータ数が多いので他のGCPリソースと⽐べてコード化が複雑になる →管理するアラートが少ないor変更があまり発⽣しないケースでは⼿動で管理するのもアリ。運⽤コストに⾒合っているかが⼤切。

まとめ・Stackdriver Monitoringのアラート設定をコード化して管理していくことは可能・gcloudコマンドやAPIでもできるが運⽤⾯考えるとサードパーティツール使うのが良さそう・アラート設定はパラメータが多いのでコードで管理していくのは楽ではない →変更が少ないシステムの場合は⼿動管理の⽅が幸せかも

最後に

最後に Stackdriver Monitoring Alertの設定画⾯前のほうが⾒やすかったと思うのは私だけではないはず...

ありがとうございました

Stackdriver MonitoringのAlert設定はコード管理が可能か/Stackd...

Stackdriver MonitoringのAlert設定はコード管理が可能か/Stackdriver Alert coding

Ka

Other Decks in Technology

Featured

Transcript

Stackdriver Monitoringの Alert設定はコード管理が可能か株式会社リクルートライフスタイル吉⽥和弘 2019年1⽉15⽇ GCPUG Tokyo Stackdriver

⾃⼰紹介吉⽥和弘所属 : 株式会社リクルートライフスタイル Airメイト SREチーム GCP歴 :