Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
CloudWatch複合アラームでELBの5XXをいい感じに検知しようとしたらうまくいかなかった話 / cloudwatch alarm elb 5xx
Search
k.goto
May 29, 2023
Technology
0
2.3k
CloudWatch複合アラームでELBの5XXをいい感じに検知しようとしたらうまくいかなかった話 / cloudwatch alarm elb 5xx
2023/05/29開催「JAWS-UG SRE支部 #6」での発表資料です。
k.goto
May 29, 2023
Tweet
Share
More Decks by k.goto
See All by k.goto
S3バケットを高速で削除・空にするツール「cls3」 / s3-deletion-tool-cls3
gotok365
4
410
AWS CDKで コンテナイメージスキャンを行う 〜ECRとその他の方法〜 / cdk-container-image-scan
gotok365
2
920
スタートアップでこそCDKが活きた〜生産性を向上できた5つの理由〜 / startup-cdk-productivity
gotok365
9
3.3k
AWS CDKで"使う"GoFデザインパターン 〜実際どうなの?〜 / GoF design patterns used with AWS CDK
gotok365
3
960
AWS CDKで学ぶGoFデザインパターン〜IaCにもコード設計〜 / aws dev day cdk gof design patterns
gotok365
11
4k
AWS CDKとZodを活用したバリデーションパターン集 / validation patterns with cdk and zod
gotok365
4
2.7k
App Runnerで AppでないものをRunする / run non apps with app runner
gotok365
5
2k
CDKでValidationする本当の方法 / cdk-validation
gotok365
2
1.5k
サーバーレスなメール送信システムをAWS CDKで構築し数千人規模の環境で運用した話 / aws dev day cdk mail
gotok365
3
4.5k
Other Decks in Technology
See All in Technology
長期間TiDBを使ってきた話 @ 私たちはなぜNewSQLを使うのかTiDB選定5社が語る選定理由と活用LT / Experiences with TiDB Over Time
chibiegg
2
660
反実仮想機械学習とは何か
usaito
PRO
6
1.7k
小さな開発会社がWebサービスを作る理由
polidog
PRO
1
150
SPI原点回帰論:事業課題とFour Keysの結節点を見出す実践的ソフトウェアプロセス改善 / DevOpsDays Tokyo 2024
visional_engineering_and_design
4
1.5k
Apple Vision Pro trial session
akkeylab
0
120
「手動オペレーションに定評がある」と言われた私が心がけていること / phpcon_odawara2024
blue_goheimochi
2
320
TransitGatewayの基礎
toru_kubota
0
230
日本におけるデータエンジニアリングのこれまでとこれから
foursue
10
2.1k
【SORACOM UG】SIM Deep Dive セキュアエレメント編
soracom
PRO
0
260
Databricks における 『MLOps』
databricksjapan
2
130
アプリがつくるNOT A HOTELブランド
hokuts
1
450
〜小さく始めて大きく育てる〜データ分析基盤の開発から活用まで
kniino
0
2k
Featured
See All Featured
Producing Creativity
orderedlist
PRO
336
39k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
5
1.5k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
226
16k
Large-scale JavaScript Application Architecture
addyosmani
503
110k
Making Projects Easy
brettharned
108
5.5k
YesSQL, Process and Tooling at Scale
rocio
163
13k
Build your cross-platform service in a week with App Engine
jlugia
225
17k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
321
20k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
29
6k
Raft: Consensus for Rubyists
vanstee
132
6.2k
Art, The Web, and Tiny UX
lynnandtonic
288
19k
In The Pink: A Labor of Love
frogandcode
138
21k
Transcript
LHPUP าͷςοΫ $MPVE8BUDIෳ߹ΞϥʔϜͰ&-#ͷ99Λ ͍͍ײ͡ʹݕ͠Α͏ͱͨ͠Β ͏·͍͔͘ͳ͔ͬͨ +"846(43&ࢧ෦
ࣗݾհ LHPUP w ςοΫϦʔυɾϥʔϝϯ͖ w "84$PNNVOJUZ#VJMEFS %FW5PPMT w าͷςοΫ
ٕज़ϒϩά w ࣗ࡞"84ؔ࿈πʔϧͷ044։ൃ w 5XJUUFS!@TUFQ@UFDI ‣ LHPUP าͷςοΫ
$MPVE8BUDIෳ߹ΞϥʔϜͰ
&-#ͷ99Λ
͍͍ײ͡ʹݕ͠Α͏ͱͨ͠Β
͏·͍͔͘ͳ͔ͬͨ
͍͍ײ͡ʁ w &-# "-# ͷΤϥʔ௨ $MPVE8BUDI"MBSN ‣ )551$PEF@&-#@ccc@$PVOU
εςʔλε͝ͱʹ௨͍ͨ͠ ‣ )551$PEF@&-#@99@$PVOU cccͷ߹99௨͠ͳ͍ 㾎ॏෳ௨Λഉআ͍ͨ͠ ʮ99དྷͯ͠·͏ʯͷΛආ͚Δ cccҎ֎ͷΤϥʔ͚ͩ99Ͱ௨͢Δ 㾎 ͳͲͷͱ͖͚ͩ௨͢Δ w ͦΜͳͷΛʰ$MPVE8BUDIෳ߹ΞϥʔϜʱͰ࡞ͬͯΈͨ
$MPVE8BUDIෳ߹ΞϥʔϜͱʁ
$MPVE8BUDIෳ߹ΞϥʔϜ w ଞͷෳͷΞϥʔϜͷঢ়ଶΛͱʹ w ࣜͰಈతʹஅͰ͖ΔΞϥʔϜ (ALARM("CPUUtilizationTooHigh") OR ALARM("DiskReadOpsTooHigh")) AND OK("NetworkOutTooHigh")
$166UJMJ[BUJPO5PP)JHI͕ΞϥʔϜঢ়ଶ ·ͨ %JTL3FBE0QT5PP)JHI͕ΞϥʔϜঢ়ଶ "/% /FUXPSL0VU5PP)JHI͕ਖ਼ৗঢ়ଶ ΞϥʔϜঢ়ଶ
ͬͯΈͨ
ͬͯΈͨ ෳ߹ΞϥʔϜ 99ΘΓͳͲͰൃՐͤ͞Δ༻
ͬͯΈͨ YY͕ΞϥʔϜঢ়ଶ "/% ͕ΞϥʔϜঢ়ଶ ·ͨ ͕ΞϥʔϜঢ়ଶ /05 ˞ ͕ͳ͍ͷ ݕূ্ͷཧ༝Ͱ͢
ͩͱΞϥʔϜ ͩͱਖ਼ৗ
ͬͯΈͨ ΞϥʔϜ ͳͲಉ༷ʹ࡞
ͬͯΈͨ 99ΞϥʔϜ ࣮ࡍͷൃՐෳ߹ΞϥʔϜͷํͰߦ͏ͷͰ ͪ͜ΒΞΫγϣϯແޮʹ ͨͩͷΞϥʔϜࡐྉͱͯ͠࡞
ΤϥʔΛग़ͯ͠Έͨ
௨͕དྷͨʂ
ෳ߹ΞϥʔϜͷํ͕དྷͨʂ
ͭ·Γ ʮ Ͱͳ͍99ʯ ͷํ
ͭ·Γɺͱ͔ʂ
ͰͰͰͰ ͳ͍εςʔλεͳΜͯ ͦΜͳ؆୯ʹى͜Δ͔ɾɾɾʁ
ͦͷ͞Βʹඵޙ ͏݅௨͕ɾɾɾ
ঢ়گΛཧͯ͠Έͨ w ෳ߹ΞϥʔϜ͕དྷͨ ‣ Ͱͳ͍99ͷͱ͖ʹ௨ ͢Δͣ
‣ ͷͱ͖ɺ͜ͷΞϥʔϜൃՐ͠ͳ͍ ͔֬ʹͦͷ࣌ൃՐͤͣ99ͷΈൃՐ͍ͯͨͣ͠ ‣ ͭ·Γͱ͔͕ൃੜͨ͠ʁ w ͦͷඵޙʹɺΤϥʔ͕དྷͨ ‣ Ͱ͖ͬ͞ෳ߹ΞϥʔϜ͕དྷͨͬͯ͜ͱɺͰͳ͍ͣɾɾɾ
ঢ়گΛཧͯ͠Έͨ w $MPVE8BUDIϝτϦΫεΛݟͯΈͨ ‣ )551$PEF@&-#@99@$PVOU ݅ ‣ )551$PEF@&-#@@$PVOU
݅ ͳͲͷɺͦͷଞͷΤϥʔ ى͖͍ͯ·ͤΜͰͨ͠ɻ
ঢ়گΛཧͯ͠Έͨ w Τϥʔ͕݅ൃੜʢҙਤతʹʣ w 99ΘΓͷෳ߹ΞϥʔϜ͕݅௨ ‣ Ͱͳ͍99ͷͱ͖ʹ௨
͢Δͣ w ඵޙ )551$PEF@&-#@͕݅௨ ݅ͷΤϥʔʹରͯ͠ ෳ߹ΞϥʔϜΞϥʔϜ ྆ํ௨͕དྷͨ ॏෳ௨͞Εͯ͠·ͬͨ
͏·͍͔͘ͳ͔ͬͨ
Α͘ݟͯΈͨ
Α͘ݟͯΈͨ
Α͘ݟͯΈͨ
Α͘ݟͯΈͨ w )551$PEF@&-#@99@$PVOU ‣ ൃੜ ঢ়ଶͷߋ৽ ࣌ࠁɿ w )551$PEF@&-#@@$PVOU ‣
ൃੜ ঢ়ଶͷߋ৽ ࣌ࠁɿ 99͕ઌʹൃՐ͠ɺͦͷޙ͕ൃՐͨ͠ ෳ߹ΞϥʔϜͷλΠϛϯάͰ ͔֬ʹ99͔͠ൃՐ͍ͯ͠ͳ͍ ൃՐ͍ͯ͠ͳ͍ ࣜ௨Γͷڍಈʹͳ͍ͬͯΔ
99͕ઌʹൃՐͯ͠ ͦͷޙ۩εςʔλε͕ ൃՐ͢Δͷ͔ɾɾɾʁ
೦ͷͨΊڥΛ࡞Γͯ͠ ࠶࣮ߦͯ͠Έͨ
ࠓ 99ΑΓઌʹ͕ൃՐͨ͠
ൃՐλΠϛϯά ඵ ຖճಉͩͬͨ͡
ൃՐධՁλΠϛϯά ΞϥʔϜΛ࡞ͨ͠ λΠϛϯά ࣌ࠁ ʹΑΔʁ
ඵҧ͏ɾɾɾ
None
ԿʹͤΑ ධՁλΠϛϯάຖಉ͡ඵ
ΞϥʔϜͷධՁλΠϛϯάͷલޙͲͪΒͰ Τϥʔ͕ൃੜ͢Δ͔࣍ୈͰॱ൪͕มΘΔ T T T T 99ධՁ ධՁ ͜͜ͰΤϥʔ͕ى͖ͨΒ͕ઌʹൃՐ ͜͜ͰΤϥʔ͕ى͖ͨΒ99͕ઌʹൃՐ
ΤϥʔͷൃੜλΠϛϯάͰ ΞϥʔϜൃՐॱ൪͕มΘΔͷࠔΔ
͜ΕͰऴΘΓ͔ʁ
͍
·ͩΕΔ
αϓϨοαʔΞϥʔϜ
αϓϨοαʔΞϥʔϜ IUUQTEPDTBXTBNB[PODPNKB@KQ"NB[PO$MPVE8BUDIMBUFTUNPOJUPSJOH$SFBUF@$PNQPTJUF@"MBSNIUNM
αϓϨοαʔΞϥʔϜ ࣮ߦ͢·͢
αϓϨοαʔΞϥʔϜ w બͨ͠ΞϥʔϜ͕ΞϥʔϜঢ়ଶʹͳΔͱෳ߹ΞϥʔϜͷΞΫγϣϯ͕ແޮʹͳΔ ‣ αϓϨοαʔΞϥʔϜͷൃՐΛࢦఆඵͪɺෳ߹ΞϥʔϜͷൃՐΛԆɾ੍ w αϓϨοαʔΞϥʔϜ͔ͭ͠બͳ͍ ‣
Λશ෦બͳ͍ͱࠓճͷతୡͰ͖ͳ͍ ͜ΕΒ͕ൃՐ͢Δ͔Ͳ͏͔͔ͬͯΒෳ߹ΞϥʔϜΛධՁ͍ͤͨ͞ ࣌ؒࠩ͠ͰൃՐ͢ΔͳΒෳ߹ΞϥʔϜͷൃՐΛࢭΊ͍ͨ ‣ ͷෳ߹ΞϥʔϜΛ࡞ͯ͠ɺͦΕΛબ͢Εྑ͍ UFTUHPUPFMCTVQQSFTTJPO ෳ߹ΞϥʔϜ ɹɹl"-"3. UFTUHPUPFMC 03"-"3. lUFTUHPUPFMC 03ʜz
αϓϨοαʔΞϥʔϜ
ͬͯΈͨ
ͬͯΈͨɿαϓϨοαʔΞϥʔϜ UFTUHPUPFMC99 UFTUHPUPFMC UFTUHPUPFMCTVQQSFTTJPO ࠷ॳͷݕূ࣌ͱಉ͘͡ΤϥʔΛൃੜͤͨ͞Β 99͕ઌʹൃՐͨ͠ ͱෳ߹ͷॏෳൃՐࣦͨ͠ഊύλʔϯ௨Γ
͢Δͱɾɾɾ
ෳ߹ΞϥʔϜ ࣮࣭99 ൃՐ ௨ ͤͣ
͚ͩ௨͕དྷͨʂʂʂ
ॏෳഉআޭʂ
ͬͯΈͨɿαϓϨοαʔΞϥʔϜ 99ൃՐʹΑΓҰ࣌తʹΞϥʔϜঢ়ଶʹͳ͍ͬͯΔ͕ ؒ 8BJU1FSJPE ΞΫγϣϯ੍͕͞ΕΔ ͦͷޙൃՐʹΑͬͯ0,ঢ়ଶʹͬͨ ʢ͕ൃՐ͠ͳ͚ΕΞΫγϣϯ͕ى͜Δͣʁʣ
LHPUP าͷςοΫ $MPVE8BUDIෳ߹ΞϥʔϜͰ&-#ͷ99Λ ͍͍ײ͡ʹݕ͠Α͏ͱͨ͠Β ͏·͍͔͘ͳ͔ͬͨ +"846(43&ࢧ෦
LHPUP าͷςοΫ $MPVE8BUDIෳ߹ΞϥʔϜͰ&-#ͷ99Λ ͍͍ײ͡ʹݕ͠Α͏ͱͨ͠Β ͏·͍͔͘ͳ͔ͬͨ +"846(43&ࢧ෦
ҙ w ࣮ࡍʹͳͲͷΤϥʔ Ҏ֎ Λൃੜͤ͞ΔݕূΛ͍ͯ͠ ͳ͍ͷͰɺͩͱͪΌΜͱෳ߹ΞϥʔϜ͕ൃՐ͢Δ͔Ͳ͏͔ͷ֬ೝͯ͠ ͍·ͤΜ
‣ μϝͩͬͨΒ͍͢·ͤΜɾɾɾ
ҙ w ࠓճͷख๏Ͱɺ͏·͍ͬͨ͘ʢఆ௨Γͷڍಈʹͳͬͨʣͱͯ͠ɺ ͱͦΕҎ֎ͷ99Τϥʔ͕ಉ࣌ʢಉධՁظؒʣʹൃੜͨ͠߹ɺ ෳ߹ΞϥʔϜ ࣮࣭99ϝτϦΫε ͷํͷ௨͕དྷ·ͤΜɻ
‣ ྫ͑ͱ͕ಉ࣌ʹى͖ͨͱ͖ɺʢ۩ʣͷ௨͚ͩདྷΔ w ͦΕ࣮ࡍʹΤϥʔ͕ى͖ͨ࣌݁ہ"84ίϯιʔϧͷάϥϑΛݟʹߦ͘ͱ ࢥ͏ͷͰͦΕͰผ͢Ε͍͍͔ͳͱ͍͏ํͰɺؤுΒͳ͍͜ͱʹ͠·͠ ͨɻ
ࢀߟɿϒϩάهࣄ าͷςοΫ w $MPVE8BUDIෳ߹ΞϥʔϜͰ&-#ͷ99Λ͍͍ײ͡ʹݕ͠Α͏ͱͨ͠Β ͏·͍͔͘ͳ͔ͬͨ ‣ IUUQTHPUPLIBUFOBCMPHDPNFOUSZ
એɿࣗ࡞"84ؔ࿈πʔϧ044 w EFMTUBDL"84$MPVE'PSNBUJPOελοΫڧ੍আπʔϧ ‣ IUUQTHPUPLIBUFOBCMPHDPNFOUSZEFMTUBDL w DMT4όέοτߴআɾۭʹ͢Δπʔϧ όʔδϣχϯάରԠ ‣
IUUQTHPUPLIBUFOBCMPHDPNFOUSZDMT w MBNWFS-BNCEBϥϯλΠϜόʔδϣϯݕࡧπʔϧ Ϧʔδϣϯԣஅ ‣ IUUQTHPUPLIBUFOBCMPHDPNFOUSZMBNWFS
એɿొஃ w d"84%FW%BZ5PLZP ࿈ଓ ‣ ʰ"84$%,ͰֶͿ(P'σβΠϯύλʔϯʙ*B$ʹίʔυઃܭʙʱ
5IBOL:PV LHPUP าͷςοΫ