Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
AWS re:Invent 2024 re:Cap AZ障害に対応する
Search
Kota Sasaki
January 13, 2025
0
0
AWS re:Invent 2024 re:Cap AZ障害に対応する
Kota Sasaki
January 13, 2025
Tweet
Share
More Decks by Kota Sasaki
See All by Kota Sasaki
IaCを使って楽々構築、IaCとお友達になろう
sasakidenki
0
26
JAWS-UG札幌_opening_35
sasakidenki
0
9
JAWS-UG札幌_opening_30
sasakidenki
0
39
JAWS-UG札幌_opening_31
sasakidenki
0
40
JAWS-UG札幌_opening_32
sasakidenki
0
30
JAWS-UG札幌_opening_33
sasakidenki
0
37
JAWS-UG札幌_opening_34
sasakidenki
0
35
どさんこがお届けする 〜オールラウンドなクラウド活用事例〜
sasakidenki
0
620
アプリケーションにKnowledge Bases for Amazon Bedrock を組み込む
sasakidenki
0
90
Featured
See All Featured
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
666
120k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
38
1.9k
The Art of Programming - Codeland 2020
erikaheidi
53
13k
Designing for humans not robots
tammielis
250
25k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
3
340
BBQ
matthewcrist
85
9.4k
It's Worth the Effort
3n
183
28k
Code Review Best Practice
trishagee
65
17k
How to train your dragon (web standard)
notwaldorf
88
5.8k
Designing on Purpose - Digital PM Summit 2013
jponch
116
7k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
160
15k
Transcript
AZ障害に対応する NECソリューションイノベータ株式会社 佐々木 航太
© NEC Corporation 2024 NEC Group Internal Use Only 2
自己紹介 ◼ 佐々木 航太(Kota Sasaki) NECソリューションイノベータ株式会社 シニアプロフェッショナル 好きなサービス:Lambda、AppSync、CloudFormation AWS Ambassador 2024 Japan AWS TopEnginer 2024/2022/2021 Japan AWS All Certifications 2024 #40歳 #稚内出身 #野球 #AWS歴10年 #ネットワーク #セキュリティ #新製品好き #Soracom
© NEC Corporation 2024 NEC Group Internal Use Only 3
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 4
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 5
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 6
re:invent 2024 in ハワイ ハワイ経由のメリット ・時差ボケが少ない、フライト時間が7時間、6時間で体に優しい ・飛行機代がお安め(ラスベガス往復で20万円ぐらい) ・ご飯が美味しい ・Wifiが無料で使いたい放題!Youtubeも見れる。
© NEC Corporation 2024 NEC Group Internal Use Only 7
re:invent 2024 in ハワイ まだ再開してないんですー来年までに航路再開を!!!
© NEC Corporation 2024 NEC Group Internal Use Only 8
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 9
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 10
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 11
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 12
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 13
re:invent 2024 in ラスベガス 歩いた距離数(12月1日ー12月7日) 154185 154,185歩 113km
© NEC Corporation 2024 NEC Group Internal Use Only 14
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 15
AZ障害に対応する https://aws.amazon.com/jp/message/56489/ 要約 2019年8月23日(金)に東京リージョンの単一AZでEC2とEBSに障害が発生した。 (実際にはRDSやWorkSpacesやALBにも障害が発生)
© NEC Corporation 2024 NEC Group Internal Use Only 16
AZ障害に対応する https://www.itmedia.co.jp/news/articles/1908/28/news127_2.html その時の対応策の一部として、ALBから当該のAZを 切り離す対応が有効という情報があり、 切り離そうとしたが、東京リージョンのAZが3つ になったタイミングは2018年だったこともあり、 2AZで運用しているものも多く切り離せなかった。
© NEC Corporation 2024 NEC Group Internal Use Only 17
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/rapidly-recover-from-application-failures-in-a-single-az/ マネコンやCLIなどで特定の時間、特定のAZを 切り離すことができるようになった。 ※クロスリージョン負荷分散をOFFにする ことが条件
© NEC Corporation 2024 NEC Group Internal Use Only 18
AZ障害に対応する この場合の問題点 ・ALBを使ってる必要があった。 (Route53で切り替える方法もあるが構成が豪華) ・切り離す動作だけなので、サーバは冗長構成にしておくか、 障害時に起動する必要があった。 ・負荷分散している場合はリクエストが片方によってしまう。 (負荷に耐えきれない、または手動で起動する必要があった。)
© NEC Corporation 2024 NEC Group Internal Use Only 19
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 20
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/amazon-ec2-auto-scaling-jp/ 注意 障害時の時はリソース枯 渇で起動しない場合がある から注意
© NEC Corporation 2024 NEC Group Internal Use Only 21
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/amazon-ec2-auto-scaling-jp/
© NEC Corporation 2024 NEC Group Internal Use Only 22
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 23
まとめ ・ラスベガスにはホノルル経由かつハワイアン航空 でいきましょう!
None