Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
AWS re:Invent 2024 re:Cap AZ障害に対応する
Search
Kota Sasaki
January 13, 2025
0
6
AWS re:Invent 2024 re:Cap AZ障害に対応する
Kota Sasaki
January 13, 2025
Tweet
Share
More Decks by Kota Sasaki
See All by Kota Sasaki
JAWS-UG横浜 #80 AWS re:Invent 2024 re:Cap Serverless 〜サーバレスの変革 〜
sasakidenki
0
45
IaCを使って楽々構築、IaCとお友達になろう
sasakidenki
0
31
JAWS-UG札幌_opening_35
sasakidenki
0
12
JAWS-UG札幌_opening_30
sasakidenki
0
44
JAWS-UG札幌_opening_31
sasakidenki
0
43
JAWS-UG札幌_opening_32
sasakidenki
0
32
JAWS-UG札幌_opening_33
sasakidenki
0
40
JAWS-UG札幌_opening_34
sasakidenki
0
36
どさんこがお届けする 〜オールラウンドなクラウド活用事例〜
sasakidenki
0
640
Featured
See All Featured
Embracing the Ebb and Flow
colly
84
4.6k
Documentation Writing (for coders)
carmenintech
67
4.6k
Why Our Code Smells
bkeepers
PRO
336
57k
GraphQLとの向き合い方2022年版
quramy
44
13k
Build The Right Thing And Hit Your Dates
maggiecrowley
34
2.5k
Designing Experiences People Love
moore
139
23k
Testing 201, or: Great Expectations
jmmastey
42
7.2k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.3k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
Raft: Consensus for Rubyists
vanstee
137
6.8k
Java REST API Framework Comparison - PWX 2021
mraible
28
8.4k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
6
550
Transcript
AZ障害に対応する NECソリューションイノベータ株式会社 佐々木 航太
© NEC Corporation 2024 NEC Group Internal Use Only 2
自己紹介 ◼ 佐々木 航太(Kota Sasaki) NECソリューションイノベータ株式会社 シニアプロフェッショナル 好きなサービス:Lambda、AppSync、CloudFormation AWS Ambassador 2024 Japan AWS TopEnginer 2024/2022/2021 Japan AWS All Certifications 2024 #40歳 #稚内出身 #野球 #AWS歴10年 #ネットワーク #セキュリティ #新製品好き #Soracom
© NEC Corporation 2024 NEC Group Internal Use Only 3
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 4
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 5
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 6
re:invent 2024 in ハワイ ハワイ経由のメリット ・時差ボケが少ない、フライト時間が7時間、6時間で体に優しい ・飛行機代がお安め(ラスベガス往復で20万円ぐらい) ・ご飯が美味しい ・Wifiが無料で使いたい放題!Youtubeも見れる。
© NEC Corporation 2024 NEC Group Internal Use Only 7
re:invent 2024 in ハワイ まだ再開してないんですー来年までに航路再開を!!!
© NEC Corporation 2024 NEC Group Internal Use Only 8
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 9
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 10
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 11
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 12
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 13
re:invent 2024 in ラスベガス 歩いた距離数(12月1日ー12月7日) 154185 154,185歩 113km
© NEC Corporation 2024 NEC Group Internal Use Only 14
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 15
AZ障害に対応する https://aws.amazon.com/jp/message/56489/ 要約 2019年8月23日(金)に東京リージョンの単一AZでEC2とEBSに障害が発生した。 (実際にはRDSやWorkSpacesやALBにも障害が発生)
© NEC Corporation 2024 NEC Group Internal Use Only 16
AZ障害に対応する https://www.itmedia.co.jp/news/articles/1908/28/news127_2.html その時の対応策の一部として、ALBから当該のAZを 切り離す対応が有効という情報があり、 切り離そうとしたが、東京リージョンのAZが3つ になったタイミングは2018年だったこともあり、 2AZで運用しているものも多く切り離せなかった。
© NEC Corporation 2024 NEC Group Internal Use Only 17
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/rapidly-recover-from-application-failures-in-a-single-az/ マネコンやCLIなどで特定の時間、特定のAZを 切り離すことができるようになった。 ※クロスリージョン負荷分散をOFFにする ことが条件
© NEC Corporation 2024 NEC Group Internal Use Only 18
AZ障害に対応する この場合の問題点 ・ALBを使ってる必要があった。 (Route53で切り替える方法もあるが構成が豪華) ・切り離す動作だけなので、サーバは冗長構成にしておくか、 障害時に起動する必要があった。 ・負荷分散している場合はリクエストが片方によってしまう。 (負荷に耐えきれない、または手動で起動する必要があった。)
© NEC Corporation 2024 NEC Group Internal Use Only 19
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 20
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/amazon-ec2-auto-scaling-jp/ 注意 障害時の時はリソース枯 渇で起動しない場合がある から注意
© NEC Corporation 2024 NEC Group Internal Use Only 21
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/amazon-ec2-auto-scaling-jp/
© NEC Corporation 2024 NEC Group Internal Use Only 22
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 23
まとめ ・ラスベガスにはホノルル経由かつハワイアン航空 でいきましょう!
None