Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
AWS re:Invent 2024 re:Cap AZ障害に対応する
Search
Kota Sasaki
January 13, 2025
0
0
AWS re:Invent 2024 re:Cap AZ障害に対応する
Kota Sasaki
January 13, 2025
Tweet
Share
More Decks by Kota Sasaki
See All by Kota Sasaki
IaCを使って楽々構築、IaCとお友達になろう
sasakidenki
0
26
JAWS-UG札幌_opening_35
sasakidenki
0
9
JAWS-UG札幌_opening_30
sasakidenki
0
39
JAWS-UG札幌_opening_31
sasakidenki
0
40
JAWS-UG札幌_opening_32
sasakidenki
0
30
JAWS-UG札幌_opening_33
sasakidenki
0
37
JAWS-UG札幌_opening_34
sasakidenki
0
35
どさんこがお届けする 〜オールラウンドなクラウド活用事例〜
sasakidenki
0
620
アプリケーションにKnowledge Bases for Amazon Bedrock を組み込む
sasakidenki
0
90
Featured
See All Featured
Why Our Code Smells
bkeepers
PRO
335
57k
Visualization
eitanlees
146
15k
Facilitating Awesome Meetings
lara
50
6.2k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
33
2k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
112
50k
Building Your Own Lightsaber
phodgson
104
6.2k
Java REST API Framework Comparison - PWX 2021
mraible
28
8.3k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
10
850
Imperfection Machines: The Place of Print at Facebook
scottboms
266
13k
Statistics for Hackers
jakevdp
797
220k
How To Stay Up To Date on Web Technology
chriscoyier
790
250k
Stop Working from a Prison Cell
hatefulcrawdad
267
20k
Transcript
AZ障害に対応する NECソリューションイノベータ株式会社 佐々木 航太
© NEC Corporation 2024 NEC Group Internal Use Only 2
自己紹介 ◼ 佐々木 航太(Kota Sasaki) NECソリューションイノベータ株式会社 シニアプロフェッショナル 好きなサービス:Lambda、AppSync、CloudFormation AWS Ambassador 2024 Japan AWS TopEnginer 2024/2022/2021 Japan AWS All Certifications 2024 #40歳 #稚内出身 #野球 #AWS歴10年 #ネットワーク #セキュリティ #新製品好き #Soracom
© NEC Corporation 2024 NEC Group Internal Use Only 3
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 4
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 5
re:invent 2024 in ハワイ
© NEC Corporation 2024 NEC Group Internal Use Only 6
re:invent 2024 in ハワイ ハワイ経由のメリット ・時差ボケが少ない、フライト時間が7時間、6時間で体に優しい ・飛行機代がお安め(ラスベガス往復で20万円ぐらい) ・ご飯が美味しい ・Wifiが無料で使いたい放題!Youtubeも見れる。
© NEC Corporation 2024 NEC Group Internal Use Only 7
re:invent 2024 in ハワイ まだ再開してないんですー来年までに航路再開を!!!
© NEC Corporation 2024 NEC Group Internal Use Only 8
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 9
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 10
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 11
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 12
re:invent 2024 in ラスベガス
© NEC Corporation 2024 NEC Group Internal Use Only 13
re:invent 2024 in ラスベガス 歩いた距離数(12月1日ー12月7日) 154185 154,185歩 113km
© NEC Corporation 2024 NEC Group Internal Use Only 14
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 15
AZ障害に対応する https://aws.amazon.com/jp/message/56489/ 要約 2019年8月23日(金)に東京リージョンの単一AZでEC2とEBSに障害が発生した。 (実際にはRDSやWorkSpacesやALBにも障害が発生)
© NEC Corporation 2024 NEC Group Internal Use Only 16
AZ障害に対応する https://www.itmedia.co.jp/news/articles/1908/28/news127_2.html その時の対応策の一部として、ALBから当該のAZを 切り離す対応が有効という情報があり、 切り離そうとしたが、東京リージョンのAZが3つ になったタイミングは2018年だったこともあり、 2AZで運用しているものも多く切り離せなかった。
© NEC Corporation 2024 NEC Group Internal Use Only 17
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/rapidly-recover-from-application-failures-in-a-single-az/ マネコンやCLIなどで特定の時間、特定のAZを 切り離すことができるようになった。 ※クロスリージョン負荷分散をOFFにする ことが条件
© NEC Corporation 2024 NEC Group Internal Use Only 18
AZ障害に対応する この場合の問題点 ・ALBを使ってる必要があった。 (Route53で切り替える方法もあるが構成が豪華) ・切り離す動作だけなので、サーバは冗長構成にしておくか、 障害時に起動する必要があった。 ・負荷分散している場合はリクエストが片方によってしまう。 (負荷に耐えきれない、または手動で起動する必要があった。)
© NEC Corporation 2024 NEC Group Internal Use Only 19
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 20
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/amazon-ec2-auto-scaling-jp/ 注意 障害時の時はリソース枯 渇で起動しない場合がある から注意
© NEC Corporation 2024 NEC Group Internal Use Only 21
AZ障害に対応する https://aws.amazon.com/jp/blogs/news/amazon-ec2-auto-scaling-jp/
© NEC Corporation 2024 NEC Group Internal Use Only 22
AZ障害に対応する
© NEC Corporation 2024 NEC Group Internal Use Only 23
まとめ ・ラスベガスにはホノルル経由かつハワイアン航空 でいきましょう!
None