ECSタスクがすぐに落ちる、、

# 原因の概要

プライベートサブネットに作成したAmazon ECSタスクがすぐに停止した原因は、そもそもECSタスクとVPCエンドポイント（s3）間のルートテーブルの設定がされておらず、Amazon ECSタスクがAmazon ECRからDockerレジストリを取得できなかったことでした。

# このスライドで書いていること

初期調査からどのように原因の切り分けを実施して、ルートテーブルの設定に問題があることがわかったのかを話していきます！

Transcript

1. ECSタスクが起動しても すぐに停止した時の 原因切り分け 小倉大河
2. 自己紹介 名前：小倉 大河（ティガって呼んでください！） 趣味：サッカー、テニス（サーブ入らない） 毎日食べているもの：ヨーグルト
3. ECSタスクが起動してもすぐ停止する、、
4. 原因どこ？ ALBのヘルスチェックが失敗したのかな？
5. 原因どこ？ タスク定義に設定したイメージIDとか権限とか間違えているのかな？
6. 原因どこ？ どこかVPCエンドポイントの設定間違っているかな？
7. 原因ここ！
8. 原因の概要、これから話すこと プライベートサブネットに作成したAmazon ECSタスクがすぐに停止した原因は、 そもそもECSタスクとVPCエンドポイント（s3）間のルートテーブルの設定がされておらず、 Amazon ECSタスクがAmazon ECRからDockerレジストリを取得できなかったことでした。 初期調査からどのように原因の切り分けを実施して、 ルートテーブルの設定に問題があることがわかったのかを話していきます！ 原因の概要 これから話すこと
9. 初期調査 CloudWatch Logsにログが出力されていないが、 ECSイベントログには以下のようなログが出力されていました。 ResourceInitializationError: unable to pull secrets or registry auth: execution resource retrieval failed: unable to retrieve ecr registry auth: service call has been retried 3 time(s): RequestError: send request failed caused by: Post "https://api.ecr.ap-northeast-1.amazonaws.com/": dial tcp XX.XX.XX.XX:443: i/o timeout. Please check your task network configuration. ECSタスクがECRからDockerイメージを取得する際に ネットワーク接続の問題が発生したため、イメージのプルができず、 タスクの初期化に失敗している 公式ドキュメント通りに、 必要なVPCエンドポイントは作成されているんだけどな、、
10. 原因切り分け：VPCエンドポイント周りの設定が原因なのか ECRからDockerイメージを取得する方法を VPCエンドポイント経由ではなく、 NATGateway経由に変更してみます！ →結果NATGateway経由だと ECRからDockerイメージを取得して ちゃんとECSタスクが起動できました 原因はVPCエンドポイントなのか！
11. 原因切り分け：どのVPCエンドポイントが原因なのか Reachability Analyzerとは、 以下のリソース間の到達可能性を分析できます。 • インスタンス • インターネットゲートウェイ • Elastic Network Interface（ENI） • Transit Gateway • Transit Gateway アタッチメント • VPC エンドポイントサービス • VPC エンドポイント • VPC ピアリング接続 • VPN ゲートウェイ 参考 https://docs.aws.amazon.com/ja_jp/vpc/latest/userguide/reachability-analyzer.html 今回は、 Reachability Analyzerで ECSタスクのENIと各VPCエンドポイントの 到達可能性を分析していきます！
12. 原因切り分け：どのVPCエンドポイントが原因なのか ECSタスクのENIからVPCエンドポイント(ecr.api)の到達可能性を分析 到達可能
13. 原因切り分け：どのVPCエンドポイントが原因なのか ECSタスクのENIからVPCエンドポイント(ecr.dkr)の到達可能性を分析 到達可能 接続できるらしい
14. 原因切り分け：どのVPCエンドポイントが原因なのか ECSタスクのENIからVPCエンドポイント(s3)の到達可能性を分析 到達不可能
15. 原因切り分け：どのVPCエンドポイントが原因なのか Reachability Analyzerの結果、 ECSとVPCエンドポイント(s3)間の 適切なルートテーブル設定が ないことが分かりました！
16. まとめ Reachability Analyzerの指摘通り、適切なルートテーブルの設定をしたところ、 ECSタスクは無事に起動させることができました！ 今回のように、AWS公式ドキュメントに従ってコンソール上で設定を確認しても問題が見つからない場合は、 別のアプローチを試したり、Reachability Analyzerなどのツールを利用して 原因切り分けを行ってみてください！ ぜひ、ネットワーク設定等を見直す際にはReachability Analyzerを使ってみてください！！