Lambdaでサーバレス化した時に考慮し忘れちゃったこと

Slide 1

Slide 1 text

Lambdaでサーバレス化した時に考慮し忘れちゃったこと JAWS-UG 金沢松田康宏

Slide 2

Slide 2 text

自己紹介私は金沢市にある印刷会社のインフラエンジニアとして2020年まで勤務し、AWSを利用したインフラの概念検証を担当 2021年1月よりイースト株式会社に転職 JAWS-UG金沢に2018年より参加し、コアメンバーとして活動ファイナンシャルプランナー (AFP) 趣味はランニング、ボウリング、家庭菜園 #jawsug_kanazawa

Slide 3

Slide 3 text

#jawsug_kanazawa

Slide 4

Slide 4 text

金沢支部の紹介 1ヶ月ごとに勉強会を行なっており、AWSに興味ある方、より一層活用したい方、使っている仲間を見つけたい方に是非とも参加いただきたいです #jawsug_kanazawa 2019年にAWS Community Day Kanazawaを開催し、120 名以上の方にお集まりいただきました

Slide 5

Slide 5 text

本日のゴール・手軽にサーバレスを実現できるLambdaにおける落とし穴と対応策を理解する・Lambdaのコールドスタートとスロットリングについて理解する

Slide 6

Slide 6 text

本日お話すること・サーバレス化した概要についてです・サーバレスに移行した際の落とし穴・どうすればよかったのか？

Slide 7

Slide 7 text

サービス内容の紹介・DONGRIという辞書アプリをイースト株式会社では提供しており、各種辞典、用語集など幅広いラインナップから利用ができます・iOS, Android, Windows版を提供し、複数のディバイスを通して辞書が利用できることが特徴で、オンラインだけでなくオフラインでも利用できます

Slide 8

Slide 8 text

システム面での特徴・主に学校と自宅で利用されることが多い・平日日中時間帯と夜間に利用が多い・特に日中時間帯は授業で一斉に利用されることが多く、瞬間的なピークが発生しやすい

Slide 9

Slide 9 text

移行前のアーキテクチャ複数のEC2をロードバランサ― に接続し負荷分散を行うシンプルな構成

Slide 10

Slide 10 text

旧アーキテクチャが抱えていた課題・拡張性がなく、冗長構成を維持するためのコストが高止まり・ap-northeast-1bのみにインスタンスが構築されており、アベイラビリティーゾーン障害時にサービス停止となる可能性・Windows Serverをベースにしたシステムで保守コストが高い・EC2内にある独自データベースを保守することが困難

Slide 11

Slide 11 text

更新後のアーキテクチャ LambdaとDocumentDBを使った構成スケーリングできるようにするとともにマネージドサービスに移行することで保守コストを押さえられた移行途中のため、DocumentDBに移行されていない辞書については従来のシステムにリクエストを転送し、検索を行っている

Slide 12

Slide 12 text

何が起こったか? 負荷テストを行っていたところ、５０２エラーが発生デフォルト1000となっている同時実行数を超えたことが原因

Slide 13

Slide 13 text

同時実行数の緩和申請アカウントの同時実行数を1000→5000に緩和申請して問題を解決したつもりでした

Slide 14

Slide 14 text

しかし… 再度負荷テストを実施したところ、異なるエラーが発生辞書の検索アルゴリズムが原因でスロットリングが発生していたことがわかる

Slide 15

Slide 15 text

スロットリングについて

Slide 16

Slide 16 text

スロットリングについて

Slide 17

Slide 17 text

どうすればよかったのか？・処理時間を減らす →コールドスタートを避けProvisioned Concurrrency Setteingsを使用 ex. serverless-provisioned-concurrency-autoscaling

Slide 18

Slide 18 text

コールドスタートとはなにか？

Slide 19

Slide 19 text

抜本的な対応策・スパイクにも耐えらえる構成を採用することが重要・「ロマンシングサガリ・ユニバースの大規模負荷を処理する Amazon ECS & Docker運用知見」が非常に参考になる

Slide 20

Slide 20 text

まとめ・採用するアーキテクチャの特徴を良く理解する・概念実証時には負荷テストも考慮する・ドキュメントをよく読もう・他社の事例を見よう

Slide 21

Slide 21 text

ご清聴ありがとうございました JAWS-UG金沢松田康宏