AWS CDK × サーバレスアーキテクチャを極める/Developers Summit 2024

Slide 1

Slide 1 text

Slide 2

Slide 2 text

© 2024 Works Human Intelligence Co., Ltd. スピーカー  2 恋塚大 Dai Koizuka  早稲田大学商学部を首席で卒業。株式会社Works Human Intelligenceの前身となる会社に新卒入社し、HR SaaS製品の開発に従事。FastLabel株式会社にてAI プラットフォーム製品の開発統括を務めた後、現職。CTO OF THE YEAR 2022 ファイナリスト。  株式会社Works Human Intelligence 開発   齋藤康生 Yasuo Saito  2017年に株式会社Works Human Intelligenceの前身となる会社に新卒で入社。その後、複数のクラウドサービスの開発・運用に携わり、主にアプリケーションのサーバーサイドの開発やAWSにおけるクラウドアーキテクチャの設計を経験する。昨年から一児の父親とエンジニアの両立に奮闘中。   株式会社Works Human Intelligence 開発  

Slide 3

Slide 3 text

© 2024 Works Human Intelligence Co., Ltd. 目次  3 02 AWS CDKとサーバレスアーキテクチャ  AWS CDKとは / サーバレスアーキテクチャとは / AWS CDK vs Serverless Framework / アーキテクチャ   03 ローカル開発環境  理想のローカル開発環境 / API Gateway + Lambda / DynamoDB   04 運用で直面した課題と解決策  Stackのリソース上限 / $aws sam start-api が Nested Stack に非対応   05 その他Tips  コールドスタート対策 / Lambdaアーキテクチャ / 各開発者の専用クラウド環境 / Lambda構成 / デプロイパッケージ   01 はじめに  会社紹介 / 製品紹介 

Slide 4

Slide 4 text

© 2024 Works Human Intelligence Co., Ltd. 目次  4 02 AWS CDKとサーバレスアーキテクチャ  AWS CDKとは / サーバレスアーキテクチャとは / AWS CDK vs Serverless Framework / アーキテクチャ   03 ローカル開発環境  理想のローカル開発環境 / API Gateway + Lambda / DynamoDB   04 運用で直面した課題と解決策  Stackのリソース上限 / $aws sam start-api が Nested Stack に非対応   05 その他Tips  コールドスタート対策 / Lambdaアーキテクチャ / 各開発者の専用クラウド環境 / Lambda構成 / デプロイパッケージ   01 はじめに  会社紹介 / 製品紹介 

Slide 5

Slide 5 text

© 2024 Works Human Intelligence Co., Ltd. 会社紹介  5 ERP市場人事・給与業務分野シェアNo.1*¹  国内大手法人の3社に1社*²である約1,200社が導入  510万*³の人事データを管理  ✔ ✔ ✔ ※1 2021年度　ERP市場 - 人事・給与業務分野：ベンダー別売上金額シェア出典：ITR「ITR Market View：ERP市場2023」 ※2 社員数3,000人以上の法人（WHI調べ） ※3 2023年12月末時点の「COMPANY 人事」の契約ライセンス数合計エンタープライズ向け統合人事システム

Slide 6

Slide 6 text

Slide 7

Slide 7 text

© 2024 Works Human Intelligence Co., Ltd. 目次  7 02 AWS CDKとサーバレスアーキテクチャ  AWS CDKとは / サーバレスアーキテクチャとは / AWS CDK vs Serverless Framework / アーキテクチャ   03 ローカル開発環境  理想のローカル開発環境 / API Gateway + Lambda / DynamoDB   04 運用で直面した課題と解決策  Stackのリソース上限 / $aws sam start-api が Nested Stack に非対応   05 その他Tips  コールドスタート対策 / Lambdaアーキテクチャ / 各開発者の専用クラウド環境 / Lambda構成 / デプロイパッケージ   01 はじめに  会社紹介 / 製品紹介 

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

© 2024 Works Human Intelligence Co., Ltd. AWS CDK vs Serverless Framework  10 VS  AWS CDK Serverless Framework  サーバレスリソースのシンプルな記述  容易なローカル開発環境構築  CloudFormationライクな記述  他のIaCツールとのダブルメンテ  あらゆるリソースのシンプルな記述  + AWS公式の安心感  − ローカル開発環境構築の知見の少なさ  + − ベンダーロックイン  Serverless Frameworkがよく話題に上がるが、メリデメがある   + − + − リソース間の関係が見えにくいファイル分割の難しさコードの肥大化

Slide 11

Slide 11 text

© 2024 Works Human Intelligence Co., Ltd. AWS CDK vs Serverless Framework  11 VS  AWS CDK Serverless Framework  サーバレスリソースのシンプルな記述  容易なローカル開発環境構築  CloudFormationライクな記述  他のIaCツールとのダブルメンテ  あらゆるリソースのシンプルな記述  + AWS公式の安心感  − ローカル開発環境構築の知見の少なさ  + − ベンダーロックイン  Serverless Frameworkがよく話題に上がるが、メリデメがある   + − + − 新規リソースをどちらのツールで管理するかデプロイ機構の複雑化学習コスト・メンテナンスコスト

Slide 12

Slide 12 text

© 2024 Works Human Intelligence Co., Ltd. AWS CDK vs Serverless Framework  12 VS  AWS CDK Serverless Framework  サーバレスリソースのシンプルな記述  容易なローカル開発環境構築  CloudFormationライクな記述  他のIaCツールとのダブルメンテ  あらゆるリソースのシンプルな記述  + AWS公式の安心感  − ローカル開発環境構築の知見の少なさ  + − ベンダーロックイン  Serverless Frameworkがよく話題に上がるが、メリデメがある   + − + − 快適なローカル開発環境を構築しつつ  全てAWS CDKで管理できます！ 

Slide 13

Slide 13 text

© 2024 Works Human Intelligence Co., Ltd. AWSアーキテクチャ  13 フロントエンド一般的な CloudFront + S3 構成バックエンド（アプリ）アクセスが多い時期が年度末に偏るため、コストの観点からサーバレスアーキテクチャ API Gateway + Lambda + DynamoDB を採用エンドポイントごとに 1つのLambdaを割り当てバックエンド（ETL）大量データを効率よく処理できる PySpark搭載のGlueを採用特に即レスが必要ないアプリのため DWHにはRedshift Serverlessを採用

Slide 14

Slide 14 text

Slide 15

Slide 15 text

© 2024 Works Human Intelligence Co., Ltd. 目次  15 02 AWS CDKとサーバレスアーキテクチャ  AWS CDKとは / サーバレスアーキテクチャとは / AWS CDK vs Serverless Framework / アーキテクチャ   03 ローカル開発環境  理想のローカル開発環境 / API Gateway + Lambda / DynamoDB   04 運用で直面した課題と解決策  Stackのリソース上限 / $aws sam start-api が Nested Stack に非対応   05 その他Tips  コールドスタート対策 / Lambdaアーキテクチャ / 各開発者の専用クラウド環境 / Lambda構成 / デプロイパッケージ   01 はじめに  会社紹介 / 製品紹介 

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

© 2024 Works Human Intelligence Co., Ltd. 1. CloudFormationテンプレート出力  21 AWS SAM CLI等で利用するCloudFormationテンプレートを作成   --exclusivelyオプションを指定し、スタック間の依存を無視し、対象のスタックのみsynthする。   スタック毎に並列でcdk synthを実行することで、実行時間を短縮。   スタック毎の実行で時間を短縮  ✔ 後続のステップで利用するため、スタック毎に特定のファイルに出力する。   スタック毎にファイル出力  ✔

Slide 22

Slide 22 text

© 2024 Works Human Intelligence Co., Ltd. --exclusivelyオプションを指定し、スタック間の依存を無視し、対象のスタックのみsynthする。   スタック毎に並列でcdk synthを実行することで、実行時間を短縮。   1. CloudFormationテンプレート出力  22 AWS SAM CLI等で利用するCloudFormationテンプレートを作成   スタック毎の実行で時間を短縮  ✔ 後続のステップで利用するため、スタック毎に特定のファイルに出力する。   スタック毎にファイル出力  ✔

Slide 23

Slide 23 text

© 2024 Works Human Intelligence Co., Ltd. 2. ビルド  LambdaのDockerイメージをビルド   Lambda関数が大量にあるため、ビルドに時間がかかる。   --parallelオプションを指定し、ビルドを並列することにより、ビルド時間を短縮する。   並列実行により時間を短縮  ✔ Dockerイメージはソースコードを含むため、ソースコードの変更のたびにビルドする必要がある。   VS Codeの拡張機能（Run on Save）を利用し、ソースコード保存時にsam buildが実行されるようにすることで、擬似的にホットリロードを実現する。  ホットリロード  ✔ 23

Slide 24

Slide 24 text

Slide 25

Slide 25 text

© 2024 Works Human Intelligence Co., Ltd. 3. 起動  ローカル環境に API Gateway + Lambda を起動し、localhost:5000でアクセス可能に   標準出力されるログは読みづらく、永続化されないため、 --log-fileオプションを利用しファイルへの  ログ出力を設定する。    ファイルへのログ出力  ✔ v.1.80.0（2023年4月リリース）より、sam local start-apiコマンドがLambda Authorizerに対応した。   よりクラウド環境に近い構成がローカルで再現可能に。   Lambda Authorizerにも対応  ✔ 25

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

© 2024 Works Human Intelligence Co., Ltd. 目次  30 02 AWS CDKとサーバレスアーキテクチャ  AWS CDKとは / サーバレスアーキテクチャとは / AWS CDK vs Serverless Framework / アーキテクチャ   03 ローカル開発環境  理想のローカル開発環境 / API Gateway + Lambda / DynamoDB   04 運用で直面した課題と解決策  Stackのリソース上限 / $aws sam start-api が Nested Stack に非対応   05 その他Tips  コールドスタート対策 / Lambdaアーキテクチャ / 各開発者の専用クラウド環境 / Lambda構成 / デプロイパッケージ   01 はじめに  会社紹介 / 製品紹介 

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text

© 2024 Works Human Intelligence Co., Ltd. $sam local start-api が Nested Stack に非対応: 解決策  34 AWS CDKのコード上で、ローカル用とクラウド用で API Gateway に紐付ける Lambda の指定方法を変更する   処理を分岐し、ローカルの場合はARNを直接指定  Before  After  関数名が正しければリージョンやアカウントIDはダミーで良い  Lambdaリソースを指定 

Slide 35

Slide 35 text

© 2024 Works Human Intelligence Co., Ltd. $sam local start-api が Nested Stack に非対応: 解決策  35 出力されたテンプレートで Fn::GetAtt が使われなくなり、$sam local start-api が意図通り動くようになる   修正したCDKから出力されたテンプレートではFn::GetAttが不要に  Before  After 

Slide 36

Slide 36 text

© 2024 Works Human Intelligence Co., Ltd. 目次  36 02 AWS CDKとサーバレスアーキテクチャ  AWS CDKとは / サーバレスアーキテクチャとは / AWS CDK vs Serverless Framework / アーキテクチャ   03 ローカル開発環境  理想のローカル開発環境 / API Gateway + Lambda / DynamoDB   04 運用で直面した課題と解決策  Stackのリソース上限 / $aws sam start-api が Nested Stack に非対応   05 その他Tips  コールドスタート対策 / Lambdaアーキテクチャ / 各開発者の専用クラウド環境 / Lambda構成 / デプロイパッケージ   01 はじめに  会社紹介 / 製品紹介 

Slide 37

Slide 37 text

Slide 38

Slide 38 text

Slide 39

Slide 39 text

Slide 40

Slide 40 text

Slide 41

Slide 41 text

Slide 42

Slide 42 text

© 2024 Works Human Intelligence Co., Ltd. Lambda構成  42 サーバレスの利点を活かしやすい、エンドポイントごとLambdaの構成を採用   比較軸単一のLambda エンドポイントごとのLambda デプロイの複雑さコードベースの管理リソースの利用効率スケーラビリティセキュリティコストモニタリング特にセキュリティ面とコスト最適化、モニタリングの観点を重視  ✔

Slide 43

Slide 43 text

Slide 44

Slide 44 text

© 2024 Works Human Intelligence Co., Ltd. デプロイパッケージ    ディレクトリ単位  サイズの最小化  + Lambda同士が疎結合  + DDDで設計しており、Pythonを利用しているためソースコード全体を各Lambdaにパッケージ     ソースコード全体    バンドル  DDDなどに適切  + 管理が簡単  + サイズの最小化  + 管理が簡単  + DDDのため不可  Pythonのため不可  44

Slide 45

Slide 45 text

Slide 46

Slide 46 text