Upgrade to Pro — share decks privately, control downloads, hide ads and more …
Sign up for free

Codeシリーズで作るTerraformのCICDパイプラインの概要

Avatar for hiyanger hiyanger
January 16, 2024
Technology
560
2

 Codeシリーズで作るTerraformのCICDパイプラインの概要

2024/1/18 jaws朝会
https://jawsug-asa.connpass.com/event/301825/

Avatar for hiyanger

hiyanger

January 16, 2024

More Decks by hiyanger

See All by hiyanger
SREに優しいTerraform構成 modulesとstateの組み方
Avatar for hiyanger hiyanger
2
270
Terraform やるなら公式スタイルガイドを読もう 〜重要項目 10選〜
Avatar for hiyanger hiyanger
14
4.2k
（Amazon Bedrock 基礎）生成 AI の活用に導くシステム構築の基本とセキュリティの実装
Avatar for hiyanger hiyanger
4
160
CIer に在籍した 3年間 でやったこと
Avatar for hiyanger hiyanger
2
460
これからクラウドエンジニアになるために本当に必要なスキル 5選
Avatar for hiyanger hiyanger
1
850
クラウド食堂とは？
Avatar for hiyanger hiyanger
0
500
Amazon ECS とマイクロサービスから考えるシステム構成
Avatar for hiyanger hiyanger
2
1.6k
全身全霊で取り組んだ 2024 Qiita アドベントカレンダー
Avatar for hiyanger hiyanger
0
140
Terraform で作る Amazon ECS の CI/CD パイプライン
Avatar for hiyanger hiyanger
1
550

Other Decks in Technology

See All in Technology
AI時代に必要な脅威モデリング― 変化の速度に負けない理解とリスク判断
Avatar for masakane55 masakane55
5
1.3k
二歩目のフロントエンド・ウェブアクセシビリティ
Avatar for KAMIHARA Takumi camiha
2
440
パスキーの自動テストはどこまでいけるのか
Avatar for teamLab teamlab
PRO
0
110
Rustuna: Rustによる高速なOptuna実装
Avatar for Preferred Networks pfn
PRO
0
130
AIは「聞けば答える」から「任せると自分で進める」へ - JACTIMペナン地域部会・ペナン三水会講演
Avatar for 西岡 賢一郎 (Kenichiro Nishioka) knishioka
0
110
WasmをRustにする
Avatar for SansanTech sansantech
PRO
0
220
Snapshot Testing in Practice: Predictable and Reliable SwiftUI Views
Avatar for Felipe Espinoza fespinoza
0
210
継続的なAIコスト最適化
Avatar for Atsushi Tanaka bgpat
1
300
Deep Data Security 機能解説
Avatar for oracle4engineer oracle4engineer
PRO
2
800
AIカンパニーへの転換を支えた、エンジニアの仕事の再定義
Avatar for KNOWLEDGE WORK / 株式会社ナレッジワーク kworkdev
PRO
2
680
AI時代だからこそ推したい！Gitコマンド再入門
Avatar for ムナカタ munakata
0
190
V8のArray.prototype.flatを最大約20倍速くするまでと、巨大OSSへの大規模コミットの道のり
Avatar for Riya Amemiya riyaamemiya
0
280

Featured

See All Featured
Abbi's Birthday
Avatar for Violet Bock coloredviolet
4
10k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
Avatar for Eileen M. Uchitelle eileencodes
141
35k
CSS Pre-Processors: Stylus, Less & Sass
Avatar for Bermon Painter bermonpainter
360
31k
Design of three-dimensional binary manipulators for pick-and-place task avoiding obstacles (IECON2024)
Avatar for konakalab konakalab
0
620
What the history of the web can teach us about the future of AI
Avatar for Ines Montani inesmontani
PRO
2
740
Rails Girls Zürich Keynote
Avatar for Gregor Martynus gr2m
96
14k
ラッコキーワード サービス紹介資料
Avatar for ラッコ株式会社 rakko
1
5.3M
Fantastic passwords and where to find them - at NoRuKo
Avatar for Phil Nash philnash
53
4k
Leo the Paperboy
Avatar for Maya Tellez mayatellez
10
2.4k
Utilizing Notion as your number one productivity tool
Avatar for Mfonobong Umondia mfonobong
4
620
Save Time (by Creating Custom Rails Generators)
Avatar for Garrett Dimon garrettdimon
PRO
33
5.2k
Visual Storytelling: How to be a Superhuman Communicator
Avatar for David Neal reverentgeek
2
710

Transcript

  1. Codeシリーズで作る TerraformのCICDパイプライン概要

  2. プロフィール 名前：檜山 準（ひやま じゅん） 所属：I◯◯◯ お仕事：クラウドエンジニア（設計、構築、運用保守） https://twitter.com/hiyanger https://qiita.com/hiyanger https://zenn.dev/hiyanger 最近よく使う技術：AWS、IaC、CI/CD　

    出身：栃木県 よかったら フォローしてね！

  3. もくじ 全体構成 この構成にした理由 各環境のデプロイ方法 クロスアカウント 承認フェーズ 実際に運用して困ったこと

  4. 全体構成

  5. 全体構成 黒線：パイプラインのメイン動作 緑線：アーティファクト系の動作 オレンジ線：Terraformのバックエンド動作

  6. なんでこの構成なの？

  7. なんでこの構成？ ・パイプライン：メンバーや環境間でコードとAWSリソースの整合性を常にとれる状態にできる。 ・CodeCommitを使う理由：コードをリソースと同じくAWS内で完結することができる（セキュア） ・クロスアカウント：検証と商用でリポジトリをわける必要がなくGit管理がしやすい

  8. 各環境へのデプロイ

  9. 検証環境へのデプロイ developブランチにマージすると検証環境のパイプラインが動作し、検証環境にリソースがデプロイされる

  10. 商用環境へのデプロイ（クロスアカウント） mainブランチにマージすると商用環境のパイプラインが動作し、商用環境にリソースがデプロイされる

  11. クロスアカウント

  12. クロスアカウント ・検証CodeCommit用ロールに商用CodePipelineロールからのAssumeRoleを許可 ・商用アーティファクトS3にKMSを設定し、検証CodeCommitからのPutを許可 （アーティファクトはterraformのarchive_fileのようなterraform planでファイルに変更が入る場合に使われる） ※コンソール上から不可の設定が多々あり。AWS CLIから設定して、それをTerraformに組み込む

  13. 承認フェーズ

  14. 承認フェーズ（IAMポリシー） ・developからmainへのマージはIAMポリシーの設定で管理グループしかマージできない ・商用のplan→apply間のCodePipeline/Approvalは管理グループしか承認できない

  15. 承認フェーズ CodePipeline 実際のパイプラインはこんな感じ。 Approvalフェーズまできたら 承認してあげればOK！

  16. 実際に運用して困ったこと

  17. 実際に運用して困ったこと × 改善が難しい デプロイは基本的にコードを経由する必要があるため、構築の瞬発力が落ちる IaCの特性上やむを得ない。どうしても急ぎなら手動とかで。 plan/applyでエラーが起こると構築が止まってしまう planはローカルで。applyまで検証したいなら別環境とかでやる。 手動変更やローカルから直applyされると、都度確認が必要になる テスト中はやむを得ない手動変更とかが起きる。 その間はパイプラインを止めておくなど、うまくスケジュールする。

    共通リソースがあるので、商用だけ一部先行着手とかが難しい developとmainは共通化されるので共通リソースも中途半端に デプロイされてしまう。先行してやるなら手動やローカルから流す。 ※チーム構成 全体４名（ガッツリ書く人２名、そこそこ書く人２名、Lambda等は別部隊で記述） ◯ 改善が可能 terraformを使えるメンバーが少なかったので、applyの依頼が集中 少なくともインフラチームはみんな使えた方がいい。 記述方法が個人間で差がでる 事前に軽い規約は作ったが、まだまだ弱かった。 開発同様、より強い規約の制定が必要。

  18. Thanks!! 実際に使ってみて、いろいろ問題点はありましたが、大規模構 築やるならパイプラインの存在はほぼ必須かなと思いました。 最初はわちゃわちゃしますが、慣れればそれなりに運用も安定 しました。後続環境のデプロイが一瞬なのもの爽快です。 ぜひ本パイプラインの構築を検討してみてください！ 本資料 https://speakerdeck.com/hiyanger/codesirizudezuo-ruterraf ormnocicdpaipurain https://twitter.com/hiyanger

    https://qiita.com/hiyanger https://speakerdeck.com/hiyanger https://zenn.dev/hiyanger