Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ラクマにおけるGitOps導入事例
Search
Hidekazu Miyamoto
May 26, 2021
Technology
0
1.3k
ラクマにおけるGitOps導入事例
https://resources.github.com/webcasts/jp-github-infocus-devops/
Hidekazu Miyamoto
May 26, 2021
Tweet
Share
More Decks by Hidekazu Miyamoto
See All by Hidekazu Miyamoto
#DevOpsDaysTokyo ラクマとGitHub ActionsとGitOps
hiiiide
1
610
Other Decks in Technology
See All in Technology
大規模データとの戦い方
knih
1
480
オブジェクト指向宗教史
tanakahisateru
14
12k
技術広報経験0のEMがエンジニアブランディングをはじめてみた
coconala_engineer
1
140
サービス成長と共に肥大化するモノレポ、長くなるCI時間 / As services grow, monorepos get bigger and CI time gets longer
kohbis
5
2.1k
8週連続ウェビナー_イチから学ぶFivetran
cmsuzu
0
170
技術広報として2023年度に頑張ったこと / What we did well in FY2023 as a DevRel
pauli
5
490
戦略的DDDを実践するための跳躍力 / OOC 2024
pictiny
6
4.2k
BDD(Cucumber)コミュニティが無料提供しているコンテンツの紹介と現在起きている危機
nihonbuson
4
750
LLM + RAG を使った SORACOM Support Bot の裏側の歴史
soracom
PRO
1
640
サービスメッシュ環境における OpenTelemetry 活用 / OpenTelemetry in Service Mesh
k6s4i53rx
2
860
期待しすぎずに取り組む両面 TypeScript
shozawa
4
520
#51 “Empowering Azure Storage with RDMA”
cafenero_777
3
210
Featured
See All Featured
YesSQL, Process and Tooling at Scale
rocio
160
13k
How STYLIGHT went responsive
nonsquared
92
4.7k
The Straight Up "How To Draw Better" Workshop
denniskardys
227
130k
Mobile First: as difficult as doing things right
swwweet
215
8.5k
Git: the NoSQL Database
bkeepers
PRO
421
63k
Navigating Team Friction
lara
177
13k
The Brand Is Dead. Long Live the Brand.
mthomps
48
22k
Typedesign – Prime Four
hannesfritz
36
2k
XXLCSS - How to scale CSS and keep your sanity
sugarenia
240
1.2M
Done Done
chrislema
178
15k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
111
35k
Happy Clients
brianwarren
91
6.3k
Transcript
May 26th, 2021 GitHub InFocus Hidekazu Miyamoto C2C Service Development
Section. Rakuten Group, Inc. ラクマにおけるGitOps導⼊事例
2 Hidekazu Miyamoto Tech Lead, Rakuma SRE Team Hello!
3
4 ラクマSREについて ラクマSREチームについて
5 SREチームの任務 • サービスを提供するインフラシステムの設計・構築・運⽤ • 24/365のサービスの安定稼働 • パフォーマンスチューニング • ⼈でスケールするのではなく、システムでスケールさせること
6 課題 • 新たな機能をどんどん追加してサービスを成⻑させないといけない時期 SRE
7 課題 • 新たな機能をどんどん追加してサービスを成⻑させないといけない時期 • 新機能追加時の構成相談や、設定変更依頼、インフラに関する問い合わせが増加 Consultation Capacity Consultation Architect
Change setting request Trouble Shooting SRE Support
8 課題 • 新たな機能をどんどん追加してサービスを成⻑させないといけない時期 • 新機能追加時の構成相談や、設定変更依頼、インフラに関する問い合わせが増加 • サービスの稼働率の担保、監視、障害対応も並⾏して⾏わないといけない Consultation Capacity
Consultation Architect Change setting request Trouble Shooting Monitoring CI/CD Incident Audit SRE Oparation Support
9 課題 • 新たな機能をどんどん追加してサービスを成⻑させないといけない時期 • 新機能追加時の構成相談や、設定変更依頼、インフラに関する問い合わせが増加 • サービスの稼働率の担保、監視、障害対応も並⾏して⾏わないといけない Consultation Capacity
Consultation Architect Change setting request Trouble Shooting Monitoring CI/CD Incident Audit SRE Oparation Support
10 監査の証跡集めに必要なもの • いつ、誰が、どのような変更をしたのか • 責任者の承認をえた上で変更作業を実施しているのか
11 ラクマSREについて GitOpsについて
12 GitOpsとは https://www.weave.works/blog/gitops-operations-by-pull-request • 2017年に公開されたWeaveworks社のブログで “GitOps”という⾔葉が誕⽣ • 要約すると、⼈の⼿を介さずにインフラに関するのコードをGitで管理する思想 • 主にKubernetesのリソース管理で使われることが多い
• インフラの変更に関する追跡情報が集約されているため、監査の証跡集めとしても有効
13 ラクマSREについて Terraformの実⾏環境の仕組み
14 実現したい事 - 開発編 Cloud Platform Developer GitHub Actions 1.
PullRequest 2. Action 4. plan terraform-repo 3. init, fmt 5. Add the result to comment
15 実現したい事 – リリース編 Cloud Platform Developer GitHub Actions 1.
Approve 3. Action 4. apply terraform-repo Code Owner 2. Merge
None
None
None
19 Sample Code https://gist.github.com/hiiiide/1ae69bebb8c0335c177a8b32763e505e
20 ラクマSREについて Kubernetesのリソース管理を どのようなGitHub Actionsを組み合わせて GitOps化したか
21 実現したい事 Developer application-repo k8s-manifest-repo GitHub Actions Container Registry 1.
Push 2. Action 3. Push Image 4. Push manifest file 5. Polling 6. apply
22 コンテナのビルドとプッシュ Developer application-repo k8s-manifest-repo GitHub Actions Container Registry 1.
Push 2. Action 3. Push Image 4. Push manifest file 5. Polling 6. apply
23 コンテナのビルドとプッシュ
24 コンテナのビルドとプッシュ コンテナレジストリのログイン処理 ビルド、プッシュ処理 初期処理
25 マニフェストファイルの更新 + Pull Request作成 Developer application-repo k8s-manifest-repo GitHub Actions
Container Registry 1. Push 2. Action 3. Push Image 4. Push manifest file 5. Polling 6. apply
26 マニフェストファイルの更新 + Pull Request作成 • 外部のレポジトリ(k8s-manifest-repo)のチェックアウトが必要 • デフォルトで⽤意されているCheckoutで実現可能 •
対象のレポジトリを⽤意するだけでOK(pathの指定は任意)
27 マニフェストファイルの更新 + Pull Request作成 • マニフェストファイル(Deployment)をGitHub Actions内で変更する • 今回はrubyスクリプトを⽤意して、コンテナイメージのタグを更新
• もっとシンプルにしたい場合は yq コマンドを使⽤すると良い
28 マニフェストファイルの更新 + Pull Request作成
29 マニフェストファイルの更新 + Pull Request作成
30 マニフェストファイルの更新 + Pull Request作成
31 GitOpsのブランチ戦略について
32 前提 • Kustomizeを使⽤したKubernatesのマニフェストファイルを、どのようなブランチ戦略で管理してくか に焦点を当てる • Kustomizeとは、Kubernetesのyamlを効率よく運⽤するのに特化したパッケージングツール
33 PRD K8S Cluster staging branch develop branch main branch
feature branch STG K8S Cluster DEV K8S Cluster ブランチ戦略 Pattern1 3. merge 2. merge 1. checkout 4. merge
34 PRD K8S Cluster staging branch develop branch main branch
feature branch STG K8S Cluster DEV K8S Cluster ブランチ戦略 Pattern2 4. merge 3. merge 2. merge 1. checkout
35 PRD K8S Cluster main branch feature branch STG K8S
Cluster DEV K8S Cluster ブランチ戦略 Pattern3 - overlay更新時 2. merge 1. checkout
36 PRD K8S Cluster main branch feature branch STG K8S
Cluster DEV K8S Cluster ブランチ戦略 Pattern3 - base更新時 2. merge 1. checkout
37 Pattern3 Pros Cons List Pattern1 Pattern2 Pros Cons Pattern1
ブランチが固定になっている為わかりやすい overlaysの対応を⾏う時に他のbranchへのマージ漏れが出てくる可能性があ る Pattern2 ブランチが固定になっている為わかりやすい Pattern1で懸念していたマージ漏れは回避できる 対応するフローが多く⾯倒 Pattern3 ブランチの構成がシンプル Pattern1で懸念していたマージ漏れは回避できる baseの対応時のbranch切り替え作業が⾯倒
38 まとめ • インフラの設定管理もコードで管理すれば、監査対応も楽になる • 何かやりたいことがあれば、まずはGitHub MarketplaceでActionsを探そう • GitOpsを導⼊するときはブランチ戦略を考えてから実戦に挑もう
None