Upgrade to Pro — share decks privately, control downloads, hide ads and more …

信頼性を犠牲にせず、PR マージからデプロイまで人の介入を完全にゼロにするまでの道のり

Sponsored · Your Podcast. Everywhere. Effortlessly. Share. Educate. Inspire. Entertain. You do you. We'll handle the rest. →

信頼性を犠牲にせず、PR マージからデプロイまで人の介入を完全にゼロにするまでの道のり

Kenta Takahashi

November 18, 2026

Transcript

74 slides
  1. 外部の承認は、安定性を上げない worse than having no change approval process at all

    — Nicole Forsgren, Jez Humble, Gene Kim『LeanとDevOpsの科学[Accelerate]』インプレス • チーム外の承認がある組織: リードタイム、デプロイ頻度、復旧時間が悪かった • 変更失敗率には差がなかった • 著者の推奨: ピアレビューなどの軽い承認と、悪い変更を検知して弾くデプロイパイプライン だから、承認を足すのではなく、「検知して弾くパイプライン」を作ることにした
  2. 他社の例: 人の操作なしで本番まで出している 異常を自動で検知し、止めて戻している • Amazon: マージのあとは人が触らず、アラームで自動で戻す • Meta: パイプラインの 97%

    が人の操作なし。ヘルスチェックが落ちると戻す — Clare Liguori, "Automating safe, hands-off deployments", Amazon Builders' Library (2020) https://aws.amazon.com/builders-library/automating-safe-hands-off-deployments/ — Boris Grubic et al., "Conveyor: One-Tool-Fits-All Continuous Software Deployment at Meta", OSDI 2023 https://www.usenix.org/conference/osdi23/presentation/grubic
  3. Cloud Deploy Cloud Deploy is a managed service that automates

    delivery of your applications to a series of target environments in a de ned promotion sequence. — Google Cloud, "Cloud Deploy overview" https://cloud.google.com/deploy/docs/overview fi • 使っている機能: カナリア、Automation、analysis、ロールバック
  4. やったこと • 1. カナリアデプロイで少しずつ出す • 2. デプロイとリリースを分ける • 3. SLO

    ベースのアラートを設計する • 4. SLO ベースのアラートをデプロイパイプラインに組み込む
  5. 継続的デリバリーの原則 Using Release Toggles in this way is the most

    common way to implement the Continuous Delivery principle of “separating [feature] release from [code] deployment.” — Pete Hodgson, "Feature Toggles (aka Feature Flags)", martinfowler.com https://martinfowler.com/articles/feature-toggles.html
  6. サービス横断の feature ag • ❌ 環境変数: 変えるたびにデプロイが要る • ❌ Firebase

    Remote Con g: 比率を変えると振り分けがやり直 される fl fi • ✅ Git で管理する YAML: backend と mobile で同じ結果
  7. マルチウィンドウ・マルチバーンレート We can enhance the multi-burn-rate alerts … to notify

    us only when we’re still actively burning through the budget—thereby reducing the number of false positives. — Betsy Beyer et al. (eds.), "The Site Reliability Workbook", Chapter 5 "Alerting on SLOs", O'Reilly (2018) https://sre.google/workbook/alerting-on-slos/ • 長短 2 つの window の両方で超えたときだけ鳴らす。誤検知が減る
  8. やったこと セキュリティでやることは数多い。今日は、デプロイの自動化に関わる 3 つを取り上げる • 1. コードを検査する (gosec, gitleaks) •

    2. CI の中の振る舞いを記録し、検知する (cicd-sensor) • 3. 指定のビルドが作ったイメージしか動かさない (Binary Authorization, SLSA provenance)
  9. 1. コードを検査する • gosec: Go のコードを lint で検査する ◦ SQL

    の組み立て方や弱い暗号など、脆弱性につながる書き方を、マージの前に見つける • gitleaks: PR に秘密情報が入っていないかを調べる ◦ API キーやトークンが、リポジトリに入るのを防ぐ
  10. 1. デプロイによるリリースを、仕組みで禁止する • デプロイで振る舞いが変わらないことは、いまはコードレビューで人や AI が見ている • 公開する API には、原則

    E2E テストを書いている。ある程度はここで防げる • それでも見落としは残るので、マージの前に自動で検知できるようにしたい

More Decks by Kenta Takahashi

Other Decks in Technology