Slide 1

Slide 1 text

AWS DevOps Agentの構造から読み解く 運用 AI エージェントの設計原則 CloudNative Days Winter 2026 クラスメソッド株式会社

Slide 2

Slide 2 text

自己紹介 所属 クラスメソッド株式会社 製造ビジネステクノロジー部 名前 佐藤智樹 役割 テクニカルマネージャー 2 製造業向けのシステム開発で、バックエンドとインフラを 担当 2022年 JAWS-UG CDK 支部を立ち上げ 2025年〜 AI 駆動開発の推進と、社内外の研修・伴走支 援を担当 著書 『AI駆動開発入門』 『マスタリング AWS CDK』 Japan AWS Top Engineer 2023-2026 AWS Community Builder(Dev Tools) 2022-2026

Slide 3

Slide 3 text

今日の目的 想定する視聴者 クラウドでの運用経験があるエンジニア AIエージェントを実際の運用環境に組み込もうとしているエンジニア 目的 AWS DevOps Agent を題材に以下を把握していく 運用 AI エージェントを設定/構築する上での設計観点を押さえる 今回は8つの項目を取り上げて紹介 3

Slide 4

Slide 4 text

目次 4 1. AI エージェントの広がりと本番環境へのアクセス 2. AWS DevOps Agent の概要と全体構造 3. 運用 AI エージェントを構成する 8 つの要素 接続先環境、テレメトリ、ナレッジ、ソースコード、CI/CD、チャット・連絡手段、トリガー、ガードレール 4. 設計原則と、AWS CDK によるリファレンスアーキテクチャ 5. まとめ

Slide 5

Slide 5 text

なぜ私がこの話をするのか Devinが流行ったタイミング(2025年1月ごろ)でこの権限設計の話を考えていた 運用AIエージェントが実用的になってきた。いよいよ全員が考えるタイミングが来た? 「DevinのAWSエンジニア化計画 権限設計編」https://dev.classmethod.jp/articles/prologue-to-make-devin-an-aws-engineer/ 5

Slide 6

Slide 6 text

AI エージェントの利用範囲は開発の外へも広がっている 手元で動くものから、クラウドで動き続けるものへ。そして運用のために常時動くものへ ⼿元で動く IDE/CLI型 クラウドで動く クラウド実⾏型のエージェント 運⽤のために常時動く ClaudeCode、Kiroなど ⼈が横で⾒ながら使う 権限は開発者本⼈のもの 対象は⼿元のリポジトリ Web上のClaudeCode Kiroのクラウドセッション Copilotcodingagent 席を離れても動き続ける 成果はPullRequestで返す AWSDevOpsAgentなど アラームやスケジュールで起動 本番の情報を横断して調査する 権限はサービス側のロールに持つ 2025年前半ごろから普及 2025年後半から各社が提供 ※ その前にDevinでクラウドエージェントの時代もあったが今回は割愛 運⽤専⽤のエージェント 2026年3⽉にGA 6

Slide 7

Slide 7 text

AIエージェントに本番環境の権限を渡せるか 7 読み取り権限だけ持たせるのか、更新権限をもたせるのか。それを誰にもたせるのか 本番環境 「本番APIのレスポンスが遅い。 原因を調べて直してほしい」 開発者が、⼿元のエージェントに頼む 個⼈向けエージェント 読む 開発者本⼈の権限で動く 直す 論点の一部 開発者本人の環境と本番環境の、権限の境界をどこにおくか 調査のための読み取りと、修正のための更新を分けられているか 複数の人とエージェントが操作したとき、誰の操作なのかトレースできるか どこまでの実行を、誰に対して許可するかを設計することが重要 ログ・メトリクス・設定 読むだけなら読み取り権限で⾜りる リソースの変更・デプロイ 直すには更新権限が要る

Slide 8

Slide 8 text

エージェントの役割と権限の境界を決める 8 開発者は運用AIエージェントに依頼し、エージェントが権限の範囲内で作業する 運⽤チームが設計・管理する境界 調査を依頼 開発者 「誰が何を頼めるか」 利⽤者としての認可 運⽤AIエージェント 調査、修正案、承認後の実⾏ IAMロール 「どこまで触れるか」 エージェントとしての認可 参照できる範囲 更新できる範囲 読み取りのロール 既定では無し 本番環境 承認・監査 ⼈と操作ログ ※⼀般的な配置の⼀例。AWSDevOpsAgentがアラートやイベントで実⾏可能 分けるのはタスク単位ではなく責任の範囲。左の利用者の認可は誰がエージェントに何を頼めるのか、右の IAM ロールはエージェントがどんなリソースにどこまで触れるかを決めるため、別々の認可を設定する

Slide 9

Slide 9 text

AWS DevOps Agent とは 9 ログやメトリクスだけでなく、コードやデプロイ履歴、チケットを関連付けて調べる運用 AI エージェント 何を⾒るか(⼊⼒) 何を返すか(出⼒) AWSのリソースと構成 インシデントの調査結果 ⾃動探索してトポロジーを作る テレメトリ CloudWatch、Datadog、Splunkなど ソースコードとCI/CD GitHub、GitLabのコードとデプロイ履歴 チケットとチャット ServiceNow、Slack、Teams AWSDevOpsAgent 運⽤AIエージェント ⼊⼒を関連付けて調べる アラーム、スケジュール、 チャットから動く 過去の調査から学習する 2026年3⽉GA、東京リージョン対応 原因の仮説と根拠 緩和案と⼿順 実⾏は⼈の判断(既定は読み取りのみ) 予防的な改善提案 構成やコードのリスクを先に指摘 チャットでのSREタスク WebApp、Slack、MCP/A2Aから

Slide 10

Slide 10 text

全体構造は 3 階層を段階的に設定 10 1 階層目は Capability Providers。AWS アカウント単位で接続先を登録し、資格情報を預ける CapabilityProviders アカウント単位で接続先を登録 GitHub/GitLab App、トークン テレメトリSaaS OAuth、APIキー Slack/ServiceNow MCP/RemoteAgent OAuth OAuth、キー、SigV4

Slide 11

Slide 11 text

全体構造は 3 階層を段階的に設定 11 2 階層目は Agent Space。登録したものを関連付け、調査範囲と権限を決める CapabilityProviders アカウント単位で接続先を登録 GitHub/GitLab テレメトリSaaS AWSアカウント 関連付け App、トークン OAuth、APIキー Slack/ServiceNow MCP/RemoteAgent OAuth OAuth、キー、SigV4 登録したものを関連付け、使う範囲を絞る AgentSpace 調査範囲を決める論理コンテナ 主たるセキュリティ境界 チーム・環境・サービス単位で分ける Primary(監視側) Secondary(監視先) Elevated(任意) GitHubのリポジトリ Slackのチャンネル テレメトリの範囲 MCPツールの許可 全部か、選んだものだけ 読み取り・変更・削除の 3分類で承認を制御 設定 変更操作の有効化 Webhook、トークン KMS、表⽰⾔語

Slide 12

Slide 12 text

全体構造は 3 階層を段階的に設定 12 Capability Providers で接続先を登録し、Agent Space で調査範囲を絞り、Web App で利用者が使う CapabilityProviders アカウント単位で接続先を登録 GitHub/GitLab テレメトリSaaS AWSアカウント 関連付け App、トークン OAuth、APIキー Slack/ServiceNow MCP/RemoteAgent OAuth OAuth、キー、SigV4 登録したものを関連付け、使う範囲を絞る AgentSpace 調査範囲を決める論理コンテナ 主たるセキュリティ境界 チーム・環境・サービス単位で分ける MCPツールの許可 設定 Primary(監視側) Secondary(監視先) Elevated(任意) GitHubのリポジトリ Slackのチャンネル テレメトリの範囲 全部か、選んだものだけ 読み取り・変更・削除の 3分類で承認を制御 変更操作の有効化 Webhook、トークン KMS、表⽰⾔語 チャット・調査結果 Knowledge CustomAgent アクセストークン Spaceのリンクから開く WebApp エージェントの設定や対話をする画⾯ AgentSpaceごとに1つ Operatorroleで操作 Skills/Memory ⽬的別、トリガー付き 外部エージェント⽤

Slide 13

Slide 13 text

AgentSpace 利用のイメージ 13 資格情報はアカウントで 1 回まとめて実施。情報の範囲は Agent Space ごとに絞る(以下は例) 関連付け AgentSpaceA(本番環境の運⽤チーム) CapabilityProviders Space単位で絞る 資格情報を預ける。全Spaceで共有 GitHub(組織1つ) ⾃組織所有のGitHubAppを導⼊ Appの権限(読み取りか書き込みか)は GitHub側で決まる MCPサーバー(1つ) 認証はOAuth/APIキー/SigV4 サーバーが公開するツールは12個 (読み取り9、変更3) GitHubから 本番サービスのリポジトリ2つ (数値IDで指定) MCPサーバーから 読み取りの3ツールだけ許可 変更ツールは渡さない AgentSpaceB(ステージング環境の開発チーム) GitHubから 開発中のリポジトリ5つ (同じ登録を別の範囲で使う) MCPサーバーから 全12ツールを許可 変更ツールはMUTATIVEと分類 サービスによって階層の切り方は異なる。GitHub は組織単位で登録してリポジトリ単位で関連付け、MCP はサーバー単位で登録して ツール単位で許可

Slide 14

Slide 14 text

運用 AI エージェントを構成する 8 つの要素 観点を大まかに 3 つへ分けて、さらに詳細を 8 つに分類 エージェントに与える知識 接続先環境 テレメトリ ナレッジ ソースコード CI/CD AWSアカウント CloudWatch Instructions 複数アカウント Datadog、Splunk Skills Azure、VPC内 Dynatraceほか Memory GitHub デプロイ履歴 GitLab PRレビュー AzureDevOps パイプライン 左の5つはエージェントが⾒られるもの 関連付けて初めて原因にたどり着ける 上段が登壇概要で宣⾔した8要素、下段はAWSDevOpsAgentでの対応(設定項⽬) 起動⽅法 14 権限範囲 チャット・ トリガー 連絡⼿段 ガードレール WebApp アラーム Slack、Teams Webhook MCP/A2A スケジュール IAMロールと セッションポリシー ツール分類、⼈の承認 ⼈やイベントとの接点 ここから調査が始まる 権限の付与範囲を制限

Slide 15

Slide 15 text

1. 接続先環境:Space単位かアカウント単位で分割 15 Devops Agent は監視アカウントに集約したうえで、本番と検証をどの単位で分けるかを決める A.1つのSpaceにまとめる B.Spaceを環境で分ける 監視アカウント 監視アカウント(接続先の登録は共有) AgentSpace 本番アカウント 検証アカウント 設定が1か所で済む 利⽤者とナレッジ、変更操作の有効化が 本番と検証で共通になる 出発点 C.監視アカウントも分ける 監視(本番⽤) 監視(検証⽤) 本番⽤Space 検証⽤Space Space Space 本番アカウント 検証アカウント 本番アカウント 検証アカウント 設定はSpace単位 利⽤者、ナレッジ、変更操作の有効化を 環境ごとに変えられる 設定を細かく分離 GitHubなどの登録と運⽤が⼆重になる DevOpsAgentへのアクセス管理をする時に選ぶ Space は利用者と調査範囲の境界、アカウントは登録と管理者の境界。まず B から始める(発表者の整理)

Slide 16

Slide 16 text

2. テレメトリ:読む経路と、起動する経路を分けて考える CloudWatch はロール経由で読み、SaaS は製品ごとに登録する。アラートを届ける経路は別にある AmazonCloudWatch 接続先の登録は要らない 監視先のロール経由で読む 読める範囲はロールのポリシー オブザーバビリティのSaaS Datadog、Dynatrace、NewRelic、 Splunk、Grafanaなど 製品ごとに登録する。⽅式も違う OAuth、APIキー、Bearerトークン 設計するときの論点 読む アラートで起動※ 読む アラートで起動 読む経路と起動する経路は別 AgentSpace メトリクス、ログ、 アラートの履歴を コードやデプロイと 突き合わせる 読むための接続と、アラートを届ける Webhookは別々に設定する 読める範囲は資格情報で決まる SaaS側のキーも読み取り専⽤で発⾏する 調査に要らない範囲は渡さない 業務データは既定で読めない S3やDynamoDBの中⾝は、ロールに 権限を⾜したときだけ読める アラートを全部調査に回すと、稼働した時間の分だけ費用がかかる。どのアラートで調査を起動するかを先に決めておく ※ 例:CloudWatch Alarm → EventBridge(API destination)→ Agent Space の Webhook 16

Slide 17

Slide 17 text

3. ナレッジ:プロンプトで出力を調整する 4 つの仕組み 1 つ目は Instructions。毎回読み取られるので、常時守らせる方針を書く Instructions(AGENTS.md) 常時守らせる⽅針 ⼈が書く 毎回読み取り エージェントの1回の作業 ⽅針として最初から持っている 17

Slide 18

Slide 18 text

3. ナレッジ:プロンプトで出力を調整する 4 つの仕組み 2 つ目は Skills。必要なときだけ読み取られる、特定の場面の手順と参照資料 Instructions(AGENTS.md) ⼈が書く 毎回読み取り Skills(SKILL.md) ⼈が書く 必要なとき読み取り 常時守らせる⽅針 特定の場⾯の⼿順と参照資料 descriptionの内容で選択 エージェントの1回の作業 ⽅針として最初から持っている ⼿順が要る場⾯で読み込む 18

Slide 19

Slide 19 text

3. ナレッジ:プロンプトで出力を調整する 4 つの仕組み 3 つ目は Memory。必要なときに読み取られ、調査の結果が自動で反映されていく Instructions(AGENTS.md) ⼈が書く 毎回読み取り Skills(SKILL.md) ⼈が書く 必要なとき読み取り 常時守らせる⽅針 特定の場⾯の⼿順と参照資料 descriptionの内容で選択 繰り返し出てくる⼿順は、⼈がSkillに書き直す Memory ⾃動で増える。⼈も書ける 過去の調査結果、依存関係の記録 必要なとき読み取り 調査の結果を反映 エージェントの1回の作業 ⽅針として最初から持っている ⼿順が要る場⾯で読み込む 過去の事実を確かめる 新しく分かったことを残す 19

Slide 20

Slide 20 text

3. ナレッジ:プロンプトで出力を調整する 4 つの仕組み 毎回読ませるか、場面で読ませるか、情報を与えるか、目的で切り出すかで使い分ける Instructions(AGENTS.md) ⼈が書く 毎回読み取り Skills(SKILL.md) ⼈が書く 必要なとき読み取り 常時守らせる⽅針 特定の場⾯の⼿順と参照資料 descriptionの内容で選択 繰り返し出てくる⼿順は、⼈がSkillに書き直す Memory ⾃動で増える。⼈も書ける 過去の調査結果、依存関係の記録 必要なとき読み取り 調査の結果を反映 エージェントの1回の作業 ⽅針として最初から持っている ⼿順が要る場⾯で読み込む 過去の事実を確かめる 新しく分かったことを残す CustomAgent Instructionと使うSkills・Memory・ツールをまとめる。チャット、スケジュール、イベントで動かす ⽬的ごとに切り出す IaC で Instructions と Skill を管理するとPRでレビューや再配布も可能。Memory は定期で見直す 20

Slide 21

Slide 21 text

4. ソースコード:GitHubと接続する際の例 GitHub App を個人/組織でいれて Space に関連付けるかで制御(青枠内)。権限は GitHub App 側で決定 GitHubの組織 CapabilityProvidersに1回登録する。登録の単位は組織 GitHubAppを⼊れたリポジトリ GitHub側の管理者が、Appのインストール時に選ぶ AgentSpaceに関連付けたリポジトリ AWS側でSpaceごとに選ぶ。エージェントが読めるのはここだけ リポジトリA リポジトリB 組織のほかのリポジトリは、Appが⼊っていても このSpaceからは⾒えない 何ができるかはAppの権限で決まる 読み取りのみ コードとコミットの差分を読む デプロイなどのイベントを受け取る 調査と、原因の仮説まで 読み取りと書き込み PullRequestにコメントする 修正を提案する ワークフローを起動する 修正をPullRequestで返すなら、こちらが要る 個人アクセストークンでは管理が属人化するため、基本は カスタムの GitHub App で接続 21

Slide 22

Slide 22 text

5. CI/CD:変更履歴の確認と修正 22 CI/CDからデプロイの履歴を読んで障害と突き合わせ調査が可能。修正はPRで既存のパイプラインに乗せられる 既存の開発とデプロイの流れ コミット PullRequest マージ ビルド・テスト デプロイ 本番環境 反映するのはCI/CD 修正をPullRequest として返す ⻘は読む経路 いつ、何が出たかを知る ⾚は返す経路 レビューとCI/CDを通して反映 GitHubの イベント Actionsの 実⾏履歴とログ CloudFormation のイベント AWSDevOpsAgent 障害が始まった時刻と、デプロイの時刻を突き合わせる IaCやCI/CDなどを整えていれば Pull Request で障害対応時の更新操作も可能。エージェントによる直接編集より効果的

Slide 23

Slide 23 text

6. チャット・連絡手段:エージェントに状況を確認する入口 入口を増やすほど、エージェントに頼める人の範囲が広がる。障害状況の確認に人手を介さない未来もくる? 頼む(⼊⼝) 届ける(出⼝) WebApp IdentityCenterや外部IdPで本⼈を特定 Slack 関連付けたチャンネルからメンションで頼む ⼿元のエージェント(MCP/A2A) アクセストークンかSigV4。既定は無効 チケット(ServiceNowなど) WebApp 経過と根拠を読む。変更の承認もここ AgentSpace 依頼を受けて調査し、 結果を返す Slack/MicrosoftTeams 開始と結果を通知。Teamsは通知のみ チケット 調査の結果を書き戻す 起票に合わせて調査が始まる 依頼者は Web App なら本人、Slack ならチャンネル、トークンなら発行した単位。承認は権限を絞ること 23

Slide 24

Slide 24 text

別パターン:AI エージェントが運用 AI エージェントを呼ぶ 外部エージェントからの呼び出しも可能。本番環境で何を読めるかは Agent Space 側の IAM ロールが決める 内向き:MCP/A2A サーバーを呼ぶ 開発環境のエージェント ClaudeCode、Kiro、 アクセストークン Cursorなど (read/operate)またはSigV4 AgentSpace(調査範囲と権限の境界) 外部MCPサーバー AWSDevOpsAgent 外向き:アカウント単位で登録、 Spaceで関連付け 調査・修正案・チャット ツール呼び出し。 Spaceで許可を絞る リモートA2Aエージェント 調査のサブタスクを委譲 AssumeRole 本番のAWSアカウント Primary/Secondaryrole (読み取り) IAMロール 24

Slide 25

Slide 25 text

7. トリガー:操作範囲の違い 25 人、イベント、時刻。起点ごとに、ふるい分けがあり、許可される操作が異なる 何が起点か 何で絞るか 何が動くか どこまでできるか 承認付きの変更まで ⼈が頼む 利⽤者の認可 チャットでの依頼 イベントが届く ふるい分け インシデント調査 WebApp、Slack、 ⼿元のエージェント アラーム、チケット、 Webhook 時刻になる rate()やcron()の スケジュール Operatorrole、 トークンの権限 調査しない条件のSkill、 イベントのフィルタ式 実⾏の間隔 稼働した秒数で課⾦される。 頻度がそのまま費⽤になる 調査、質問、 運⽤の作業 切り分け、原因分析、緩和案 CustomAgentも起動できる CustomAgent 承認の依頼は チャットに出る 読み取りと提案まで ⾃律で動いている間の 変更は、承認待ちに ならず失敗する 定期の点検、 傾向のレポート 夜間のアラームから始まった調査は、仮説と手順の提示で止まる。変更まで進めるには人がチャットで介入する必要がある

Slide 26

Slide 26 text

8. ガードレール:サービス側の提供範囲とユーザーが定義する範囲 26 参照の範囲、利用者の範囲、変更操作、停止と監査。4 つの観点それぞれに 2 種類のガードレールがある サービスが提供するガードレール ⾃分たちで設計するガードレール 参照の範囲 読み取りはAWS側のセッションポリシーが上限 ロールに書き込みを付けても調査では使えない 監視先ロールのポリシーと信頼ポリシー Spaceに関連付けるリポジトリとツールの範囲 利⽤者の範囲 アクセストークンは既定で無効 トークンの認証は成功も失敗もCloudTrailに残る OperatorRoleを誰に渡すか トークンの権限と期限、送信元IPの制限 変更操作 削除とiam:PassRoleを伴う操作は実⾏されない DESTRUCTIVEに分類したツールは呼ばれない 変更操作の有効化、ElevatedRoleの登録 ツールの分類、実⾏ごとの承認 停⽌と監査 操作はCloudTrailとAgentjournalに記録 変更には承認した⼈のidentityが付く Spaceの切り替え、トークンの無効化、Triggerの停⽌ 誰がどう⽌めるか(キルスイッチ)を決めておく 固定されたガードレールは最後の門番。与える権限範囲を絞り、起きうる問題や問題発生時の止め方を把握しておく

Slide 27

Slide 27 text

IAM ロールをベースにした権限分離のイメージ 利用者は IAM ロール(Operator role)を引き受けて、Web App を操作する AWSアカウント(監視⽤アカウント) AssumeRole 運⽤チーム WebAppを操作 IAMロール (Operatorrole) WebApp 27

Slide 28

Slide 28 text

IAM ロールをベースにした権限分離のイメージ Agent Space は Primary role で調査する。変更操作には Elevated role が別に要る AWSアカウント(監視⽤アカウント) AssumeRole 運⽤チーム WebAppを操作 IAMロール (Operatorrole) WebApp 調査を依頼 AgentSpace IAMロール(Primaryrole) 監視アカウント内の読み取り IAMロール(Elevatedrole) 変更操作の上限 必要な場合のみ設定 AGENTS.md/Skill/CustomAgentもここに置く 有効権限=ロールのポリシー∩AWS側のセッションポリシー (ReadOnlyAccess相当が上限) 28

Slide 29

Slide 29 text

IAM ロールをベースにした権限分離のイメージ 29 監視アカウントにAgent Spaceがあり、検証/本番には Agent Space だけが Assume できるロールを置く AWSアカウント(監視⽤アカウント) AssumeRole 運⽤チーム WebAppを操作 IAMロール (Operatorrole) WebApp 調査を依頼 AgentSpace IAMロール(Primaryrole) 監視アカウント内の読み取り AWSアカウント(本番) Secondaryrole (読み取り) IAMロール AssumeRole 調査対象の例 (読み取り) AWSLambda AmazonCloudWatch IAMロール(Elevatedrole) 変更操作の上限 必要な場合のみ設定 AGENTS.md/Skill/CustomAgentもここに置く 有効権限=ロールのポリシー∩AWS側のセッションポリシー (ReadOnlyAccess相当が上限) AWSアカウント(ステージング) Secondaryrole (読み取り) AssumeRole(読み取り) IAMロール 信頼ポリシー:aidevops+SourceArnを 監視アカウントのAgentSpaceARNに限定 それぞれの IAM ロールでアクセスできる範囲を決められる。(ロール配布は StackSets など別の仕組みが必要)

Slide 30

Slide 30 text

変更操作を実行するまでの制御 30 調査と修正案までは自動で実行される。変更操作には実行前に条件がある ここまでは既定でできる 調査 読み取りロール 設定 修正案 実⾏の条件 ⼿順と影響範囲を提⽰ 実⾏ 4つの制御 IAM AgentSpaceで有効化 かつ Elevatedroleの登録 かつ あらかじめ設定しておく 絞った権限で実⾏ ツール ツールの許可分類 4つすべてを満たしたときだけ実⾏される かつ 監査 CloudTrail、Journal ⼈ ⼈が承認 実⾏のたびに⾏う 承認しても実⾏不可な操作:リソース削除、権限昇格となりうる操作(IAMpermissionsboundaryの変更、iam:PassRoleを伴う操作)

Slide 31

Slide 31 text

更新系を許可する場合は止める手段を考慮 AI エージェントが想定外の動作をした場合に、2次被害が広がるのを防ぐためにキルスイッチを知っておく 停⽌するスイッチ 停⽌されるもの AgentSpaceの変更操作をOFF 変更操作がすべて停⽌する。調査は利⽤可能 エージェント⽤アクセストークンを無効化 トークンを使った外からの依頼はすべて停⽌ TriggerをInactive そのスケジュールやイベントからの起動が停⽌ 監視先ロールの信頼ポリシーを外す エージェントから該当アカウントへの操作停⽌ 誰がどのスイッチを切るかを、変更操作を有効にする前に決めておく 31

Slide 32

Slide 32 text

障害調査の例で考える:デプロイ後の API レスポンス速度の低下 6 ステップで 7 つの要素を使い、最後の 1 つのガードレールは権限制御として機能する トリガー テレメトリ CI/CD ソースコード ナレッジ チャット・連絡 1.アラーム 2.開始時刻 3.デプロイ照合 4.差分を読む 5.過去と⼿順 6.報告 p99レイテンシが 閾値を超えて 調査が始まる メトリクスを遡り 悪化が始まった 時刻を決める 同じ時間帯の デプロイを探し 時刻を突き合わせる 直前のコミットと の差分から疑わしい 変更を絞る 似た事象の記録と 調査⼿順を参照し 仮説を裏付ける 原因の仮説と確度、 切り戻しか修正かの 選択肢を⽰す CloudWatchAlarm Duration/Errors CFnイベント/Actions GitHubのリポジトリ Skill/Memory Slack/WebApp 1から6までに使う権限はすべて読み取り 切り戻しや修正の実⾏はここに含めない。⼿順を⽰して⼈が判断する ※テスト環境でのインシデントでの例。接続先環境(AWSアカウント)は1アカウントで閉じる場合の想定 8要素のうち7つがこの1本の調査に出てくる。残るガードレールは権限を逸脱する場合の守りとして機能 32

Slide 33

Slide 33 text

余談:DevOps Agent の現在の自律レベル 33 TM Forum の自律レベルに当てはめると、実行と認知はシステム、分析と判断は人と分担、意図は人 L0 L1 L2 L3 L4 L5 ⼿動運⽤ ⽀援付き運⽤ 部分的な⾃律 条件付き⾃律 ⾼度な⾃律 完全な⾃律 実⾏ P P/S S S S S 認知 P P P/S S S S 分析 P P P P/S S S 判断 P P P P/S S S 意図 P P P P P/S S ManualO&M Execution Awareness Analysis Decision Intent/Experience AssistedO&M Partial Conditional High AWSDevOpsAgentの現在地はL3相当(発表者の⾒⽴て) 実⾏・認知はシステム。アラームやスケジュールで⾃ら調査を始め、分析して原因の仮説まで出す 判断は⼈とシステムの分担。修正案はシステムが出し、承認は⼈がチャットで⾏う。承認なしの変更は実⾏されず、L4には上がらない構造 意図は⼈。AGENTS.mdとSkill、AgentSpaceの範囲、IAMロールで与える 表はTMForum「AutonomousNetworks:EmpoweringDigitalTransformationfortheTelecomsIndustry」Release1.0(2019年5⽉)の Autonomousnetworkslevelsを基に作成。P=⼈(Personnel)、S=システム Full

Slide 34

Slide 34 text

DevOps Agent から考える、運用 AI エージェントの設計原則 8 つの観点ごとに決めておくこと。AWS が定義した原則ではなく、発表者が構造から抽出した考え方 エージェントに 与える知識 接続先環境 テレメトリ ナレッジ ソースコード CI/CD 起動⽅法 チャット・連絡⼿段 トリガー 権限範囲 ガードレール 監視⽤のアカウントに集約し、環境ごとに調査範囲を分ける 読む経路と、調査を起動する経路を分けて決める 常に守らせる⽅針と場⾯ごとの⼿順を分け、コードで管理する 読ませる範囲を絞り、書き込みの可否は接続の権限で決める 履歴は読ませ、修正はPullRequestで既存のパイプラインに乗せる ⼊⼝ごとに誰がエージェントに指⽰できるかを決める 起点ごとに許容する操作の範囲を決める 権限を絞り、承認と⽌める⼿段を先に⽤意する 共通の前提は、正しい判断を期待せず、誤っても影響を限定できる構造にすること。決めた内容はコードとして残す 34

Slide 35

Slide 35 text

AWS CDK によるリファレンスアーキテクチャ DevOps Agentは度々UIの構造が変更され機能を見失いやすい。IaCで実装すると構造把握しやすい . ├── bin │ ├── parameter.ts │ └── devops-agent.ts ├── lib │ ├── agent-space-stack.ts │ ├── constructs │ │ ├── agent-space.ts │ │ ├── knowledge │ │ │ ├── AGENTS.md │ │ │ └── skills │ │ ├── skill-asset.ts │ │ └── alarm-webhook-forwarder.ts ... // GitHub/AWS 環境などパラメータ管理 周りの設定全般を束ねるスタック // Agent Space周りの設定 // InstructionsやSkill周りの設定本体 // Agent Space や 周りの設定 // Instructions Skill // Webhook 周りの設定をCDKに組み込む設定 aws-cdk-lib 2.276.0 で型チェック、テスト、cdk synth、AWS へのデプロイまで確認済み(2026年11月19日時点) https://github.com/tomoki10/aws-devops-agent-reference-architecture 35

Slide 36

Slide 36 text

まとめ DevOps Agent を題材に運用 AI エージェントの設計で重要部分を8つ紹介 人間の役割は、結果を確認することから、エージェントが安全に動ける環境と制約を設計することへ移る 1. 運用 AI エージェントには、ログやメトリクスだけでなく、ソースコード・CI/CD・過去の障害情報を関連付 ける仕組みが要る 2. 本番環境に接続するなら読み取り範囲、変更範囲、誰ができるかの権限を設計する 3. 構成要素に分け、権限境界とともに IaC で管理すると、再利用できる運用 AI エージェント基盤が作れる 36

Slide 37

Slide 37 text

We're hiring!! 今週自分のチームでの募集を開始しました!興味あればぜひ! 37

Slide 38

Slide 38 text

参考資料(1)AWS DevOps Agent 登壇ページ Directed actions(変更操作) AWS DevOps Agentの全体構造と設定箇所を図解してみた(発表者のブロ グ) MCP サーバーとの接続 https://event.cloudnativedays.jp/cndw2026/talks/3213 https://dev.classmethod.jp/articles/aws-devops-agent-Illustration/ AWS DevOps Agent ユーザーガイド 概要 https://docs.aws.amazon.com/devopsagent/latest/userguide/about-aws-devops-agent.html Agent Spaces https://docs.aws.amazon.com/devopsagent/latest/userguide/about-aws-devops-agent-whatare-devops-agent-spaces.html セキュリティと IAM 権限 https://docs.aws.amazon.com/devopsagent/latest/userguide/aws-devops-agent-security.html アカウント内のアクセス制限(セッションポリシー) https://docs.aws.amazon.com/devopsagent/latest/userguide/aws-devops-agent-securitylimiting-agent-access-in-an-aws-account.html 複数 AWS アカウントの接続 https://docs.aws.amazon.com/devopsagent/latest/userguide/configuring-integrations-andknowledge-connecting-multiple-aws-accounts.html https://docs.aws.amazon.com/devopsagent/latest/userguide/working-with-devops-agentworking-with-directed-actions.html https://docs.aws.amazon.com/devopsagent/latest/userguide/configuring-integrations-andknowledge-connecting-mcp-servers.html DevOps Agent の MCP / A2A リモートサーバー https://docs.aws.amazon.com/devopsagent/latest/userguide/accessing-devops-agentconnecting-to-devops-agent-remote-servers-index.html Custom Agents / Skills / Agent instructions https://docs.aws.amazon.com/devopsagent/latest/userguide/working-with-devops-agentcustom-agents-index.html AWS CDK での構築 / 公式サンプル https://docs.aws.amazon.com/devopsagent/latest/userguide/getting-started-with-awsdevops-agent-getting-started-with-aws-devops-agent-using-aws-cdk.html https://github.com/aws-samples/sample-aws-devops-agent-cdk 38

Slide 39

Slide 39 text

参考資料(2)設計の考え方 TM Forum, Autonomous Networks: Empowering Digital Transformation for the Telecoms Industry, Release 1.0(2019年5月) https://www.tmforum.org/wp-content/uploads/2019/05/22553-Autonomous-Networkswhitepaper.pdf TM Forum, IG1252 Autonomous Network Levels Evaluation Methodology v1.2.0 https://tmforum.org/resources/standard/ig1252-autonomous-network-levels-evaluationmethodology-v1-2-0 AWS Well-Architected Agentic AI Lens, AGENTREL02-BP05 Establish tiered human oversight and approval workflows https://docs.aws.amazon.com/wellarchitected/latest/agentic-ai-lens/agentrel02-bp05.html 39 AWS Prescriptive Guidance, Operationalizing agentic AI, Focus area 1: Clarify agent intent and scope(Observer から Innovator までの進化モ デル) https://docs.aws.amazon.com/prescriptive-guidance/latest/strategy-operationalizing-agenticai/focus-areas-agent-intent-scope.html tools-for-devops-agent(Skills・MCP・Custom Agents のカタログ) https://github.com/aws/tools-for-devops-agent Extending AWS DevOps Agent with Skills, MCP Servers, Custom Agents and Connectors(AWS ブログ) https://aws.amazon.com/blogs/mt/extending-aws-devops-agent-with-skills-model-contextprotocol-mcp-servers-custom-agents-and-connectors/