Share
Embed
Transcript
50 slides
-
自己紹介 職歴 • 通信会社の法人営業からソフトウェアエンジニアへ • 学習アプリなどを開発するスタートアップでCTO • その後、複数のスタートアップ企業にて開発責任者など • 2022年〜
estie(2023〜2025年 VPoE) 青木 啓剛 X: @hoyo1111 © 2026 estie, Inc. やってること • 技術戦略室長として、Platform Engineering と全社のセキュリティを担当 02 -
今日話すこと • 前提と判断軸 • Claude Code のテレメトリ基盤 • 社内MCPプロキシ •
今後改善していきたいこと -
私たちの組織の現状 AIツールの利用者は開発以外の職種も含め全社に広がっている 業務SaaSとつなぎたい要望も増えてきた 少人数で技術基盤を運用しており、多くの工数をかけられない オフィススイートは Microsoft 365、プロダクト基盤は AWS 社内のID基盤は Entra
ID、主要なAIツールは Claude © 2026 estie, Inc. 07 -
手段を選ぶときの判断軸は3つ 運用の手間が最小 費用対効果が高い 既存の基盤に乗る 常駐プロセスを持たない。パ ッチや可用性はマネージドに 任せる 使った分だけの課金で、小さ く始められる 社内のID基盤と
Terraform でそのまま管理できる © 2026 estie, Inc. 08 -
それぞれの問いに、基盤を1つずつ作った ① 誰が、どう使っているのか ② 業務SaaSに、安全に触らせるには テレメトリ基盤 社内MCPプロキシ Claude Code の利用状況を
OpenTelemetry で SaaS の MCP を、本人の権限のまま、監査ログ 集める。プロンプトは記録するが、見せない つきで使えるようにする どちらも AWS のマネージドサービス と Terraform で構築 © 2026 estie, Inc. 10 -
Claude Code は OpenTelemetry で利用状況を出せる • メトリクスとイベント(ログ)を OTLP で送信できる •
送信先は管理設定で全社員に一括配布できる • 受け口さえ用意すれば、利用状況がたまっていく # 主なイベント claude_code.api_request モデル、トークン数、コスト claude_code.tool_result ツール名、成否、所要時間 claude_code.user_prompt プロンプトの長さ(設定次第で本文も) © 2026 estie, Inc. 12 -
解決策として考えた選択肢 OTel Collector を 自前で運用 可観測性のSaaSに 直接送る AWSのマネージド サービスで受ける 良い点
良い点 良い点 柔軟に加工できる 運用が楽 運用の手間がほぼない 気になる点 気になる点 気になる点 可用性・パッチ・スケールの 面倒を見続ける プロンプトなどを社外へ送る 判断が必要 機微な中身の閲覧制御は別に 考える ✓ 採用 + 閲覧制御の層を自前で足す © 2026 estie, Inc. 14 -
テレメトリ基盤の全体像 Claude Code API Gateway CloudWatch Logs 社員の端末 認証つきの受け口 監査用の生ログ
▼ Lambda 機微な項目を落とす ▼ 分析の担当者 Managed Grafana CloudWatch Logs 利用状況を見る 分析用だけ読める 分析用のログ © 2026 estie, Inc. 15 -
判断① Collector を置かず、CloudWatch Logs に直接送る • CloudWatch Logs には、OTLP をそのまま受けるエンドポイントがある
• API Gateway はリクエストに手を加えず、宛先のロググループだけ固定して転送 • 社員の端末が持つのは API キー1つだけ 効果 可用性、スケール、パッチ適用をすべて AWS に任せられる © 2026 estie, Inc. 16 -
なぜ API Gateway を挟んだのか 当時(2026年4月)の制約 取った手 • 東京リージョンは Bearer トークン認証に未対応。
• API Gateway の「AWS統合」に、IAM ロールで署 SigV4 の署名が必要だった • AWS アカウントを持たない社員にも Claude を配 名させる • 社員側の認証は API Gateway の API キーに任せる っていた この制約はその後なくなった(後半の「今後の改善予定」で触れます) © 2026 estie, Inc. 17 -
判断② 監査用と分析用で、ロググループを分ける 監査用の生ログ サブスクリプション フィルター プロンプト本文やコマンドを含む。読 める人を厳しく絞る 分析用のログ 機微な項目を落としたもの。日常の分 Lambda
析はこちらだけを見る 同じログの中でマスクするのではなく、置き場所ごと分ける © 2026 estie, Inc. 18 -
残すフィールドを列挙し、それ以外はすべて落とす static ALLOWED_ATTRS: &[&str] = &[ // 相関 / 識別子
"event.name", "session.id", "user.email", // ... // 利用状況メトリクス "cost_usd", "input_tokens", "output_tokens", "model", // ... // ツール / 判定メタデータ(content は含まない) "tool_name", "decision", "success", "prompt_length", // ... ]; • Claude Code の更新で知らないフィールドが増えても、デフォルトで落ちる • 新しいフィールドが一時的に見えないことより、機微な情報が漏れることのほうが影響が大きい • 本文は落とすが、長さやサイズは残す。中身を見なくても利用傾向は追える © 2026 estie, Inc. 19 -
秘匿化で取らなかった選択肢 禁止リスト方式 CloudWatch Logs のデータ保護 消す項目を列挙する マネージドのマスキング機能 将来増える未知の項目が、そのまま分析用ログ カード番号など既知のパターンの検出が主目 に流れてしまう
的。マスクの解除も同じロググループ内の権限 で決まる © 2026 estie, Inc. 20 -
判断③ ダッシュボードには、IAM で分析用だけ読ませる • 可視化は Amazon Managed Grafana。ログインは既存の IAM Identity
Center に任せる • Grafana に渡す IAM ロールは、分析用ロググループしか読めない • ダッシュボードを編集できる人が生ログを指定しても、参照できない 効果 Terraform のレビューで IAM ポリシーを見れば、境界が守られていると分かる © 2026 estie, Inc. 21 -
本文を見なくても、利用の傾向は追える • 日ごとの利用量の推移 • アクティブな利用者数 • モデル別の利用状況 • よく使われるツール など
© 2026 estie, Inc. 22 -
SaaS側だけでは、誰が何を見たかが残らない • Salesforce などの業務SaaSに、MCP で Claude からつなぎたい • 入っているのは、顧客や商談といった会社の重要なデータ •
契約しているプランでは、SaaS側で参照の監査ログが取れない 「どの社員が、Claude 経由で、何を問い合わせたか」を追える場所が必要 © 2026 estie, Inc. 24 -
解決策として考えた選択肢 共有のサービス アカウントでつなぐ OSSのゲートウェイを 自前で運用 マネージドの ゲートウェイを使う 良い点 良い点 良い点
仕組みが単純 柔軟に作り込める 気になる点 気になる点 トークンの保管と更新を任せ られる 個人別の許可も、個人単位の 監査もできない 利用者ごとのトークンの保管 と更新を、安全に運用し続け るのが困難 気になる点 自分たちの要件は別に足す必 要がある ✓ 採用 + 監査と書き込み制限を自前 で足す © 2026 estie, Inc. 25 -
本人の認証情報でつなぐ = 3-legged OAuth 2-legged:システムとしてつなぐ 利用者 A・B・C プロキシ 共通の鍵 SaaS
共有アカウント • SaaS から見ると、誰が使っても同じ「シス テム」 • 個人別の許可も、個人単位の記録もできない 3-legged:本人の同意を得てつなぐ 利用者 A さん プロキシ A さんの鍵 SaaS A さん本人 • 初回に、本人が SaaS の画面で「許可」を 押す • 以後、プロキシは本人の鍵で代わりに呼ぶ • SaaS 側の権限も記録も、本人のまま 3者 = 利用者・プロキシ・SaaS。利用者ごとの鍵を、安全に預かり、更新し続けるのが難しいところ © 2026 estie, Inc. 27 -
一番悩んだのは、Azure で作るか AWS で作るか Azure API Management • ID基盤が Entra
ID なので、認証がそのまま使える。一度はこちらに傾いた • MCP に対応するプランは固定費。本番向けの最小構成で月150ドル前後から • ログが Azure 側に分かれる Amazon Bedrock AgentCore Gateway ✓ 採用 • ログを AWS に集約できる。テレメトリ基盤と同じ場所で監査できる • 使った分だけの課金。固定費なしで小さく始められる • 認証の複雑さはほぼ増えない。Entra ID のグループは、もともと Terraform で管理していた • 当初は Entra ID のスコープの書式と合わず、Claude から接続できなかった → 2026年7月、スコープを読み替える設定(advertisedScopeMapping)が追加され、解消 © 2026 estie, Inc. 28 -
1回の呼び出しで、プロキシがやること 社内MCPプロキシ(AgentCore Gateway) Claude 利用者 1 2 3 4 本人を確認
書き込みを絞る 監査ログに残す 許可した人だけを 通す REQUEST interceptor 本人のトークンで 呼ぶ Token Vault が保 管・更新 ルールは自前の Lambdaで定義 個人別の許可 RESPONSE interceptor 記録内容は自前の Lambdaで定義 Salesforce など 複数のSaaS 社内 API 利用ログの記録 ▼ ▼ Entra ID 社内のID基盤。誰が使えるかはここで管理する 4つとも AgentCore Gateway の中で完結。緑は、組み込みの差し込み口(interceptor)に載せた自前の処理 © 2026 estie, Inc. 30 -
いちばんの難所は、マネージドに任せた AgentCore に任せたこと • 利用者ごとのトークンを安全に保管し、更新し続ける • MCP の取り回しと、入口のトークンの検証 • 処理の前後に
Lambda を差し込む仕組み(interceptor) 自前で書いた役割は3つ • 初回接続:利用者が1回だけ通る手続き • 書き込み制限:実行前に止める(REQUEST interceptor) • 監査ログ:誰が何を呼んだかを記録(RESPONSE interceptor) © 2026 estie, Inc. 31 -
書き込みは、実行される前に止める Claude 書き込み制限 SaaS 監査ログ ツールを呼ぶ 許可リストで判定 許可されたものだけ届く 拒否も記録 •
誤操作やプロンプトインジェクションで、意図しないデータが書き換わるのを防ぐ • 書き込める対象を許可リストで絞る。参照は絞らない • 監査の書き手は1つに保つ。拒否した事実は印をつけて後段に渡す © 2026 estie, Inc. 32 -
実例:Salesforce では、書き込める対象と操作を絞っている 対象 参照 新規作成 更新 削除 ※1 リード ◯
◯ ◯ × コンタクト ◯ ◯ ◯ × 取引先 ◯ ◯ × ※2 × 商談 ◯ ◯ ◯ × 商談商品 ◯ ◯ ◯ × 契約 ◯ × × × … … … … … ※1 取り消しが難しい操作は通さない ※2 セグメントなどが意図せず書き換わって経営ダッシュボードの数字が動いてしまうのを防ぐ © 2026 estie, Inc. 33 -
誰が、いつ、どのツールを、どんな引数で呼んだかを残す • 応答を返す直前に Lambda が記録 { "mcp_server_name": "salesforce", • 保存先は専用のロググループ
"mcp_tool_name": "soqlQuery", • トークンの文字列は記録しない "tool_input": "SELECT Id, Name FROM ...", "tool_result_size_bytes": 12891, "user": { "username": "[email protected]" }, "denied": false, "client_info": { "name": "claude-code" } } © 2026 estie, Inc. 34 -
3-legged では、利用者に同意画面の URL を渡す必要がある 初回だけ、本人がブラウザで SaaS の同意画面を開き、「許可」を押す。その URL を届ける手段が elicitation
1 2 3 4 5 Claude → プロキシ プロキシ → Claude Claude → 利用者 利用者 → SaaS SaaS → プロキシ ツールを呼ぶ 本人のトークンがま だない。「この URL で同意してくださ い」と返す URL を利用者に見 せる ブラウザで同意画面 を開き、許可する 本人のトークンが保 管され、以後は聞か れない デスクトップアプリは ここで止まる elicitation (URL モード) elicitation:MCP サーバーが、処理の途中で利用者に入力や操作を求める仕組み。URL モードは、開いてほしいペ ージを案内する © 2026 estie, Inc. 36 -
代わりに同意の流れを始める、初回接続の導線を作った 1 2 3 4 5 利用者がブラウザで 接続用のURLを開く Entra ID
でサインイ ン。未割り当てなら ここで止まる Lambda が MCP ク ライアントとして Gateway を呼び、 同意の流れを始めさ せる 利用者がSaaSの画 面で同意する 本人のトークンが Token Vault に入る 社内マニュアルでの案内(利用者から見ると2ステップ) 1. https://mcp-proxy.…/login?provider=salesforce にアクセスする(初回のみ) 2. Claude のコネクタ設定で「Salesforce」を連携させる 利用者が通るのは1回だけ。以後、Claude からは何も聞かれずに使える © 2026 estie, Inc. 37 -
原因は、トークン更新時だけ起きる「自分自身向けの要求」 何が起きていたか • Claude は更新のとき、宛先(resource)は送るが、scope は送らない • Entra は宛先だけを手がかりに、どのアプリ向けかを決める •
宛先がクライアント自身のアプリに登録されていて、拒否された • 初回は scope が付くので通る。だから直後だけ動く どう直したか • Entra アプリを、SaaSごとに2つへ分けた • client 側:Claude がサインインに使う • resource 側:Gateway の宛先を持つ • 個人別の割り当ては、両方に同じグループを張る © 2026 estie, Inc. 39 -
SaaSごとに、Gateway と Entra アプリを分ける SaaS C 用の Gateway + Entra
アプリ SaaS B 用の Gateway + Entra アプリ Salesforce 用の Gateway + Entra アプリ Claude 1 2 3 4 本人を確認 書き込みを絞る 本人のトークン で呼ぶ 監査ログに残す Salesforce • Gateway の入口の許可は Gateway 全体に効くが、接続先ごとに許可対象者を設定できるようになる • 割り当ては Terraform の1ファイルで管理 • 副次的な利点として、Interceptor についてもツール別に独立して定義すればよいので、シンプルに保てる © 2026 estie, Inc. 40 -
更新トークンのローテーションが、並列呼び出しで競合する 何が起きていたか • Salesforce のトークン応答には有効期限が含まれない • そのため、ツール呼び出しのたびにトークンが取り直される • 更新トークンは使うたびに入れ替わる設定が必須 •
同じ利用者の呼び出しが重なると、更新が競合する いまの対処 • AWS サポートと確認のうえ、回避策を適用中 • 同じ利用者のトークン取得を、同時に1件までにする • DynamoDB に利用者ごとの枠を予約し、1秒ずつずらす • 設定値1つで無効にできるようにしてある © 2026 estie, Inc. 42 -
社内 API も同じ入口に載せた。MCP サーバーは書いていない 上流 SaaS の MCP サーバー 社内の
REST API Gateway での扱い 出口の認証 初回接続 MCP をそのまま中継 本人のトークン (3-legged OAuth) 必要 OpenAPI の定義から MCP に変換 システム用の認証情報 (2-legged OAuth) 不要 • 新たに MCP サーバーを実装・運用するより圧倒的にスマート • 入口の認証と監査ログは、SaaS の場合と同じ仕組みがそのまま使える © 2026 estie, Inc. 45 -
今後の改善予定:前提が変わり、外せるものが出てきた 自前で足したもの 方針 最新の状況 変更予定 API Gateway 可能なら外したい 東京リージョンでも(SigV4 の署名不要で)Bearer
ト ークンで直接送れるようになった 許可リストによる秘匿化 自前で持ち続ける — — トークン取得の間引き 可能なら外したい AWS 側の修正待ち。入れば設定値1つで無効にできる 待ち 初回接続の導線 Claude デスクトップアプリは elicitation に未対応の まま。2026年9月に Bedrock AgentCore Identity に同 可能なら外したい 意ポータル機能がリリースされたため代替案になる可 能性あり 検証予定 書き込み制限 自前で持ち続ける — — 監査ログ 自前で持ち続ける — — テレメトリ基盤 ◯ MCPプロキシ © 2026 estie, Inc. 47 -
外せるのは、最初から薄く作ったから 境界は標準の仕様 自前のコードは小さく 構成は Terraform OTLP、MCP、OAuth 2.0 で 役割ごとの小さな Lambda
足すのも外すのも、差分をレ つなぐ。部品を入れ替えて だけ。常駐するサーバーは1 ビューして適用するだけ も、前後はそのまま動く つもない © 2026 estie, Inc. 48