© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 1 © 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. AWS 秋のオブザーバビリティ祭り 2025 〜最新アップデートと⽣成 AI × オブザーバビリティ〜 Amazon Bedrock AgentCore で実現︕ お⼿軽 AI エージェントオブザーバビリティ Hajime Onishi アマゾン ウェブ サービス ジャパン合同会社 ソリューションアーキテクト 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 2 これまでのセッション ・AI 機能 で 運⽤を楽にする話 このセッションで話すこと ・AI 機能 の 運⽤を楽にする話 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 3 ⾃⼰紹介 Hajime Onishi アマゾンウェブサービスジャパン ソリューションアーキテクト ISV/SaaS ビジネスを展開されている お客様を中⼼にご⽀援しています 好きな AWS サービス AWS Control Tower AWS Distro for OpenTelemetry 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 4 アジェンダ • AI エージェントと Amazon Bedrock AgentCore • AI エージェントにおけるオブザーバビリティの重要性 • CloudWatch GenAI Observability • まとめ 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 5 © 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. AI エージェントと Amazon Bedrock AgentCore 5 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 6 AI エージェントとは AI を活⽤して⼈間やシステムに代わって タスクを推論・計画・完了する ⾃律型ソフトウェアシステム つまり「⾃律的に⾏動できる AI」 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 7 AWS の AI エージェントサービス コーディング ビジネスユース 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 8 https://strandsagents.com/ AWS が発表したオープンソース AIエージェント SDK 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 9 ユーザー 指⽰ 応答 エージェント ツールの選択 ツールの実⾏ ..... 推論 エージェントループ LLM エージェントの特徴: 推論とツール実⾏のループ 例: レストラン予約エージェント ユーザー 「11/6 19時、渋⾕でベジ対応2名で予約」 1. [LLM] 店舗検索APIを実⾏することを 判断し、検索クエリを⽣成 2. [Tool] 店舗検索API実⾏ 3. [LLM] 検索結果を⾒て予約店舗決定。 店舗予約APIを実⾏判断。 4. [Tool] 店舗予約API実⾏ 5. [LLM] 予約完了したためユーザーへの 返答⽂を作成 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 10 エージェントの 安全な実⾏と スケール カスタムツールと リソースの 発⾒と接続 すべてのやりとりの 理解と監査 各エージェント とツールの アイデンティティ とアクセス管理 過去のやりとり & 知⾒の記憶 複雑なワークフロー を実⾏するための エージェント⽤ ツール利⽤ 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 11 差別化されない重労働 Undifferentiated heavy lifting 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 12 Amazon Bedrock AgentCore 2 0 2 5 / 1 0 / 1 3 G e n e r a l l y A v a i l a b l e N E W あらゆるフレームワークとモデルを利⽤して構築した、 ⾼度な能⼒を持つエージェントを安全かつ⼤規模にデプロイして運⽤ 東京リージョンにもやってきました 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 13 Agent Runtime ⼤規模なエージェント展開のための AgentCore 機能 モデル AgentCore Identity AgentCore Observability AgentCore Memory AgentCore Gateway AgentCore Browser AgentCore Code Interpreter MCP クライアント エージェント指⽰ エージェントローカルツール エージェントコンテキスト フレームワーク (今⽇の本題) 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 14 © 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. AI エージェントにおける オブザーバビリティの重要性 14 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 15 従来のシステムでもオブザーバビリティは重要 Amazon API Gateway Amazon Simple Storage Service (Amazon S3) AWS Lambda Amazon DynamoDB 外部サービス API メトリクス ・各サービスで計測された指標の時系列変化から、 傾向の把握、予測に役⽴つ ログ ・発⽣したイベントの記録から、 予測不可能な振る舞いの発⾒に役⽴つ 分散トレース ・分散システムのリクエストの流れと 構造の可視化によって、 性能劣化・エラーの因果関係の把握に役⽴つ (主に) 異常の検知と原因分析のため 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 16 AgentCore Runtime LLM Memory Gateway Tools どのツールが どのように使われた︖ 最終結果を返すまでに どれくらいループした︖ どのくらいトークンを 使った︖ ⼊⼒に対して 最終的にどういう出⼒を 返した︖ LLM によって、処理内容は⾮決定論的に 記憶からどのような 内容を抽出した︖ 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 17 AgentCore Runtime LLM Memory Gateway メトリクス ・LLM の呼び出し回数、レイテンシー トークン消費量や AI エージェントの セッション数などの傾向 分散トレース ・エージェントループの回数、ツール選択・実⾏ LLM の呼び出し、最終出⼒までの全体像 従来の異常検知・原因分析のみならず 平時の振る舞いからも 改善点(品質・コスト)を発⾒する ログ ・AI エージェントや LLM の⼊出⼒ AI エージェントでは正常処理の情報も粒度⾼く⾒たい Tools 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 18 AI エージェントの振る舞いを粒度⾼く観る オブザーバビリティの実現 AgentCore Observability • OTLP 形式でエージェント からのメトリクス、ログ、 トレースを、幅広い オブザーバビリティツールと 統合可能 • 既存のオブザーバビリティ スタックを活⽤できる柔軟性 • AgentCore の各リソースから ⾃動でメトリクス、ログ、 トレースを連携し可視化 • OTLP 形式でエージェント からのメトリクス、ログ、ト レースを連携し、エンドツー エンドの振る舞いを可視化 • 監視基盤⾃体のコンピュート や保管ストレージの管理不要 CloudWatch GenAI Observability 3P オブザーバビリティ ツールとの統合 • ⽣成 AI、AI エージェントの ためのセマンティック規約が OpenTelemetry で定義されて いる *Status: Development • 多くの AI エージェント フレームワークがこの規約に 従ってシグナルを送信する OpenTelemetry による 標準化 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 19 © 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. CloudWatch GenAI Observability 19 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 20 データ構造 AgentCore におけるトレースのデータ構造 • セッション: 複数のやり取りをまとめた⼀連の会話 • トレース: 1度のユーザーの指⽰ - 応答のかたまり • スパン: トレース内の⼀つの作業の単位 • サブスパン:トレース内のさらに詳細な作業単位 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 21 各トレースでのスパン数や総使⽤ トークン数を確認可能 セッションごとのトレース数やエラー数 平均レイテンシー確認可能 エージェントのセッションごとの情報 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 22 トレースの⼀連の振る舞いを 確認可能 AgentCore Gateway で利⽤可能なツールをリスト AgentCore Memory の記憶されたイベントをリスト AgentCore Runtime 上の Strands Agents を呼び出し Memory から⻑期記憶を取得 (facts) Memory から⻑期記憶を取得 (preference) 推論、ツールを選択 ツールを実⾏ などなど… 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 23 AgentCore Memory 短期記憶の作成、⻑期記憶の取得に関しての 数、エラー率やレイテンシーなど AgentCore Gateway Gateway の呼び出し回数、 エラー率やレイテンシーなど AgentCore Built-in Tools ツールが呼び出されたセッションの数、 エラー率やレイテンシー、処理ごとに消費した vCPU/Memory AgentCore Identity ID の認証回数やエラー率 各リソースの使⽤状況のさらなる 詳細確認も可能 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 24 ・AI エージェントでは異常検知以外に エージェントの品質向上やコスト管理のためにも オブザーバビリティがこれまで以上に重要 ・Amazon Bedrock AgentCore は AI エージェントの 本番運⽤のための新たなビルディングブロック ・AgentCore Observability によってエージェントのコードに 計装を加えずとも、オブザーバビリティを⼿軽に獲得︕ まとめ 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 25 © 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. Appendix: How it works? 25 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 26 AgentCore Runtime AgentCore Memory AgentCore Gateway メトリクス AgentCore Browser & Code Interpreter Amazon Bedrock AgentCore Identity CloudWatch EMF AI エージェントの メトリクスは OTLP 形式から EMF 形式に変換し 送信可能 任意の Framework, ツール, Runtime MCP CloudWatch メトリクス Gen AI Observability ダッシュボードで ⼀元的に確認可能 https://docs.aws.amazon.com/bedrock- agentcore/latest/devguide/observability-service-provided.html 例: Runtime のメトリクス 例: Bedrock で呼び出されたモデルのメトリクス 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 27 GenAI Observability ダッシュボードで スパンとイベントを関連付けて確認可能 AgentCore Runtime AgentCore Memory AgentCore Gateway ログ AgentCore Browser & Code Interpreter Amazon Bedrock CloudWatch Logs AgentCore Identity CloudWatch Logs OTLP Endpoints OTLP AgentCore のログは有効化することで取得可能に Vended logs として安価に保存 AI エージェントの ログも OTLP 形式で 送信可能 任意の Framework, ツール, Runtime MCP 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 28 AgentCore Runtime AgentCore Memory AgentCore Gateway 分散トレース AgentCore Browser & Code Interpreter X-Ray AgentCore Identity OTLP 任意の Framework, ツール, Runtime MCP 分散トレースを CloudWatch Logs (aws/spans) に 保存し、トランザクション検索・X-Ray で分析 X-Ray OTLP Endpoints AI エージェントの トレースは OTLP 形式で 送信可能 Gen AI Observability ダッシュボードで ⼀連のトレースを確認可能 https://docs.aws.amazon.com/ja_jp/AmazonCloudWatch/ latest/monitoring/CloudWatch-Transaction-Search.html 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 29 AI エージェントの計装 Framework AI エージェントのコード Models 構成 Container Image ADOT によるゼロコード計装 開発者 Amazon ECR Repository push AgentCore Runtime pull AgentCore Observability 連携 CloudWatch, X-Ray や 3P オブザーバビリティツールに 連携し可視化 Python 系の AI エージェントフレームワークは ADOT によるゼロコード計装で 簡単に CloudWatch や 3P ツールへの連携が可能 実際にゼロコード計装で⾏われていることの詳細解説 Zenn の AWS AI Agent ブログ祭りの 1 記事として公開 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 30 ・Get started with AgentCore Observability https://docs.aws.amazon.com/bedrock-agentcore/latest/devguide/observability-get-started.html AgentCore Observability を利⽤する際の前提条件と、チュートリアルのドキュメント ・Get started with AgentCore Observability https://github.com/awslabs/amazon-bedrock-agentcore-samples/blob/main/01-tutorials/06-AgentCore- observability/01-Agentcore-runtime- hosted/Strands%20Agents/runtime_with_strands_and_bedrock_models.ipynb 上記チュートリアルを試せる Jupyter Notebook ・ Build trustworthy AI agents with Amazon Bedrock AgentCore Observability https://aws.amazon.com/jp/blogs/machine-learning/build-trustworthy-ai-agents-with-amazon-bedrock-agentcore- observability/ AgentCore Observability の詳細ブログ 参考資料 

© 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark. 31 Thank you! © 2025, Amazon Web Services, Inc. or its affiliates. All rights reserved. Amazon Confidential and Trademark.