Amazon Nova Actのご紹介

Transcript

1. AWS re:Invent2025 re:Cap 「Amzon Nova Actのご紹介」 AWS re:Invent2025 re:Cap & Lightning Talk 2025年12月23日 野村総合研究所 産業ソリューション事業本部 古家 駿
2. 1 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 自己紹介 ◼名前 古家 駿 ◼所属 野村総合研究所 産業ソリューション事業本部 2023年AE入社(3年目) ◼担当業務 業務端末向けアプリ開発 AWS re:Invent2025 re:Cap #nncstudy
3. 2 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 本日話す内容 AWS re:Invent2025 re:Cap #nncstudy ◼re:Inventでの注目アップデートとして、「Frontier Agents」という新しいコンセプトを掲げた 3つの新しいエージェントサービスが発表されました ⚫ WorkShopで触ることができましたが、この辺は大先輩方が分かりやすく解説してくれるはず、、 re:InventでGAとなった「Amzon Nova Act」についてお話しします！
4. 3 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. Amzon Nova Actについて AWS re:Invent2025 re:Cap #nncstudy ブラウザ UI ワークフローを自動化するAI エージェントサービス ◼自然言語でブラウザ操作を自動化するAIエージェント ◼カスタム Nova 2 Lite モデルを活用し、高い信頼性とコスト効率 ✓ IDE拡張機能でコード開発とデバッグ可能 ✓ 自然言語とPythonコードでワークフローを定義 主なユースケース 1. E2EのUIテスト自動化 ✓ 自然言語でのテスト自動化が可能 ✓ UIが頻繁に変わる場合でもテスト可能 2. Webフォームへのデータ入力自動化 ✓ 繰り返し手入力する操作を自動化可能 3. Webサイトからのデータ抽出 ✓ スクレイピングで必要情報を収集可能 4. チェックアウトフローの自動化 ✓ ECでのカート→決済までのプロセスを自動化可能 ※北米(バージニア北部)リージョンでのみ利用可能
5. 4 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. Amzon Nova Actを使用したUIテスト自動化 AWS re:Invent2025 re:Cap #nncstudy アプリ開発者目線では嬉しい機能！ 以前、PlaywrightでUIテスト自動化を試みたものの苦戦、、 ◼従来のテスト自動化ツール(Playwright)のデメリット ✓ DOM構造に強く依存するため、UI変更に弱い ✓ UI変更のたびにスクリプトの改修が必要 ◼Nova Actの強みは、内部でのPlaywrightとの統合 ✓ 動的なUI、曖昧な操作に対応 ✓ 自然言語による記述により、改修・コード量削減 ✓ 例外にも文脈から判断して対応 PlayWrightが「手」＋Nova Actが「目と脳」になる！
6. 5 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 実際に触ってみました！ AWS re:Invent2025 re:Cap #nncstudy ✓VSCode, Kiro IDE 拡張機能からインストール可能 ✓コンソールでワークフロー定義を作成
7. 6 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 実際に触ってみました！ AWS re:Invent2025 re:Cap #nncstudy ✓認証後、ワークフローを自然言語とPythonコードで記述し、実行 ✓自然言語での指示：航空券予約サイトで、「2月22日のボストンからウルフまでの航空券を検索して」
8. 7 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 実際に触ってみました！ AWS re:Invent2025 re:Cap #nncstudy ✓ Chromeでのライブビューも可能
9. 8 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 実際に触ってみました！ AWS re:Invent2025 re:Cap #nncstudy ✓ 実施したワークフローの過程をIDE上で確認できます(情報はS3に保存されます) ✓ UI操作の思考の過程についても確認できます
10. 9 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 実際に触ってみました！ AWS re:Invent2025 re:Cap #nncstudy ✓ 実施したワークフローの過程をIDE上で確認できます(情報はS3に保存されます) ✓ UI操作の思考の過程についても確認できます think("私は今NextDotページにいます。タスクは2月22日の ボストンからウルフまでのフライトを検索することです。旅程を 予約するセクションが見えます。出発地がボストンに設定され ていません。'出発地を選択'ドロップダウンをクリックしてリスト を展開し、出発地を選択する必要があります。");
11. 10 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. 実際に触ってみました！ AWS re:Invent2025 re:Cap #nncstudy ✓ 実施したワークフローの過程をIDE上で確認できます(情報はS3に保存されます) ✓ UI操作の思考の過程についても確認できます think(“ ”現在、2月22日のボストン発ウルフ行きのフライト表 示ページにいます。前回の操作が成功しました。2月22日の ボストンからウルフまでのフライト検索が完了しました。タスク は完了しており、返却情報の要求はないです。処理を終了 します。“）
12. 11 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. まとめ AWS re:Invent2025 re:Cap #nncstudy ◼自然言語でE2EのUIテスト自動化や複雑なUI操作ができる ◼使用感 ✓ 思考の過程が可視化でき、デバッグが容易 ✓ Playwright等のテスト自動化ツールと比較すると実行速度は遅い ✓ 操作精度は90%以上のトップクラスだが、複雑過ぎるUI操作や自然言語が曖昧だと精度は落ちる ➢ Nova自体のモデル精度向上に期待！ ✓ 日本からはAPIキーが発行できず、IAM認証しかできない
13. 12 Copyright （C） Nomura Research Institute, Ltd. All rights reserved. まとめ AWS re:Invent2025 re:Cap #nncstudy ◼自然言語でE2EのUIテスト自動化や複雑なUI操作ができる ◼使用感 ✓ 思考の過程が可視化でき、デバッグが容易 ✓ Playwright等のテスト自動化ツールと比較すると実行速度は遅い ✓ 操作精度は90%以上のトップクラスだが、複雑過ぎるUI操作や自然言語が曖昧だと精度は落ちる ➢ Nova自体のモデル精度向上に期待！ ✓ 日本からはAPIキーが発行できず、IAM認証しかできない 早く東京リージョンにきてほしい！ ぜひ使ってみてください！