面倒なことは、 Azure OpenAI Service× Power Automateにやらせよう！

課題と背景
外資系企業に転職後、大量の英文メールが来るようになり、内容を把握する前に埋もれてしまうという課題
OpenAIとAzure OpenAIの違い
OpenAI: 強力なAIモデルやAPIを提供
Azure OpenAI Service: OpenAIの技術をAzureクラウド環境に統合し、独自の機能やサービスを提供
従量課金制
Power Automateとは
Microsoftが提供するRPAツール
ワークフローの自動化やスケジュールに基づくタスクの実行が可能
クラウド版とDesktopアプリがあり、目的や費用に応じて使い分ける
処理フロー
英文メールをOutlookに受信した際に、日本語に訳して自分宛に送信するフローを構築
言語判断にはAzure AI Languageを、和訳と要約にはAzure OpenAI Serviceを使用
実際の処理フロー
変数作成と変数への値格納を行い、JSONの解析プロセスで苦労したが、最終的に良い経験となった
アウトプット事例
要約文の件名に「AOAIによる要約」であることを明示し、クリティカルな内容は本文を確認するようにしている
特に苦労した点
JSONの解析プロセスで"content"だけを取り出すのに苦労し、ChatGPTに質問したり、記事を調べたり、エキスパートに相談することで解決
まとめと予定
Power Automate未経験者でも個人レベルの自動化は難しくない
500コネクタが揃っている効果は絶大で、生成AIと組み合わせることで多くのことが自動化可能
今後は文章構造や画像を保持して要約する機能を追加予定
この資料は、Azure OpenAIとPower Automateを活用して業務効率化を図る方法について具体的な事例を交えて説明しています。

Transcript

1. 面倒なことは、 Azure OpenAI Service× Power Automateにやらせよう！ Power Automate Azure OpenAI
2. 自己紹介 Xアイコン ＜経歴＞ • 材料系の学部を卒業。 新卒で電機メーカーの生産技術職へ就職。 （生産技術者とのしての経験10年弱） • 30代前半でデータサイエンティストへキャリアチェンジ ①技術者派遣会社で、客先常駐でデータ解析業務（未経験採用） ②自動車メーカーで機械学習システム開発 ③ITコンサルティング会社で生成AIコンサルタント＆エンジニア ⇒ 現職 ＜保有資格＞ 統計：統計検定1級、統計検定準一級 Python：Python 3 エンジニア認定基礎試験/データ分析試験 AI：G検定、E資格、JDLA Generative AI 国家資格：基本情報技術者試験 クラウド：Azure Fundamentals AZ-900 マルチンゲールと 申します。
3. 取り組みの背景 生成AIにキャッチアップするために、以下のループを回したくアウトプットの場に活用させていただいた 生成AIエキスパートの アドバイス 基本的な知識を獲得したら、 何か作ってみた方が良い よ！（その方がアピールに なるし） 知識を入れる 生成AIを使った ツールを作ってみる アウトプット する FBを受ける 改良する ＜雑談の一コマ＞ ＜スキルアップのPDCA＞
4. この様な課題を感じていました 面倒なことは、 Azure OpenAI× Power Automate にやらせよう！ ひらめき 現状 外資系企業に転職して、大量の英文メールが来る様になった。内容把握する前に埋もれていく。
5. Azure OpenAI Service とは Microsoftが提供するクラウドベースの生成AIサービスであり、 GPTモデルを提供する唯一のクラウドサービス 観点 OpenAI Azure OpenAI Service セキュリ ティ • API発行時に作成されたSecret keyを使用する • API を通じて送信されたデータは、OpenAI モデル のトレーニングや OpenAI のサービス提供の改善に は使用されない • Azureインフラ内でホストされ、GDPRなどの国際的 プライバシー規制に準拠 • データはOpenAIに送信されず、モデルのトレーニン グにも使用されない コスト 従量課金制で、モデルごとに異なる料金体系。 従量課金制（Pay-As-You-Go）とプロビジョニングさ れたスループットユニット（PTU）による予測可能なコス トモデル カスタマ イズと 柔軟性 APIを通じて他のアプリケーションと統合可能 Azureの他のサービスと統合可能で、より高度なAIソ リューションを構築可能
6. Power Automate とは • Microsoftが提供するRPA（ロボティック・プロセス・オートメーション）ツール • ワークフローの自動化やスケジュールに基づくタスクの実行が可能。500以上のアプリケーションと連携できる。 • クラウド版とDesktopアプリがあり、目的、費用に応じて使いわける必要あり。 観点 Power Automate Cloud Power Automate Desktop 費用 Microsoft 365またはDynamics 365のサブスクリプション に含まれる • Power Automate Premium: $15/ユーザー/月 • Power Automate Process: $150/ボット/月 無料（Windows 10およびWindows 11ユーザー向け） • Power Automate Premium: $15/ユーザー/月（プレミアムコ ネクタと連携） • Unattended RPA Add-On: $150/ボット/月 できる こと • クラウドフローの作成と実行 • 500以上のクラウドコネクタとテンプレートの利用 • Microsoft Teamsでのメッセージ送信 • 承認プロセスの自動化 • Plannerでのタスク作成 • Dataverseでの行の更新 • デスクトップフローの作成と実行 • RPA（ロボティックプロセスオートメーション）の実 • Excelスプレッドシートのデータ変更 • レガシーシステムでのデータ入力とタスク完了 • CMDコマンドの実行 • ウェブページからのファイル取得 できな いこと • デスクトップアプリケーションの操作 • レガシーシステムとの直接連携（APIがない場合） • クラウドフローの作成と実行（無料版では不可） • クラウドコネクタの利用（無料版では不可） • Dataverseとの連携（無料版では不可） 今回はCloudを選択
7. 処理フロー 英文のメールをOutlookに受信した際に、日本語に訳した後に自分宛に送信する 件名が英語で ある 非該当 大まかな流れ 該当 メールを受信 （開始） 終了 本文を和訳し、 要約 メールを 自分宛に送信 終了 言語モデルへの無駄な 課金を除くため、 英文メールを判定
8. データフロー図 Azure AI Language（※） 言語判断にはAzure AI Languageを、和訳と要約にはAzure OpenAI Serviceを使用 Outlook メール 条件判断 件名抽出 件名 言語名 Power Automate マージ メール 和訳＆要約 User Prompt ＋本文 Power Automate Azure OpenAI（※） gpt-35-turbo-16k 言語検出 Power Automate JSON解析 Power Automate レスポンス 本文の日本語要約 （※）Premiumライセンスが必要
9. 実際の処理フロー 実際の処理では、いくつか変数作成と変数への値格納を行っています Azure AI Language Azure OpenAI
10. アウトプット事例 元メール GPT 要約
11. 工夫点 要約文の件名にAOAIによる要約であることを明示。あくまで、要約として読むことを意識。 クリティカルな内容は、ちゃんと本文を確認しています。。 本文中のリンクも ちゃんと取れている。 取れていないリンクもある。
12. 特に苦労した点 JSONの解析プロセスで上手く”content”だけを取り出せず、悪戦苦闘した。 ⇒ 結果、JSONデータを扱う良い経験になった。 AOAIのレスポンスのうち、 本文の要約部だけを変数 の格納することに苦戦 ＜解決に向けて取ったアクション＞ ①ChatGPTに聞く ②記事を調べる ③社内のエキスパートに相談する
13. まとめと予定 開発コストを抑えた、業務効率化にAOAI × Power Automateはかなり使える ＜まとめ＞ • Power Automate未経験者でも、個人レベルの自働化は難しく無かった （※より複雑、外規模はもちろん壁があると思います、、） • 500コネクタ揃っている効果は絶大！AOAIと組み合わせることで、かなり多くのことが自働化できそう • 上記から、生成AIを使ったRPAのトライの第一候補になると思われる ＜予定＞ • 文章構造（段落、表）を保持して要約する。現状は平文になっています。。 • 画像を保持して要約する。現状は画像データがなくなっています。。 • RAGやってみたい ぼちぼち やっていきます
14. 参考にした記事 • AzureOpenAIとPowerAutomateでメール要約をスマートに自動化 • 5 分でわかる Power Platform！その 1 ~Power Platform とは？~ • Power Automate 価格 • 【PowerAutomate】JSONの解析の目的と使い方。動的なコンテンツとして 認識させる！