Azure OpenAI を活用して金融機関にお届けする LLM + RAG サービス

Transcript

1. シンプルフォーム株式会社 2024年6月6日
2. Azure OpenAI を活用し 金融機関にお届けする LLM + RAG サービス
3. シンプルフォーム株式会社 全社会資料 2024年5月31日
4. シンプルフォーム株式会社 全社会資料 2024年5月31日
5. アジェンダ 4 • 会社紹介 • 作ったデモ／アーキテクチャ／課題 • Azure OpenAI を用いた解決 • 結び
6. アジェンダ 5 • 会社紹介 • 作ったデモ／アーキテクチャ／課題 • Azure OpenAI を用いた解決 • 結び
7. Azure OpenAI を活用し 金融機関にお届けする LLM + RAG サービス
8. Azure OpenAI を活用し 金融機関にお届けする LLM + RAG サービス
9. Azure OpenAI を活用し 金融機関にお届けする LLM + RAG サービス
10. Azure OpenAI を活用し 金融機関にお届けする LLM + RAG サービス
11. アジェンダ 10 • 会社紹介 • 作ったデモ／アーキテクチャ／課題 • Azure OpenAI を用いた解決 • 結び
12. 法人の特徴から審査観点を提案してくれる AI Chat 11 本法人は•••という特徴があり、審査 ガイドライン第•頁••••••に該当す るため追加調査•••••• が必要です
13. ガイドラインをベクターデータ化し RAG を実現 12 本法人は•••という特徴があり、審査 ガイドライン第•頁••••••に該当す るため追加調査•••••• が必要です
14. RAG の有無による性能の差 13 「国際テロリスト財産凍結法」に関する次の記述のうち、最も不適切なものはどれか。 1. テロリストに対する制限が不十分であるというFATF第3次対日相互審査の指摘やFATFの声明を 受けて制定された。 2. 公告国際テロリストを規制対象としており、公告国際テロリストを相手として取引を行う場合は 公安委員会の許可が必要となる。 3. 10万円超の金銭等、政令として定める規制対象財産の贈与を「一定の取引」として制限している。 4. 政令として定める規制対象財産の貸付や売却を「一定の取引」として制限している。 問題数: 91 使用した Model: gpt-4 RAG無し正解数: 49 RAG有り正解数: 88
15. Pinecone + OpenAI API を用いたアーキテクチャ 14 OpenAI API OpenAI API We User Get 法人 情報 RDB 発現可能性のある リスクをN個特定 リスク1の評価 リスク2の評価 …リスクNの評価 リスク1に関する 知識を獲得 リスク1を評価＋ 推奨アクションの提案 ベクターデータの用意
16. 運用に際しての課題 15 OpenAI API の信頼性 1. 可用性 2. データガバナンス（顧客データがサードパーティでどう扱われるか） 3. セキュリティ（どの程度の水準でセキュリティが担保されるか）
17. アジェンダ 16 • 会社紹介 • 作ったデモ／アーキテクチャ／課題 • Azure OpenAI を用いた解決 • 結び
18. Azure OpenAI とは 17 https://learn.microsoft.com/ja-jp/azure/ai-services/openai/overview#comparing-azure-openai-and-openai → 安定性やセキュリティ、コンプライアンス、ガバナンスの観点で顧客水準のクリアが期待 できる
19. Azure OpenAI を用いたアーキテクチャ 18 Azure OpenAI We User Get 法人 情報 RDB 発現可能性のある リスクをN個特定 リスク1の評価 リスク2の評価 …リスクNの評価 リスク1に関する 知識を獲得 リスク1を評価＋ 推奨アクションの提案 アップロード Azure AI Search Azure Document Intelligence ベクター データ
20. Azure AI Studio を用いてノーコードで RAG を作れる 19
21. Azure AI Studio を用いてノーコードで RAG を作れる 20
22. アジェンダ 21 • 会社紹介 • 作ったデモ／アーキテクチャ／課題 • Azure OpenAI を用いた解決 • 結び
23. 結び 22 • SimpleForm では審査情報基盤を開発／ LLM+RAG で審査を補助 • 顧客属性によってはデータガバナンス・セキュリティは重大課題 • Azure OpenAI で Microsoft の水準を享受でき対外説明しやすくなる • ノーコード、ワンタッチで RAG が実現できる • 先端技術がコモディティ化 ⇔ 独自データの重要性、ますます高まる • SimpleForm は「サイバー時代の探偵」宜しく情報基盤に積極投資
24. We want YOU! Great Detective in the Cyber Age: Data Analysis Engineer, Application Engineer, Infrastructure Engineer
25. シンプルフォーム株式会社 全社会資料 2024年5月31日
26. シンプルフォーム株式会社 全社会資料 2024年5月31日