Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Ai Workforceを支える技術
Search
LayerX
PRO
August 07, 2024
Technology
3
2.1k
Ai Workforceを支える技術
2024年8月6日に開催されたLayerX AI-UX Night「次世代のユーザー体験と現在地」のイベントにて、AI・LLM事業部プロダクト開発チームEMの篠塚史弥が登壇した際の資料になります。
LayerX
PRO
August 07, 2024
Tweet
Share
More Decks by LayerX
See All by LayerX
可観測性は開発環境から、開発環境にもオブザーバビリティ導入のススメ
layerx
PRO
0
210
コンパウンド組織のCRE #cre_meetup
layerx
PRO
1
260
AI時代の経営、Bet AI Vision #BetAIDay
layerx
PRO
6
3.3k
バクラクによるコーポレート業務の自動運転 #BetAIDay
layerx
PRO
1
1.4k
金融サービスにおける高速な価値提供とAIの役割 #BetAIDay
layerx
PRO
3
1.1k
LLMをツールからプラットフォームへ〜Ai Workforceの戦略〜 #BetAIDay
layerx
PRO
1
2.1k
Bet "Bet AI" - Accelerating Our AI Journey #BetAIDay
layerx
PRO
5
2.6k
人に寄り添うAIエージェントとアーキテクチャ #BetAIDay
layerx
PRO
10
3.2k
生成AI時代におけるAI・機械学習技術を用いたプロダクト開発の深化と進化 #BetAIDay
layerx
PRO
1
16k
Other Decks in Technology
See All in Technology
スタートアップの現場で実践しているテストマネジメント #jasst_kyushu
makky_tyuyan
0
130
FinOps について (ちょっと) 本気出して考えてみた
skmkzyk
0
210
オブザーバビリティと育てた ID管理・認証認可基盤の歩み / The Journey of an ID Management, Authentication, and Authorization Platform Nurtured with Observability
kaminashi
1
630
[2025年10月版] Databricks Data + AI Boot Camp
databricksjapan
1
260
CNCFの視点で捉えるPlatform Engineering - 最新動向と展望 / Platform Engineering from the CNCF Perspective
hhiroshell
0
140
Introdução a Service Mesh usando o Istio
aeciopires
1
280
Databricks AI/BI Genie の「値ディクショナリー」をAmazonの奥地(S3)まで見に行く
kameitomohiro
1
400
SRE × マネジメントレイヤーが挑戦した組織・会社のオブザーバビリティ改革 ― ビジネス価値と信頼性を両立するリアルな挑戦
coconala_engineer
0
210
個人でデジタル庁の デザインシステムをVue.jsで 作っている話
nishiharatsubasa
3
5k
AI駆動で進める依存ライブラリ更新 ─ Vue プロジェクトの品質向上と開発スピード改善の実践録
sayn0
1
290
IoTLT@ストラタシスジャパン_20251021
norioikedo
0
130
20251027_マルチエージェントとは
almondo_event
1
380
Featured
See All Featured
Optimizing for Happiness
mojombo
379
70k
The Invisible Side of Design
smashingmag
302
51k
Agile that works and the tools we love
rasmusluckow
331
21k
KATA
mclloyd
PRO
32
15k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
46
2.5k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
194
16k
Chrome DevTools: State of the Union 2024 - Debugging React & Beyond
addyosmani
9
930
How GitHub (no longer) Works
holman
315
140k
Why You Should Never Use an ORM
jnunemaker
PRO
59
9.6k
A Modern Web Designer's Workflow
chriscoyier
697
190k
A designer walks into a library…
pauljervisheath
209
24k
BBQ
matthewcrist
89
9.9k
Transcript
© LayerX Inc. Ai Workforceを支える技術 2024/08/06 篠塚 史弥 LayerX AI-UX
Night「次世代のユーザー体験と現在地」
2 Confidential © 2024 LayerX Inc. 篠塚 史弥 LayerX AI・LLM事業部プロダクト開発チームEM
プロダクト開発のリード、開発チームのマネジメントを行う傍ら、 LLM PoCプロジェクトのPMや顧客へのプロダクト導入の推進を担う 元FiNC Technologies, CTO X: @shinofumijp
© LayerX Inc. 3 今日話すこと Ai Workforceの実装について話します!
© LayerX Inc. 4 Ai Workforceの概要 AIワークフロー構築 AIワークフロー実行 AIワークフロー結果 レビュー・修正
AIワークフロー改善
AI-UXを支える技術
© LayerX Inc. 6 インフラ構成 (全体) • Azure上にアプリケーションを構築 • SPA+APIサーバー+非同期処理
Workerの標準的なWebアプリケーショ ン構成 • APIサーバーと非同期処理Workerの間 のコミュニケーションはAzure Queue Storageを利用 • AIソリューションにはAzure OpenAI Service, Azure AI Document Intelligence, Azure AI Searchを 利用 Azure Container Apps Azure Container Apps Azure Application Gateway Azure Cosmos DB Azure OpenAI Service Azure AI Document Intelligence Azure AI Search Azure Blob Storage Azure Queue Storage SPA APIサーバー 非同期処理Worker App Service
© LayerX Inc. 7 Azure Container Apps App Service Azure
Container Apps Azure Application Gateway Azure Cosmos DB Azure OpenAI Service Azure AI Document Intelligence Azure AI Search Azure Blob Storage Azure Queue Storage SPA APIサーバー アプリケーションワークロード と利用技術 • フロントエンドはApp Service、APIサー バー・非同期処理Workerのワークロードは Azure Container Apps • フロントエンドはTypeScript(React)、 APIサーバーはPython(FastAPI)、非同期 処理WorkerはPython ◦ ワークフローエンジンは自前実装 • Azure OpenAI Service, Azure AI Document Intelligenceなど時間がかか る処理はWorkerを介して非同期的に実行 非同期処理Worker
AI-UXを支える機能事例の紹介
© LayerX Inc. 9 AIワークフロー結果のレビュー・修正機能 レビュー機能はAI-UXの根幹 - LLM処理の精度は100%にはならない - 人間が業務を遂行する上で「間違いがない」出力を得たい
- 人間の手によって精度の不足を補完する必要がある 人間がAIの間違いをすぐに見つけられ 容易に修正できる体験が重要
© LayerX Inc. 10 抽出元のページ をクリック 参照元をハイライト ※出典) 3M. (2024).
3M 2023 Annual Report. U.S. Securities and Exchange Commission. https://www.sec.gov/Archives/edgar/data/66740/000130817924000309/mmm4298631-ars.pdf
© LayerX Inc. 11 参照元ハイライト機能の実装 ①Azure AI Document IntelligenceでOCR 処理をして、テキストの座標を取得
②LLM処理で参照元となるテキスト情報を取得 ③①と②の結果からLougeスコアでマッチするもの を判定 LLM処理結果に参照元の座標情報を付与する ④フロントで座標情報に基づきハイライト Azure AI Document Intelligence Azure OpenAI Service フロントApp ドキュメント ① ② ③ ④
© LayerX Inc. 12 AI-UXはデザインとソフトウェアの総合格闘技戦 AI-UXは「AI精度」「プロダクト体験」「ソフトウェアエンジニアリング」によって支えられる - AI精度とプロダクト機能は不可分 - AI精度もタスク設計に合わせた評価指標が重要
- AI精度を補うためのプロダクトデザインとそれを実現するためのエンジニアリング
© LayerX Inc. 13 AI-UX向上のための今後の展望 ①LLMネイティブな体験・UIの追求 ②AI精度の継続的な改善のための監視基盤の構築 ③AI精度とプロダクト体験をより統合したソフトウェア開発