Upgrade to Pro — share decks privately, control downloads, hide ads and more …

B2BアプリケーションにおけるLLM機能のUXについて

Avatar for Naoto Shibata Naoto Shibata
December 20, 2023

 B2BアプリケーションにおけるLLM機能のUXについて

Avatar for Naoto Shibata

Naoto Shibata

December 20, 2023
Tweet

More Decks by Naoto Shibata

Other Decks in Technology

Transcript

  1. 自己紹介 柴田直人 (Naoto Shibata) • • • 株式会社Queue CEO 東大工学部EEIC

    → Queue創業 (2016年) 大学時代: ロボット開発やMLを使った広告の予算分配モデルの研究 @sbtqueue <事業>
  2. 良いUX実現に向けてのKPIを整理する 業務アプリケーション 実現したい業務におけるUX / アウトプットの形式がある • • [業務とのUIの相性] ユーザーは生成結果を活用して次に何の業務をするのか? 必ずしもChat

    UIが業務に良いとは限らない [簡単に使用するための工夫] 必要な情報を得るためにどれだけのことを説明できるのか? 「私は〇〇の構造のテーブルを持っていて、XXの形式の表をXXの分析を した上で可視化したい」 => プロンプトで説明をするのは難しい
  3. UXを起点にLLM実行システムのI/Oを決定する Prompt SQL Python • • LLMの前後の体験の方がより重要 → それに合わせてLLMの入出力の形式をコントロールする必要がある LLM単体ではなく、LLMに付随するシステム系をUXに合わせて定義し直す

    LLM実行システム • • 簡単なデータ取り込み 集計データ準備 • • • • • • 結果の再現性の担保 HTMLへの埋め込み 連続したチャート作成 チームでの共有体験 ドリルダウン分析 エラー時の修正体験