LLMアプリケーションとアフォーダンス

サガワフミヤ ~mental model is all you need ?~ LLMアプリケーションとアフォーダンス
2023/07/14 Fri. AIAD Offline #0 2023/07/14 Fri. LLMアプリケーションとアフォーダンスサガワフミヤ

佐川史弥（さがわふみや) @fumi_sagawa エンジニア, AIチームリーダー Occupation Company 🏢TAM デザイン・フロントエンド開発の経験を経て現在はTAMにてAI
R＆Dチーム代表を務める Career 地元福島県いわき市にてプログラミング教育事業を⽴ち上げその後上京、株式会社キカガクにてAIに携わる

“LLMアプリケーション” は使いにくい “LLMアプリケーション” は使いにくい

どれを選んだら良いかわからない

何を⼊れたら良いかわからない

とりあえず頑張って⼊れてみる

望んでいない回答が返却される

単語の海の中、意思決定コストを払ったのにも関わらず⽬的のものが得られない

発⽣するネガティブなフィードバック

アフォーダンスとシグニファイアアフォーダンスとシグニファイア

物理的なモノと⼈の関係を指している。アフォーダンスは、ものの属性と、それをどのように使うことができるかを決定する種タウの能⼒との間の関係のことである。⼈々に適切な⾏動を伝える、マークや⾳、近く可能な標識の全てを⽰すものである。 affordance signiﬁer

signiﬁer

affordance 開いて進めそう

signiﬁer

押せそう affordance 引けそう

これらの判断は全て⾏動者の記憶や経験メンタルモデルに基づく

LLMアプリ黎明期のため適切なメンタルモデルがない/選択できない

適切なシグニファイアとメンタルモデルを作る必要性

既存のLLMアプリのデザイン既存のLLMアプリのデザイン

https://chat.openai.com/

https://www.bing.com/search?q=Bing+AI&showconv=1&FORM=hpcodx

https://www.jalan.net/chat/

https://shop.app/ai/

https://studio.design/

“STUDIOのメンタルモデル” が既にあるため指⽰に悩みにくい

https://www.adobe.com/jp/sensei/generative-ai/firefly.html

“Photoshopのメンタルモデル” が既にあるため指⽰に悩みにくい

https://github.com/pixiv/ChatVRM

キャラクターがそこにいるためおしゃべりのアフォーダンスが⽣まれやすい

UIデザインの変遷 UIデザインの変遷

スキューモーフィズムとフラットデザイン

引⽤元： https://goodpatch.com/blog/skeuomorphism-and-flat-design

引⽤元： https://ja.wikipedia.org/wiki/ スキューモーフィズム https://ja.wikipedia.org/wiki/ フラットデザイン

UIはメンタルモデルが形成できた段階でフラットデザインに

LLMアプリは多少リッチにしても伝わる要素を増やすフェーズか

メンタルモデルを正しく作る、伝える方法を考える

⼈間として捉えてみる？

⼤規模⾔語モデルを使ったAIシステムはさまざまな場⾯で有益である。しかし、完璧ではなく誤りも犯す。⼈とは考え⽅が違っており、基本的な常識や価値観が⽋けていることもある。それでは、⼤規模⾔語モデルを、誤りを犯すこともあるし、考え⽅も異なる、ちょっと変わった「⼈」として付き合うのはどうだろうか。「⼤規模⾔語モデルは新たな知能か」 P.123 より

ChatGPTを⼈として捉えるなら世界中の情報を知っている想像⼒が⾮常に豊か⾼い思考⼒を持つ⼀瞬で情報を読み解く疲れない/嫌がらない (今は)テキストしか扱えない⾃信満々に間違えることがある 2021年9⽉までの知識しかない基本テキストしか扱えない
情報へのアクセス⼿段を持たない⾃信満々に間違えることがある察することはできない

既存のメンタルモデルの上にのせる？

スキューモーフィズムで具体を伝える？

快適なUX達成のため今⼀度UIを最初から考えたい

LLMアプリケーションとアフォーダンス

LLMアプリケーションとアフォーダンス

More Decks by fumi-sagawa

Featured

Transcript