ペットに秘書の魂を宿らせたい/NomapsLT-Otoriff

以下イベントの学生LTで発表したスライドです。VRChatのムチォとローカルLLMを組み合わせた話です
https://4s.link/ja/iwaken-student-lt

Transcript

1. ペットに秘書の魂を宿らせたい 〜 で流⾏ってる ペットをローカル 化した話〜 VRChat Nomaps LT オトリフ VR LLM
2. 自⼰紹介 オトリフ 志「エレベ、アコベ、シンベ、Shaderの四刀流で音楽ライブを 支配するVRベーシストになる」 他所属 山口VRサークルFUGU 立ち上げメンバー Code for Yamaguchi コアメンバー PNGミュージアム ワールド班 STILL BREED RED ベース
3. 趣味開発のお話でもします
4. なぜか最近流⾏ってる「ムチォ」
5. 私もギフトで頂きました 毎度好き勝手しゃべっております
6. 仕組みはむっちゃシンプル OSC 聞き取り、記憶、適当に喋る VRChatで受信＆表示
7. 脳みそ変えれるんじゃね...？
8. やりたいこと ・MacBookにあるローカルLLMを使いたい ・いろいろ記憶させたい ・秘書をやらせたい 要するに、ムチォアプリの代替をMacBookで作ればおｋ
9. 作りました
11. 変えたこと OSC VRChatで受信＆表示 MacBookでローカルLLMを起動 人格設定に基づいて答える
12. 使った感想・改良したいところ ・博物館系のワールドで結構活躍できる ・自分の思い通りの人格をVRChat内で喋らせられる！ ・もうちょい対話スピードを早くしたい ・記憶のロジックを組みたい ・勝手に記憶ファイルを整理できるようになれば最高
13. 余談 の が優秀 個人の趣味開発レベルなら十分だ と思ってる UI開発以外にも、何かしらの情報 の可視化にも使えそう Codex Visualize