ARグラスにChatGPTを入れてみた

ChatGPT Meetup Osaka #2 で飛び込みLTした内容です。
https://chatgpt-jp.connpass.com/event/313708/

INMO Air2とGalaxyWatch4を用いたChatGPTの対話デモになっています。

Transcript

1. AR グラスにChatGPTを入れてみた @kotauchisunsun
2. 自己紹介 • こたうち さんさん • @kotauchisunsun • 大阪府箕面市出身 • 東京のXR(VR・AR・MR)会社のEM • フルリモートワーク
7. ARグラスだ！！
8. ワイもやりたい
9. つくりました
10. デモ
11. ARスマートグラスについて • INMO Air2 • INMO社 • 2023年4月20日発売 • $550(86,385円) • 重さ99g • Android 10 • スタンドアローン型AR ◦ スマホ不要 • 稼働時間2時間
12. コントローラーについて • スマートウォッチ ◦ Galaxy Watch4 ◦ 2021/9/22発売 ◦ 約3万円 • WowMouse ◦ DoublePoint社 ◦ 2024/4/16発売 ◦ 無料 ◦ 筋電位によるタップ検知？
13. システム構成 Whisper API gpt-4o マウスのシミュレーション 音声 画像 文字 INMO Air2 GalaxyWatch 4 Wow Mouse
14. まとめ • 良かった点 ◦ かなり手軽に使える ◦ スマートウォッチによるインターフェースがとても良い ◦ gpt4-oの画像の認識精度が良く、賢い • 悪かった点 ◦ カメラの視野と画像が少しずれる ◦ 音声認識の速度が遅い ◦ UI開発がムズイ(実力が足りない) • もうちょいやりたいこと ◦ FunctionCallでもっとアシスタント的なこと・・・・？ ◦ 記憶するパーソナルな機能
15. 触りたい方お声がけください。