Share
Embed
Slide 1
Slide 1 text
AR グラスにChatGPTを入れてみた
@kotauchisunsun
Slide 2
Slide 2 text
自己紹介
● こたうち さんさん
● @kotauchisunsun
● 大阪府箕面市出身
● 東京のXR(VR・AR・MR)会社のEM
● フルリモートワーク
Slide 3
Slide 3 text
No content
Slide 4
Slide 4 text
No content
Slide 5
Slide 5 text
No content
Slide 6
Slide 6 text
No content
Slide 7
Slide 7 text
ARグラスだ！！
Slide 8
Slide 8 text
ワイもやりたい
Slide 9
Slide 9 text
つくりました
Slide 10
Slide 10 text
デモ
Slide 11
Slide 11 text
ARスマートグラスについて
● INMO Air2
● INMO社
● 2023年4月20日発売
● $550(86,385円)
● 重さ99g
● Android 10
● スタンドアローン型AR
○ スマホ不要
● 稼働時間2時間
Slide 12
Slide 12 text
コントローラーについて
● スマートウォッチ
○ Galaxy Watch4
○ 2021/9/22発売
○ 約3万円
● WowMouse
○ DoublePoint社
○ 2024/4/16発売
○ 無料
○ 筋電位によるタップ検知？
Slide 13
Slide 13 text
システム構成
Whisper API
gpt-4o
マウスのシミュレーション
音声
画像
文字
INMO Air2
GalaxyWatch 4
Wow Mouse
Slide 14
Slide 14 text
まとめ
● 良かった点
○ かなり手軽に使える
○ スマートウォッチによるインターフェースがとても良い
○ gpt4-oの画像の認識精度が良く、賢い
● 悪かった点
○ カメラの視野と画像が少しずれる
○ 音声認識の速度が遅い
○ UI開発がムズイ(実力が足りない)
● もうちょいやりたいこと
○ FunctionCallでもっとアシスタント的なこと・・・・？
○ 記憶するパーソナルな機能
Slide 15
Slide 15 text
触りたい方お声がけください。