フィットネスバイクで VR空間を乗り回す話

Roppongi.unity #8での登壇内容

Transcript

1. フィットネスバイクで VR空間を乗り回す話 ざわざわ
2. 自己紹介 ざわざわです • 新卒Unity（VR）エンジニア • 大学院時代にVRの開発を始める ◦ ビデオシースルーが大好き ◦ 歩きVRの研究をしていました • 好きな技術分野はShaderです ◦ 特にジオメトリシェーダが好きです
3. 今回のLTの発端 今とっても運動不足
4. そこで 家でも運動できるようにフィットネスバイクを買おう
5. そこで 家でも運動できるようにフィットネスバイクを買おう →買った
6. なんかオーディオ端子がついてるぞ
7. なんかオーディオ端子がついてるぞ →これにESP32っていう基盤くっつ けてArduino入門してみよう
8. なんかオーディオ端子がついてるぞ →これにESP32っていう基盤くっつ けてArduino入門してみよう →WifiとかBluetoothとかで速度情 報を飛ばせばUnityとかVRでおもし ろいことできるんじゃね？？
9. 完全なる見切り発車
10. ESP32をフィットネスバイクに取付 初めてのLチカ！ 初めてのはんだ付け！ ArduinoOSCというライブラリで1回転にかかった時間をUnityに送信（uOSCで受信）
11. そうだ、VRChatに持ち込んで空中サイクリングしてみよう と思うVRChatプレイ時間一桁のど素人であった
12. なんでVRChatなのか • ワールドというコンテンツが豊富 ◦ いろんなワールドを乗り回したい ◦ →ワールドに仕込むギミック以外の方法がいい • SteamVRというプラットフォーム準拠の機能を勉強したい ◦ 可能であればSteamVRの他のアプリでも使えるようにしたい ◦ →アバターに仕込むコライダーとかのハック以外の方法がいい というわがままを言った結果...
13. SpaceDragとVMTとTrackingOverrides を組み合わせることに
14. SpaceDragとは • SteamVRのOVRAdvancedSettingsという無料アプリのいち機能 • コントローラで空間を掴んでドラッグすることによりプレイヤーの位置を移 動することができる • SteamVRのアプリで空中浮遊ができる（できないやつもあるみたい） しかし • 自由な空中サイクリングができない（腕の長さ領域に制約） そこで • 腕が無限に伸ばせるようにすればよいのでは？
15. VMTとは • バーチャルモーショントラッカー • SteamVRに仮想トラッカーを登録できる • uOSCから自身のposとrotを送って仮想トラッカーに反映
16. TrackingOverridesとは • OpenVR（HMDやVRデバイスを操作するAPI群やSDK）の機能の一つ • HMDやコントローラ、トラッカーの位置を上書きする • steamvr.vrsettings（json）を編集する
17. SpaceDragとVMTとTrackingOverrides を組み合わせることで 仮想トラッカーの位置を変えながらSpaceDragを行える！ 空中サイクリングが可能となる！ ただし片手はあきらめることになる！
18. 簡易的な操作パネルも用意 • ± position.y • ± pitch • ± speedの係数 • EasyOpenVROverlayForUnity というスクリプトをお借りしました
19. とりあえずSteam VR Homeで動作 デモ動画
21. セルフフィードバック • 酔いやすい性質だけど、特に酔わなかった ◦ 行為と映像が一致しているため？ ◦ HMD追従のUIがあるからかも • UIで高さとか傾きを変えるという体験の質が悪かった ◦ なんか3D空間が安っぽく感じてしまった ◦ 安易に高所に行けてしまったから？ そこで • 頑張って漕ぐと上向きベクトル加算🚀 • さぼると下向きベクトル加算😖 デモ動画
23. VRChatでも動かしてみた 一瞬だけ動く でも、ESP32でOSC接続をしようとす るとVRChatがDisconnectedですよっ て言われてしまう。これはポート番 号とか接続の問題.....？？ デモ動画
24. まとめ • フィットネスバイクをESP32につなげてUnityで制御をつくり、VR空間で空中 サイクリングをできるようにしてみたよ • SpaceDragとVMTとTrackingOverridesを使ったよ（片手は失うけどね） • 今更だけどOpenVRのAPIでできることが多いことがわかったよ