Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
現実 VS バーチャルのマルチプレイゲームを作ろう
Search
donabe
May 11, 2024
Technology
0
70
現実 VS バーチャルのマルチプレイゲームを作ろう
donabe
May 11, 2024
Tweet
Share
More Decks by donabe
See All by donabe
Speech to Textureで 思い通りに世界を改変しよう
donabe3
0
11
院試までなにやったか
donabe3
0
16
XR Interaction toolkit & XRHands & Passthrough API で MR 開発
donabe3
0
140
XRの魅力を語りたい
donabe3
0
18
IVRC、Iwaken Lab.で 見える世界が圧倒的に広がった一年 ~VRで非日常を創造して~
donabe3
0
7
最近実感したこと
donabe3
0
16
IVRCの経験を喋る
donabe3
0
18
xR分野紹介
donabe3
0
16
VRにおけるUI設計
donabe3
0
140
Other Decks in Technology
See All in Technology
Semantic Kernel の Agent 機能試してみた!
okazuki
1
210
全社を巻き込んだ業務オペレーション改善と、それは事業成長に貢献しているのか?を実感した話
marroooon
0
110
0x5F3759DF
ykozw
0
150
From naive to advanced RAG: the complete guide
glaforge
0
490
AWS DDKを利用したDataOps事始め
beex
1
120
New Relicを活用したシステム監視の強化とオブザーバビリティ向上
sugoto911
1
110
GPSデバイスを使った簡易位置案内システムの構築をしてみた話。/jawsfesta2024
kwada
0
160
【完全版】Dify - LINE Bot連携 考え方と実用テクニック
uezo
2
790
ラブグラフ紹介資料 〜プロダクト解体新書〜 / Lovegraph Product Deck
lovegraph
0
14k
寒冷地稲作の歴史にみるコミュニティ
miu_crescent
2
130
20241015 Toranomon Tech Hub#1 Service Catalog使ってみた
hiashisan
0
170
Automated Tests Now and Future @ SQiP Workshop Special Lecture 2024
teyamagu
PRO
1
220
Featured
See All Featured
Producing Creativity
orderedlist
PRO
341
39k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
26
2k
Clear Off the Table
cherdarchuk
91
320k
Web Components: a chance to create the future
zenorocha
310
42k
StorybookのUI Testing Handbookを読んだ
zakiyama
26
5.1k
Bootstrapping a Software Product
garrettdimon
PRO
304
110k
Testing 201, or: Great Expectations
jmmastey
38
7k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
48k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
13
1.7k
Fantastic passwords and where to find them - at NoRuKo
philnash
50
2.8k
Designing on Purpose - Digital PM Summit 2013
jponch
114
6.9k
Visualization
eitanlees
143
15k
Transcript
現実 VS バーチャルの マルチプレイゲームを作ろう 土鍋 2024/5/11 UNTIL. LT #0x04
自己紹介 名前: 土鍋 学年: 理工情報生命学術院 システム情報工学研究群 知能機能システム学位P M1 研究室: 画像情報研究室
北原格 教授 大学: 会津大学 コンピュータ理工学部 (A-PxL, Zli) その他所属: Iwaken Lab, UT-Virtual 興味: XR(VR,AR,MR), Unity, デジタルツイン, コンピュータビジョン X: @donadonadonabe
過去作品 卒論 「ハンドトラッキングと音声認識と生成AIを用い た直感的な空間テクスチャの生成」 IVRC2022 審査委員会特別賞 「自宅でも遭難がしたい!」 https://youtu.be/O2wQF7NvoAk?si=L8AkYxTLaJ OxNgM3
過去作品 第14回withARハッカソン 最優秀賞 「Journey Mapping」 https://www.youtube.com/watch?v=z9J7b2srL2Y 技育CAMPハッカソン2024vol.4 最優秀賞 「Xpolis」 https://youtu.be/xOAqv1B8KbU
その他の作品
今回話す話題 「Scramble Battle」 https://youtu.be/F_ozFm0uVDM AR vs VRで戦うマルチプレイゲーム 現実の部屋の天井がバーチャル世界に繋がり 攻めてくる巨人と戦う 制作期間は実質二週間くらい
None
技術構成 AR VR 部屋のメッシュ 位置・モーション・HP Meta XR All-in-One SDK Meta
XR All-in-One SDK Mesh API ワールドは共有 ネットワーク
天井をバーチャルにする
部屋のメッシュデータを取る MetaのSDKに含まれるMesh APIを利用する 部屋を歩き回ってスキャンすると、 右の図のように部屋の壁や天井を自動で 認識してくれる。
壁のマテリアルを変更する 壁のマテリアルを「InvisibleOccluder」に変更する 実際の部屋のパススルーのみを映し、バーチャル 側のものは遮蔽されて見えなくなる。 厳密に言うと、 このマテリアルはRenderQueueが1998なので、 デフォルト2000の多くのオブジェクトより 先に描画されるようになる
天井をバーチャルにする InvisiblePlane PrefabというMeshが無くSceneAnchorのみがある板を 天井に設定してあげる(つまり見た目がないけど位置情報を保持する) → バーチャル側を見ることができるように InvisiblePlane PrefabをOVR Scene ManagerのPrefab
Overrides にセットします。 今回は天井をバーチャル空間にしたいので"CEILING"を指定します。
天井をバーチャルにする ここまでで、このようにバーチャル側の物体が天井に描画されるように なります。が、バーチャル側の空が見えません。
疑似Skyboxを作る 巨大なSkyBoxを用意して その中に空のTextureを描画する お借りしたアセット Skybox Kit Rev.01 - 我楽多屋 Wizdom
- BOOTH
天井がバーチャル世界に繋がった!
マルチプレイにする
マルチプレイにする マルチプレイはPhoton Fusionというサービスを利用する。 今回マルチプレイするにあたって同期が必要な情報 • 位置情報 • 手と頭のトラッキングデータ • HP
Fusion公式のマルチプレイVRのサンプルを改造していった https://doc.photonengine.com/ja-jp/fusion/v1/technical-samples/fusion- vr-shared
VRとARでプレイヤー設定を切り替える 巨人側か人間側か OVR Passthrough Layer(現実世界を見るか) OVR Scene Manager(部屋の認識をするか) ここらへんを切り替えることで、 大部分をVR同士のマルチプレイと共通化
あとは接続処理とかをこねこねすれば・・・
AR vs VR マルチプレイバトルゲームの完成! ARとVRでほぼ違うモノが見えてるけど、実際の処理的には差がない HPの同期処理とかは普通のFPSと変わらないので割愛 現実世界 バーチャルな銃 バーチャル世界
まとめ 今回はUnity知ってる人少ないと思うので細かいことは省いて喋った。 これでみんなも部屋がバーチャルに繋がっちゃうね☆ 今回話した内容の一部はブログに書いた 【Meta Quest3】パススルーの部屋の天井の先にバーチャル空間を表示する 【URP対応】 - 土鍋で雑多煮
雑談 筑波大の開発系コミュニティってあります? 会津大のときはあったけど、筑波で見かけないので… (UNTILのDiscord参加したいです) 院から筑波で、知り合い少ないので 仲良くしてくれると嬉しいです Twitter(X)→
ご清聴ありがとうございました。