Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
現実 VS バーチャルのマルチプレイゲームを作ろう
Search
donabe
May 11, 2024
Technology
0
96
現実 VS バーチャルのマルチプレイゲームを作ろう
donabe
May 11, 2024
Tweet
Share
More Decks by donabe
See All by donabe
AndroidXR 開発ツールごとの できることできないこと
donabe3
0
130
OutOfRange 【プロトスプリントリーグ】
donabe3
0
20
Unityで都市開発シミュレーションゲーム開発をしてみよう
donabe3
0
80
Speech to Textureで 思い通りに世界を改変しよう
donabe3
0
15
院試までなにやったか
donabe3
0
18
XR Interaction toolkit & XRHands & Passthrough API で MR 開発
donabe3
0
190
XRの魅力を語りたい
donabe3
0
27
IVRC、Iwaken Lab.で 見える世界が圧倒的に広がった一年 ~VRで非日常を創造して~
donabe3
0
9
最近実感したこと
donabe3
0
19
Other Decks in Technology
See All in Technology
Helm , Kustomize に代わる !? 次世代 k8s パッケージマネージャー Glasskube 入門 / glasskube-entry
parupappa2929
0
270
速くて安いWebサイトを作る
nishiharatsubasa
14
15k
ソフトウェアエンジニアと仕事するときに知っておいたほうが良いこと / Key points for working with software engineers
pinkumohikan
1
130
「海外登壇」という 選択肢を与えるために 〜Gophers EX
logica0419
0
900
プロダクトエンジニア構想を立ち上げ、プロダクト志向な組織への成長を続けている話 / grow into a product-oriented organization
hiro_torii
1
290
Iceberg Meetup Japan #1 : Iceberg and Databricks
databricksjapan
0
160
ビジネスモデリング道場 目的と背景
masuda220
PRO
9
670
脳波を用いた嗜好マッチングシステム
hokkey621
0
170
クラウドサービス事業者におけるOSS
tagomoris
3
950
【Developers Summit 2025】プロダクトエンジニアから学ぶ、 ユーザーにより高い価値を届ける技術
niwatakeru
2
1.6k
エンジニアのためのドキュメント力基礎講座〜構造化思考から始めよう〜(2025/02/15jbug広島#15発表資料)
yasuoyasuo
18
7.1k
人はなぜISUCONに夢中になるのか
kakehashi
PRO
6
1.7k
Featured
See All Featured
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
Code Review Best Practice
trishagee
67
18k
The Language of Interfaces
destraynor
156
24k
Mobile First: as difficult as doing things right
swwweet
223
9.3k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
49
2.3k
Site-Speed That Sticks
csswizardry
4
390
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
133
33k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
46
2.3k
Adopting Sorbet at Scale
ufuk
74
9.2k
Statistics for Hackers
jakevdp
797
220k
Building Applications with DynamoDB
mza
93
6.2k
YesSQL, Process and Tooling at Scale
rocio
172
14k
Transcript
現実 VS バーチャルの マルチプレイゲームを作ろう 土鍋 2024/5/11 UNTIL. LT #0x04
自己紹介 名前: 土鍋 学年: 理工情報生命学術院 システム情報工学研究群 知能機能システム学位P M1 研究室: 画像情報研究室
北原格 教授 大学: 会津大学 コンピュータ理工学部 (A-PxL, Zli) その他所属: Iwaken Lab, UT-Virtual 興味: XR(VR,AR,MR), Unity, デジタルツイン, コンピュータビジョン X: @donadonadonabe
過去作品 卒論 「ハンドトラッキングと音声認識と生成AIを用い た直感的な空間テクスチャの生成」 IVRC2022 審査委員会特別賞 「自宅でも遭難がしたい!」 https://youtu.be/O2wQF7NvoAk?si=L8AkYxTLaJ OxNgM3
過去作品 第14回withARハッカソン 最優秀賞 「Journey Mapping」 https://www.youtube.com/watch?v=z9J7b2srL2Y 技育CAMPハッカソン2024vol.4 最優秀賞 「Xpolis」 https://youtu.be/xOAqv1B8KbU
その他の作品
今回話す話題 「Scramble Battle」 https://youtu.be/F_ozFm0uVDM AR vs VRで戦うマルチプレイゲーム 現実の部屋の天井がバーチャル世界に繋がり 攻めてくる巨人と戦う 制作期間は実質二週間くらい
None
技術構成 AR VR 部屋のメッシュ 位置・モーション・HP Meta XR All-in-One SDK Meta
XR All-in-One SDK Mesh API ワールドは共有 ネットワーク
天井をバーチャルにする
部屋のメッシュデータを取る MetaのSDKに含まれるMesh APIを利用する 部屋を歩き回ってスキャンすると、 右の図のように部屋の壁や天井を自動で 認識してくれる。
壁のマテリアルを変更する 壁のマテリアルを「InvisibleOccluder」に変更する 実際の部屋のパススルーのみを映し、バーチャル 側のものは遮蔽されて見えなくなる。 厳密に言うと、 このマテリアルはRenderQueueが1998なので、 デフォルト2000の多くのオブジェクトより 先に描画されるようになる
天井をバーチャルにする InvisiblePlane PrefabというMeshが無くSceneAnchorのみがある板を 天井に設定してあげる(つまり見た目がないけど位置情報を保持する) → バーチャル側を見ることができるように InvisiblePlane PrefabをOVR Scene ManagerのPrefab
Overrides にセットします。 今回は天井をバーチャル空間にしたいので"CEILING"を指定します。
天井をバーチャルにする ここまでで、このようにバーチャル側の物体が天井に描画されるように なります。が、バーチャル側の空が見えません。
疑似Skyboxを作る 巨大なSkyBoxを用意して その中に空のTextureを描画する お借りしたアセット Skybox Kit Rev.01 - 我楽多屋 Wizdom
- BOOTH
天井がバーチャル世界に繋がった!
マルチプレイにする
マルチプレイにする マルチプレイはPhoton Fusionというサービスを利用する。 今回マルチプレイするにあたって同期が必要な情報 • 位置情報 • 手と頭のトラッキングデータ • HP
Fusion公式のマルチプレイVRのサンプルを改造していった https://doc.photonengine.com/ja-jp/fusion/v1/technical-samples/fusion- vr-shared
VRとARでプレイヤー設定を切り替える 巨人側か人間側か OVR Passthrough Layer(現実世界を見るか) OVR Scene Manager(部屋の認識をするか) ここらへんを切り替えることで、 大部分をVR同士のマルチプレイと共通化
あとは接続処理とかをこねこねすれば・・・
AR vs VR マルチプレイバトルゲームの完成! ARとVRでほぼ違うモノが見えてるけど、実際の処理的には差がない HPの同期処理とかは普通のFPSと変わらないので割愛 現実世界 バーチャルな銃 バーチャル世界
まとめ 今回はUnity知ってる人少ないと思うので細かいことは省いて喋った。 これでみんなも部屋がバーチャルに繋がっちゃうね☆ 今回話した内容の一部はブログに書いた 【Meta Quest3】パススルーの部屋の天井の先にバーチャル空間を表示する 【URP対応】 - 土鍋で雑多煮
雑談 筑波大の開発系コミュニティってあります? 会津大のときはあったけど、筑波で見かけないので… (UNTILのDiscord参加したいです) 院から筑波で、知り合い少ないので 仲良くしてくれると嬉しいです Twitter(X)→
ご清聴ありがとうございました。