Slide 1

Slide 1 text

HoloLensと謎解きの融合: 「TARGET」開発物語 - 企画から一般公開に向けての道のり Iwaken Lab. イワケン/岩﨑謙汰 HoloRanger HoloMoto タンブルウィード pia 2023.05.27 Tokyo HoloLens ミートアップ vol.33

Slide 2

Slide 2 text

本日の登壇者紹介 Iwaken Lab. イワケン XRエンジニア HoloRanger HoloMoto XRエンジニア タンブルウィード pia 謎解きクリエイター 開発チーム目線 コンテンツ制作者目線

Slide 3

Slide 3 text

本プロジェクトのスローガン 「Holo100」 HoloLensを 100人に体験させる

Slide 4

Slide 4 text

🚀今日のゴール ⭕️話すこと ・HoloLensと謎解きの融合「TARGET」の 実現までの物語→HoloLens好きを勇気づける △話さないこと ・コンテンツ内容の詳細 (ネタバレになるため) ・技術の詳細 SNS投稿はOKです

Slide 5

Slide 5 text

1.TARGETとは 2.開発チーム目線の道のり 3.タンブルさんパート (pia) 4.さいごに

Slide 6

Slide 6 text

TARGETとは

Slide 7

Slide 7 text

No content

Slide 8

Slide 8 text

「TARGET」とは 謎解き × MRの「体験型ゲーム」 • 場所: ヒラメカ下北沢 • 所要時間: 100分~110分 • プレイ人数: 4名 • 前売りチケット: 3500円 • 公開日: 2023年5月2日 • 6月チケット販売中

Slide 9

Slide 9 text

ホームページ

Slide 10

Slide 10 text

SNSの反応 #TumbleTargeT https://twitter.com/nkjzm/status/1652560069161275395?s=20 https://twitter.com/karin___ito/status/1652627490396053504?s=20 https://twitter.com/halnanndesu/status/1652927196376469505?s=20

Slide 11

Slide 11 text

SNSの反応 #TumbleTargeT ARグラスゲーム開発コンテスト世界3位 謎解き通算300回プレイ でなりさんのツイート 「この完成度のAR謎解きは 間違いなく世界でこの一作だけです」 「謎も秀逸、ARならではの要素もかなり活かせてて 唯一無二のAR体験に仕上がってました。世界一!」 https://twitter.com/denari01/status/1653727234291806208?s=20

Slide 12

Slide 12 text

開発チーム目線の道のり イワケン/HoloMoto

Slide 13

Slide 13 text

イワケン / 岩﨑謙汰 iwaken7 1 2017年 HoloLensに感動。 2018年 CyberAgent入社 / XRエンジニア 2021年 Iwaken Lab.立ち上げ 2021年 Microsoft MVP for Mixed Reality受賞 人生ミッション「XRの新事例を作る」 フォロワー 6519人

Slide 14

Slide 14 text

今回の体制 (最終的に) コンテンツ設計 場所 システム開発 5名のエンジニア

Slide 15

Slide 15 text

Iwaken Lab. とは 一言: XR好き学生支援コミュニティ 「好きな技術で社会インパクト」 メンバー43名 設立: 2021年5月

Slide 16

Slide 16 text

「Holo100」プロジェクト HoloLensを 100人に体験させる

Slide 17

Slide 17 text

Iwaken Lab.開発体制 イワケン 開発ディレクター 兼エンジニア 松本勇吾 リードエンジニア ゲームロジック担当 にー兄さん エンジニア 基盤開発担当 HoloMoto エンジニア HoloLens運用 きょうすけ エンジニア

Slide 18

Slide 18 text

2つの壁 ・開発メンバーを集める壁 ・お金の壁 2年前から構想 2回の開発挫折

Slide 19

Slide 19 text

HoloLensに 出会い感動 HoloLens参考書読書会 HoloMotoさん目覚める イワケン 会社で HoloLens2購入 道のり① (出会い~再会期) イワケンとpiaが AR謎解きを作る piaさんと HoloLens×謎解きの ブレスト会 プランA 考案 モック開発するも イワケン1人だと 限界と悟る 2016.12 2017.12 2018.03 2021.01 2021.04 空白の3年間 出会い期 再会~開発開始

Slide 20

Slide 20 text

道のり② (チーム開発~TARGETスタート) 2021.05 2021.12 2021.05 XR好き学生を支援する Iwaken Lab.を発足 XR好き学生4人と 一緒に開発 HoloLens購入問題 ↓ HoloLens4台構成 プランAの限界 開発が止まる。。。 「TARGET」の原案 「Holo100PJT」 として再始動 ユーゴ、にー兄さん Join チーム開発期 停滞期 TARGETのプロト開発期 HoloLens 1台 iPad 3台の 4人ゲーム構成

Slide 21

Slide 21 text

道のり③ (現場検証 ~ 一般公開) 2022.10 2023.01 2022.04 HoloMotoさん Join 現場検証スタート 2022.05.02 先行体験会 リリースに向けて準備期 開発追い上げ期 一般公開

Slide 22

Slide 22 text

[補足資料] システム構成図 スクリーン スタッフ端末 PC スピーカー iPad HoloLens 2 iPad iPad 入口 HoloLens2 1台 iPad 3台 Windows端末 (スタッフ用) 1台 Windows PC (音&スクリーン) 1台 4人ゲームだけど HoloLens装着者は1台

Slide 23

Slide 23 text

HoloMoto HoloMotoRanger 大学生の時にHoloLensと出会い全くの未経験から HoloRangerへ イマクリエイト社 グラフィックエンジニア ブログ『夜風のMixedReality』365日更新中 MixedRealityGraphicsTools(MRGT)開発参加中

Slide 24

Slide 24 text

HoloMoto Mission ・HoloLens開発・運用の実装とアドバイス ・グラフィック関連 (Shader) の開発

Slide 25

Slide 25 text

課題と解決方法 ・描画トラブル ・パフォーマンス ・現場でのHoloLens運用

Slide 26

Slide 26 text

課題と解決方法 ・描画トラブル ・パフォーマンス ・現場でのHoloLens運用

Slide 27

Slide 27 text

描画の課題 ①片目しか描画問題 「片目しか描画が行われない」 シェーダーの問題 ・シングルパスインスタンシン グレンダリングに対応させた

Slide 28

Slide 28 text

描画の課題 ②オクルージョン iPadユーザー視点からHoloLens装着者をオクルージョンしたい オクルージョン無し オクルージョン有り

Slide 29

Slide 29 text

描画の課題 ②オクルージョンの実装 Unityプリミティブ Cylinder+シェーダー HoloLensの MainCamera のXZ座標に追従 ・直径50cm ・Z軸 -14cm 原点 14cm

Slide 30

Slide 30 text

描画の課題 ③視野角狭い問題 HoloLensの視野角の ギリギリに「枠」を つけることで、 視野角の狭さが 気にならなくなる。 → コンテンツ上 支障が出ないように

Slide 31

Slide 31 text

課題と解決方法 ・描画トラブル ・パフォーマンス ・現場でのHoloLens運用

Slide 32

Slide 32 text

パフォーマンスの目標 ・FPS60+ ・お客さんにもっさり感を感じさせない ・現場で運用するにあたって最終的にエンジニア 無しでクラッシュやトラブルが発生しないように する

Slide 33

Slide 33 text

パフォーマンスの維持 CastShadow全削除 ・重たい原因=オブジェクト数 ・影の描画不要=CastShadowを全オフ

Slide 34

Slide 34 text

課題と解決方法 ・描画トラブル ・パフォーマンス ・現場でのHoloLens運用

Slide 35

Slide 35 text

現場でのHoloLens運用 やったこと ・HoloLens取扱書の作成 ・自分のブログやMSDocsから抽出 ブログ365日 書いてます! 目標: 非エンジニアスタッフが一般人向けに ゲームを進行する 今日は一つだけ知見共有...!

Slide 36

Slide 36 text

一番の課題は「充電・バッテリー」 ・HoloLensの稼働時間は1~2時間 一方で体験時間は90分 ・モバイルバッテリーを HoloLensに着けると重い。 Holoにバッテリ―付けると 頭痛くなる...

Slide 37

Slide 37 text

肩掛けモバイルバッテリーによる解決 実際の運用 ショルダーポーチに モバイルバッテリー ストレスなくユーザーが体験 タンブルさん考案

Slide 38

Slide 38 text

pia0314pia pia / 小池恭也

Slide 39

Slide 39 text

体験をつくる ――コンテンツ制作者から見た Hololens

Slide 40

Slide 40 text

2015年 謎解き制作の活動を始める 2017年 イワケンさんと共通の知人の会社で出会い AR×謎解きコンテンツを制作 2018年 Tumbleweedに加入 2022年 Tumbleweed Labを立ち上げ

Slide 41

Slide 41 text

ARは”くすぶっている” 謎解きの問題をマーカーに → 好評 重要なのは「まず体験させること」

Slide 42

Slide 42 text

No content

Slide 43

Slide 43 text

「0」 → 「+」 「-」 → 「+」 「-」 → 「0」

Slide 44

Slide 44 text

No content

Slide 45

Slide 45 text

日常 ↓ HoloLens体験

Slide 46

Slide 46 text

視野角が狭い ↓ 四隅にカッコ

Slide 47

Slide 47 text

コストの問題 ↓ Holo1台 iPad3台

Slide 48

Slide 48 text

HoloLensに触れられない時間 ↓ 非対称ゲーム

Slide 49

Slide 49 text

通常のゲーム体験 ↓ 映像の中に入っていける体験

Slide 50

Slide 50 text

iPad上でのHoloプレイヤー描画 ↓ オクルージョン

Slide 51

Slide 51 text

「どうしてもこれを届けたい」

Slide 52

Slide 52 text

Holo100

Slide 53

Slide 53 text

Holo1000

Slide 54

Slide 54 text

Holo10000

Slide 55

Slide 55 text

さいごに

Slide 56

Slide 56 text

HoloLens の体験人数 344人 5/27時点 テストプレイ71人 本公演273人 Holo100達成!!! ありがとうございます

Slide 57

Slide 57 text

今後の目標 ・Holo1000 → みんな体験しに来て!技術トークしよう ・TARGET海外事例を作る →ユニバーサルヒラメキゲームだからこそ ・「プランA」の開発再開 → 開発者募集するかも?