歩ける全天球動画の話

2019/12/04 XR Kaigi 2019
コミュニティオーガナイズドセッション
xR Tech Tokyo枠として、お話しさせて頂いた内容です。
https://xrkaigi.com/session/s73.html

当日はOculus Quest/Linkを利用し、VR内から歩ける全天球動画の映像を中継しつつ発表させて頂きました。

Transcript

1. 歩ける全天球動画の話 フォージビジョン株式会社 わっふるめーかー（長谷川晴久）
2. アジェンダ 1. 自己紹介 2. 会社紹介 3. 歩ける全天球動画の紹介 4. デモ制作で得た知見 5. 実績紹介 6. 告知 7. 最後に
3. 自己紹介
4. 自己紹介 • 公私ともにVRコンテンツを開発 各種VRイベントに出展・登壇 • オレンジ色の服の人 • Twitter：@waffle_maker 4
5. 会社紹介 フォージビジョンってどんな会社なの？
6. 会社紹介 • 創業者 　　喜多 泰祐 • 設立年月 2006年4月 • 社員数 　　41人 • 勤務地　　　東京 九段下 • 事業内容 • コンピュータシステムの技術コンサルティング • コンピュータシステムの開発 • 情報提供 / 情報処理サービス • セールスプロモーションの企画 / 立案
7. 会社紹介 ロケーションベースVR コンシューマVRゲーム エンタープライズVR
8. 会社紹介 ロケーションベースVR コンシューマVRゲーム エンタープライズVR
9. おさらい 全天球動画とは？
10. おさらい　全天球動画とは？ • 正距円筒図法（Equirectangular）動画を球の内側に貼ったも • 例1）地球儀の内側に世界地図を貼る • 例2）Googleストリートビュー • 従来のパノラマと比べて、上下の映像も含むことが特徴
11. おさらい　全天球動画とは？ • 撮影機材　3万円台～ • RICOH THETA • Insta360 Pro • Kandao QooCam 8K • etc...
12. おさらい　全天球動画とは？ 実際に見てみましょう
13. おさらい 歩けるとは？
14. おさらい　歩けるとは？ • 現実空間での移動を、VR空間の移動に反映 • ハードウェア側の機能として実現 • ちなみに弊社はソフトウェア側の会社 • PC向けのハイエンド向けでは標準機能 • スタンドアロン機でも標準となりつつある
15. おさらい　歩けるとは？ 実際に見てみましょう
16. 歩ける全天球動画の紹介 お前の全天球動画、歩けないの？
17. 歩ける全天球動画の紹介 • 全天球動画を撮影 • 空間の立体形状を作成 • 撮影時のカメラ座標を原点として設定 • 立体形状に専用のシェーダを設定 • 原点から各ピクセルの向きを求める • 向きからUV座標を求める • UV座標を元に全天球動画から色を取得 • 立体形状のピクセル毎に色を設定 ※素材提供：HOME360様
18. 歩ける全天球動画の紹介 立体形状を見てみましょう
19. 技術的な特徴 • 人や物より、環境を見せやすい • 歩けない全天球動画と比べると… • 没入感が高く、6DoFを生かせる • 立体形状を作成する手間がかかる • フルCGと比べると… • 写実的で、低コスト • フォトグラメトリと比べると… • 動画対応、透明なもの、光沢があるものに強い？ • 手間がかかるのは同じ
20. 対応状況 • 対応ゲームエンジン • Unity • 対応VRHMD • Windows PCベース(Oculus Rift、HTC VIVEなど） • Androidベース（Oculus Quest、HTC VIVE Focusなど） • 配布方法 • 実行ファイル　※汎用プレイヤは準備中 • 提供方法 • ライセンス、SDK提供、受託開発など • プラットフォーム開放　※汎用ツールは準備中
21. デモ制作で得た知見
22. トンネル水槽デモの工夫と知見 1. 最初のデモとして作成 2. アクリルの向こうは立体感が無くても違和感が少ない 3. 水槽とコースティクスで動画である利点が生きてる 4. 暗いと立体形状が粗くても違和感が少ない 5. 地面に三脚の影が張り付いてて面白い 6. 違和感が少なく、何が凄いのか伝わらない a. 歩けない→歩けるを切り替えると伝わりやすい 7. 副産物として、通常の全天球動画も綺麗 8. 4K動画/GoPro Hero3×6台 ※素材提供：HOME360様
23. 滝デモの工夫と知見 1. 技術の弱点を例示するデモとして作成 2. 遮蔽に弱い a. 手摺が二重に見える問題は、手摺の奥を黒くフェード 3. 複雑な形状に弱い a. 近景：足場と一番近くの木の幹のみ形状を作成 b. 遠景：滝や樹木の手前までの大きさの球 4. 近景と遠景を別撮りにすれば解決しそう 5. パーティクルで水しぶきを表現 6. 4K動画/Insta360 Pro ※素材提供：Visualize Vision様
24. 新築住宅デモの工夫と知見 1. 静止画を組み合わせたデモとして作成 a. 部屋、廊下、屋外の3か所を撮影して合成 b. 静止画なら8K以上でも対応可能 2. CGの家具を合成 a. 三脚の影はカーペットで隠蔽 b. PC版ではテレビに反射を設定 3. 画像の境界線の明度が異なる 4. 12K静止画（屋外は7K）/Insta360 Pro & Insta360 One
25. タイムラプスデモの工夫と知見 1. 現実の再現を超えたデモとして作成 2. ガラスの手すりは3Dモデルで作成 3. ガラスの向こうがクリアだと違和感 a. プライバシーのため、お見せできません… b. 立体形状のため、部分的に隠すことも容易 4. スティッチの境界線が目立つ 5. 直線に見えても曲線 6. 4K動画/Insta360 Pro
26. 実績紹介 どんな所で使われてるの？
28. 実績紹介　ロンハー★VR落とし穴 テレビ朝日・六本木ヒルズ夏祭りに向けアトラクションとして、 テレビ朝日様と共同開発いたしました 非常に好評だったそうです 期間：2019年7月13日〜8月25日　計44日 場所：テレビ朝日本社 機材：HTC VIVE Business Edition
29. 実績紹介　ロンハー★VR落とし穴 1. 導入シーンは、ステレオパノラマ 2. スタジオシーンは、16K静止画を歩ける化 a. 演者はクロマキー撮影して板ポリに貼った 3. 落とし穴シーンは、6K動画を歩ける化 4. 撮影のタイミングが限られる a. 事前に仮素材の作成や、カメラの位置関係を検証 5. 詳細はテックブログで公開予定
30. 告知
32. 星の欠片の物語 • ひとかけら版の販売本数が10,000本を突破！ • 本篇の開発が決定！ • 2020年春発売予定 • PlayStation®VR & PCVR対応予定
33. 最後に 実写VRには、まだまだ可能性があります！ 技術の特性を把握して、より良いVR体験を作り出して いきましょう！ 歩ける全天球動画を生かせる動画や企画、施設をお 持ちの方がいたらご連絡ください！
34. ご清聴有り難うございました 歩ける全天球動画の話でした