デジタルツイン楽屋トーク 伊藤様提出資料「デジタルツイン(に使えそうな？)最新技術について」

Transcript

1. デジタルツイン(に使えそうな?) 最新技術について 2022/8 伊藤 武仙 株式会社ホロラボ Co-founder 取締役COO 建築情報学会 理事
2. 約60名 ～ Mixed Realityスペシャリスト集団 • 2017年に5人で始めましたが、だいぶ仲間が増えました！
3. WE 点群 Illustration created by Midjourney - https://www.midjourney.com/
4. ちょっと脱線 ～ Midjourney • AIを使った、テキスト情報から画像を自動生成する研究プロジェクト • めっちゃリアルですごい作品が出来る • 使い方も簡単 • Ｄｉｓｃｏｒｄで単語を並べるだけ • “the love for point cloud” • V: Variation • U: Upscale • 25回の画像生成まで無料トライ • 無料期間中はCC-BY-NC 4.0 • 有償化後は商用利用OK • Billing and Licensing (リンク) Confidential - Copyright© HoloLab Inc. All rights reserved https://www.midjourney.com/
5. 東京都デジタルツイン by Midjourney tokyo metropolitan city government and the digital twin Confidential - Copyright© HoloLab Inc. All rights reserved https://www.midjourney.com/
6. PLATEAU 3D都市モデル x XR技術 VRで実寸表示 ARで実寸表示 ARで縮小表示 画面の中の PLATEAUに自分が入る Remote Rendering
7. PLATEAUデータをVRで実寸表示 Confidential - Copyright© HoloLab Inc. All rights reserved demo by たるこす＠ホロラボ https://twitter.com/tarukosu/status/1541319292452360193
8. PLATEAUデータARで実寸表示 Confidential - Copyright© HoloLab Inc. All rights reserved demo by たるこす＠ホロラボ https://twitter.com/tarukosu/status/1526767604693540864 ～ ARCore Geospatial APIを添えて
9. Google ARCore Geospatial API • Google MapのStreet Viewから 作られたVPS • 他のVPSと異なり、 ユーザーがマップを作る必要がない • Street Viewがあるところでは 高精度位置合わせARが出来てしまう • 屋内はまだあまり多くない • iOS/Androidに対応 • アプリ起動 →GPS位置合わせ →VPS位置合わせで、順次精度向上 Confidential - Copyright© HoloLab Inc. All rights reserved demo by 龍＠ホロラボ https://twitter.com/lileaLab/status/1526143703235952640
10. Google ARCore Geospatial API 1. アプリ起動 2. GPSロック • 緯度経度高さ(楕円体高) 向きが得られる • 誤差が大きい 3. VPS localize • 一気に精度があがる Confidential - Copyright© HoloLab Inc. All rights reserved
11. PLATEAUデータをHoloLens 2で縮小表示 Confidential - Copyright© HoloLab Inc. All rights reserved demo by たるこす＠ホロラボ https://twitter.com/tarukosu/status/1547421650613809152 ～ PLATEAU Projectで配信される3D Tilesを動的ロード
12. ここで課題 3D都市モデルや点群など デジタルツインのデータが 重たい・・・ Confidential Copyright© HoloLab Inc. All rights reserved 16
13. 札束で解決してみる Confidential Copyright© HoloLab Inc. All rights reserved 17 - Azure Remote Renderingが 点群対応した - どちらのご家庭でもDLしてある 富士山のオープンデータ点群 (静岡県ご提供)を使ってみた - 富士山 5合目～山頂 (6km四方) - 点数：22億点 (2,267,649,916点) - ファイルサイズ：e57が42GB - e57アップロード時間：約8時間 - arrAsset変換時間：約3時間半 - arrAseetロード時間：約30分 - セッションはPremium - RegionはSoutheast Asia demo by 龍＠ホロラボ https://twitter.com/tarukosu/status/1547421650613809152
14. 画面の中のPLATEAUに自分が入る Confidential - Copyright© HoloLab Inc. All rights reserved demo by にー兄さん＠ホロラボ https://www.youtube.com/watch?v=PZFn7_AnEAY
15. まとめ • 点群好きです • AIが絵を描いてくれます • 3D都市モデルとXR関連の最新技術で デジタルツインっぽいあれこれやってます Confidential - Copyright© HoloLab Inc. All rights reserved