Tokyo HoloLens ミートアップ vol.24 / Tokyo HoloLens Meetup vol24

by HoloLab

Slide 1

Slide 1 text

実運用に向けて HoloLens 2 の限界を超えるためのサービス/ソフトウェア 2021/01/18@Tokyo HoloLens ミートアップ vol.24 株式会社ホロラボ中村薫

Slide 2

Slide 2 text

株式会社ホロラボ事業内容 HoloLensやWindows MRなどxR技術やセンサー技術に関する・システム/アプリケーションの企画開発・調査研究・普及啓発活動設立 2017/01/18 住所東京都品川区西五反田2-25-1 インテックス五反田ビル3F 資本金 96,940,000円取締役 5名従業員 30名 Web https://hololab.co.jp/ 会社概要 Copyright© HoloLab Inc. 2021 All rights reserved 5

Slide 3

Slide 3 text

株式会社ホロラボ代表取締役CEO 中村薫 Copyright© HoloLab Inc. 2021 All rights reserved 6 肩書・XRコンソーシアム理事 (2020 - ) ・Microsoft Regional Director (2020 - 2022) ・Microsoft MVP for Windows Development(Apr 2016 - Mar 2021) ・Microsoft MVP for Kinect for Windows (Apr 2014 - Mar 2016) ・Microsoft MVP for Visual Studio ALM (Apr 2012 - Mar 2014) 著作・HoloLens 2 入門 (2020 日経BP) ・Kinect for Windows SDKプログラミング V2センサー対応版 (2015 秀和システム) など来歴・Windowsアプリおよび組み込み系ソフトウェア開発会社勤務時に Microsoft社の開発した3Dセンサー「Kinect」の魅力に出会い独立。センサー関連の開発から、執筆、登壇活動などを個人事業として取り組む。・技術コミュニティTMCNの立ち上げに参加し、その場での出会いから 2017年、ホロラボの設立に至る。

Slide 4

Slide 4 text

2020年、ついにHoloLens 2の実運用事例トヨタ自動車株式会社 Copyright© HoloLab Inc. 2021 All rights reserved 7 https://news.microsoft.com/ja-jp/2020/10/06/201006-toyota-motor-started-introducing-hololens-2-in-gr-garage-nationwide/ ※ホロラボの開発事例ではありません

Slide 5

Slide 5 text

Slide 6

Slide 6 text

いろいろなツールで補強 • 空間位置合わせ • Azure Spatial Anchors • Vuforia Area Target • 空間位置ずれ補正 • World Locking Tool • 物体位置合わせ • Azure Object Anchors • Vuforia Model Target • VisionLib • リモートレンダリング • Azure Remote Rendering • HoloLight ISAR SDK Copyright© HoloLab Inc. 2021 All rights reserved 9

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

概要 • マルチプラットフォームでの空間共有のための空間認識を行う • 空間の認識はサービスで可能だが、空間候補の絞り込み(粗い再局在化)は GPSやWiFiなどを補助に使用することも検討する • 空間の位置ずれ補正は行わない • 別途World Locking Tools for Unityなどの利用を検討する • https://github.com/microsoft/MixedReality-WorldLockingTools-Unity • データ共有は行わない • 別途Photonなどネットワークでデータ共有する仕組みの利用を検討する Copyright© HoloLab Inc. 2021 All rights reserved 12 https://azure.microsoft.com/ja-jp/services/spatial-anchors/

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

利用事例 • トヨタ自動車株式会社のアプリでも利用 Copyright© HoloLab Inc. 2021 All rights reserved 22 ※ホロラボの開発事例ではありません https://techcommunity.microsoft.com/t5/mixed-reality-blog/azure-object-anchors-is-now-in-private-preview/ba-p/1696157

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

概要 • AzureにCGモデルをアップロードし、Azureのレンダリングサーバーから HoloLens 2やＰＣに配信を行う • サポートされるCGモデルのファイル形式 • FBX,GLTF/GLB • 基本的にはモデルのレンダリングのみだが、パーツの分解やマテリアル、ライティング、反射などビジュアル面の機能が多く入っている • 費用は1台のHoloLens 2に対して1つのレンダリングセッションの時間課金 • 2000万ポリゴンを境にＳｔａｎｄａｒｄとＰｒｅｍｉｕｍに分かれる • Ｐｒｅｍｉｕｍでの最大値は規定されていない(Microsoft社のイベントでは10億ポリゴンまでは紹介されている) • 1億ポリゴンあたりでPCローカルでも開けなくなってくるので、PCへのレンダリングも価値だったり Copyright© HoloLab Inc. 2021 All rights reserved 29 https://azure.microsoft.com/ja-jp/services/remote-rendering/

Slide 21

Slide 21 text

試行事例 30 トヨタ自動車株式会社栢野様よりご提供試行中

Slide 22

Slide 22 text

試行事例約5000万ポリゴン(Premium) 日本リージョン東南アジアリージョントヨタ自動車株式会社栢野様よりご提供試行中 31

Slide 23

Slide 23 text

Slide 24

Slide 24 text

mixpaceとAzure Remote Rendering Copyright© HoloLab Inc. 2021 All rights reserved https://mixpace.jp/blog/20200501/ 33 GLB RVT ダウンロード (手動) Azure Remote Rendering (Preview) Azure Remote Rendering HoloLens 2アプリアップロード (手動) アップロード (手動) mixpace 試行中

Slide 25

Slide 25 text

mixpaceとAzure Remote Rendering Copyright© HoloLab Inc. 2021 All rights reserved GLB RVT ダウンロード (手動) Azure Remote Rendering (Preview) Azure Remote Rendering HoloLens 2アプリアップロード (手動) https://mixpace.jp/blog/20200501/ アップロード (手動) 34 mixpace RVT WebのUIから変換 Azure Remote Rendering (Preview) Azure Remote Rendering HoloLens 2アプリアップロード (手動) mixpace 試行中

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Azure Remote Renderingの価値 • いままでHoloLens 2では扱えなかったサイズのCGモデルを扱える • ＣＡＤモデル • いままでＨｏｌｏLens 2で扱い切れないサイズのＣＧモデルを扱える • Revitモデル • HoloLens 2ローカルでレンダリングするにはフロアごとに切っていた • これが1棟丸ごと入ると、フロアごとに分解する作業がなくなる Copyright© HoloLab Inc. 2021 All rights reserved 36

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

Slide 31

Slide 31 text

MR Dev Days Japan • 2020/12/16開催 • ビジネス、技術など多方面にわたるHoloLens 2/Azure Kinectに関する講演 Copyright© HoloLab Inc. 2021 All rights reserved 46 https://www.youtube.com/playlist?list=PLQEKit6tfVVIZaQWKTuNMONjPiIKMuJRH

Slide 32

Slide 32 text

https://hololab.co.jp/#contact