Upgrade to Pro — share decks privately, control downloads, hide ads and more …

VR_AR_MR活用事例のご紹介

A645e7c3a6635ead8fa323c583769591?s=47 HoloLab
February 16, 2018

 VR_AR_MR活用事例のご紹介

2018年2月16日 島根県松江市で開催された「VR/AR/MR利活用セミナー」での講演スライドです

A645e7c3a6635ead8fa323c583769591?s=128

HoloLab

February 16, 2018
Tweet

Transcript

  1. VR/AR/MR活用事例のご紹介 2018/02/16 株式会社ホロラボ 中村 薫 HoloLab Inc.

  2. 自己紹介 中村 薫 株式会社ホロラボ 代表取締役CEO • HoloLens/Windows Mixed Realityに特化した会社です •

    KinectなどDepthセンサーの仕事も継続しています • アプリケーション開発、講演、ハンズオンセミナー、執筆など Microsoft MVP for Windows Development(Apr 2016 - Mar 2017) Microsoft MVP for Kinect for Windows (Apr 2014 - Mar 2016) Microsoft MVP for Visual Studio ALM (Apr 2012 - Mar 2014) http://www.naturalsoftware.jp/ HoloLab Inc.
  3. 会社概要 株式会社ホロラボ(HoloLab Inc.) http://hololab.co.jp/ 所在地:東京都品川区西五反田 資本金:2,000,000円 設立日:2017年1月18日 HoloLab Inc.

  4. 業務内容 • 自社サービス開発 • AR CAD Cloudの開発 • HoloLens/Windows Mixed

    Realityに関する開発支援 • 受託開発(コンサルティング/ディレクションを含む場合もあり) • 研究開発 • コンサルティング • 普及啓もう活動 • セミナー • 開発トレーニング • コミュニティ HoloLab Inc.
  5. 会社概要 HoloLab Inc. https://blogs.windows.com/japan/2017/11/08/mrpp-japan-announcement-new-partners/ https://twitter.com/mskkpr/status/928104528234336256

  6. 開発者コミュニティ HoloLab Inc. https://hololens.connpass.com/

  7. HoloLens Meetup Vol.1 参加人数 ハンズオン ミートアップ 福岡 10人 17人 東京

    64人 171人 大阪 12人 34人 東北 8人 15人 計 92人 237人 HoloLab Inc.
  8. 自己紹介 HoloLab Inc.

  9. ビジネス向けコミュニティ https://prtimes.jp/main/html/rd/p/000000005.000023638.html HoloLab Inc.

  10. IoTビジネス共創ラボ xR WG リーダー 事務局 参加企業 HoloLab Inc.

  11. IoTビジネス共創ラボ xR WG • 目的 • IoTビジネス共創ラボのつながりからxRの活用事例を創出す る • 自治体、教育、医療機関など様々な参加企業とのマッチング

    を行う • 企業連携を通してxRの社会実装を進める HoloLab Inc.
  12. IoTビジネス共創ラボ 第1回xR WG勉強会 • 日時: 2018/3/27(火) 16:00~18:00 • 申込: https://connpass.com/event/77188/

    • 会場: 日本マイクロソフト 品川本社セミナールーム • 内容: xR WG設立趣旨、活動概要説明、参加企業取り組み 紹介 • 対象: • xRとIoTのビジネス活用にご関心のある皆さま • IoTビジネス共創ラボご参加にご関心のある方 • xRとIoT関連のスタートアップ/開発者の皆さま • 備考: 18:00以降、現地懇親会を予定します。 HoloLab Inc.
  13. アジェンダ •HoloLens •Windows Mixed Reality •コラボレーティブ・コンピューティング •MR(Mixed Reality) •事例紹介 HoloLab

    Inc.
  14. HoloLens HoloLab Inc.

  15. HoloLensとは HoloLab Inc.

  16. HoloLensとは(1/2) • マイクロソフト社が発売している、頭部装着型のPC • Windows 10が搭載され単体で動作するためHMDではない • ケーブルレスである • MR(Mixed

    Reality:複合現実感)と呼ばれ、周囲の現実環境を認 識し、仮想空間に作用する • 今までより高精度なAR • VRのような使い方もできるが、現状では視野が狭い • 普通のWindows 10アプリ(UWP)も利用できるため用途は広い HoloLab Inc.
  17. HoloLensとは(2/2) • 展開 • 開発者版($3,000/¥333,800[税込]) • コマーシャル版($5,000/¥555,800[税込]) • ハードウェアは同一 •

    日本での展開 • 2016年12月02日プレオーダー開始 • 2017年01月18日リリース • マイクロソフトストアにてクレジットカード払い • https://www.microsoftstore.com/store/msjp/ja_JP/pdp/productID.5082141100 • 2017年06月07日 発注書注文開始(クレジットカード不要) HoloLab Inc.
  18. Microsoft HoloLens Commercial Suite • 商用利用可能 • 1年間の保証 • Development

    Editionの機能に加えて、企業用の機能が追加 • Kioskモード • Mobile Device Management (MDM) for HoloLens • Azure Active Directoryなどの認証機能 • Windows Update for Business • BitLockerなどのデータセキュリティ • VPNなどのネットワーク支援 • Windows Store for Business HoloLab Inc.
  19. HoloLensのハードウェアスペック(抜粋) OS Windows 10 プロセッサ Intel Atom 32bit Microsoft Holographic

    Processing Unit (HPU 1.0) ストレージ 64GB メモリ 2GB 重量 579g HoloLab Inc. https://www.microsoft.com/ja-jp/hololens/buy
  20. HoloLensのハードウェア HoloLab Inc. https://www.buildinsider.net/small/hololens/001

  21. 年齢制限について • 13歳未満の使用は想定していない HoloLab Inc.

  22. HoloLensの用途(1) • 一般的なWindowsアプリ(PowerPointやExcelなど)も使えるた め、普通のPCのように利用することもできる。 • マウスやキーボードはBluetoothで接続できる。 • OneDriveを経由して、データを共有できる。 • 現状、日本語の入力ができない(英語OSのため)。

    HoloLab Inc.
  23. デスクワーク HoloLab Inc.

  24. HoloLensの用途(2) • 3次元のデータを3次元のまま見ることができる。 • 例)営業の方 • 普段は2DのPowerPointやExcel、Outlookで仕事 • 客先では3次元カタログとしてお客さまに見せることで、より具体的なイメージ •

    複数のHoloLensでデータを共有することで、みんなで同じもの を見ることができる。 HoloLab Inc.
  25. 3Dモデル HoloLab Inc. http://licensecounter.jp/3d-fab/report/20161129_27.html

  26. HoloLensの用途(3) • 2次元のテキスト、タブレットでは表現できない3次元の情報 • これを3次元で見ることで、よりイメージしやすくなる • 中学、高校生の数学、理科、化学などの適応へはイメージ早い • 大学では医学への適応はイメージしやすい •

    プログラミングと組み合わせれば、学ぶ理由にもなる • 「数学(勉強)は何に使うのか」への答え • プログラムを「学ぶことが目的」から「目的のための手段へ」 HoloLab Inc.
  27. 太陽系と地球 HoloLab Inc.

  28. 人体の構造 HoloLab Inc.

  29. HoloLensの強いところ • 安定した位置追跡 • 競合がないレベル • ケーブルレス、スタンドアロン • 装着コストが低い •

    機動力が高い HoloLab Inc.
  30. HoloLensの弱いところ • 視野角が狭い • モデルの大きさや見せ方に工夫が必要 • CPU、GPU性能が低い • モデルの作りに工夫が必要 •

    値段が高い • ハードウェア構成を考えると納得できるが、高いも のは高い HoloLab Inc.
  31. Windows Mixed Reality HoloLab Inc.

  32. Windows Mixed Reality(Windows MR) https://developer.microsoft.com/en-us/windows/projects/campaigns/windows-mixed-reality HoloLab Inc.

  33. Windows 10 Fall Creaters Update HoloLab Inc.

  34. Windows MR Immersive ヘッドセット HoloLab Inc. https://hololens.connpass.com/event/75691/

  35. ヘッドセットの仕様 パネル解像度 1440x1440x2 視野角 95度/110度 フレームレート 90Hz トラッキング 内蔵カメラ(Inside-Out) HoloLab

    Inc.
  36. ハードウェア要求 Windows Mixed Reality Ultra PC Windows Mixed Reality PC

    OS Windows 10 Fall Creators Update (RS3) - Home, Pro, Business, Education CPU Intel Core i5 4590 (第4世代) 4コア 以上 AMD Ryzen 5 1400 3.4Ghz (デスクトップ), 4コア以上 Intel Core i5 7200U (第7世代), 2コア with Intel® ハイパースレッディング 以上 メモリ 8GB DDR3 以上 8GB DDR3 デュアルチャネル以上 ストレージ 10GB以上の空き領域 グラフィックカード NVidia GTX 960/965M/1050以上 AMD RX 460 以上 DirectX12対応 GPU(PCIe 3.0 x4+ Link slot) 内蔵のIntel® HD Graphics 620 以上 DirectX12対応 GPU グラフィックドライバ Windows Display Driver Model (WDDM) 2.2 (2017/7/17 以降) Windows Display Driver Model (WDDM) 2.2 (2017/7/24 以降) グラフィック接続端子 HDMI 2.0またはDisplayPort 1.2 HDMI 1.4 または DisplayPort 1.2 ディスプレイ VGA (800x600)以上の解像度をもつディスプレイ USBコネクタ USB 3.0 Type-A または Type-C Bluetooth Bluetooth 4.0 HMDのフレームレート 90Hz 60Hz HoloLab Inc. https://developer.microsoft.com/ja-jp/windows/mixed-reality/windows_mixed_reality_minimum_pc_hardware_compatibility_guidelines
  37. HoloLensとImmersiveヘッドセットの違い 機能 HoloLens Immersiveヘッドセット 入力 視線 〇 〇 ジェスチャー 〇

    音声 〇 〇 ゲームパッド 〇 〇 モーションコントローラー 〇 知覚と空間 空間座標 〇 〇 空間音響 〇 〇 空間マッピング 〇 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/development_overview
  38. Windows Mixed Reality PC Check HoloLab Inc. https://www.microsoft.com/ja-jp/store/p/windows-mixed-reality-pc-check/9nzvl19n7cnc?rtc=1

  39. 例:Razer Blade 1060 HoloLab Inc.

  40. Windows MR Immersiveの強いところ • PCに接続するだけでVR環境が手に入る • ドライバ、ポータルなどはOS同梱 • 外部センサー不要 •

    コントローラーも外部センサー不要 • 動作範囲がより自由になる • HoloLensでは動作しないような高精細なデータが入る • HoloLensと同じアプリ(UWP)で動作する • ARとVRの使い分け、コンピューター性能による使い分け HoloLab Inc.
  41. どこまでも進めるVR HoloLab Inc.

  42. Windows MR Immersiveの弱いところ • ハードウェア的なIPD(瞳孔間距離)の設定ができない • カメラ画像の取り込みができない • 外部環境を知ることができない •

    現状ではOculus RiftやHTC Viveと似た特長 • ソフトウェア(OS含む)、ハードウェアともにまだまだ不安定 HoloLab Inc.
  43. Experience Mixed Reality at World Scale HoloLab Inc. https://www.youtube.com/watch?v=67yLuiSfMWM

  44. Experience Mixed Reality at World Scale HoloLab Inc. Mobile VR

    : Gear VR など Desk Scale : Oculus Rift Room Scale : HTC Vive World Scale : Windows MR
  45. Windows MR プラットフォームとしてのゴール HoloLab Inc. https://www.youtube.com/watch?v=vNz5Rw6TwCw

  46. HoloLab Inc.

  47. コラボレーティブ・ コンピューティング HoloLab Inc.

  48. コラボレーティブ・コンピューティング HoloLab Inc. • 2017年5月に開催されたde:code 2017でHoloLensの生みの親で あるアレックス・キップマンが発表したもの • HoloLensやイマーシブデバイス、PCなどが協調して作業を行う https://www.youtube.com/watch?v=JxCUyhjwHW0

  49. コラボレーティブ・コンピューティング • 同じ場所でHoloLensを装着した人が複数人で作業をしている HoloLab Inc.

  50. コラボレーティブ・コンピューティング • そこにPCを操作している人が遠隔から参加する HoloLab Inc.

  51. コラボレーティブ・コンピューティング • さらにイマーシブデバイスを装着した人も遠隔で参加する HoloLab Inc.

  52. コラボレーティブ・コンピューティング • デバイス、場所によらず同じ空間(現実/仮想)で協調作業を行う HoloLab Inc.

  53. MR(Mixed Reality) HoloLab Inc.

  54. MR(Mixed Reality)とは • MRとはMixed Realityの略で、複合現実感と訳される • AR(拡張現実感)とVR(仮想現実、人工現実感)を含む HoloLab Inc. https://en.wikipedia.org/wiki/Mixed_reality

  55. ARとVR HoloLab Inc. https://martechtoday.com/google-talks-ar-vr-198573

  56. マイクロソフトの考えるMRデバイスの目標 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

  57. マイクロソフトの考えるMRデバイスの現状 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

  58. マイクロソフトの考えるMRデバイスの現状 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

  59. マイクロソフト公式事例紹介 HoloLab Inc.

  60. 項目 1. Autodesk(オブジェクトやロボットなどの3Dデザイン) 2. Ford(自動車デザイン) 3. Trimble(建築) 4. 小柳建設(建設) 5.

    Skype(遠隔支援) 6. ThyssenKrupp(保守、管理) 7. JAL(パイロットおよび整備士のトレーニング) 8. LOWE’S(ショッピング) 9. ロンドン大学(医療) 10. さまざまな教育 他にも多くの事例あり https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial HoloLab Inc.
  61. Microsoft本社トレーニング(2017/6/19-23) HoloLab Inc.

  62. Autodesk(デザイン) HoloLab Inc. https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

  63. HoloLab Inc.

  64. ポイント1 HoloLab Inc. • モデルの3D表示と干渉チェック

  65. ポイント2 HoloLab Inc. • ロボットのシミュレーションとリアルタイム編集

  66. Ford(自動車デザイン) HoloLab Inc. https://www.youtube.com/watch?v=WZQ_DQD7F3U

  67. HoloLab Inc.

  68. ポイント1 • 既存の車への重畳表示 HoloLab Inc.

  69. ポイント2 • 角度のシミュレーション HoloLab Inc.

  70. ポイント3 • 音声アノテーション HoloLab Inc.

  71. ポイント4 • サイドミラーシミュレーション HoloLab Inc.

  72. Trimble(建築) HoloLab Inc. https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

  73. HoloLab Inc.

  74. ポイント1 • ミニチュアシミュレーション HoloLab Inc.

  75. ポイント2 • 実寸大シミュレーション HoloLab Inc.

  76. ポイント3 • 実物への重畳とコミュニケーション支援 HoloLab Inc.

  77. 小柳建設(建設) HoloLab Inc. https://www.youtube.com/watch?v=dW1amJLDwuQ

  78. HoloLab Inc.

  79. ポイント1 建設するモデルを3Dで表示(空間共有) HoloLab Inc.

  80. ポイント2 工程管理 HoloLab Inc.

  81. ポイント3 文書や画像をHoloLens内に保存 HoloLab Inc.

  82. Skype(遠隔支援) HoloLab Inc. https://www.youtube.com/watch?v=iBfzs3G8BEA

  83. HoloLab Inc.

  84. ポイント1 見え方 HoloLab Inc.

  85. ポイント2 遠隔支援 HoloLab Inc.

  86. ThyssenKrupp(保守、管理) HoloLab Inc. https://www.youtube.com/watch?v=8OWhGiyR4Ns

  87. HoloLab Inc.

  88. ポイント1 事前のシミュレーション HoloLab Inc.

  89. ポイント2 現場での情報および保守項目リスト HoloLab Inc.

  90. ポイント3 遠隔支援および第三者チェック HoloLab Inc.

  91. 機器を操作するよりデータ可視化 • IoT機器から取り込んだデータ群をHoloLensで可視化する • IoT機器自体を認識して、そのデータを可視化する • IoT化が進んでいる建設系との連携 • Deep LearningやCognitive

    Services(いわゆるAI)との連携 HoloLab Inc.
  92. JAL(パイロットおよび整備士のトレーニング) HoloLab Inc. http://press.jal.co.jp/ja/release/201604/002643.html?Fa=1 https://www.youtube.com/watch?v=GjZgI2oDcwM

  93. HoloLab Inc.

  94. ポイント HoloLab Inc. 実寸大での表示

  95. LOWE’S(ショッピング) HoloLab Inc. https://www.youtube.com/watch?v=gC_4JxF0e_k

  96. HoloLab Inc.

  97. ポイント1 事前にDeep Learningで好みを抽出 HoloLab Inc.

  98. ポイント2 顧客がHoloLensでシミュレーション体験 HoloLab Inc.

  99. ポイント3 顧客の行動をPowerBIで分析 HoloLab Inc.

  100. ロンドン大学(医療) HoloLab Inc. https://www.youtube.com/watch?v=TylDjQ1udZg

  101. HoloLab Inc.

  102. ポイント1 CTデータの立体閲覧 HoloLab Inc.

  103. さまざまな教育 HoloLab Inc. https://www.youtube.com/watch?v=7Xv8A9vqeBw

  104. HoloLab Inc.

  105. ポイント1 見えないものを見えるように HoloLab Inc.

  106. ポイント2 物理シミュレーション HoloLab Inc.

  107. ポイント3 演奏補助 HoloLab Inc.

  108. ARとVRの協調 HoloLab Inc. https://www.youtube.com/watch?v=vNz5Rw6TwCw

  109. HoloLab Inc.

  110. ポイント1 AR(HoloLens)とVR(Immersive)でのSharing HoloLab Inc.

  111. ポイント2 3D動画 HoloLab Inc.

  112. HCap HoloLab Inc. https://www.youtube.com/watch?v=kZ-XZIV-o8s

  113. ホロラボ開発事例紹介 HoloLab Inc.

  114. 開発事例紹介:映像制作分野 • 体験型広告コンテンツ「HOLO BUILDER™」 • CM映像制作大手の太陽企画様と共同開発 • 小さな作業員が、広告主の製品をHoloLens装着者の目の前で組み上げる HoloLab Inc.

    https://www.youtube.com/watch?v=oXE5XmOVAWI 6/28-29 コンテンツ東京出展
  115. HoloBuilder HoloLab Inc.

  116. 開発事例紹介:医療/教育分野 • 医療法人財団岩井医療財団、稲波脊椎・関節病院様事例 • 脊椎の外科手術トレーニング • カルテ閲覧など多様な利用シナリオ • 試作アプリでは CTスキャンのデータを

    HoloLensで3Dのままに可視化 • HoloLens着用者の視線移動により インタラクティブに表示 • Sharing機能対応で、 複数者でモデル表示の共有可能 HoloLab Inc. *SFPSS 2017(医療系研究会)での体験展示 http://blog.hololab.co.jp/entry/2017/11/09/104011
  117. 稲波病院向けアプリのポイント HoloLab Inc.

  118. 稲波病院向けアプリのポイント HoloLab Inc.

  119. 開発事例紹介:建築/製造分野 • 「AR CAD CLOUD」~製造業向けホロラボ自社開発サービス • 製造業や建設建築業が保有する設計データ「CADデータ」を、 デジタルデータのままに3Dで確認が出来る画期的ソリューション • 現状は、設計模型(モックアップ)をコストと時間を掛けて制作

    • PCのディスプレイやプロジェクタの映像で2Dで設計確認 HoloLab Inc. 2Dの画面上でのCADデータ確認 CADデータを、データのまま3D確認
  120. AR CAD Cloud HoloLab Inc. https://www.youtube.com/watch?v=YkCALqPSO1E

  121. 他社事例紹介 HoloLab Inc.

  122. 野村不動産 HoloLab Inc. https://www.nikkei.com/article/DGXLRSP445791_T20C17A5000000/?au=11

  123. 日産 HoloLab Inc.

  124. まとめ HoloLab Inc.

  125. まとめ • 今後HoloLensだけでなく、Windows MRデバイスもリリース される。 • すでに様々な事例が発表されている。 • 幅広い分野で用途が検討されている。 •

    日本でも複数の会社がすでに利用を開始している。 HoloLab Inc.
  126. http://hololab.co.jp/ HoloLab Inc.