VR_AR_MR活用事例のご紹介

2018年2月16日 島根県松江市で開催された「VR/AR/MR利活用セミナー」での講演スライドです

Transcript

1. VR/AR/MR活用事例のご紹介 2018/02/16 株式会社ホロラボ 中村 薫 HoloLab Inc.
2. 自己紹介 中村 薫 株式会社ホロラボ 代表取締役CEO • HoloLens/Windows Mixed Realityに特化した会社です • KinectなどDepthセンサーの仕事も継続しています • アプリケーション開発、講演、ハンズオンセミナー、執筆など Microsoft MVP for Windows Development(Apr 2016 - Mar 2017) Microsoft MVP for Kinect for Windows (Apr 2014 - Mar 2016) Microsoft MVP for Visual Studio ALM (Apr 2012 - Mar 2014) http://www.naturalsoftware.jp/ HoloLab Inc.
3. 会社概要 株式会社ホロラボ(HoloLab Inc.) http://hololab.co.jp/ 所在地：東京都品川区西五反田 資本金：2,000,000円 設立日：2017年1月18日 HoloLab Inc.
4. 業務内容 • 自社サービス開発 • AR CAD Cloudの開発 • HoloLens/Windows Mixed Realityに関する開発支援 • 受託開発(コンサルティング/ディレクションを含む場合もあり) • 研究開発 • コンサルティング • 普及啓もう活動 • セミナー • 開発トレーニング • コミュニティ HoloLab Inc.
5. 会社概要 HoloLab Inc. https://blogs.windows.com/japan/2017/11/08/mrpp-japan-announcement-new-partners/ https://twitter.com/mskkpr/status/928104528234336256
6. 開発者コミュニティ HoloLab Inc. https://hololens.connpass.com/
7. HoloLens Meetup Vol.1 参加人数 ハンズオン ミートアップ 福岡 10人 17人 東京 64人 171人 大阪 12人 34人 東北 8人 15人 計 92人 237人 HoloLab Inc.
8. 自己紹介 HoloLab Inc.
9. ビジネス向けコミュニティ https://prtimes.jp/main/html/rd/p/000000005.000023638.html HoloLab Inc.
10. IoTビジネス共創ラボ xR WG リーダー 事務局 参加企業 HoloLab Inc.
11. IoTビジネス共創ラボ xR WG • 目的 • IoTビジネス共創ラボのつながりからxRの活用事例を創出す る • 自治体、教育、医療機関など様々な参加企業とのマッチング を行う • 企業連携を通してxRの社会実装を進める HoloLab Inc.
12. IoTビジネス共創ラボ 第1回xR WG勉強会 • 日時: 2018/3/27(火) 16:00～18:00 • 申込: https://connpass.com/event/77188/ • 会場: 日本マイクロソフト 品川本社セミナールーム • 内容: xR WG設立趣旨、活動概要説明、参加企業取り組み 紹介 • 対象: • xRとIoTのビジネス活用にご関心のある皆さま • IoTビジネス共創ラボご参加にご関心のある方 • xRとIoT関連のスタートアップ／開発者の皆さま • 備考: 18:00以降、現地懇親会を予定します。 HoloLab Inc.
13. アジェンダ •HoloLens •Windows Mixed Reality •コラボレーティブ・コンピューティング •MR(Mixed Reality) •事例紹介 HoloLab Inc.
14. HoloLens HoloLab Inc.
15. HoloLensとは HoloLab Inc.
16. HoloLensとは(1/2) • マイクロソフト社が発売している、頭部装着型のPC • Windows 10が搭載され単体で動作するためHMDではない • ケーブルレスである • MR(Mixed Reality:複合現実感)と呼ばれ、周囲の現実環境を認 識し、仮想空間に作用する • 今までより高精度なAR • VRのような使い方もできるが、現状では視野が狭い • 普通のWindows 10アプリ(UWP)も利用できるため用途は広い HoloLab Inc.
17. HoloLensとは(2/2) • 展開 • 開発者版($3,000/¥333,800[税込]) • コマーシャル版($5,000/¥555,800[税込]) • ハードウェアは同一 • 日本での展開 • 2016年12月02日プレオーダー開始 • 2017年01月18日リリース • マイクロソフトストアにてクレジットカード払い • https://www.microsoftstore.com/store/msjp/ja_JP/pdp/productID.5082141100 • 2017年06月07日 発注書注文開始(クレジットカード不要) HoloLab Inc.
18. Microsoft HoloLens Commercial Suite • 商用利用可能 • 1年間の保証 • Development Editionの機能に加えて、企業用の機能が追加 • Kioskモード • Mobile Device Management (MDM) for HoloLens • Azure Active Directoryなどの認証機能 • Windows Update for Business • BitLockerなどのデータセキュリティ • VPNなどのネットワーク支援 • Windows Store for Business HoloLab Inc.
19. HoloLensのハードウェアスペック(抜粋) OS Windows 10 プロセッサ Intel Atom 32bit Microsoft Holographic Processing Unit (HPU 1.0) ストレージ 64GB メモリ 2GB 重量 579g HoloLab Inc. https://www.microsoft.com/ja-jp/hololens/buy
20. HoloLensのハードウェア HoloLab Inc. https://www.buildinsider.net/small/hololens/001
21. 年齢制限について • 13歳未満の使用は想定していない HoloLab Inc.
22. HoloLensの用途（１） • 一般的なWindowsアプリ(PowerPointやExcelなど)も使えるた め、普通のPCのように利用することもできる。 • マウスやキーボードはBluetoothで接続できる。 • OneDriveを経由して、データを共有できる。 • 現状、日本語の入力ができない(英語OSのため)。 HoloLab Inc.
23. デスクワーク HoloLab Inc.
24. HoloLensの用途（２） • 3次元のデータを3次元のまま見ることができる。 • 例）営業の方 • 普段は2DのPowerPointやExcel、Outlookで仕事 • 客先では3次元カタログとしてお客さまに見せることで、より具体的なイメージ • 複数のHoloLensでデータを共有することで、みんなで同じもの を見ることができる。 HoloLab Inc.
25. 3Dモデル HoloLab Inc. http://licensecounter.jp/3d-fab/report/20161129_27.html
26. HoloLensの用途（３） • 2次元のテキスト、タブレットでは表現できない3次元の情報 • これを3次元で見ることで、よりイメージしやすくなる • 中学、高校生の数学、理科、化学などの適応へはイメージ早い • 大学では医学への適応はイメージしやすい • プログラミングと組み合わせれば、学ぶ理由にもなる • 「数学(勉強)は何に使うのか」への答え • プログラムを「学ぶことが目的」から「目的のための手段へ」 HoloLab Inc.
27. 太陽系と地球 HoloLab Inc.
28. 人体の構造 HoloLab Inc.
29. HoloLensの強いところ • 安定した位置追跡 • 競合がないレベル • ケーブルレス、スタンドアロン • 装着コストが低い • 機動力が高い HoloLab Inc.
30. HoloLensの弱いところ • 視野角が狭い • モデルの大きさや見せ方に工夫が必要 • CPU、GPU性能が低い • モデルの作りに工夫が必要 • 値段が高い • ハードウェア構成を考えると納得できるが、高いも のは高い HoloLab Inc.
31. Windows Mixed Reality HoloLab Inc.
32. Windows Mixed Reality(Windows MR) https://developer.microsoft.com/en-us/windows/projects/campaigns/windows-mixed-reality HoloLab Inc.
33. Windows 10 Fall Creaters Update HoloLab Inc.
34. Windows MR Immersive ヘッドセット HoloLab Inc. https://hololens.connpass.com/event/75691/
35. ヘッドセットの仕様 パネル解像度 1440x1440x2 視野角 95度/110度 フレームレート 90Hz トラッキング 内蔵カメラ(Inside-Out) HoloLab Inc.
36. ハードウェア要求 Windows Mixed Reality Ultra PC Windows Mixed Reality PC OS Windows 10 Fall Creators Update (RS3) - Home, Pro, Business, Education CPU Intel Core i5 4590 (第4世代) 4コア 以上 AMD Ryzen 5 1400 3.4Ghz (デスクトップ), 4コア以上 Intel Core i5 7200U (第7世代), 2コア with Intel® ハイパースレッディング 以上 メモリ 8GB DDR3 以上 8GB DDR3 デュアルチャネル以上 ストレージ 10GB以上の空き領域 グラフィックカード NVidia GTX 960/965M/1050以上 AMD RX 460 以上 DirectX12対応 GPU(PCIe 3.0 x4+ Link slot) 内蔵のIntel® HD Graphics 620 以上 DirectX12対応 GPU グラフィックドライバ Windows Display Driver Model (WDDM) 2.2 (2017/7/17 以降) Windows Display Driver Model (WDDM) 2.2 (2017/7/24 以降) グラフィック接続端子 HDMI 2.0またはDisplayPort 1.2 HDMI 1.4 または DisplayPort 1.2 ディスプレイ VGA (800x600)以上の解像度をもつディスプレイ USBコネクタ USB 3.0 Type-A または Type-C Bluetooth Bluetooth 4.0 HMDのフレームレート 90Hz 60Hz HoloLab Inc. https://developer.microsoft.com/ja-jp/windows/mixed-reality/windows_mixed_reality_minimum_pc_hardware_compatibility_guidelines
37. HoloLensとImmersiveヘッドセットの違い 機能 HoloLens Immersiveヘッドセット 入力 視線 〇 〇 ジェスチャー 〇 音声 〇 〇 ゲームパッド 〇 〇 モーションコントローラー 〇 知覚と空間 空間座標 〇 〇 空間音響 〇 〇 空間マッピング 〇 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/development_overview
38. Windows Mixed Reality PC Check HoloLab Inc. https://www.microsoft.com/ja-jp/store/p/windows-mixed-reality-pc-check/9nzvl19n7cnc?rtc=1
39. 例：Razer Blade 1060 HoloLab Inc.
40. Windows MR Immersiveの強いところ • PCに接続するだけでVR環境が手に入る • ドライバ、ポータルなどはOS同梱 • 外部センサー不要 • コントローラーも外部センサー不要 • 動作範囲がより自由になる • HoloLensでは動作しないような高精細なデータが入る • HoloLensと同じアプリ(UWP)で動作する • ARとVRの使い分け、コンピューター性能による使い分け HoloLab Inc.
41. どこまでも進めるVR HoloLab Inc.
42. Windows MR Immersiveの弱いところ • ハードウェア的なIPD(瞳孔間距離)の設定ができない • カメラ画像の取り込みができない • 外部環境を知ることができない • 現状ではOculus RiftやHTC Viveと似た特長 • ソフトウェア(OS含む)、ハードウェアともにまだまだ不安定 HoloLab Inc.
43. Experience Mixed Reality at World Scale HoloLab Inc. https://www.youtube.com/watch?v=67yLuiSfMWM
44. Experience Mixed Reality at World Scale HoloLab Inc. Mobile VR : Gear VR など Desk Scale : Oculus Rift Room Scale : HTC Vive World Scale : Windows MR
45. Windows MR プラットフォームとしてのゴール HoloLab Inc. https://www.youtube.com/watch?v=vNz5Rw6TwCw
46. HoloLab Inc.
47. コラボレーティブ・ コンピューティング HoloLab Inc.
48. コラボレーティブ・コンピューティング HoloLab Inc. • 2017年5月に開催されたde:code 2017でHoloLensの生みの親で あるアレックス・キップマンが発表したもの • HoloLensやイマーシブデバイス、PCなどが協調して作業を行う https://www.youtube.com/watch?v=JxCUyhjwHW0
49. コラボレーティブ・コンピューティング • 同じ場所でHoloLensを装着した人が複数人で作業をしている HoloLab Inc.
50. コラボレーティブ・コンピューティング • そこにPCを操作している人が遠隔から参加する HoloLab Inc.
51. コラボレーティブ・コンピューティング • さらにイマーシブデバイスを装着した人も遠隔で参加する HoloLab Inc.
52. コラボレーティブ・コンピューティング • デバイス、場所によらず同じ空間(現実/仮想)で協調作業を行う HoloLab Inc.
53. MR(Mixed Reality) HoloLab Inc.
54. MR(Mixed Reality)とは • MRとはMixed Realityの略で、複合現実感と訳される • AR(拡張現実感)とVR(仮想現実、人工現実感)を含む HoloLab Inc. https://en.wikipedia.org/wiki/Mixed_reality
55. ARとVR HoloLab Inc. https://martechtoday.com/google-talks-ar-vr-198573
56. マイクロソフトの考えるMRデバイスの目標 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality
57. マイクロソフトの考えるMRデバイスの現状 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality
58. マイクロソフトの考えるMRデバイスの現状 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality
59. マイクロソフト公式事例紹介 HoloLab Inc.
60. 項目 1. Autodesk(オブジェクトやロボットなどの3Dデザイン) 2. Ford(自動車デザイン) 3. Trimble(建築) 4. 小柳建設(建設) 5. Skype(遠隔支援) 6. ThyssenKrupp(保守、管理) 7. JAL(パイロットおよび整備士のトレーニング) 8. LOWE’S(ショッピング) 9. ロンドン大学(医療) 10. さまざまな教育 他にも多くの事例あり https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial HoloLab Inc.
61. Microsoft本社トレーニング(2017/6/19-23) HoloLab Inc.
62. Autodesk(デザイン) HoloLab Inc. https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial
63. HoloLab Inc.
64. ポイント1 HoloLab Inc. • モデルの3D表示と干渉チェック
65. ポイント2 HoloLab Inc. • ロボットのシミュレーションとリアルタイム編集
66. Ford(自動車デザイン) HoloLab Inc. https://www.youtube.com/watch?v=WZQ_DQD7F3U
67. HoloLab Inc.
68. ポイント1 • 既存の車への重畳表示 HoloLab Inc.
69. ポイント2 • 角度のシミュレーション HoloLab Inc.
70. ポイント3 • 音声アノテーション HoloLab Inc.
71. ポイント4 • サイドミラーシミュレーション HoloLab Inc.
72. Trimble(建築) HoloLab Inc. https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial
73. HoloLab Inc.
74. ポイント1 • ミニチュアシミュレーション HoloLab Inc.
75. ポイント2 • 実寸大シミュレーション HoloLab Inc.
76. ポイント3 • 実物への重畳とコミュニケーション支援 HoloLab Inc.
77. 小柳建設(建設) HoloLab Inc. https://www.youtube.com/watch?v=dW1amJLDwuQ
78. HoloLab Inc.
79. ポイント1 建設するモデルを3Dで表示(空間共有) HoloLab Inc.
80. ポイント2 工程管理 HoloLab Inc.
81. ポイント3 文書や画像をHoloLens内に保存 HoloLab Inc.
82. Skype(遠隔支援) HoloLab Inc. https://www.youtube.com/watch?v=iBfzs3G8BEA
83. HoloLab Inc.
84. ポイント1 見え方 HoloLab Inc.
85. ポイント2 遠隔支援 HoloLab Inc.
86. ThyssenKrupp(保守、管理) HoloLab Inc. https://www.youtube.com/watch?v=8OWhGiyR4Ns
87. HoloLab Inc.
88. ポイント1 事前のシミュレーション HoloLab Inc.
89. ポイント2 現場での情報および保守項目リスト HoloLab Inc.
90. ポイント3 遠隔支援および第三者チェック HoloLab Inc.
91. 機器を操作するよりデータ可視化 • IoT機器から取り込んだデータ群をHoloLensで可視化する • IoT機器自体を認識して、そのデータを可視化する • IoT化が進んでいる建設系との連携 • Deep LearningやCognitive Services(いわゆるAI)との連携 HoloLab Inc.
92. JAL(パイロットおよび整備士のトレーニング) HoloLab Inc. http://press.jal.co.jp/ja/release/201604/002643.html?Fa=1 https://www.youtube.com/watch?v=GjZgI2oDcwM
93. HoloLab Inc.
94. ポイント HoloLab Inc. 実寸大での表示
95. LOWE’S(ショッピング) HoloLab Inc. https://www.youtube.com/watch?v=gC_4JxF0e_k
96. HoloLab Inc.
97. ポイント1 事前にDeep Learningで好みを抽出 HoloLab Inc.
98. ポイント2 顧客がHoloLensでシミュレーション体験 HoloLab Inc.
99. ポイント3 顧客の行動をPowerBIで分析 HoloLab Inc.
100. ロンドン大学(医療) HoloLab Inc. https://www.youtube.com/watch?v=TylDjQ1udZg
101. HoloLab Inc.
102. ポイント1 CTデータの立体閲覧 HoloLab Inc.
103. さまざまな教育 HoloLab Inc. https://www.youtube.com/watch?v=7Xv8A9vqeBw
104. HoloLab Inc.
105. ポイント1 見えないものを見えるように HoloLab Inc.
106. ポイント2 物理シミュレーション HoloLab Inc.
107. ポイント3 演奏補助 HoloLab Inc.
108. ARとVRの協調 HoloLab Inc. https://www.youtube.com/watch?v=vNz5Rw6TwCw
109. HoloLab Inc.
110. ポイント1 AR(HoloLens)とVR(Immersive)でのSharing HoloLab Inc.
111. ポイント2 3D動画 HoloLab Inc.
112. HCap HoloLab Inc. https://www.youtube.com/watch?v=kZ-XZIV-o8s
113. ホロラボ開発事例紹介 HoloLab Inc.
114. 開発事例紹介：映像制作分野 • 体験型広告コンテンツ「HOLO BUILDER™」 • CM映像制作大手の太陽企画様と共同開発 • 小さな作業員が、広告主の製品をHoloLens装着者の目の前で組み上げる HoloLab Inc. https://www.youtube.com/watch?v=oXE5XmOVAWI 6/28-29 コンテンツ東京出展
115. HoloBuilder HoloLab Inc.
116. 開発事例紹介：医療／教育分野 • 医療法人財団岩井医療財団、稲波脊椎・関節病院様事例 • 脊椎の外科手術トレーニング • カルテ閲覧など多様な利用シナリオ • 試作アプリでは ＣＴスキャンのデータを HoloLensで3Dのままに可視化 • HoloLens着用者の視線移動により インタラクティブに表示 • Sharing機能対応で、 複数者でモデル表示の共有可能 HoloLab Inc. ＊SFPSS 2017(医療系研究会)での体験展示 http://blog.hololab.co.jp/entry/2017/11/09/104011
117. 稲波病院向けアプリのポイント HoloLab Inc.
118. 稲波病院向けアプリのポイント HoloLab Inc.
119. 開発事例紹介：建築／製造分野 • 「AR CAD CLOUD」～製造業向けホロラボ自社開発サービス • 製造業や建設建築業が保有する設計データ「CADデータ」を、 デジタルデータのままに3Dで確認が出来る画期的ソリューション • 現状は、設計模型(モックアップ)をコストと時間を掛けて制作 • PCのディスプレイやプロジェクタの映像で2Dで設計確認 HoloLab Inc. 2Dの画面上でのCADデータ確認 CADデータを、データのまま3D確認
120. AR CAD Cloud HoloLab Inc. https://www.youtube.com/watch?v=YkCALqPSO1E
121. 他社事例紹介 HoloLab Inc.
122. 野村不動産 HoloLab Inc. https://www.nikkei.com/article/DGXLRSP445791_T20C17A5000000/?au=11
123. 日産 HoloLab Inc.
124. まとめ HoloLab Inc.
125. まとめ • 今後HoloLensだけでなく、Windows MRデバイスもリリース される。 • すでに様々な事例が発表されている。 • 幅広い分野で用途が検討されている。 • 日本でも複数の会社がすでに利用を開始している。 HoloLab Inc.
126. http://hololab.co.jp/ HoloLab Inc.