Upgrade to Pro — share decks privately, control downloads, hide ads and more …

VR_AR_MR活用事例のご紹介

HoloLab
February 16, 2018

 VR_AR_MR活用事例のご紹介

2018年2月16日 島根県松江市で開催された「VR/AR/MR利活用セミナー」での講演スライドです

HoloLab

February 16, 2018
Tweet

More Decks by HoloLab

Other Decks in Technology

Transcript

  1. VR/AR/MR活用事例のご紹介
    2018/02/16
    株式会社ホロラボ 中村 薫
    HoloLab Inc.

    View full-size slide

  2. 自己紹介
    中村 薫
    株式会社ホロラボ 代表取締役CEO
    • HoloLens/Windows Mixed Realityに特化した会社です
    • KinectなどDepthセンサーの仕事も継続しています
    • アプリケーション開発、講演、ハンズオンセミナー、執筆など
    Microsoft MVP for Windows Development(Apr 2016 - Mar 2017)
    Microsoft MVP for Kinect for Windows (Apr 2014 - Mar 2016)
    Microsoft MVP for Visual Studio ALM (Apr 2012 - Mar 2014)
    http://www.naturalsoftware.jp/
    HoloLab Inc.

    View full-size slide

  3. 会社概要
    株式会社ホロラボ(HoloLab Inc.)
    http://hololab.co.jp/
    所在地:東京都品川区西五反田
    資本金:2,000,000円
    設立日:2017年1月18日
    HoloLab Inc.

    View full-size slide

  4. 業務内容
    • 自社サービス開発
    • AR CAD Cloudの開発
    • HoloLens/Windows Mixed Realityに関する開発支援
    • 受託開発(コンサルティング/ディレクションを含む場合もあり)
    • 研究開発
    • コンサルティング
    • 普及啓もう活動
    • セミナー
    • 開発トレーニング
    • コミュニティ
    HoloLab Inc.

    View full-size slide

  5. 会社概要
    HoloLab Inc.
    https://blogs.windows.com/japan/2017/11/08/mrpp-japan-announcement-new-partners/
    https://twitter.com/mskkpr/status/928104528234336256

    View full-size slide

  6. 開発者コミュニティ
    HoloLab Inc.
    https://hololens.connpass.com/

    View full-size slide

  7. HoloLens Meetup Vol.1 参加人数
    ハンズオン ミートアップ
    福岡 10人 17人
    東京 64人 171人
    大阪 12人 34人
    東北 8人 15人
    計 92人 237人
    HoloLab Inc.

    View full-size slide

  8. 自己紹介
    HoloLab Inc.

    View full-size slide

  9. ビジネス向けコミュニティ
    https://prtimes.jp/main/html/rd/p/000000005.000023638.html HoloLab Inc.

    View full-size slide

  10. IoTビジネス共創ラボ xR WG
    リーダー 事務局
    参加企業
    HoloLab Inc.

    View full-size slide

  11. IoTビジネス共創ラボ xR WG
    • 目的
    • IoTビジネス共創ラボのつながりからxRの活用事例を創出す

    • 自治体、教育、医療機関など様々な参加企業とのマッチング
    を行う
    • 企業連携を通してxRの社会実装を進める
    HoloLab Inc.

    View full-size slide

  12. IoTビジネス共創ラボ 第1回xR WG勉強会
    • 日時: 2018/3/27(火) 16:00~18:00
    • 申込: https://connpass.com/event/77188/
    • 会場: 日本マイクロソフト 品川本社セミナールーム
    • 内容: xR WG設立趣旨、活動概要説明、参加企業取り組み
    紹介
    • 対象:
    • xRとIoTのビジネス活用にご関心のある皆さま
    • IoTビジネス共創ラボご参加にご関心のある方
    • xRとIoT関連のスタートアップ/開発者の皆さま
    • 備考: 18:00以降、現地懇親会を予定します。
    HoloLab Inc.

    View full-size slide

  13. アジェンダ
    •HoloLens
    •Windows Mixed Reality
    •コラボレーティブ・コンピューティング
    •MR(Mixed Reality)
    •事例紹介
    HoloLab Inc.

    View full-size slide

  14. HoloLens
    HoloLab Inc.

    View full-size slide

  15. HoloLensとは
    HoloLab Inc.

    View full-size slide

  16. HoloLensとは(1/2)
    • マイクロソフト社が発売している、頭部装着型のPC
    • Windows 10が搭載され単体で動作するためHMDではない
    • ケーブルレスである
    • MR(Mixed Reality:複合現実感)と呼ばれ、周囲の現実環境を認
    識し、仮想空間に作用する
    • 今までより高精度なAR
    • VRのような使い方もできるが、現状では視野が狭い
    • 普通のWindows 10アプリ(UWP)も利用できるため用途は広い
    HoloLab Inc.

    View full-size slide

  17. HoloLensとは(2/2)
    • 展開
    • 開発者版($3,000/¥333,800[税込])
    • コマーシャル版($5,000/¥555,800[税込])
    • ハードウェアは同一
    • 日本での展開
    • 2016年12月02日プレオーダー開始
    • 2017年01月18日リリース
    • マイクロソフトストアにてクレジットカード払い
    • https://www.microsoftstore.com/store/msjp/ja_JP/pdp/productID.5082141100
    • 2017年06月07日 発注書注文開始(クレジットカード不要)
    HoloLab Inc.

    View full-size slide

  18. Microsoft HoloLens Commercial Suite
    • 商用利用可能
    • 1年間の保証
    • Development Editionの機能に加えて、企業用の機能が追加
    • Kioskモード
    • Mobile Device Management (MDM) for HoloLens
    • Azure Active Directoryなどの認証機能
    • Windows Update for Business
    • BitLockerなどのデータセキュリティ
    • VPNなどのネットワーク支援
    • Windows Store for Business
    HoloLab Inc.

    View full-size slide

  19. HoloLensのハードウェアスペック(抜粋)
    OS Windows 10
    プロセッサ Intel Atom 32bit
    Microsoft Holographic Processing Unit (HPU 1.0)
    ストレージ 64GB
    メモリ 2GB
    重量 579g
    HoloLab Inc.
    https://www.microsoft.com/ja-jp/hololens/buy

    View full-size slide

  20. HoloLensのハードウェア
    HoloLab Inc.
    https://www.buildinsider.net/small/hololens/001

    View full-size slide

  21. 年齢制限について
    • 13歳未満の使用は想定していない
    HoloLab Inc.

    View full-size slide

  22. HoloLensの用途(1)
    • 一般的なWindowsアプリ(PowerPointやExcelなど)も使えるた
    め、普通のPCのように利用することもできる。
    • マウスやキーボードはBluetoothで接続できる。
    • OneDriveを経由して、データを共有できる。
    • 現状、日本語の入力ができない(英語OSのため)。
    HoloLab Inc.

    View full-size slide

  23. デスクワーク
    HoloLab Inc.

    View full-size slide

  24. HoloLensの用途(2)
    • 3次元のデータを3次元のまま見ることができる。
    • 例)営業の方
    • 普段は2DのPowerPointやExcel、Outlookで仕事
    • 客先では3次元カタログとしてお客さまに見せることで、より具体的なイメージ
    • 複数のHoloLensでデータを共有することで、みんなで同じもの
    を見ることができる。
    HoloLab Inc.

    View full-size slide

  25. 3Dモデル
    HoloLab Inc.
    http://licensecounter.jp/3d-fab/report/20161129_27.html

    View full-size slide

  26. HoloLensの用途(3)
    • 2次元のテキスト、タブレットでは表現できない3次元の情報
    • これを3次元で見ることで、よりイメージしやすくなる
    • 中学、高校生の数学、理科、化学などの適応へはイメージ早い
    • 大学では医学への適応はイメージしやすい
    • プログラミングと組み合わせれば、学ぶ理由にもなる
    • 「数学(勉強)は何に使うのか」への答え
    • プログラムを「学ぶことが目的」から「目的のための手段へ」
    HoloLab Inc.

    View full-size slide

  27. 太陽系と地球
    HoloLab Inc.

    View full-size slide

  28. 人体の構造
    HoloLab Inc.

    View full-size slide

  29. HoloLensの強いところ
    • 安定した位置追跡
    • 競合がないレベル
    • ケーブルレス、スタンドアロン
    • 装着コストが低い
    • 機動力が高い
    HoloLab Inc.

    View full-size slide

  30. HoloLensの弱いところ
    • 視野角が狭い
    • モデルの大きさや見せ方に工夫が必要
    • CPU、GPU性能が低い
    • モデルの作りに工夫が必要
    • 値段が高い
    • ハードウェア構成を考えると納得できるが、高いも
    のは高い
    HoloLab Inc.

    View full-size slide

  31. Windows Mixed Reality
    HoloLab Inc.

    View full-size slide

  32. Windows Mixed Reality(Windows MR)
    https://developer.microsoft.com/en-us/windows/projects/campaigns/windows-mixed-reality
    HoloLab Inc.

    View full-size slide

  33. Windows 10 Fall Creaters Update
    HoloLab Inc.

    View full-size slide

  34. Windows MR Immersive ヘッドセット
    HoloLab Inc.
    https://hololens.connpass.com/event/75691/

    View full-size slide

  35. ヘッドセットの仕様
    パネル解像度 1440x1440x2
    視野角 95度/110度
    フレームレート 90Hz
    トラッキング 内蔵カメラ(Inside-Out)
    HoloLab Inc.

    View full-size slide

  36. ハードウェア要求
    Windows Mixed Reality Ultra PC Windows Mixed Reality PC
    OS Windows 10 Fall Creators Update (RS3) - Home, Pro, Business, Education
    CPU
    Intel Core i5 4590 (第4世代) 4コア 以上
    AMD Ryzen 5 1400 3.4Ghz (デスクトップ), 4コア以上
    Intel Core i5 7200U (第7世代), 2コア
    with Intel® ハイパースレッディング 以上
    メモリ 8GB DDR3 以上 8GB DDR3 デュアルチャネル以上
    ストレージ 10GB以上の空き領域
    グラフィックカード
    NVidia GTX 960/965M/1050以上
    AMD RX 460 以上
    DirectX12対応 GPU(PCIe 3.0 x4+ Link slot)
    内蔵のIntel® HD Graphics 620 以上
    DirectX12対応 GPU
    グラフィックドライバ
    Windows Display Driver Model (WDDM) 2.2
    (2017/7/17 以降)
    Windows Display Driver Model (WDDM) 2.2
    (2017/7/24 以降)
    グラフィック接続端子 HDMI 2.0またはDisplayPort 1.2 HDMI 1.4 または DisplayPort 1.2
    ディスプレイ VGA (800x600)以上の解像度をもつディスプレイ
    USBコネクタ USB 3.0 Type-A または Type-C
    Bluetooth Bluetooth 4.0
    HMDのフレームレート 90Hz 60Hz
    HoloLab Inc.
    https://developer.microsoft.com/ja-jp/windows/mixed-reality/windows_mixed_reality_minimum_pc_hardware_compatibility_guidelines

    View full-size slide

  37. HoloLensとImmersiveヘッドセットの違い
    機能 HoloLens Immersiveヘッドセット
    入力
    視線 〇 〇
    ジェスチャー 〇
    音声 〇 〇
    ゲームパッド 〇 〇
    モーションコントローラー 〇
    知覚と空間
    空間座標 〇 〇
    空間音響 〇 〇
    空間マッピング 〇
    HoloLab Inc.
    https://developer.microsoft.com/en-us/windows/mixed-reality/development_overview

    View full-size slide

  38. Windows Mixed Reality PC Check
    HoloLab Inc.
    https://www.microsoft.com/ja-jp/store/p/windows-mixed-reality-pc-check/9nzvl19n7cnc?rtc=1

    View full-size slide

  39. 例:Razer Blade 1060
    HoloLab Inc.

    View full-size slide

  40. Windows MR Immersiveの強いところ
    • PCに接続するだけでVR環境が手に入る
    • ドライバ、ポータルなどはOS同梱
    • 外部センサー不要
    • コントローラーも外部センサー不要
    • 動作範囲がより自由になる
    • HoloLensでは動作しないような高精細なデータが入る
    • HoloLensと同じアプリ(UWP)で動作する
    • ARとVRの使い分け、コンピューター性能による使い分け
    HoloLab Inc.

    View full-size slide

  41. どこまでも進めるVR
    HoloLab Inc.

    View full-size slide

  42. Windows MR Immersiveの弱いところ
    • ハードウェア的なIPD(瞳孔間距離)の設定ができない
    • カメラ画像の取り込みができない
    • 外部環境を知ることができない
    • 現状ではOculus RiftやHTC Viveと似た特長
    • ソフトウェア(OS含む)、ハードウェアともにまだまだ不安定
    HoloLab Inc.

    View full-size slide

  43. Experience Mixed Reality at World Scale
    HoloLab Inc.
    https://www.youtube.com/watch?v=67yLuiSfMWM

    View full-size slide

  44. Experience Mixed Reality at World Scale
    HoloLab Inc.
    Mobile VR : Gear VR など Desk Scale : Oculus Rift
    Room Scale : HTC Vive World Scale : Windows MR

    View full-size slide

  45. Windows MR プラットフォームとしてのゴール
    HoloLab Inc.
    https://www.youtube.com/watch?v=vNz5Rw6TwCw

    View full-size slide

  46. HoloLab Inc.

    View full-size slide

  47. コラボレーティブ・
    コンピューティング
    HoloLab Inc.

    View full-size slide

  48. コラボレーティブ・コンピューティング
    HoloLab Inc.
    • 2017年5月に開催されたde:code 2017でHoloLensの生みの親で
    あるアレックス・キップマンが発表したもの
    • HoloLensやイマーシブデバイス、PCなどが協調して作業を行う
    https://www.youtube.com/watch?v=JxCUyhjwHW0

    View full-size slide

  49. コラボレーティブ・コンピューティング
    • 同じ場所でHoloLensを装着した人が複数人で作業をしている
    HoloLab Inc.

    View full-size slide

  50. コラボレーティブ・コンピューティング
    • そこにPCを操作している人が遠隔から参加する
    HoloLab Inc.

    View full-size slide

  51. コラボレーティブ・コンピューティング
    • さらにイマーシブデバイスを装着した人も遠隔で参加する
    HoloLab Inc.

    View full-size slide

  52. コラボレーティブ・コンピューティング
    • デバイス、場所によらず同じ空間(現実/仮想)で協調作業を行う
    HoloLab Inc.

    View full-size slide

  53. MR(Mixed Reality)
    HoloLab Inc.

    View full-size slide

  54. MR(Mixed Reality)とは
    • MRとはMixed Realityの略で、複合現実感と訳される
    • AR(拡張現実感)とVR(仮想現実、人工現実感)を含む
    HoloLab Inc.
    https://en.wikipedia.org/wiki/Mixed_reality

    View full-size slide

  55. ARとVR
    HoloLab Inc.
    https://martechtoday.com/google-talks-ar-vr-198573

    View full-size slide

  56. マイクロソフトの考えるMRデバイスの目標
    HoloLab Inc.
    https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

    View full-size slide

  57. マイクロソフトの考えるMRデバイスの現状
    HoloLab Inc.
    https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

    View full-size slide

  58. マイクロソフトの考えるMRデバイスの現状
    HoloLab Inc.
    https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

    View full-size slide

  59. マイクロソフト公式事例紹介
    HoloLab Inc.

    View full-size slide

  60. 項目
    1. Autodesk(オブジェクトやロボットなどの3Dデザイン)
    2. Ford(自動車デザイン)
    3. Trimble(建築)
    4. 小柳建設(建設)
    5. Skype(遠隔支援)
    6. ThyssenKrupp(保守、管理)
    7. JAL(パイロットおよび整備士のトレーニング)
    8. LOWE’S(ショッピング)
    9. ロンドン大学(医療)
    10. さまざまな教育
    他にも多くの事例あり
    https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial
    HoloLab Inc.

    View full-size slide

  61. Microsoft本社トレーニング(2017/6/19-23)
    HoloLab Inc.

    View full-size slide

  62. Autodesk(デザイン)
    HoloLab Inc.
    https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

    View full-size slide

  63. HoloLab Inc.

    View full-size slide

  64. ポイント1
    HoloLab Inc.
    • モデルの3D表示と干渉チェック

    View full-size slide

  65. ポイント2
    HoloLab Inc.
    • ロボットのシミュレーションとリアルタイム編集

    View full-size slide

  66. Ford(自動車デザイン)
    HoloLab Inc.
    https://www.youtube.com/watch?v=WZQ_DQD7F3U

    View full-size slide

  67. HoloLab Inc.

    View full-size slide

  68. ポイント1
    • 既存の車への重畳表示
    HoloLab Inc.

    View full-size slide

  69. ポイント2
    • 角度のシミュレーション
    HoloLab Inc.

    View full-size slide

  70. ポイント3
    • 音声アノテーション
    HoloLab Inc.

    View full-size slide

  71. ポイント4
    • サイドミラーシミュレーション
    HoloLab Inc.

    View full-size slide

  72. Trimble(建築)
    HoloLab Inc.
    https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

    View full-size slide

  73. HoloLab Inc.

    View full-size slide

  74. ポイント1
    • ミニチュアシミュレーション
    HoloLab Inc.

    View full-size slide

  75. ポイント2
    • 実寸大シミュレーション
    HoloLab Inc.

    View full-size slide

  76. ポイント3
    • 実物への重畳とコミュニケーション支援
    HoloLab Inc.

    View full-size slide

  77. 小柳建設(建設)
    HoloLab Inc.
    https://www.youtube.com/watch?v=dW1amJLDwuQ

    View full-size slide

  78. HoloLab Inc.

    View full-size slide

  79. ポイント1
    建設するモデルを3Dで表示(空間共有)
    HoloLab Inc.

    View full-size slide

  80. ポイント2
    工程管理
    HoloLab Inc.

    View full-size slide

  81. ポイント3
    文書や画像をHoloLens内に保存
    HoloLab Inc.

    View full-size slide

  82. Skype(遠隔支援)
    HoloLab Inc.
    https://www.youtube.com/watch?v=iBfzs3G8BEA

    View full-size slide

  83. HoloLab Inc.

    View full-size slide

  84. ポイント1
    見え方
    HoloLab Inc.

    View full-size slide

  85. ポイント2
    遠隔支援
    HoloLab Inc.

    View full-size slide

  86. ThyssenKrupp(保守、管理)
    HoloLab Inc.
    https://www.youtube.com/watch?v=8OWhGiyR4Ns

    View full-size slide

  87. HoloLab Inc.

    View full-size slide

  88. ポイント1
    事前のシミュレーション
    HoloLab Inc.

    View full-size slide

  89. ポイント2
    現場での情報および保守項目リスト
    HoloLab Inc.

    View full-size slide

  90. ポイント3
    遠隔支援および第三者チェック
    HoloLab Inc.

    View full-size slide

  91. 機器を操作するよりデータ可視化
    • IoT機器から取り込んだデータ群をHoloLensで可視化する
    • IoT機器自体を認識して、そのデータを可視化する
    • IoT化が進んでいる建設系との連携
    • Deep LearningやCognitive Services(いわゆるAI)との連携
    HoloLab Inc.

    View full-size slide

  92. JAL(パイロットおよび整備士のトレーニング)
    HoloLab Inc.
    http://press.jal.co.jp/ja/release/201604/002643.html?Fa=1
    https://www.youtube.com/watch?v=GjZgI2oDcwM

    View full-size slide

  93. HoloLab Inc.

    View full-size slide

  94. ポイント
    HoloLab Inc.
    実寸大での表示

    View full-size slide

  95. LOWE’S(ショッピング)
    HoloLab Inc.
    https://www.youtube.com/watch?v=gC_4JxF0e_k

    View full-size slide

  96. HoloLab Inc.

    View full-size slide

  97. ポイント1
    事前にDeep Learningで好みを抽出
    HoloLab Inc.

    View full-size slide

  98. ポイント2
    顧客がHoloLensでシミュレーション体験
    HoloLab Inc.

    View full-size slide

  99. ポイント3
    顧客の行動をPowerBIで分析
    HoloLab Inc.

    View full-size slide

  100. ロンドン大学(医療)
    HoloLab Inc.
    https://www.youtube.com/watch?v=TylDjQ1udZg

    View full-size slide

  101. HoloLab Inc.

    View full-size slide

  102. ポイント1
    CTデータの立体閲覧
    HoloLab Inc.

    View full-size slide

  103. さまざまな教育
    HoloLab Inc.
    https://www.youtube.com/watch?v=7Xv8A9vqeBw

    View full-size slide

  104. HoloLab Inc.

    View full-size slide

  105. ポイント1
    見えないものを見えるように
    HoloLab Inc.

    View full-size slide

  106. ポイント2
    物理シミュレーション
    HoloLab Inc.

    View full-size slide

  107. ポイント3
    演奏補助
    HoloLab Inc.

    View full-size slide

  108. ARとVRの協調
    HoloLab Inc.
    https://www.youtube.com/watch?v=vNz5Rw6TwCw

    View full-size slide

  109. HoloLab Inc.

    View full-size slide

  110. ポイント1
    AR(HoloLens)とVR(Immersive)でのSharing
    HoloLab Inc.

    View full-size slide

  111. ポイント2
    3D動画
    HoloLab Inc.

    View full-size slide

  112. HCap
    HoloLab Inc.
    https://www.youtube.com/watch?v=kZ-XZIV-o8s

    View full-size slide

  113. ホロラボ開発事例紹介
    HoloLab Inc.

    View full-size slide

  114. 開発事例紹介:映像制作分野
    • 体験型広告コンテンツ「HOLO BUILDER™」
    • CM映像制作大手の太陽企画様と共同開発
    • 小さな作業員が、広告主の製品をHoloLens装着者の目の前で組み上げる
    HoloLab Inc.
    https://www.youtube.com/watch?v=oXE5XmOVAWI
    6/28-29 コンテンツ東京出展

    View full-size slide

  115. HoloBuilder
    HoloLab Inc.

    View full-size slide

  116. 開発事例紹介:医療/教育分野
    • 医療法人財団岩井医療財団、稲波脊椎・関節病院様事例
    • 脊椎の外科手術トレーニング
    • カルテ閲覧など多様な利用シナリオ
    • 試作アプリでは
    CTスキャンのデータを
    HoloLensで3Dのままに可視化
    • HoloLens着用者の視線移動により
    インタラクティブに表示
    • Sharing機能対応で、
    複数者でモデル表示の共有可能
    HoloLab Inc.
    *SFPSS 2017(医療系研究会)での体験展示
    http://blog.hololab.co.jp/entry/2017/11/09/104011

    View full-size slide

  117. 稲波病院向けアプリのポイント
    HoloLab Inc.

    View full-size slide

  118. 稲波病院向けアプリのポイント
    HoloLab Inc.

    View full-size slide

  119. 開発事例紹介:建築/製造分野
    • 「AR CAD CLOUD」~製造業向けホロラボ自社開発サービス
    • 製造業や建設建築業が保有する設計データ「CADデータ」を、
    デジタルデータのままに3Dで確認が出来る画期的ソリューション
    • 現状は、設計模型(モックアップ)をコストと時間を掛けて制作
    • PCのディスプレイやプロジェクタの映像で2Dで設計確認
    HoloLab Inc.
    2Dの画面上でのCADデータ確認 CADデータを、データのまま3D確認

    View full-size slide

  120. AR CAD Cloud
    HoloLab Inc.
    https://www.youtube.com/watch?v=YkCALqPSO1E

    View full-size slide

  121. 他社事例紹介
    HoloLab Inc.

    View full-size slide

  122. 野村不動産
    HoloLab Inc.
    https://www.nikkei.com/article/DGXLRSP445791_T20C17A5000000/?au=11

    View full-size slide

  123. 日産
    HoloLab Inc.

    View full-size slide

  124. まとめ
    HoloLab Inc.

    View full-size slide

  125. まとめ
    • 今後HoloLensだけでなく、Windows MRデバイスもリリース
    される。
    • すでに様々な事例が発表されている。
    • 幅広い分野で用途が検討されている。
    • 日本でも複数の会社がすでに利用を開始している。
    HoloLab Inc.

    View full-size slide

  126. http://hololab.co.jp/
    HoloLab Inc.

    View full-size slide