VR_AR_MR活用事例のご紹介

by HoloLab

Slide 1

Slide 1 text

VR/AR/MR活用事例のご紹介 2018/02/16 株式会社ホロラボ中村薫 HoloLab Inc.

Slide 2

Slide 2 text

自己紹介中村薫株式会社ホロラボ代表取締役CEO • HoloLens/Windows Mixed Realityに特化した会社です • KinectなどDepthセンサーの仕事も継続しています • アプリケーション開発、講演、ハンズオンセミナー、執筆など Microsoft MVP for Windows Development(Apr 2016 - Mar 2017) Microsoft MVP for Kinect for Windows (Apr 2014 - Mar 2016) Microsoft MVP for Visual Studio ALM (Apr 2012 - Mar 2014) http://www.naturalsoftware.jp/ HoloLab Inc.

Slide 3

Slide 3 text

会社概要株式会社ホロラボ(HoloLab Inc.) http://hololab.co.jp/ 所在地：東京都品川区西五反田資本金：2,000,000円設立日：2017年1月18日 HoloLab Inc.

Slide 4

Slide 4 text

業務内容 • 自社サービス開発 • AR CAD Cloudの開発 • HoloLens/Windows Mixed Realityに関する開発支援 • 受託開発(コンサルティング/ディレクションを含む場合もあり) • 研究開発 • コンサルティング • 普及啓もう活動 • セミナー • 開発トレーニング • コミュニティ HoloLab Inc.

Slide 5

Slide 5 text

会社概要 HoloLab Inc. https://blogs.windows.com/japan/2017/11/08/mrpp-japan-announcement-new-partners/ https://twitter.com/mskkpr/status/928104528234336256

Slide 6

Slide 6 text

開発者コミュニティ HoloLab Inc. https://hololens.connpass.com/

Slide 7

Slide 7 text

HoloLens Meetup Vol.1 参加人数ハンズオンミートアップ福岡 10人 17人東京 64人 171人大阪 12人 34人東北 8人 15人計 92人 237人 HoloLab Inc.

Slide 8

Slide 8 text

自己紹介 HoloLab Inc.

Slide 9

Slide 9 text

ビジネス向けコミュニティ https://prtimes.jp/main/html/rd/p/000000005.000023638.html HoloLab Inc.

Slide 10

Slide 10 text

IoTビジネス共創ラボ xR WG リーダー事務局参加企業 HoloLab Inc.

Slide 11

Slide 11 text

IoTビジネス共創ラボ xR WG • 目的 • IoTビジネス共創ラボのつながりからxRの活用事例を創出する • 自治体、教育、医療機関など様々な参加企業とのマッチングを行う • 企業連携を通してxRの社会実装を進める HoloLab Inc.

Slide 12

Slide 12 text

IoTビジネス共創ラボ第1回xR WG勉強会 • 日時: 2018/3/27(火) 16:00～18:00 • 申込: https://connpass.com/event/77188/ • 会場: 日本マイクロソフト品川本社セミナールーム • 内容: xR WG設立趣旨、活動概要説明、参加企業取り組み紹介 • 対象: • xRとIoTのビジネス活用にご関心のある皆さま • IoTビジネス共創ラボご参加にご関心のある方 • xRとIoT関連のスタートアップ／開発者の皆さま • 備考: 18:00以降、現地懇親会を予定します。 HoloLab Inc.

Slide 13

Slide 13 text

アジェンダ •HoloLens •Windows Mixed Reality •コラボレーティブ・コンピューティング •MR(Mixed Reality) •事例紹介 HoloLab Inc.

Slide 14

Slide 14 text

HoloLens HoloLab Inc.

Slide 15

Slide 15 text

HoloLensとは HoloLab Inc.

Slide 16

Slide 16 text

HoloLensとは(1/2) • マイクロソフト社が発売している、頭部装着型のPC • Windows 10が搭載され単体で動作するためHMDではない • ケーブルレスである • MR(Mixed Reality:複合現実感)と呼ばれ、周囲の現実環境を認識し、仮想空間に作用する • 今までより高精度なAR • VRのような使い方もできるが、現状では視野が狭い • 普通のWindows 10アプリ(UWP)も利用できるため用途は広い HoloLab Inc.

Slide 17

Slide 17 text

HoloLensとは(2/2) • 展開 • 開発者版($3,000/¥333,800[税込]) • コマーシャル版($5,000/¥555,800[税込]) • ハードウェアは同一 • 日本での展開 • 2016年12月02日プレオーダー開始 • 2017年01月18日リリース • マイクロソフトストアにてクレジットカード払い • https://www.microsoftstore.com/store/msjp/ja_JP/pdp/productID.5082141100 • 2017年06月07日発注書注文開始(クレジットカード不要) HoloLab Inc.

Slide 18

Slide 18 text

Microsoft HoloLens Commercial Suite • 商用利用可能 • 1年間の保証 • Development Editionの機能に加えて、企業用の機能が追加 • Kioskモード • Mobile Device Management (MDM) for HoloLens • Azure Active Directoryなどの認証機能 • Windows Update for Business • BitLockerなどのデータセキュリティ • VPNなどのネットワーク支援 • Windows Store for Business HoloLab Inc.

Slide 19

Slide 19 text

HoloLensのハードウェアスペック(抜粋) OS Windows 10 プロセッサ Intel Atom 32bit Microsoft Holographic Processing Unit (HPU 1.0) ストレージ 64GB メモリ 2GB 重量 579g HoloLab Inc. https://www.microsoft.com/ja-jp/hololens/buy

Slide 20

Slide 20 text

HoloLensのハードウェア HoloLab Inc. https://www.buildinsider.net/small/hololens/001

Slide 21

Slide 21 text

年齢制限について • 13歳未満の使用は想定していない HoloLab Inc.

Slide 22

Slide 22 text

HoloLensの用途（１） • 一般的なWindowsアプリ(PowerPointやExcelなど)も使えるため、普通のPCのように利用することもできる。 • マウスやキーボードはBluetoothで接続できる。 • OneDriveを経由して、データを共有できる。 • 現状、日本語の入力ができない(英語OSのため)。 HoloLab Inc.

Slide 23

Slide 23 text

デスクワーク HoloLab Inc.

Slide 24

Slide 24 text

HoloLensの用途（２） • 3次元のデータを3次元のまま見ることができる。 • 例）営業の方 • 普段は2DのPowerPointやExcel、Outlookで仕事 • 客先では3次元カタログとしてお客さまに見せることで、より具体的なイメージ • 複数のHoloLensでデータを共有することで、みんなで同じものを見ることができる。 HoloLab Inc.

Slide 25

Slide 25 text

3Dモデル HoloLab Inc. http://licensecounter.jp/3d-fab/report/20161129_27.html

Slide 26

Slide 26 text

HoloLensの用途（３） • 2次元のテキスト、タブレットでは表現できない3次元の情報 • これを3次元で見ることで、よりイメージしやすくなる • 中学、高校生の数学、理科、化学などの適応へはイメージ早い • 大学では医学への適応はイメージしやすい • プログラミングと組み合わせれば、学ぶ理由にもなる • 「数学(勉強)は何に使うのか」への答え • プログラムを「学ぶことが目的」から「目的のための手段へ」 HoloLab Inc.

Slide 27

Slide 27 text

太陽系と地球 HoloLab Inc.

Slide 28

Slide 28 text

人体の構造 HoloLab Inc.

Slide 29

Slide 29 text

HoloLensの強いところ • 安定した位置追跡 • 競合がないレベル • ケーブルレス、スタンドアロン • 装着コストが低い • 機動力が高い HoloLab Inc.

Slide 30

Slide 30 text

HoloLensの弱いところ • 視野角が狭い • モデルの大きさや見せ方に工夫が必要 • CPU、GPU性能が低い • モデルの作りに工夫が必要 • 値段が高い • ハードウェア構成を考えると納得できるが、高いものは高い HoloLab Inc.

Slide 31

Slide 31 text

Windows Mixed Reality HoloLab Inc.

Slide 32

Slide 32 text

Windows Mixed Reality(Windows MR) https://developer.microsoft.com/en-us/windows/projects/campaigns/windows-mixed-reality HoloLab Inc.

Slide 33

Slide 33 text

Windows 10 Fall Creaters Update HoloLab Inc.

Slide 34

Slide 34 text

Windows MR Immersive ヘッドセット HoloLab Inc. https://hololens.connpass.com/event/75691/

Slide 35

Slide 35 text

ヘッドセットの仕様パネル解像度 1440x1440x2 視野角 95度/110度フレームレート 90Hz トラッキング内蔵カメラ(Inside-Out) HoloLab Inc.

Slide 36

Slide 36 text

ハードウェア要求 Windows Mixed Reality Ultra PC Windows Mixed Reality PC OS Windows 10 Fall Creators Update (RS3) - Home, Pro, Business, Education CPU Intel Core i5 4590 (第4世代) 4コア以上 AMD Ryzen 5 1400 3.4Ghz (デスクトップ), 4コア以上 Intel Core i5 7200U (第7世代), 2コア with Intel® ハイパースレッディング以上メモリ 8GB DDR3 以上 8GB DDR3 デュアルチャネル以上ストレージ 10GB以上の空き領域グラフィックカード NVidia GTX 960/965M/1050以上 AMD RX 460 以上 DirectX12対応 GPU(PCIe 3.0 x4+ Link slot) 内蔵のIntel® HD Graphics 620 以上 DirectX12対応 GPU グラフィックドライバ Windows Display Driver Model (WDDM) 2.2 (2017/7/17 以降) Windows Display Driver Model (WDDM) 2.2 (2017/7/24 以降) グラフィック接続端子 HDMI 2.0またはDisplayPort 1.2 HDMI 1.4 または DisplayPort 1.2 ディスプレイ VGA (800x600)以上の解像度をもつディスプレイ USBコネクタ USB 3.0 Type-A または Type-C Bluetooth Bluetooth 4.0 HMDのフレームレート 90Hz 60Hz HoloLab Inc. https://developer.microsoft.com/ja-jp/windows/mixed-reality/windows_mixed_reality_minimum_pc_hardware_compatibility_guidelines

Slide 37

Slide 37 text

HoloLensとImmersiveヘッドセットの違い機能 HoloLens Immersiveヘッドセット入力視線〇〇ジェスチャー〇音声〇〇ゲームパッド〇〇モーションコントローラー〇知覚と空間空間座標〇〇空間音響〇〇空間マッピング〇 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/development_overview

Slide 38

Slide 38 text

Windows Mixed Reality PC Check HoloLab Inc. https://www.microsoft.com/ja-jp/store/p/windows-mixed-reality-pc-check/9nzvl19n7cnc?rtc=1

Slide 39

Slide 39 text

例：Razer Blade 1060 HoloLab Inc.

Slide 40

Slide 40 text

Windows MR Immersiveの強いところ • PCに接続するだけでVR環境が手に入る • ドライバ、ポータルなどはOS同梱 • 外部センサー不要 • コントローラーも外部センサー不要 • 動作範囲がより自由になる • HoloLensでは動作しないような高精細なデータが入る • HoloLensと同じアプリ(UWP)で動作する • ARとVRの使い分け、コンピューター性能による使い分け HoloLab Inc.

Slide 41

Slide 41 text

どこまでも進めるVR HoloLab Inc.

Slide 42

Slide 42 text

Windows MR Immersiveの弱いところ • ハードウェア的なIPD(瞳孔間距離)の設定ができない • カメラ画像の取り込みができない • 外部環境を知ることができない • 現状ではOculus RiftやHTC Viveと似た特長 • ソフトウェア(OS含む)、ハードウェアともにまだまだ不安定 HoloLab Inc.

Slide 43

Slide 43 text

Experience Mixed Reality at World Scale HoloLab Inc. https://www.youtube.com/watch?v=67yLuiSfMWM

Slide 44

Slide 44 text

Experience Mixed Reality at World Scale HoloLab Inc. Mobile VR : Gear VR など Desk Scale : Oculus Rift Room Scale : HTC Vive World Scale : Windows MR

Slide 45

Slide 45 text

Windows MR プラットフォームとしてのゴール HoloLab Inc. https://www.youtube.com/watch?v=vNz5Rw6TwCw

Slide 46

Slide 46 text

HoloLab Inc.

Slide 47

Slide 47 text

コラボレーティブ・コンピューティング HoloLab Inc.

Slide 48

Slide 48 text

コラボレーティブ・コンピューティング HoloLab Inc. • 2017年5月に開催されたde:code 2017でHoloLensの生みの親であるアレックス・キップマンが発表したもの • HoloLensやイマーシブデバイス、PCなどが協調して作業を行う https://www.youtube.com/watch?v=JxCUyhjwHW0

Slide 49

Slide 49 text

コラボレーティブ・コンピューティング • 同じ場所でHoloLensを装着した人が複数人で作業をしている HoloLab Inc.

Slide 50

Slide 50 text

コラボレーティブ・コンピューティング • そこにPCを操作している人が遠隔から参加する HoloLab Inc.

Slide 51

Slide 51 text

コラボレーティブ・コンピューティング • さらにイマーシブデバイスを装着した人も遠隔で参加する HoloLab Inc.

Slide 52

Slide 52 text

コラボレーティブ・コンピューティング • デバイス、場所によらず同じ空間(現実/仮想)で協調作業を行う HoloLab Inc.

Slide 53

Slide 53 text

MR(Mixed Reality) HoloLab Inc.

Slide 54

Slide 54 text

MR(Mixed Reality)とは • MRとはMixed Realityの略で、複合現実感と訳される • AR(拡張現実感)とVR(仮想現実、人工現実感)を含む HoloLab Inc. https://en.wikipedia.org/wiki/Mixed_reality

Slide 55

Slide 55 text

ARとVR HoloLab Inc. https://martechtoday.com/google-talks-ar-vr-198573

Slide 56

Slide 56 text

マイクロソフトの考えるMRデバイスの目標 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

Slide 57

Slide 57 text

マイクロソフトの考えるMRデバイスの現状 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

Slide 58

Slide 58 text

マイクロソフトの考えるMRデバイスの現状 HoloLab Inc. https://developer.microsoft.com/en-us/windows/mixed-reality/mixed_reality

Slide 59

Slide 59 text

マイクロソフト公式事例紹介 HoloLab Inc.

Slide 60

Slide 60 text

項目 1. Autodesk(オブジェクトやロボットなどの3Dデザイン) 2. Ford(自動車デザイン) 3. Trimble(建築) 4. 小柳建設(建設) 5. Skype(遠隔支援) 6. ThyssenKrupp(保守、管理) 7. JAL(パイロットおよび整備士のトレーニング) 8. LOWE’S(ショッピング) 9. ロンドン大学(医療) 10. さまざまな教育他にも多くの事例あり https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial HoloLab Inc.

Slide 61

Slide 61 text

Microsoft本社トレーニング(2017/6/19-23) HoloLab Inc.

Slide 62

Slide 62 text

Autodesk(デザイン) HoloLab Inc. https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

Slide 63

Slide 63 text

HoloLab Inc.

Slide 64

Slide 64 text

ポイント1 HoloLab Inc. • モデルの3D表示と干渉チェック

Slide 65

Slide 65 text

ポイント2 HoloLab Inc. • ロボットのシミュレーションとリアルタイム編集

Slide 66

Slide 66 text

Ford(自動車デザイン) HoloLab Inc. https://www.youtube.com/watch?v=WZQ_DQD7F3U

Slide 67

Slide 67 text

HoloLab Inc.

Slide 68

Slide 68 text

ポイント1 • 既存の車への重畳表示 HoloLab Inc.

Slide 69

Slide 69 text

ポイント2 • 角度のシミュレーション HoloLab Inc.

Slide 70

Slide 70 text

ポイント3 • 音声アノテーション HoloLab Inc.

Slide 71

Slide 71 text

ポイント4 • サイドミラーシミュレーション HoloLab Inc.

Slide 72

Slide 72 text

Trimble(建築) HoloLab Inc. https://www.microsoft.com/microsoft-hololens/ja-jp/hololens-commercial

Slide 73

Slide 73 text

HoloLab Inc.

Slide 74

Slide 74 text

ポイント1 • ミニチュアシミュレーション HoloLab Inc.

Slide 75

Slide 75 text

ポイント2 • 実寸大シミュレーション HoloLab Inc.

Slide 76

Slide 76 text

ポイント3 • 実物への重畳とコミュニケーション支援 HoloLab Inc.

Slide 77

Slide 77 text

小柳建設(建設) HoloLab Inc. https://www.youtube.com/watch?v=dW1amJLDwuQ

Slide 78

Slide 78 text

HoloLab Inc.

Slide 79

Slide 79 text

ポイント1 建設するモデルを3Dで表示(空間共有) HoloLab Inc.

Slide 80

Slide 80 text

ポイント2 工程管理 HoloLab Inc.

Slide 81

Slide 81 text

ポイント3 文書や画像をHoloLens内に保存 HoloLab Inc.

Slide 82

Slide 82 text

Skype(遠隔支援) HoloLab Inc. https://www.youtube.com/watch?v=iBfzs3G8BEA

Slide 83

Slide 83 text

HoloLab Inc.

Slide 84

Slide 84 text

ポイント1 見え方 HoloLab Inc.

Slide 85

Slide 85 text

ポイント2 遠隔支援 HoloLab Inc.

Slide 86

Slide 86 text

ThyssenKrupp(保守、管理) HoloLab Inc. https://www.youtube.com/watch?v=8OWhGiyR4Ns

Slide 87

Slide 87 text

HoloLab Inc.

Slide 88

Slide 88 text

ポイント1 事前のシミュレーション HoloLab Inc.

Slide 89

Slide 89 text

ポイント2 現場での情報および保守項目リスト HoloLab Inc.

Slide 90

Slide 90 text

ポイント3 遠隔支援および第三者チェック HoloLab Inc.

Slide 91

Slide 91 text

機器を操作するよりデータ可視化 • IoT機器から取り込んだデータ群をHoloLensで可視化する • IoT機器自体を認識して、そのデータを可視化する • IoT化が進んでいる建設系との連携 • Deep LearningやCognitive Services(いわゆるAI)との連携 HoloLab Inc.

Slide 92

Slide 92 text

JAL(パイロットおよび整備士のトレーニング) HoloLab Inc. http://press.jal.co.jp/ja/release/201604/002643.html?Fa=1 https://www.youtube.com/watch?v=GjZgI2oDcwM

Slide 93

Slide 93 text

HoloLab Inc.

Slide 94

Slide 94 text

ポイント HoloLab Inc. 実寸大での表示

Slide 95

Slide 95 text

LOWE’S(ショッピング) HoloLab Inc. https://www.youtube.com/watch?v=gC_4JxF0e_k

Slide 96

Slide 96 text

HoloLab Inc.

Slide 97

Slide 97 text

ポイント1 事前にDeep Learningで好みを抽出 HoloLab Inc.

Slide 98

Slide 98 text

ポイント2 顧客がHoloLensでシミュレーション体験 HoloLab Inc.

Slide 99

Slide 99 text

ポイント3 顧客の行動をPowerBIで分析 HoloLab Inc.

Slide 100

Slide 100 text

ロンドン大学(医療) HoloLab Inc. https://www.youtube.com/watch?v=TylDjQ1udZg

Slide 101

Slide 101 text

HoloLab Inc.

Slide 102

Slide 102 text

ポイント1 CTデータの立体閲覧 HoloLab Inc.

Slide 103

Slide 103 text

さまざまな教育 HoloLab Inc. https://www.youtube.com/watch?v=7Xv8A9vqeBw

Slide 104

Slide 104 text

HoloLab Inc.

Slide 105

Slide 105 text

ポイント1 見えないものを見えるように HoloLab Inc.

Slide 106

Slide 106 text

ポイント2 物理シミュレーション HoloLab Inc.

Slide 107

Slide 107 text

ポイント3 演奏補助 HoloLab Inc.

Slide 108

Slide 108 text

ARとVRの協調 HoloLab Inc. https://www.youtube.com/watch?v=vNz5Rw6TwCw

Slide 109

Slide 109 text

HoloLab Inc.

Slide 110

Slide 110 text

ポイント1 AR(HoloLens)とVR(Immersive)でのSharing HoloLab Inc.

Slide 111

Slide 111 text

ポイント2 3D動画 HoloLab Inc.

Slide 112

Slide 112 text

HCap HoloLab Inc. https://www.youtube.com/watch?v=kZ-XZIV-o8s

Slide 113

Slide 113 text

ホロラボ開発事例紹介 HoloLab Inc.

Slide 114

Slide 114 text

開発事例紹介：映像制作分野 • 体験型広告コンテンツ「HOLO BUILDER™」 • CM映像制作大手の太陽企画様と共同開発 • 小さな作業員が、広告主の製品をHoloLens装着者の目の前で組み上げる HoloLab Inc. https://www.youtube.com/watch?v=oXE5XmOVAWI 6/28-29 コンテンツ東京出展

Slide 115

Slide 115 text

HoloBuilder HoloLab Inc.

Slide 116

Slide 116 text

開発事例紹介：医療／教育分野 • 医療法人財団岩井医療財団、稲波脊椎・関節病院様事例 • 脊椎の外科手術トレーニング • カルテ閲覧など多様な利用シナリオ • 試作アプリではＣＴスキャンのデータを HoloLensで3Dのままに可視化 • HoloLens着用者の視線移動によりインタラクティブに表示 • Sharing機能対応で、複数者でモデル表示の共有可能 HoloLab Inc. ＊SFPSS 2017(医療系研究会)での体験展示 http://blog.hololab.co.jp/entry/2017/11/09/104011

Slide 117

Slide 117 text

稲波病院向けアプリのポイント HoloLab Inc.

Slide 118

Slide 118 text

稲波病院向けアプリのポイント HoloLab Inc.

Slide 119

Slide 119 text

開発事例紹介：建築／製造分野 • 「AR CAD CLOUD」～製造業向けホロラボ自社開発サービス • 製造業や建設建築業が保有する設計データ「CADデータ」を、デジタルデータのままに3Dで確認が出来る画期的ソリューション • 現状は、設計模型(モックアップ)をコストと時間を掛けて制作 • PCのディスプレイやプロジェクタの映像で2Dで設計確認 HoloLab Inc. 2Dの画面上でのCADデータ確認 CADデータを、データのまま3D確認

Slide 120

Slide 120 text

AR CAD Cloud HoloLab Inc. https://www.youtube.com/watch?v=YkCALqPSO1E

Slide 121

Slide 121 text

他社事例紹介 HoloLab Inc.

Slide 122

Slide 122 text

野村不動産 HoloLab Inc. https://www.nikkei.com/article/DGXLRSP445791_T20C17A5000000/?au=11

Slide 123

Slide 123 text

日産 HoloLab Inc.

Slide 124

Slide 124 text

まとめ HoloLab Inc.

Slide 125

Slide 125 text

まとめ • 今後HoloLensだけでなく、Windows MRデバイスもリリースされる。 • すでに様々な事例が発表されている。 • 幅広い分野で用途が検討されている。 • 日本でも複数の会社がすでに利用を開始している。 HoloLab Inc.

Slide 126

Slide 126 text

http://hololab.co.jp/ HoloLab Inc.