Power PlatformをHoloLens 2でいろいろしてみた / PowerPlatform-HoloLens2

2020/8/5(水) 「Power Apps オンライン勉強会+座談会」のスライドです
https://powerapps.connpass.com/event/183425/

Transcript

1. Power Platformを
   HoloLens 2でいろいろしてみた
   2020/0８/05@Power Apps オンライン勉強会+座談会
   株式会社ホロラボ 中村 薫
   

   View Slide

2. 自己紹介
   • 中村 薫
   • @kaorun55
   • 株式会社ホロラボ 代表取締役 CEO
   • https://hololab.co.jp/
   • 「HoloLens 2 入門」という本を書きました
   • https://www.amazon.co.jp/gp/product/4822296938/
   Copyright© HoloLab Inc. 2020 All rights reserved 2
   

   View Slide

3. HoloLens方面から来ました
   Copyright© HoloLab Inc. 2020 All rights reserved 3
   

   View Slide

4. HoloLens 2のご購入はこちらから
   Copyright© HoloLab Inc. 2020 All rights reserved 4
   https://www.microsoft.com/ja-jp/p/holoLens-2/91pnzzznzwcp
   

   View Slide

5. HoloMagicians
   Copyright© HoloLab Inc. 2020 All rights reserved 5
   https://hololens.connpass.com/
   

   View Slide

6. HoloLensとは
   • 頭部装着型のWindows 10 PC
   • 3次元のデータを3次元のまま見ることができる
   • 3次元アプリのほかにEdgeなど2Dアプリも動作する
   • 手の動きや視線を認識して操作できる
   Copyright© HoloLab Inc. 2020 All rights reserved 6
   

   View Slide

7. 空間すべてがコンピューティング環境に
   Copyright© HoloLab Inc. 2020 All rights reserved 7
   

   View Slide

8. MR(Mixed Reality)
   Copyright© HoloLab Inc. 2020 All rights reserved 8
   

   View Slide

9. Mixed Reality (MR)
   MR(Mixed Reality)
   • MR(Mixed Reality: 複合現実感)
   • AR(Augmented Reality: 拡張現実感)
   • VR(Virtual Reality: 仮想現実、人工現実感)
   • AV(Augmented Virtuality: 拡張仮想感)
   Copyright© HoloLab Inc. 2020 All rights reserved 9
   https://en.wikipedia.org/wiki/Mixed_reality
   Real
   Environment
   Augmented
   Reality (AR)
   Virtual
   Environment
   Augmented
   Virtuality (AV)
   

   View Slide

10. Mixed Reality (MR)
    MR(Mixed Reality)
    Copyright© HoloLab Inc. 2020 All rights reserved 10
    https://en.wikipedia.org/wiki/Mixed_reality
    Real
    Environment
    Augmented
    Reality (AR)
    Virtual
    Environment
    Augmented
    Virtuality (AV)
    

    View Slide

11. Power PlatformとMR
    Copyright© HoloLab Inc. 2020 All rights reserved 12
    

    View Slide

12. Power PlatformとMR
    Dynamics 365 Remote Assist
    • 遠隔作業支援
    • Dynamics 365 for Field Service
    • Microsoft Teams
    Copyright© HoloLab Inc. 2020 All rights reserved 13
    Dynamics 365 Guides
    • 現場作業支援
    • PowerApps
    • PowerBI
    Dynamics 365 Product Visualize
    • 販売支援
    • Dynamics 365 Sales
    https://dynamics.microsoft.com/ja-jp/mixed-reality/overview/
    

    View Slide

13. Dynamics 365 Guides と PowerApps
    Copyright© HoloLab Inc. 2020 All rights reserved 14
    https://www.youtube.com/watch?v=QRv1IW8rL38
    

    View Slide

14. PowerAppsとMR
    3Dで表示
    View In 3D
    MRで表示
    View In MR
    MRで測定
    Measure In MR
    MRで図形を表示
    View Shape In MR
    https://docs.microsoft.com/ja-jp/powerapps/maker/canvas-apps/mixed-reality-overview
    Copyright© HoloLab Inc. 2020 All rights reserved 15
    

    View Slide

15. なぜHoloLensなのに
    Power Platformをやってるのか
    Copyright© HoloLab Inc. 2020 All rights reserved 16
    

    View Slide

16. HoloLensアプリ開発状況の変化
    課題
    • HoloLensと業務システムをどうつなぐか
    • APIなど接続方法はある ？
    • セキュリティは問題ない ？
    • ネットワークはつながる ？
    Copyright© HoloLab Inc. 2020 All rights reserved 17
    いままで
    ・PoC(Proof of Concept: 概念実証)中心
    ・HoloLensが中心
    これから
    ・実運用
    ・HoloLensは業務やシステムの一部
    

    View Slide

17. HoloLensをシステムに組み込む際の環境
    Copyright© HoloLab Inc. 2020 All rights reserved 18
    サーバー
    Unityを使ったアプリ
    • 3Dコンテンツ
    • サーバーとの連携
    ※ Unity: HoloLensアプリ開発に利用する開発環境
    HoloLens
    サーバー
    Unityを使ったアプリ
    • 3Dコンテンツ
    PowerApps
    • サーバーとの連携
    HoloLens
    業務部分と支援部分を分けた方がいいんじゃないか
    という仮説
    いままで これから
    

    View Slide

18. HoloLens 2 + PowerAppsで
    作ってみた
    Copyright© HoloLab Inc. 2020 All rights reserved 19
    

    View Slide

19. 構成
    Copyright© HoloLab Inc. 2020 All rights reserved 20
    シナリオ
    ・点検や検査で該当の場所を記録する
    HoloLens ２
    • 次の場所を案内する
    • PowerAppsを起動する
    PowerApps
    • 場所の写真を撮影して保存する
    サーバー
    Unityを使ったアプリ
    • 3Dコンテンツ
    PowerApps
    • サーバーとの連携
    HoloLens
    

    View Slide

20. View Slide

21. Power Automateも入れてみる
    

    View Slide

22. まとめ
    • HoloLens 2とPowerAppsの相性はよさそう
    • 逆(PowerAppsにHoloLensでの活用)もまたしかり
    • HoloLens 2にPowerAppsを組み合わせることで、
    業務アプリ部分と3次元での支援部分を切り離すことができる
    • これによって、HoloLens 2を実運用する際の課題が回避できる可能性(期待)
    • PowerAppsの起動時間が課題(遅い)
    • PowerApps自体は手軽なのでTry&Errorがしやすい
    • 簡単にWebとデータベースを組み合わせたアプリが作れるのが良い
    • 独特の考え方に慣れるまでは少し大変
    • 基本から外れると結構難しい
    Copyright© HoloLab Inc. 2020 All rights reserved 23
    

    View Slide

23. このほかの取り組み
    Copyright© HoloLab Inc. 2020 All rights reserved 24
    https://www.youtube.com/watch?v=-QLk_Qo4YLk
    de:code夏まつり
    ～よりコミュニティを楽しくするためのコミュニティのすすめ the FINAL
    2020/8/8(土) 13:00 〜 15:00
    https://msdevjp.connpass.com/event/183747/
    @tarukosu
    

    View Slide

24. View Slide