XRの近況とUX/UIについて

This slide provides an organized introduction to the characteristics of UX/UI in the XR space.

Transcript

1. XRの近況と
   
   UX/UIについて
   2023/02/28 Akinen
   Generated by midjourney
   

   View Slide

2. VR・AR、
   やってますか？
   個人的な取り組みと、
   そこから得た知見についてご共有します。
   
   以下は私見であり不正確な推測を含む場合があります。
   

   View Slide

3. 近年、
   広告・PR目的ではあるものの、
   VRプラットフォーム上への出展事例が増えつつある。
   金融・損保業界の取り組み
   

   View Slide

4. マルチデバイスでアクセス可能なプラットフォームと、
   そのユーザー数は着実に増えつつある
   Fortnite、
   VRChat、
   Clusterなど
   「メタバース」
   と呼ばれるプラットフォームが増えつつある。
   
   VRChatについては80億円の資金調達。
   ClusterやREALITYなど、
   スマホからアクセス可能なアプリも人気に。
   
   一方で、
   NFTと絡めてメタバース上の土地を売るバーチャル原野商法も流行。
   端末の処理速度が飛躍的に向上し、
   誰でもスマホで3Dが動かせるようになった
   2000年代の
   「セカンドライフ」
   の時代と比べて、
   ハード面の技術進化が進み、
   できることが増えつつある。
   
   HMDについては画質と重さがネックだったが、
   近年高画質化・軽量化が進みつつある。
   
   　（最近だとパナソニックのMeganeX、
   HTCのVive XR Eliteなど）
   現実的なVR・ARの事業化は、
   まだ検証段階
   さまざまな領域、
   医療や建築の分野でも研究が進んでいる。
   ただし、
   現時点ではゲームや配信が中心であり若い世代が多いため、
   
   エンタメ系以外の企業が事業として成立させるレベルには至っていない。
   
   主な普及の阻害要因としては ①常用するコンテンツの不足、
   ②
   「かける」
   習慣が定着していないこと が挙げられる。
   XR(VR, AR, MR)の流行
   

   View Slide

5. XRによる課題解決の事例
   https://www.startupticker.ch/en/news/almer-
   technologies-begins-series-production-of-its-
   augmented-reality-glasses
   ARグラスにはカメラが内蔵されており、
   専門家が現場作業員を技術サポート。
   
   遠隔保守のほかにも、
   遠隔損傷評価、
   遠
   隔トレーニング、
   遠隔試運転、
   医療支援、
   作業員誘導、
   倉庫での経路最適化など
   作業員の遠隔支援(Zurich)
   NAVITIMEが提供する運転支援システム
   AiRCAM。
   ARで道路交通情報を表示し、
   運転者に危険な状況を通知する。
   
   スマホをフロントに設置する必要があり、
   ストアの評価は二分している模様。
   https://static.cld.navitime.jp/automostorage/
   servicestorage/html/aircam.html
   運転の危険予知・ガイド
   https://mavic.ne.jp/automotiveindustry-3dscan-
   faro/
   交通事故や災害の現場をカメラで撮影・
   転送し、
   その3DデータをHMDで確認する
   ことで遠隔地からも損害調査が可能。
   
   「Luma AI」
   では、
   １分間iPhoneで動画を
   撮影するだけで３Dデータが作成できる。
   3Dスキャンで損害調査
   

   View Slide

6. AIによるコンテンツ不足の解消
   Text to Imageの応用で、
   スカイボックス
   （天球用環境マップテクスチャ）を生成。
   
   数秒で任意の世界を作成できる。
   Text To Skybox
   Promptから3Dモデルを生成するAIで、
   NVIDIAやGoogleが研究している。
   上手
   く生成できるオブジェクトはまだ少ない。
   Text to 3D
   大規模言語モデルと合成音声を使って、
   アバターとの自由な会話が実現できる（可
   能性がある）。
   Text to Speech + GPT
   多大な労力・時間が必要だったコンテンツ制作をAIで自動化する時代へ
   

   View Slide

7. XRUIのプロトタイピング
   業務外でプロトタイプをつくってみました
   ダッシュボードUI（AR） 商品購入UI（VR）
   

   View Slide

8. つくる・調べる中で得た気づき
   

   View Slide

9. 従来のデバイスとの体験の違い
   

   View Slide

10. XRにおけるUIは、
    WebよりゲームUIが近い
    大きく透明なディスプレイを眼前に置き、
    ユーザーの通常の視界に重ねて情報を
    表示する手法。
    
    計器などの情報を見るために視線を動か
    す必要がなく、
    現実では戦闘機などに実
    装されている。
    HUD (Head Up Display)
    ユーザーの関心を惹くために表示される
    UIのこと。
    
    常に表示されるわけではなく、
    目的地の
    ある方向を画面に表示したり、
    アイテムに
    近づくと詳しい情報が表示される。
    POI (Point of Interest)
    ダイエジェティック = 物語世界内に属し
    ているUI。
    UIに現実のオブジェクトや表
    現を取り入れる手法のこと。
    
    何を３D化して、
    何を２DのUIにするかは情
    報量に応じて検討する必要がある。
    （常に
    空間上に表示されるため）
    Diegetic UI
    

    View Slide

11. UIデザインのポイント
    画面サイズが自由でウインドウが不要。
    
    ユーザーが自由に動き回れるため、
    平面
    ではなく3D空間でのインタラクションを
    考慮する必要がある。
    
    場合によっては、
    ボタンではなくVUI（音
    声UI）で操作する方法も考えられる。
    3D空間にUIを「置く」
    BlenderやUnityよりも手軽に作って試せ
    る
    「Sprine」
    や
    「Bezel」
    といった3Dモデ
    リングツールが登場しています。
    
    Figmaのように複数人で作成でき、
    VRで
    URLにアクセスするとすぐにモデリングし
    たものを閲覧可能です。
    プロトタイピング
    視野角のこと。
    VRでは没入感にも影響す
    るため、
    HMDの評価ポイントの１つ。
    
    UIを作成する際は視界に入るか、
    ユー
    ザーとの距離感、
    UIの存在に気づけるか
    等を考慮する必要がある。
    FOV (Field of View)
    

    View Slide

12. まだまだ模索中
    

    View Slide

13. テーマ 「XRにおけるデザイン・開発の先行調査」
    ① Design: UX/UIの調査
    XR空間ではどのようなUIが望ましいか？　入力手段とそのインターフェイスの調査
    ※ AI・セキュリティなどをテーマにした、
    有志による研究会
    やらないこと
    「Web3」
    「NFT」
    「メタバース」
    ② Dev: プロトタイピング
    ・Unityを用いたプロトタイピングによって、
    実際の体験やXR開発のノウハウを蓄積　
    
    ・他社事例や新規事業の実現可能性についても調査し、
    得られた知見を展開する
    Cue_Lab参加者募集
    

    View Slide

14. 私自身もまだ浅学ですが、
    
    ご興味のある方はぜひ小澤までご連絡ください。
    Thank You.
    

    View Slide