Vision Proでコーギーを召喚してみた

visionOS Engineer LT会 vol.4での登壇資料です

Transcript

2. Vis ion Proで コーギーを召喚 し て み た Vis ion Proで コーギーを召喚 し て み た Vis ion Proで コーギーを召喚 し て み た
3. 自己紹介 自己紹介 自己紹介 フィグニー株式会社のxRエンジニア 普段作っているもの: PCゲーム、xRアプリ、Slackボット のりつね@noritsunetsune
4. どんなアプリ？ どんなアプリ？ どんなアプリ？
5. Vision Proのアプリを作ってみたい Apple Developer Labに参加してVision Proを触りたい 作った経緯 作った経緯 作った経緯 弊社が以前作ったARアプリのアセットを活用したい
6. アプリの構成 アプリの構成 アプリの構成 ImmersiveSpace RealityView コーギーエリア: Entity 床のアンカー: AnchorEntity コーギー: ModelEntity 床の当たり判定: Entity WindowGroup
7. 処理の流れ 処理の流れ 処理の流れ 1. コーギーを床に配置する 2. コーギーの移動先を指定する 3. コーギーを歩かせる
8. 1. コーギーを床に配置する 1. コーギーを床に配置する 1. コーギーを床に配置する
9. 平面の種類 1.1 床面を検出する AnchorEntity を使うとARKitSessionManager 無しで平面検出できて簡単 ある程度の広さのある何も無い床面をいい感じに見つけられる 検出対象の種類 平面の向き 平面の広さ下限
10. 1.2 コーギーを配置する モデルの読み込みはHappy Beam サンプルを参考にした
11. 2. 移動先を指定する 2. 移動先を指定する 2. 移動先を指定する
12. 2.1 床に当たり判定を付ける InputTargetComponent とCollisionComponent が必要 部屋よりも十分に広い板
13. 2.2 タップイベントを取得 床を見ながらタップジェスチャーをすると視線の先にある床のある点の空間座標を取れる 空間座標を取得したいのでSpatialTapGesture LongPressGesture などもある
14. 2.3 コーギーの移動先の座標を取得 satoshi さんのvisionOS_30Days のDay13 を参考にしました タップ対象である床の当たり判定のローカル座標　→　移動対象であるコーギーの親のローカル座標に変換
15. 3. コーギーを歩かせる 3. コーギーを歩かせる 3. コーギーを歩かせる
16. 3.1 指定した位置へゆっくり移動させる 現在と同じ位置、違う向きのTransform をmove メソッドに指定したら旋回になる
17. 3.2 usdzファイルに含めた歩行アニメーションを取得
18. 3.3 旋回、移動中にアニメーションを再生
19. 解決できて 解決できて 解決できて いない課題 いない課題 いない課題 複数アニメーションを切り替えられない 色々な方法でusdz を書き出したが複数アニメーションをRealityKit 側で 取り出せなかった。1 つのアニメーションデータを分割して読み出して 複数アニメーションにする荒業があるらしい。 コーギーの影が床に落ちない Apple が配布しているusdz で試したら影が落ちた GroundingShadowComponent をコーギーのEntity の子孫全てにse し たが影が落ちなかった。 コーギーが移動中に別の移動先を指定すると 瞬間移動する 座標変換に失敗している気がする SwiftとXcodeに慣れない
20. おしまい おしまい おしまい Thank Thank Thank you! you! you!