第36回OEDC: マイコンを使った『アイテム』でXR体験をリッチに

第36回オープンエッジデバイス研究会での登壇内容です
https://openedgedevice.connpass.com/event/392607/
X: https://x.com/sakutama_11

Transcript

1. マイコンを使った 『アイテム』 で XR体験をもっとリッチに さくたま
2. さくたま（進士さくら） ARドラマー / XRエンジニア ARとドラムを組み合わせたパフォーマンスを展開。 バンド「Doombox」での演出担当。 本職でもソフトウェアエンジニアとして、 空間コンテンツ制作向けのアプリ開発に従事。
3. さくたまの動機: XRによる魔法的なステージ演出の実現 AR（拡張現実） 現実空間の上に情報を重畳 VR（仮想現実） 仮想空間への完全没⼊ MR（複合現実） 現実と仮想の⾼度な相互作⽤ XR: 仮想空間と現実世界を融合させる技術の総称
6. ハンドトラッキング トラッカー(VIVE/mocopi) コントローラー スマートリング(Even R1) XRにおけるインプット
7. 物理インプット×バーチャルエフェクト = 魔法的AR
8. AR路上ライブ：Echo Avenue 初めてインプットにマイコンを採⽤したプロジェクト
9. “キャリーケース カホン” 特徴：旅行のシンボルが 打楽器 🥁 に変身 機能：振動センサー → LED発光 + AR演出 AR楽器② 振動センサー×5 LED Photon 送信 OSC
10. アイテムを「⽣⾝」にできる 技術を極⼒隠蔽したい 「黒⼦」としてのマイコン
11. IMU内蔵スティック 「キャリブレーション」を体験の中でどう意味づけするか...？ 万博: AiRドラム ※市販のエアドラムスティック: IMUでヒット‧⾓度検出
12. バンド活動：Doombox 技術をエンタメコンテンツ化する
13. バンド活動：Doombox BPM/展開同期LED
14. バンド活動：Doombox IMU内蔵武器
15. M5 Stick S3 バッテリー内蔵で最⼩ M5 Atom + バッテリー バッテリーはケース外す 課題①：存在を消すための⼩型化
16. BOBOVRのインスピレーション 取り替え式バッテリー 課題②：電源管理と運⽤の課題
17. 課題③：6DoFトラッキング ⾝軽なトラッカー作ってみたい！ Sppresense Multi IMU ⾚外線マーカー 画像認識
18. ⼀緒に XR体を魔法にする「アイテム」 作りませんか？ ①⼩型化、②バッテリー、③6DoFトラッキングの知⾒教えてください デバイスエンジニア × XRエンジニアのコラボ‧交流 ⽣み出したい！ マイコン界隈の皆様へ
19. マイコン⼊⾨しよう！ 「＋1」のマイコンアイテムで体験を魔法に 物理的感覚で「VRはチープ」を抜け出そう XR界隈の皆様へ デバイスエンジニア × XRエンジニアのコラボ‧交流 ⽣み出したい！
20. Thank you ご清聴ありがとうございました マイコンを使った『アイテム』でXR体験をもっとリッチに