Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
手軽なトラッキング技術で遊んでみた
Search
あるど
January 27, 2021
Programming
0
2.5k
手軽なトラッキング技術で遊んでみた
社内LTで発表した内容です
ゆるく遊んだことについてまとめました。
ThreeDPoseUnityBarracudaはお手軽で良きです
あるど
January 27, 2021
Tweet
Share
More Decks by あるど
See All by あるど
Unity WebGL向けにjsでネイティブプラグイン書いた話
mizotake
0
430
OSSをゆるっとやるだけでも 楽しいなって話
mizotake
2
2.8k
GitHub_Actionsをセルフホストランナーで導入する
mizotake
0
2.7k
Kotlin/Native With Unity
mizotake
1
220
Unity開発でCI/CDを使おうと思った時
mizotake
0
1.1k
Other Decks in Programming
See All in Programming
Some more adventure of Happy Eyeballs
coe401_
2
180
[DroidKaigi 2024] Android ViewからJetpack Composeへ 〜Jetpack Compose移行のすゝめ〜 / From Android View to Jetpack Compose: A Guide to Migration
syarihu
1
260
Ebitengineの1vs1ゲーム WebRTCの活用
ponyo877
0
370
いまから追い上げる、Jetpack Compose トレーニング
nyafunta9858
0
250
大公開!iOS開発の悩みトップ5 〜iOSDC Japan 2024〜
ryunakayama
0
190
connect-go で面倒くささと戦う / 2024-08-27 #newmo_layerx_go
izumin5210
2
630
Kotlin 2.0 and Beyond
antonarhipov
2
150
令和トラベルにおけるLLM活用事例:社内ツール開発から得た学びと実践
ippo012
0
120
null or undefined
susisu
22
6.2k
Ruby Parser progress report 2024
yui_knk
2
220
New Order in Cascade Sorting Order
mugi_uno
3
2.6k
What you can do with Ruby on WebAssembly
kateinoigakukun
0
160
Featured
See All Featured
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
278
13k
Building Better People: How to give real-time feedback that sticks.
wjessup
359
18k
Stop Working from a Prison Cell
hatefulcrawdad
267
20k
Unsuck your backbone
ammeep
667
57k
Reflections from 52 weeks, 52 projects
jeffersonlam
346
20k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
Building Flexible Design Systems
yeseniaperezcruz
325
37k
Designing Experiences People Love
moore
138
23k
Adopting Sorbet at Scale
ufuk
73
8.9k
Thoughts on Productivity
jonyablonski
66
4.2k
The Power of CSS Pseudo Elements
geoffreycrofte
71
5.2k
Art, The Web, and Tiny UX
lynnandtonic
294
20k
Transcript
手軽なトラッキング技術で遊んでみた
トラッキング技術が面白そう!
Vtuber
バランスボールとかまで出来なくても全 身トラッキングやってみたい!!
課金しない方法を考える
方法を考える Oculus QuestとOculus Quest2は持ってるので…Oculus Link(PC接続)でどうにからならないか
Oculus Linkは2台同時は 無理だった
https://github.com/Unimakura/QuestTrackingSenderForVMT
やってる人いた…
方法を考える OpenPose
Unityのサンプルプロジェクトの セットアップが面倒だった
方法を考える USBカメラモーションキャプチャーThreeDPoseTrackerの説明
ThreeDPoseUnityBarracuda
digital-standard/ThreeDPoseUnityBarracuda
Webカメラ1つで全身を トラッキングする
ThreeDPoseUnityBarracuda - Barracuda - UPM(UnityPackageManager)経由で入れれる - ニューラルネットワーク推論ライブラリ - .onnx(Open Neural
Network Exchange)を使用する
ThreeDPoseUnityBarracuda - 姿勢推論の結果をBoneのTransformに反映 - 動画経由やWebCam経由などトラッキング対象を選択可
どうせなら自分でモデル 作ったらテンション上がるかも?
https://vroid.com/studio
None
None
OK
口も動かしたい!
https://zenn.dev/mizotake/articles/52933725d6e24fd754f9
よし動かそう
None
簡単に崩れるけど…
全身トラッキング楽しい
おまけ
パフォーマンスが 気になった
Windows (GTX1660Ti)
None
大体20fps弱
M1 mac miniで 動かしてみる
None
6fpsちょい…
がんばれ M1