Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
手軽なトラッキング技術で遊んでみた
Search
あるど
January 27, 2021
Programming
0
2.7k
手軽なトラッキング技術で遊んでみた
社内LTで発表した内容です
ゆるく遊んだことについてまとめました。
ThreeDPoseUnityBarracudaはお手軽で良きです
あるど
January 27, 2021
Tweet
Share
More Decks by あるど
See All by あるど
Unity WebGL向けにjsでネイティブプラグイン書いた話
mizotake
0
440
OSSをゆるっとやるだけでも 楽しいなって話
mizotake
2
3.1k
GitHub_Actionsをセルフホストランナーで導入する
mizotake
0
2.9k
Kotlin/Native With Unity
mizotake
1
230
Unity開発でCI/CDを使おうと思った時
mizotake
0
1.1k
Other Decks in Programming
See All in Programming
タクシーアプリ『GO』のリアルタイムデータ分析基盤における機械学習サービスの活用
mot_techtalk
4
1.4k
アジャイルを支えるテストアーキテクチャ設計/Test Architecting for Agile
goyoki
9
3.3k
WebフロントエンドにおけるGraphQL(あるいはバックエンドのAPI)との向き合い方 / #241106_plk_frontend
izumin5210
4
1.4k
What’s New in Compose Multiplatform - A Live Tour (droidcon London 2024)
zsmb
1
470
Jakarta EE meets AI
ivargrimstad
0
560
Better Code Design in PHP
afilina
PRO
0
130
Compose 1.7のTextFieldはPOBox Plusで日本語変換できない
tomoya0x00
0
190
距離関数を極める! / SESSIONS 2024
gam0022
0
280
シェーダーで魅せるMapLibreの動的ラスタータイル
satoshi7190
1
480
EventSourcingの理想と現実
wenas
6
2.3k
聞き手から登壇者へ: RubyKaigi2024 LTでの初挑戦が 教えてくれた、可能性の星
mikik0
1
130
ヤプリ新卒SREの オンボーディング
masaki12
0
130
Featured
See All Featured
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
25
1.8k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
44
6.8k
Building Flexible Design Systems
yeseniaperezcruz
327
38k
Measuring & Analyzing Core Web Vitals
bluesmoon
4
120
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
42
9.2k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
28
9.1k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
159
15k
Imperfection Machines: The Place of Print at Facebook
scottboms
265
13k
XXLCSS - How to scale CSS and keep your sanity
sugarenia
246
1.3M
Bash Introduction
62gerente
608
210k
We Have a Design System, Now What?
morganepeng
50
7.2k
Transcript
手軽なトラッキング技術で遊んでみた
トラッキング技術が面白そう!
Vtuber
バランスボールとかまで出来なくても全 身トラッキングやってみたい!!
課金しない方法を考える
方法を考える Oculus QuestとOculus Quest2は持ってるので…Oculus Link(PC接続)でどうにからならないか
Oculus Linkは2台同時は 無理だった
https://github.com/Unimakura/QuestTrackingSenderForVMT
やってる人いた…
方法を考える OpenPose
Unityのサンプルプロジェクトの セットアップが面倒だった
方法を考える USBカメラモーションキャプチャーThreeDPoseTrackerの説明
ThreeDPoseUnityBarracuda
digital-standard/ThreeDPoseUnityBarracuda
Webカメラ1つで全身を トラッキングする
ThreeDPoseUnityBarracuda - Barracuda - UPM(UnityPackageManager)経由で入れれる - ニューラルネットワーク推論ライブラリ - .onnx(Open Neural
Network Exchange)を使用する
ThreeDPoseUnityBarracuda - 姿勢推論の結果をBoneのTransformに反映 - 動画経由やWebCam経由などトラッキング対象を選択可
どうせなら自分でモデル 作ったらテンション上がるかも?
https://vroid.com/studio
None
None
OK
口も動かしたい!
https://zenn.dev/mizotake/articles/52933725d6e24fd754f9
よし動かそう
None
簡単に崩れるけど…
全身トラッキング楽しい
おまけ
パフォーマンスが 気になった
Windows (GTX1660Ti)
None
大体20fps弱
M1 mac miniで 動かしてみる
None
6fpsちょい…
がんばれ M1