Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
手軽なトラッキング技術で遊んでみた
Search
あるど
January 27, 2021
Programming
0
3.3k
手軽なトラッキング技術で遊んでみた
社内LTで発表した内容です
ゆるく遊んだことについてまとめました。
ThreeDPoseUnityBarracudaはお手軽で良きです
あるど
January 27, 2021
Tweet
Share
More Decks by あるど
See All by あるど
Unity WebGL向けにjsでネイティブプラグイン書いた話
mizotake
0
480
OSSをゆるっとやるだけでも 楽しいなって話
mizotake
2
3.7k
GitHub_Actionsをセルフホストランナーで導入する
mizotake
0
3.4k
Kotlin/Native With Unity
mizotake
1
260
Unity開発でCI/CDを使おうと思った時
mizotake
0
1.2k
Other Decks in Programming
See All in Programming
Goで実践するドメイン駆動開発 AIと歩み始めた新規プロダクト開発の現在地
imkaoru
4
610
GraphQL×Railsアプリのデータベース負荷分散 - 月間3,000万人利用サービスを無停止で
koxya
1
1.1k
iOSアプリの信頼性を向上させる取り組み/ios-app-improve-reliability
shino8rayu9
0
150
私はどうやって技術力を上げたのか
yusukebe
43
17k
CSC509 Lecture 03
javiergs
PRO
0
330
Let's Write a Train Tracking Algorithm
twocentstudios
0
220
『毎日の移動』を支えるGoバックエンド内製開発
yutautsugi
2
180
CSC509 Lecture 05
javiergs
PRO
0
290
猫と暮らすネットワークカメラ生活🐈 ~Vision frameworkでペットを愛でよう~ / iOSDC Japan 2025
yutailang0119
0
220
dynamic!
moro
9
6.5k
monorepo の Go テストをはやくした〜い!~最小の依存解決への道のり~ / faster-testing-of-monorepos
convto
2
390
大規模アプリのDIフレームワーク刷新戦略 ~過去最大規模の並行開発を止めずにアプリ全体に導入するまで~
mot_techtalk
0
380
Featured
See All Featured
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
333
22k
A better future with KSS
kneath
239
17k
Bash Introduction
62gerente
615
210k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
PRO
188
55k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
33
2.5k
Visualization
eitanlees
148
16k
StorybookのUI Testing Handbookを読んだ
zakiyama
31
6.2k
Why Our Code Smells
bkeepers
PRO
339
57k
Designing for humans not robots
tammielis
254
25k
GraphQLの誤解/rethinking-graphql
sonatard
73
11k
How to train your dragon (web standard)
notwaldorf
96
6.3k
Rails Girls Zürich Keynote
gr2m
95
14k
Transcript
手軽なトラッキング技術で遊んでみた
トラッキング技術が面白そう!
Vtuber
バランスボールとかまで出来なくても全 身トラッキングやってみたい!!
課金しない方法を考える
方法を考える Oculus QuestとOculus Quest2は持ってるので…Oculus Link(PC接続)でどうにからならないか
Oculus Linkは2台同時は 無理だった
https://github.com/Unimakura/QuestTrackingSenderForVMT
やってる人いた…
方法を考える OpenPose
Unityのサンプルプロジェクトの セットアップが面倒だった
方法を考える USBカメラモーションキャプチャーThreeDPoseTrackerの説明
ThreeDPoseUnityBarracuda
digital-standard/ThreeDPoseUnityBarracuda
Webカメラ1つで全身を トラッキングする
ThreeDPoseUnityBarracuda - Barracuda - UPM(UnityPackageManager)経由で入れれる - ニューラルネットワーク推論ライブラリ - .onnx(Open Neural
Network Exchange)を使用する
ThreeDPoseUnityBarracuda - 姿勢推論の結果をBoneのTransformに反映 - 動画経由やWebCam経由などトラッキング対象を選択可
どうせなら自分でモデル 作ったらテンション上がるかも?
https://vroid.com/studio
None
None
OK
口も動かしたい!
https://zenn.dev/mizotake/articles/52933725d6e24fd754f9
よし動かそう
None
簡単に崩れるけど…
全身トラッキング楽しい
おまけ
パフォーマンスが 気になった
Windows (GTX1660Ti)
None
大体20fps弱
M1 mac miniで 動かしてみる
None
6fpsちょい…
がんばれ M1