Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
手軽なトラッキング技術で遊んでみた
Search
あるど
January 27, 2021
Programming
0
3.3k
手軽なトラッキング技術で遊んでみた
社内LTで発表した内容です
ゆるく遊んだことについてまとめました。
ThreeDPoseUnityBarracudaはお手軽で良きです
あるど
January 27, 2021
Tweet
Share
More Decks by あるど
See All by あるど
Unity WebGL向けにjsでネイティブプラグイン書いた話
mizotake
0
480
OSSをゆるっとやるだけでも 楽しいなって話
mizotake
2
3.7k
GitHub_Actionsをセルフホストランナーで導入する
mizotake
0
3.4k
Kotlin/Native With Unity
mizotake
1
260
Unity開発でCI/CDを使おうと思った時
mizotake
0
1.2k
Other Decks in Programming
See All in Programming
CSC509 Lecture 06
javiergs
PRO
0
240
Pythonスレッドとは結局何なのか? CPython実装から見るNoGIL時代の変化
curekoshimizu
4
1.3k
メモリ不足との戦い〜大量データを扱うアプリでの実践例〜
kwzr
1
870
SpecKitでどこまでできる? コストはどれくらい?
leveragestech
0
520
uniqueパッケージの内部実装を支えるweak pointerの話
magavel
0
920
止められない医療アプリ、そっと Swift 6 へ
medley
1
120
Чего вы не знали о строках в Python – Василий Рябов, PythoNN
sobolevn
0
160
エンジニアとして高みを目指す、 利益を生み出す設計の考え方 / design-for-profit
minodriven
23
12k
XP, Testing and ninja testing ZOZ5
m_seki
2
300
ABEMAモバイルアプリが Kotlin Multiplatformと歩んだ5年 ─ 導入と運用、成功と課題 / iOSDC 2025
akkyie
0
330
dynamic!
moro
9
6.5k
開発者への寄付をアプリ内課金として実装する時の気の使いどころ
ski
0
350
Featured
See All Featured
The Invisible Side of Design
smashingmag
301
51k
Typedesign – Prime Four
hannesfritz
42
2.8k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
26
3.1k
Reflections from 52 weeks, 52 projects
jeffersonlam
352
21k
It's Worth the Effort
3n
187
28k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
252
21k
Building a Modern Day E-commerce SEO Strategy
aleyda
43
7.7k
Rebuilding a faster, lazier Slack
samanthasiow
84
9.2k
Stop Working from a Prison Cell
hatefulcrawdad
271
21k
Music & Morning Musume
bryan
46
6.8k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
12
1.2k
RailsConf 2023
tenderlove
30
1.2k
Transcript
手軽なトラッキング技術で遊んでみた
トラッキング技術が面白そう!
Vtuber
バランスボールとかまで出来なくても全 身トラッキングやってみたい!!
課金しない方法を考える
方法を考える Oculus QuestとOculus Quest2は持ってるので…Oculus Link(PC接続)でどうにからならないか
Oculus Linkは2台同時は 無理だった
https://github.com/Unimakura/QuestTrackingSenderForVMT
やってる人いた…
方法を考える OpenPose
Unityのサンプルプロジェクトの セットアップが面倒だった
方法を考える USBカメラモーションキャプチャーThreeDPoseTrackerの説明
ThreeDPoseUnityBarracuda
digital-standard/ThreeDPoseUnityBarracuda
Webカメラ1つで全身を トラッキングする
ThreeDPoseUnityBarracuda - Barracuda - UPM(UnityPackageManager)経由で入れれる - ニューラルネットワーク推論ライブラリ - .onnx(Open Neural
Network Exchange)を使用する
ThreeDPoseUnityBarracuda - 姿勢推論の結果をBoneのTransformに反映 - 動画経由やWebCam経由などトラッキング対象を選択可
どうせなら自分でモデル 作ったらテンション上がるかも?
https://vroid.com/studio
None
None
OK
口も動かしたい!
https://zenn.dev/mizotake/articles/52933725d6e24fd754f9
よし動かそう
None
簡単に崩れるけど…
全身トラッキング楽しい
おまけ
パフォーマンスが 気になった
Windows (GTX1660Ti)
None
大体20fps弱
M1 mac miniで 動かしてみる
None
6fpsちょい…
がんばれ M1