Upgrade to Pro — share decks privately, control downloads, hide ads and more …

手軽なトラッキング技術で遊んでみた

Sponsored · SiteGround - Reliable hosting with speed, security, and support you can count on. →
Avatar for あるど あるど
January 27, 2021
Programming
3.9k
0

 手軽なトラッキング技術で遊んでみた

社内LTで発表した内容です
ゆるく遊んだことについてまとめました。
ThreeDPoseUnityBarracudaはお手軽で良きです

Avatar for あるど

あるど

January 27, 2021

More Decks by あるど

See All by あるど
Unity WebGL向けにjsでネイティブプラグイン書いた話
Avatar for あるど mizotake
0
520
OSSをゆるっとやるだけでも 楽しいなって話
Avatar for あるど mizotake
2
4.3k
GitHub_Actionsをセルフホストランナーで導入する
Avatar for あるど mizotake
0
4k
Kotlin/Native With Unity
Avatar for あるど mizotake
1
300
Unity開発でCI/CDを使おうと思った時
Avatar for あるど mizotake
0
1.2k

Other Decks in Programming

See All in Programming
仕様書を書く前にハーネスを作る - Agent Native開発は「探索を速く、判定を固く」
Avatar for Gota gotalab555
4
1.7k
仕様駆動開発の消費期限
Avatar for watany watany
20
8.8k
レビュー履歴をAIに食わせて、 Compose移行を加速するs
Avatar for Yuki Shiho shihochan
0
160
Japan Community Day at Kubecon + CloudNativeCon Japan 2026: Learning Container Privilege Control by Building My Own Low-Level Container Runtime
Avatar for ternbusty ternbusty
1
170
「人を評価する AI」の 設計と実装 
Avatar for 奈良亮耶 ryoyanara
0
220
jsmini JavaScript Engine を作ってみた話
Avatar for Yosuke Furukawa yosuke_furukawa
PRO
0
350
PostgreSQL 18で考えるUUID主キー
Avatar for Kazuhiro Seo kazuhiro1982
0
490
源内ハンズオン概要編
Avatar for Hideyuki Nagata hideg
0
200
ソフトウェアラスタライザ
Avatar for Fadis fadis
0
180
How I Won Prize Money at a Hackathon Using Codex and Symphony Alpha
Avatar for yasei no otoko yasei_no_otoko
0
120
人間の目はかわらない、だからJPEGは30年もつ
Avatar for yuzneri yuzneri
12
19k
React本体のコードリーディング
Avatar for high-g high_g_engineer
1
150

Featured

See All Featured
SEO for Brand Visibility & Recognition
Avatar for Aleyda Solis aleyda
0
4.7k
Unsuck your backbone
Avatar for Amy Palamountain ammeep
672
58k
YesSQL, Process and Tooling at Scale
Avatar for Rocio Delgado rocio
174
15k
Making the Leap to Tech Lead
Avatar for Ryan Cromwell cromwellryan
135
10k
How Software Deployment tools have changed in the past 20 years
Avatar for Geshan Manandhar geshan
1
34k
Why Mistakes Are the Best Teachers: Turning Failure into a Pathway for Growth
Avatar for Umar Saidu Auna auna
0
210
Gemini Prompt Engineering: Practical Techniques for Tangible AI Outcomes
Avatar for Mfonobong Umondia mfonobong
2
490
Fashionably flexible responsive web design (full day workshop)
Avatar for Andy Clarke malarkey
408
67k
Primal Persuasion: How to Engage the Brain for Learning That Lasts
Avatar for Mike Taylor tmiket
0
430
Principles of Awesome APIs and How to Build Them.
Avatar for Keavy McMinn keavy
128
18k
B2B Lead Gen: Tactics, Traps & Triumph
Avatar for Sophie Logan marketingsoph
0
220
Reality Check: Gamification 10 Years Later
Avatar for Sebastian Deterding codingconduct
0
2.3k

Transcript

  1. 手軽なトラッキング技術で遊んでみた

  2. トラッキング技術が面白そう！

  3. Vtuber

  4. バランスボールとかまで出来なくても全 身トラッキングやってみたい！！

  5. 課金しない方法を考える

  6. 方法を考える Oculus QuestとOculus Quest2は持ってるので…Oculus Link(PC接続)でどうにからならないか

  7. Oculus Linkは2台同時は 無理だった

  8. https://github.com/Unimakura/QuestTrackingSenderForVMT

  9. やってる人いた…

  10. 方法を考える OpenPose

  11. Unityのサンプルプロジェクトの セットアップが面倒だった

  12. 方法を考える USBカメラモーションキャプチャーThreeDPoseTrackerの説明

  13. ThreeDPoseUnityBarracuda

  14. digital-standard/ThreeDPoseUnityBarracuda

  15. Webカメラ1つで全身を トラッキングする

  16. ThreeDPoseUnityBarracuda - Barracuda - UPM(UnityPackageManager)経由で入れれる - ニューラルネットワーク推論ライブラリ - .onnx(Open Neural

    Network Exchange)を使用する

  17. ThreeDPoseUnityBarracuda - 姿勢推論の結果をBoneのTransformに反映 - 動画経由やWebCam経由などトラッキング対象を選択可

  18. どうせなら自分でモデル 作ったらテンション上がるかも？

  19. https://vroid.com/studio

  20. None
  21. None

  22. OK

  23. 口も動かしたい！

  24. https://zenn.dev/mizotake/articles/52933725d6e24fd754f9

  25. よし動かそう

  26. None

  27. 簡単に崩れるけど…

  28. 全身トラッキング楽しい

  29. おまけ

  30. パフォーマンスが 気になった

  31. Windows (GTX1660Ti)

  32. None

  33. 大体20fps弱

  34. M1 mac miniで 動かしてみる

  35. None

  36. 6fpsちょい…

  37. がんばれ M1