2020-10-24
Actcastを使ってラズパイで姿勢推定してフルトラッキングとかできないかと考えている
PCでの姿勢推定は，VRだとグラボが描画のほうに全力を出しているので，推論に使える計算力は残されていないので厳しい
4K 90fpsとか平気で要求してくる
なのでPCのGPU以外の計算資源(安価なもの)を考える必要がある
Actcast
Webカメラ+TPU
https://github.com/gpsnmeajp/VirtualMotionTracker つかってできないかな
トラッカーの絶対位置と回転を教える必要があり，険しそう
というかこれが
OpenPoseやPoseNetなどを使った姿勢推定は，当然ながら2Dしか取れないわけで，どうやって3Dにすんねんなどの問題がある
VisionPoseがQuest使ったフルトラッキングやってるんだが，どうやってるんだろう
https://www.youtube.com/watch?v=UWxX73arLMU
3Dのモーションキャプチャエンジン持ってるらしい，すげーーーー https://www.next-system.com/visionpose/use/motion-capture
Actcastには3Dの推論がない気がする
そもそも情報取れなくね？？
#日記