モーションキャプチャ概要-2023版
hr.icon
1. モーションキャプチャとは
モーションキャプチャシステムには、大きく分けて以下の種類がある。
1.1 光学式(マーカータイプ)
4-104では2022までOptiTrack Prime 13が設置されていた(現在は撤去済)
https://gyazo.com/195fd1f5ee2ce2bf062acd62ed2f285c
(映像紹介)SIGGRAPH 2022中安撮影(01 授業用実験・教材サーベイフォルダ)
1.2 慣性式(センサー組み込みスーツタイプ)
デモあり
https://gyazo.com/0b8ad1688c41e74abfad6effd6472bdc
Rokoko
Sony mocopi
https://gyazo.com/37664c6708961eb7dd928fc20e4b8b5a
1.3 距離センサ式(Depth Camera)
Azure Kinect
https://gyazo.com/251478ac25b04d68ac57d606143b515f
Realsense
※距離センサと単眼カメラはマーカーレスタイプとも呼ばれる(慣性式がマーカーレスと呼ばれるかは不明)
1.4 単眼カメラ式(ウェブカメラ等)
距離センサと比較して安価なシステムが可能。
BlenderARMocap
https://www.youtube.com/watch?v=pji6IHNCnAk
1.5 AI解析
freemocapやdeepmotionでは、動画解析が可能なため、過去のダンス映像からモーションを生成することができる。
1.6 手の動きの解析(調査中)
leapmotion
Glove型(力覚フィードバックを含む場合がある)
1.7 解析プログラム(調査中)
openpose
freemocap
mediapipe
hr.icon
2. 歴史的背景 まとめ中
2.1 動作分析(Motion Study)
https://www.youtube.com/watch?v=2KnnGeNrvdE
2.2 ロトスコープ
実写映像のコマに手書きでトレースしてアニメーションを制作する手法
hr.icon
3. 応用範囲
映像表現
人の行動分析
感性評価実験
スポーツ科学
リハビリテーション
動物、昆虫等の運動解析、ロボットへの応用
Avatar: Motion Capture Mirros Emotions
Avatarやロードオブザリングのゴラム、キングコングでは、それ以前の身体動作のキャプチャーだけでなく、顔の表情のキャプチャー(Facial Capture)も同時に行うことで、フルCGキャラクターの表現を可能にしている。身体動作だけのMotion Captureと比較してEmotional CaptureやPerformance Captureと呼ばれることもある。
https://www.youtube.com/watch?v=1wK1Ixr-UmM
その他の事例
Issey Miyake A-POC INSIDE, 2007
https://www.youtube.com/watch?v=x4_mK9CebB4
ballet rotoscope https://www.youtube.com/watch?v=yzJk6ww3LD0
hr.icon