■ 2D pose estimation Human Pose Estimation の研究の変遷 K. Sun, B. Xiao, D. Liu, J. Wang, “Deep High-Resolution Representation Learning for Human Pose Estimation,” In CVPR, 2019.
■ 2D pose estimation ■ 回帰 Human Pose Estimation の研究の変遷 A. Toshev, C. Szegedy, “DeepPose: Human Pose Estimation via Deep Neural Networks,” In CVPR, 2014.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ Human Pose Estimation の研究の変遷 S. E. Wei, V. Ramakrishna, T. Kanade, Y. Sheikh, “Convolutional Pose Machines,” In CVPR, 2016.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation Human Pose Estimation の研究の変遷 I. Habibie, W. Xu, D. Mehta, G. Pons-Moll, C. Theobalt, “In the Wild Human Pose Estimation Using Explicit 2D Features and Intermediate 3D Representations,” In CVPR, 2019.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation ■ 回帰 Human Pose Estimation の研究の変遷 B. Tekin, I. Katircioglu, M. Salzmann, V. Lepetit, P. Fua, “Structured Prediction of 3D Human Pose with Deep Neural Networks,” In BMVC, 2016.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation ■ 回帰 ■ ヒートマップ Human Pose Estimation の研究の変遷 G. Pavlakos, X. Zhou, K. G. Derpanis, K. Daniilidis, “Coarse-to-Fine Volumetric Prediction for Single-Image 3D Human Pose,” In CVPR, 2017.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation ■ 回帰 ■ ヒートマップ ■ 2D pose → 3D pose Human Pose Estimation の研究の変遷 J. Martinez, R. Hossain, J. Romero, J. J. Little, “A simple yet effective baseline for 3d human pose estimation,” In ICCV, 2017.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation ■ 回帰 ■ ヒートマップ ■ 2D pose → 3D pose ■ 2次元姿勢推定 + デプス推定 ■ Shape reconstruction Human Pose Estimation の研究の変遷 G. Pavlakos, V. Choutas, N. Ghorbani, T. Bolkart, A. A. A. Osman, D. Tzionas, M. J. Black, “Expressive Body Capture: 3D Hands, Face, and Body from a Single Image,” In CVPR, 2019.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation ■ 回帰 ■ ヒートマップ ■ 2D pose → 3D pose ■ 2次元姿勢推定 + デプス推定 ■ Shape reconstruction ■ モデルベース Human Pose Estimation の研究の変遷 A. Kanazawa, M. J. Black, D. W. Jacobs, J. Malik, “End-to-end Recovery of Human Shape and Pose,” In CVPR, 2018.
■ 2D pose estimation ■ 回帰 ■ ヒートマップ ■ 3D pose estimation ■ 回帰 ■ ヒートマップ ■ 2D pose → 3D pose ■ 2次元姿勢推定 + デプス推定 ■ Shape reconstruction ■ モデルベース ■ モデルフリー Human Pose Estimation の研究の変遷 G. Varol, D. Ceylan, B. Russell, J. Yang, E. Yumer, I. Laptev, and C. Schmid, “BodyNet: Volumetric inference of 3D human body shapes,” In ECCV, 2018.
3D pose を正しく推定できている場合、姿勢をランダムに回転させてから画像に射影したとき、 射影された 2D pose は有効な分布に属するはずであることを利用 [Drover+, ECCVW’18] ■ 推定された 3D pose をランダムに回転、射影して得られた 2D pose に対し、 射影して得られた 2D pose であるか判定する discriminator を用いて adversarial loss を適用 ■ カメラ視点を方位角 [-π, π]、仰角 [-π/9, π/9] からサンプリングして姿勢を回転 ISO-Adversary 2D pose lift rotate & project adversarial loss 3D pose 2D pose D. Drover, R. MV, C. H. Chen, A. Agrawal, A. Tyagi, C. P. Huynh, “Can 3d pose be learned from 2d projections alone?,” In ECCVW, 2018.
推定された 3D pose を再射影すると元の 2D pose と一致するはずであることを利用 [Chen+, CVPR’19] ■ 2D pose を lift-project-lift し、2D pose、3D pose それぞれに MSE を適用 ■ 中間的な 2D pose に対して ISO-Adversary と同様の adversarial loss を適用 ISO-Cycle 2D pose 3D pose 2D pose 3D pose 2D pose 3D pose lift project adversarial loss lift lift project MSE MSE C. H. Chen, A. Tyagi, A. Agrawal, D. Drover, R. MV, S. Stojanov, J. M Rehg, “Unsupervised 3d pose estimation with geometric self-supervision,” In CVPR, 2019.
nk35jk
yuri00
muraoka7
sensetime_japan
.png){kind=avatar}
researchconf
yumash3
haraduka
koheishinden
mickey_kubo
tathi
kyoun
chokkan
chriscoyier
addyosmani
brianwarren
robhawkes
stephaniewalter
cassininazir
marktimemedia
tanoku
searls
carmenintech
kevinliebholz
davidbonilla