人体姿态估计的介绍与应用
姿态估计问题可以分为两大类:2D姿态估计和3D姿态估计。前者是为每个关键点预测一个二维坐标 (x,y) ;后者是为每个关键点预测一个三维坐标 (x,y,z) ,增加了一维深度信息。
2D姿态估计
主要有两种方法,基于回归的方法和基于热度图的方法。
模型预测热力图比直接回归坐标相对容易,模型精度相对更高,因此主流算法更多基于热力图
但预测热力图的计算消耗大于直接回归。
采用计算期望的方式将热力图还原关键点可避免生成多个关键点。
自顶向下方法
基于回归的自顶向下的方法
对于回归的方式可以通过多级级联的方式提升关键点回归的准确性
基于热力图的自顶向下的方法
自底向上方法
单阶段方法
基于Transformer的方法
小结
后续根据这个去看一下该领域相关的论文。
3D姿态估计
在3D姿态估计中,得到的关键点坐标都为相对坐标。
难点:3D人体姿态估计要求从2D图像(或视频)恢复3D信息
人体姿态估计的评估方法