点击下方“AI算法与图像处理”,一起进步!

重磅干货,第一时间送达

f1f4f15b0c4e19149fa215b687433960.png

今天分享一篇2021最新的人体姿态估计综述,这里仅做简单的内容介绍,详细的细节请参考原文,如果对你有所帮助,欢迎分享给你的小伙伴!

标题:Single Person Pose Estimation: A Survey

论文:https://arxiv.org/pdf/2109.10056.pdf

ICCV2021 论文整理:https://github.com/DWCTOD/ICCV2021-Papers-with-Code-Demo

1、摘要

无约束图像和视频中的人体姿态估计是计算机视觉的一项基本任务。为了说明技术上的发展路径,在本次调查中,我们在结构化分类法中介绍了人类姿态方法,特别关注深度学习模型和单人图像设置。具体而言,我们检查和调查了典型人体姿态估计管道的所有组件,包括数据增强、模型架构和主干网络、监督表征、后处理、标准数据集、评估指标。为了展望未来的发展方向,我们最后讨论了人体姿态估计中尚未解决的关键问题和潜在的发展趋势。

深度学习人体姿态估计pipeline:

722d51307f785bc1ca7ded56efd0cf1b.png

模型组件视角下的人体姿态估计分类:

4c9256c6d60dee471979d02fd43cb322.png

2、数据增强

2.1 Random Data Augmentation
  • Flipping

  • Rotation

  • Scaling

  • Color jittering

  • Occlusion

  • Pose-specific augmentations

2.2 Optimized Data Augmentation

Two representative types of learning framework in the literature are adversarial learning and neural architecture search.

文献中两种有代表性的学习框架是对抗式学习和神经结构搜索

3、Model Architecture and Network Design

3.1 Model Architecture
  • Sequential architecture

  • Cascaded architecture

  • Recurrent architecture

  • Adversarial architecture

3.2 Network Design
  • Multi-scale feature learning

  • Prior knowledge incorporation

  • Spatial relation modelling

  • Attention mechanism

4、Post-processing

df2a3f5e869b4566bebcd9752249038d.png

4cbdd422d90a01ecceb6c37e3e270972.png

5、Supervision Representatio

人体姿态估计的方法可分为基于坐标的和基于热力图的方法

6、Human Pose Dataset

数据集示例:

0e8db90c8b13c096bd4258112548b601.png

数据集概述:

10ca7df6cd9fb227d134da2f59fe1e49.png

7、Performance Evaluation Metrics

  • Percentage of Correct Parts (PCP).
  • Percent of Detected Joints (PDJ)

  • Percentage of Correct Keypoints (PCK)

  • Other Metrics.

努力分享优质的计算机视觉相关内容,欢迎关注:

交流群

欢迎加入公众号读者群一起和同行交流,目前有美颜、三维视觉、计算摄影、检测、分割、识别、医学影像、GAN、算法竞赛等微信群


 

 

 

 

 
个人微信(如果没有备注不拉群!)
请注明:地区+学校/企业+研究方向+昵称

下载1:何恺明顶会分享

在「AI算法与图像处理」公众号后台回复:何恺明,即可下载。总共有6份PDF,涉及 ResNet、Mask RCNN等经典工作的总结分析

下载2:终身受益的编程指南:Google编程风格指南

在「AI算法与图像处理」公众号后台回复:c++,即可下载。历经十年考验,最权威的编程规范!

下载3 CVPR2021


在「AI算法与图像处理」公众号后台回复:CVPR,即可下载1467篇CVPR 2020论文 和 CVPR 2021 最新论文

3562d791e9fb4a8db6d87a4eb616c6bd.gif

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐