要約
2Dヒートマップベースのアプローチは、高性能のために何年もの間、人間のポーズ推定(HPE)を支配してきました。
ただし、2Dヒートマップベースの方法における長年の量子化誤差の問題は、いくつかのよく知られた欠点につながります。1)低解像度入力のパフォーマンスが制限されている。
2)特徴マップの解像度を向上させてローカリゼーションの精度を高めるには、コストのかかる複数のアップサンプリングレイヤーが必要です。
3)量子化誤差を低減するために追加の後処理が採用されています。
これらの問題に対処するために、HPEを水平座標と垂直座標の2つの分類タスクとして再定式化する\textit{SimCC}と呼ばれるまったく新しいスキームを検討することを目指しています。
提案されたSimCCは、各ピクセルをいくつかのビンに均一に分割するため、\emph{sub-pixel}のローカリゼーション精度と低い量子化誤差を実現します。
その恩恵を受けて、SimCCは追加の改良後処理を省略し、特定の設定でアップサンプリングレイヤーを除外できるため、HPEのパイプラインがよりシンプルで効果的になります。
COCO、CrowdPose、およびMPIIデータセットで実施された広範な実験は、SimCCがヒートマップベースの対応物よりも、特に低解像度の設定で大幅に優れていることを示しています。
要約(オリジナル)
The 2D heatmap-based approaches have dominated Human Pose Estimation (HPE) for years due to high performance. However, the long-standing quantization error problem in the 2D heatmap-based methods leads to several well-known drawbacks: 1) The performance for the low-resolution inputs is limited; 2) To improve the feature map resolution for higher localization precision, multiple costly upsampling layers are required; 3) Extra post-processing is adopted to reduce the quantization error. To address these issues, we aim to explore a brand new scheme, called \textit{SimCC}, which reformulates HPE as two classification tasks for horizontal and vertical coordinates. The proposed SimCC uniformly divides each pixel into several bins, thus achieving \emph{sub-pixel} localization precision and low quantization error. Benefiting from that, SimCC can omit additional refinement post-processing and exclude upsampling layers under certain settings, resulting in a more simple and effective pipeline for HPE. Extensive experiments conducted over COCO, CrowdPose, and MPII datasets show that SimCC outperforms heatmap-based counterparts, especially in low-resolution settings by a large margin.
arxiv情報
著者 | Yanjie Li,Sen Yang,Peidong Liu,Shoukui Zhang,Yunxiao Wang,Zhicheng Wang,Wankou Yang,Shu-Tao Xia |
発行日 | 2022-07-05 16:13:26+00:00 |
arxivサイト | arxiv_id(pdf) |
提供元, 利用サービス
arxiv.jp, Google