BlanketGen — A synthetic blanket occlusion augmentation pipeline for MoCap datasets

要約

人間の動きの分析は最近大幅に改善されましたが、代表的なデータセットが不足しているため、ベッド内の臨床シナリオでは、臨床応用にはまだ遅れをとっています。
この問題に対処するために、BlanketGen を実装しました。これは、ビデオを合成ブランケット オクルージョンで補強するパイプラインです。
このパイプラインを使用して、BlanketGen-3DPW と呼ばれる 3DPW の拡張バージョンを生成しました (コードと詳細情報は https://gitlab.inesctec.pt/brain-lab/brain-lab-public/blanket-gen-releases で入手できます)。
次に、この新しいデータセットを使用して HybrIK モデルを微調整し、これらのシナリオでのパフォーマンスを向上させ、有望な結果を得ました。

要約(オリジナル)

Human motion analysis has seen drastic improvements recently, however, due to the lack of representative datasets, in clinical in-bed scenarios, it is still lagging behind for clinical applications. To address this issue, we implemented BlanketGen, a pipeline that augments videos with synthetic blanket occlusions. With this pipeline, we generated an augmented version of 3DPW called BlanketGen-3DPW (code and further information available at https://gitlab.inesctec.pt/brain-lab/brain-lab-public/blanket-gen-releases ). We then used this new dataset to fine-tune HybrIK model to improve its performance in these scenarios with promising results.

arxiv情報

提供元, 利用サービス

arxiv.jp, Google