Perceptual Quality Assessment of Omnidirectional Images

要約

全方位画像・映像は、バーチャルリアリティ（VR）環境において、実世界のシーンの没入感を提供することができる。本論文では、VR環境下で良好な体験品質を提供することが非常に重要であることから、知覚的全方位画像品質評価（IQA）研究を紹介する。まず、全方位IQA（OIQA）データベースを構築し、16枚の元画像と4種類の歪み（JPEG圧縮、JPEG2000圧縮、ガウスぼかし、ガウスノイズ）によって劣化した320枚の歪み画像を収録する。次に、VR環境においてOIQAデータベースの主観品質評価試験を実施する。VR環境では，人間は1回の動作でシーンの一部しか見ることができないことを考慮すると，視覚的注意が非常に重要になる。そこで、品質評価実験の際には、頭部と眼球の動きのデータも追跡しています。このように、原画と歪んだ全方位画像、主観品質評価、頭部・眼球運動データを合わせて、OIQAデータベースを構成しています。このOIQAデータベースを用いて、最新のフルリファレンス（FR）IQA手法を検証し、従来のIQAとは異なる新たな知見を得ることができた。

要約(オリジナル)

Omnidirectional images and videos can provide immersive experience of real-world scenes in Virtual Reality (VR) environment. We present a perceptual omnidirectional image quality assessment (IQA) study in this paper since it is extremely important to provide a good quality of experience under the VR environment. We first establish an omnidirectional IQA (OIQA) database, which includes 16 source images and 320 distorted images degraded by 4 commonly encountered distortion types, namely JPEG compression, JPEG2000 compression, Gaussian blur and Gaussian noise. Then a subjective quality evaluation study is conducted on the OIQA database in the VR environment. Considering that humans can only see a part of the scene at one movement in the VR environment, visual attention becomes extremely important. Thus we also track head and eye movement data during the quality rating experiments. The original and distorted omnidirectional images, subjective quality ratings, and the head and eye movement data together constitute the OIQA database. State-of-the-art full-reference (FR) IQA measures are tested on the OIQA database, and some new observations different from traditional IQA are made.

arxiv情報

提供元, 利用サービス

arxiv.jp, DeepL