TDMD: Een database voor subjectieve en objectieve kwaliteitsonderzoeken van dynamische kleurenmazen

TDMD: A Database for Dynamic Color Mesh Subjective and Objective Quality Explorations

August 3, 2023

Auteurs: Qi Yang, Joel Jung, Timon Deschamps, Xiaozhong Xu, Shan Liu

cs.AI

Samenvatting

Dynamische gekleurde meshes (DCM) worden veelvuldig gebruikt in diverse toepassingen; deze meshes kunnen echter verschillende processen ondergaan, zoals compressie of transmissie, wat ze kan vervormen en hun kwaliteit kan aantasten. Om de ontwikkeling van objectieve metrieken voor DCM's te vergemakkelijken en de invloed van typische vervormingen op hun perceptie te bestuderen, hebben we de Tencent - dynamic colored mesh database (TDMD) gecreëerd, die acht referentie-DCM-objecten bevat met zes typische vervormingen. Met behulp van verwerkte videosequenties (PVS) afgeleid van de DCM hebben we een grootschalig subjectief experiment uitgevoerd dat resulteerde in 303 vervormde DCM-monsters met gemiddelde beoordelingsscores, waardoor de TDMD naar onze kennis de grootste beschikbare DCM-database is. Deze database stelde ons in staat om de impact van verschillende soorten vervormingen op de menselijke perceptie te bestuderen en aanbevelingen te doen voor DCM-compressie en gerelateerde taken. Daarnaast hebben we drie soorten state-of-the-art objectieve metrieken geëvalueerd op de TDMD, waaronder beeldgebaseerde, puntgebaseerde en videogebaseerde metrieken. Onze experimentele resultaten benadrukken de sterke en zwakke punten van elke metriek, en we geven suggesties voor de selectie van metrieken in praktische DCM-toepassingen. De TDMD zal publiekelijk beschikbaar worden gesteld op de volgende locatie: https://multimedia.tencent.com/resources/tdmd.

English

Dynamic colored meshes (DCM) are widely used in various applications; however, these meshes may undergo different processes, such as compression or transmission, which can distort them and degrade their quality. To facilitate the development of objective metrics for DCMs and study the influence of typical distortions on their perception, we create the Tencent - dynamic colored mesh database (TDMD) containing eight reference DCM objects with six typical distortions. Using processed video sequences (PVS) derived from the DCM, we have conducted a large-scale subjective experiment that resulted in 303 distorted DCM samples with mean opinion scores, making the TDMD the largest available DCM database to our knowledge. This database enabled us to study the impact of different types of distortion on human perception and offer recommendations for DCM compression and related tasks. Additionally, we have evaluated three types of state-of-the-art objective metrics on the TDMD, including image-based, point-based, and video-based metrics, on the TDMD. Our experimental results highlight the strengths and weaknesses of each metric, and we provide suggestions about the selection of metrics in practical DCM applications. The TDMD will be made publicly available at the following location: https://multimedia.tencent.com/resources/tdmd.