TDMD: Un Database per Esplorazioni Soggettive e Obiettive sulla Qualità di Mesh Dinamiche a Colori

TDMD: A Database for Dynamic Color Mesh Subjective and Objective Quality Explorations

August 3, 2023

Autori: Qi Yang, Joel Jung, Timon Deschamps, Xiaozhong Xu, Shan Liu

cs.AI

Abstract

Le mesh dinamiche colorate (DCM) sono ampiamente utilizzate in varie applicazioni; tuttavia, queste mesh possono subire diversi processi, come la compressione o la trasmissione, che possono distorcerle e degradarne la qualità. Per facilitare lo sviluppo di metriche oggettive per le DCM e studiare l'influenza delle distorsioni tipiche sulla loro percezione, abbiamo creato il database Tencent - dynamic colored mesh database (TDMD), contenente otto oggetti DCM di riferimento con sei distorsioni tipiche. Utilizzando sequenze video processate (PVS) derivate dalle DCM, abbiamo condotto un esperimento soggettivo su larga scala che ha prodotto 303 campioni DCM distorti con punteggi medi di opinione, rendendo il TDMD il più grande database DCM disponibile a nostra conoscenza. Questo database ci ha permesso di studiare l'impatto di diversi tipi di distorsione sulla percezione umana e di offrire raccomandazioni per la compressione delle DCM e attività correlate. Inoltre, abbiamo valutato tre tipi di metriche oggettive all'avanguardia sul TDMD, tra cui metriche basate su immagini, su punti e su video. I nostri risultati sperimentali evidenziano i punti di forza e di debolezza di ciascuna metrica e forniamo suggerimenti sulla selezione delle metriche nelle applicazioni pratiche delle DCM. Il TDMD sarà reso disponibile pubblicamente al seguente indirizzo: https://multimedia.tencent.com/resources/tdmd.

English

Dynamic colored meshes (DCM) are widely used in various applications; however, these meshes may undergo different processes, such as compression or transmission, which can distort them and degrade their quality. To facilitate the development of objective metrics for DCMs and study the influence of typical distortions on their perception, we create the Tencent - dynamic colored mesh database (TDMD) containing eight reference DCM objects with six typical distortions. Using processed video sequences (PVS) derived from the DCM, we have conducted a large-scale subjective experiment that resulted in 303 distorted DCM samples with mean opinion scores, making the TDMD the largest available DCM database to our knowledge. This database enabled us to study the impact of different types of distortion on human perception and offer recommendations for DCM compression and related tasks. Additionally, we have evaluated three types of state-of-the-art objective metrics on the TDMD, including image-based, point-based, and video-based metrics, on the TDMD. Our experimental results highlight the strengths and weaknesses of each metric, and we provide suggestions about the selection of metrics in practical DCM applications. The TDMD will be made publicly available at the following location: https://multimedia.tencent.com/resources/tdmd.