T2I-ReasonBench: Бенчмарк для генерации изображений на основе текста с учетом логических рассуждений
T2I-ReasonBench: Benchmarking Reasoning-Informed Text-to-Image Generation
August 24, 2025
Авторы: Kaiyue Sun, Rongyao Fang, Chengqi Duan, Xian Liu, Xihui Liu
cs.AI
Аннотация
Мы представляем T2I-ReasonBench — эталонный набор данных для оценки способностей к рассуждению в моделях преобразования текста в изображение (T2I). Он включает четыре измерения: интерпретация идиом, проектирование текстовых изображений, рассуждение на основе сущностей и научное рассуждение. Мы предлагаем двухэтапный протокол оценки для проверки точности рассуждений и качества изображений. Мы тестируем различные модели генерации T2I и предоставляем всесторонний анализ их производительности.
English
We propose T2I-ReasonBench, a benchmark evaluating reasoning capabilities of
text-to-image (T2I) models. It consists of four dimensions: Idiom
Interpretation, Textual Image Design, Entity-Reasoning and
Scientific-Reasoning. We propose a two-stage evaluation protocol to assess the
reasoning accuracy and image quality. We benchmark various T2I generation
models, and provide comprehensive analysis on their performances.