E-Comiq-Zh: Ai Framework For Evaluating Chinese E-commerce Ads

Генеративные модели искусственного интеллекта широко используются для создания рекламных плакатов. Однако развитие генерации опережает автоматизированную оценку качества. Существующие модели акцентируют внимание на общих эстетических характеристиках или низкоуровневых искажениях и не учитывают функциональные критерии, необходимые для дизайна в электронной коммерции.

Особенности оценки китайского контента

Особенно сложно оценивать контент на китайском языке, где сложные иероглифы часто приводят к тонким, но критическим текстовым артефактам, которые остаются незамеченными существующими методами.

E-comIQ-ZH: Фреймворк для оценки

Для решения этой задачи представлен E-comIQ-ZH – фреймворк для оценки китайских рекламных плакатов для электронной коммерции. Создан первый набор данных E-comIQ-18k с многомерными оценками и обоснованиями Chain of Thought (CoT), откалиброванными экспертами. На основе этого набора данных обучена модель E-comIQ-M, специализированная для оценки, соответствующая суждениям экспертов.

E-comIQ-Bench: Автоматизированный бенчмарк

Этот фреймворк позволяет создать E-comIQ-Bench – первый автоматизированный и масштабируемый бенчмарк для генерации китайских рекламных плакатов для электронной коммерции. Эксперименты показали, что E-comIQ-M более точно соответствует стандартам экспертов и позволяет масштабируемо автоматически оценивать рекламные плакаты для электронной коммерции.

Все наборы данных, модели и инструменты оценки будут опубликованы для поддержки будущих исследований в этой области. Код будет доступен по адресу https://github.com/4mm7/E-comIQ-ZH.