ChartQA
Как это работает? Нейросети показывают диаграмму, например продажи мороженого по месяцам, и спрашивают: «Когда купили больше всего?» Задача делится на два уровня: простое считывание (найти максимум, сравнить столбики) и более сложное — интерпретация трендов и частей целого. Создатели намеренно использовали графики разных стилей и источников, чтобы ИИ не запоминал ответы, а учился анализировать визуальные данные.
Пример: аналитик загружает в ИИ-помощника график доходов компании и спрашивает: «Сколько компания заработала за первый и второй кварталы?» Хорошая система, обученная на ChartQA, распознаёт структуру, находит нужные сектора, складывает значения и выдаёт корректный ответ. Без этого теста мы бы думали, что ИИ понимает графики, хотя на деле он просто угадывал слова.
Итог: ChartQA — это компас, показывающий разработчикам, движутся ли они к по-настоящему грамотному в данных ИИ.
Поделиться