Исследователи создали алгоритм, способный улавливать эмоции, вызываемые изображениями и картинами.
«Эта способность станет ключом к тому, чтобы сделать ИИ не только умнее, но и, так сказать, более гуманным», — говорит он. Панос Ахлиоптас, Аспирант по информатике Стэнфордского университета.
Эксперты из искусственный интеллект они довольно хорошо научились делать компьютеры, которые могут «видеть» окружающий их мир. Алгоритмы, позволяющие распознавать предметы, животных и деятельность в различных сферах. ИИ вот-вот станет основной технологией автомобилей, самолетов и автономных систем безопасности будущего.
Сегодня группа исследователей работает над тем, чтобы научить компьютеры распознавать не только объекты на изображении или картине, но и то, какие чувства эти изображения и картины вызывают у людей.
Я говорю об алгоритмах искусственного эмоционального интеллекта.
ArtEmis, познание искусства через картины
Для этого Ахлиоптас и его команда собрали новый набор данных под названием ArtEmis, который недавно был опубликовано в препрессе arXiv.
Набор данных основан на 81.000 XNUMX картин WikiArt. Состоит из 440.000 письменных ответов от более чем 6.500 человек которые показывают, как картины вызывают у них чувства, и включают объяснения того, почему они выбрали именно эту эмоцию.
Используя эти ответы, Ахлиоптас и команда во главе с профессором инженерии Стэнфордского университета Леонидас Гибас, они обучили нейронных динамиков.
Это искусственные интеллекты, которые отвечают письменными словами: в этом случае они генерируют эмоциональные реакции на изобразительное искусство и определяют их.
Почему Арт?
Исследователи решили использовать именно искусство, поскольку цель художника - вызвать эмоции у зрителя. ArtEmis работает независимо от сюжета, от натюрмортов до портретов людей или абстрактной живописи.
«Эта работа представляет собой новый подход к компьютерному зрению», - отмечает Гибас.
Классическая работа по приобретению компьютерного зрения касалась буквального содержания. «На картинке три собаки» или «кто-то пьет кофе из чашки». Вместо этого нам нужны были описания, определяющие эмоциональное содержание изображения.
Леонидас Гибас
8 эмоциональных категорий
Алгоритм классифицирует изображения и картины по одной из восьми эмоциональных категорий (от удивления до веселья, от страха до печали), а затем объясняет в письменном тексте, что в этих изображениях оправдывает эмоциональное прочтение.
Искусственный интеллект делает свое дело. Они могут «показать» ей образ, которого она не знала, и в ответ она скажет, что может чувствовать человек, увидев его.
Удивительно, но исследователи говорят, что подписи точно отражают абстрактное содержание изображения способами, которые выходят далеко за рамки возможностей существующих алгоритмов компьютерного зрения.
Не только: алгоритм не просто захватывает широкий эмоциональный опыт полной картины. Он может расшифровывать различные эмоции в картинах.
ArtEmis идет еще дальше: он также принимает во внимание субъективность и вариативность реакции человека.
Не все люди видят и чувствуют одно и то же, глядя на картины. Кто-то может чувствовать себя счастливым при виде Моны Лизы, кто-то грустит. ArtEmis может различить эти различия.
Инструмент для художников
Исследователи ожидают, что в краткосрочной перспективе ArtEmis может стать инструментом для художников, позволяющим оценивать их работы во время создания и обеспечивать желаемое влияние их работы.
Это может служить руководством и источником вдохновения для работы художника. Графический дизайнер, работающий над новым логотипом, может использовать ArtEmis для устранения его эмоционального эффекта.
Это только начало. От картин к людям.
Позже, после дальнейших исследований и уточнений, алгоритмы, основанные на эмоциях, могут быть усовершенствованы. Искусственный интеллект, который поможет повысить эмоциональную осведомленность таких приложений, как чат-боты и аватары для разговоров.
«Я вижу, как ArtEmis привносит идеи из человеческой психологии в искусственный интеллект», — говорит Ахлиоптас.
