Исследователи создали алгоритм, способный улавливать эмоции, вызываемые изображениями и картинами.
«Эта способность будет иметь решающее значение для того, чтобы сделать ИИ не просто умнее, но и, так сказать, более человечным», — говорит он. Панос Ахлиоптас, Аспирант по информатике Стэнфордского университета.
Эксперты из искусственный интеллект теперь они довольно хорошо научились создавать компьютеры, которые могут «видеть» мир вокруг них. Алгоритмы, позволяющие распознавать предметы, животных и виды деятельности в различных сферах. Искусственный интеллект находится на пути к тому, чтобы стать основополагающей технологией беспилотных автомобилей, самолетов и систем безопасности будущего.
Сегодня группа исследователей работает над тем, чтобы научить компьютеры распознавать не только объекты на изображении или картине, но и то, какие чувства эти изображения и картины вызывают у людей.
Я говорю об алгоритмах искусственного эмоционального интеллекта.
ArtEmis, познание искусства через картины
Для этого Ахлиоптас и его команда собрали новый набор данных под названием ArtEmis, который недавно был опубликовано в препрессе arXiv.
Набор данных основан на 81.000 XNUMX картин WikiArt. Состоит из 440.000 письменных ответов от более чем 6.500 человек которые показывают, как картины вызывают у них чувства, и включают объяснения того, почему они выбрали именно эту эмоцию.
Используя эти ответы, Ахлиоптас и команда во главе с профессором инженерии Стэнфордского университета Леонидас Гибас, они обучили нейронных динамиков.
Это искусственный интеллект, который реагирует письменными словами: в данном случае они генерируют эмоциональные реакции на визуальное искусство и определяют их.
Почему Арт?
Исследователи решили использовать именно искусство, поскольку цель художника — вызвать эмоции у зрителя. ArtEmis работает независимо от сюжета, от натюрмортов до портретов людей или абстрактной живописи.
«Эта работа представляет собой новый подход к компьютерному зрению», - отмечает Гибас.
Классическая работа по приобретению компьютерного зрения заключалась в буквальном содержании. «На картинке три собаки» или «кто-то пьет кофе из чашки». Вместо этого нам нужны были описания, которые определяли бы эмоциональное содержание изображения.
Леонидас Гибас
8 эмоциональных категорий
Алгоритм классифицирует изображения и картины по одной из восьми эмоциональных категорий (от изумления до веселья, от страха до печали), а затем объясняет в письменном тексте, что в этих изображениях оправдывает эмоциональное прочтение.
Искусственный интеллект делает свою работу. Они могут «показать» ей образ, о котором она не знала, а она в ответ говорит, что мог бы почувствовать человек, увидев его.
Удивительно, говорят исследователи, но подписи точно отражают абстрактное содержание изображения способами, которые выходят далеко за рамки возможностей существующих алгоритмов компьютерного зрения.
Не только: алгоритм не просто фиксирует широкий эмоциональный опыт полного изображения. Он может расшифровывать различные эмоции на картинах.
ArtEmis идет еще дальше: он также принимает во внимание субъективность и вариативность реакции человека.
Не все люди видят и чувствуют одно и то же, глядя на картины. Кто-то может чувствовать себя счастливым при виде Моны Лизы, кто-то грустит. ArtEmis может различить эти различия.
Инструмент для художников
В краткосрочной перспективе исследователи ожидают, что ArtEmis может стать для художников инструментом оценки своих работ во время создания и обеспечения желаемого эффекта.
Это могло бы дать руководство и вдохновение для направления работы художника. Графический дизайнер, работающий над новым логотипом, может использовать ArtEmis, чтобы добиться эмоционального эффекта.
Все только начинается. От картин до людей.
Позже, после дальнейших исследований и уточнений, алгоритмы, основанные на эмоциях, могут быть усовершенствованы. Искусственный интеллект, который поможет повысить эмоциональную осведомленность таких приложений, как чат-боты и аватары для разговоров.
«Я вижу, как ArtEmis привносит идеи из психологии человека в искусственный интеллект», — говорит Ахлиоптас.
