Нейросеть ResMem может предсказать, какие произведения искусства станут известными

ResMem — это нейронная сеть, которая может составлять прогноз запоминаемости изображений, не зависящий от их содержания, цвета или культурной значимости.

Нейросеть содержит в своей основе модели, схожие со зрительной системой человека, и искусственные «нейроны», с помощью которых учится устанавливать соответствие между изображением и уровнем его запоминаемости. После этого ResMem может применять полученный алгоритм уже к новым, ранее не знакомым ему изображениям.

Важность новой разработки состоит в следующих возможностях ее применения:

— для конструирования произведений искусства, которые будут привлекательны для рекламодателей;

— для разработки эффективных образовательных материалов;

— для создания новых подходов к ранней диагностике болезни Альцгеймера.

При создании компьютерной модели, ученые из Чикагского университета провели ряд экспериментов по оценке запоминаемости картин, находящихся в Чикагском институте искусств. Для этом использовались как онлайн-занятия, где участники эксперимента в определенное время нажимали на клавиши клавиатуры, так и посещение галереи, где люди отмечали свои воспоминания после.

В результате было установлено, что на запоминаемость произведения искусства чаще всего влияет его размер и расположение в галерее. Аналогичные картины выделила и нейросеть ResMem.

Вместе с тем, на сегодняшний день до конца непонятно, какие именно критерии использует нейросеть, чтобы определять запоминаемость произведений искусства, несмотря на совпадение с результатами проведенного эксперимента. При этом команда разработчиков считает, что запоминаемость в данном случае — это нечто большее, чем просто набор характеристик, которые можно применить к какой-то картине. Возможно, запоминаемость связана с тем, насколько легко мозг обрабатывает изображение и как определяет приоритеты того, что следует запомнить.

Сейчас модель ResMem находится в открытом доступе за исключением коммерческого использования.

При этом исследование ее алгоритма для определения запоминаемости продолжается. Так, ученые планируют провести художественный конкурс, целью которого будет создание самой запоминающейся или самой забывающейся картины. По его результатам будет организована выставка работ с последующей оценкой их посетителями по критерию запоминаемости и составление аналогичного прогноза нейросетью ResMem.