Нейросеть научилась генерировать мемы

Татьяна Новак

Исследователи из Стэнфордского университета научили нейросеть придумывать подписи к мемам-картинкам. Исследование опубликовано на Arxiv.org.

Авторы использовали программу Dank Learning, работа которой состоит из двух частей: распознавания изображений и — и более сложной части — создания подходящих подписей. Генерированием теста занимается нейросеть с долгой краткосрочной памятью (LTSM), на разработку которой учёных вдохновил алгоритм компании Google под названием Show and Tell: он умеет создавать текстовые описания к изображениям.

Программу обучили на 400 тысячах изображений с сайта Meme Generator — 2600 уникальных картинках с разными вариантами подписей. Чтобы упростить задачу, учёные отобрали те мемы, подписи к которым люди придумывают примерно по одному шаблону. Например, подпись к мему с Боромиром их «Властелина колец» всегда начинается со слов «Нельзя так просто взять и…» .

Пример мема с Боромиром: "Нельзя так просто взять и сделать мемы с помощью глубокого обучения"

По словам учёных, нейросеть уже делает успехи — большинство мемов, по крайней мере, вписываются в заданный шаблон.

Подпись от нейросети: Мне надо готовиться к экзаменам

Тем не менее, попадаются и бессмысленные варианты. Например, к мему с рэпером Xzibit нейросеть придумала такую подпись: «Эй, чувак, я слышал ты любишь мемы. Так вот, однажды мне попала стрела в колено».

Примеры мемов, созданных нейросетью

Авторы хотят, чтобы Dank Learning делал смешные мемы, но пока этого добиться сложно, так как феномен юмора практически не изучен в контексте искусственного интеллекта. Пять добровольцев в среднем оценили юмор в созданных нейросетью мемах на 6-6,8 баллов по 10-бальной школе и в 70% случае смогли отличить их от мемов, придуманных людьми.

Загрузить еще