В Baidu научили нейросеть писать музыку к изображениям

Татьяна Новак

Китайская компания Baidu представила на выставке в Центре современного искусства в Пекине программу, которая сочиняет оригинальную музыку на основе просмотренных изображений. Об этом пишет Tech in Asia.

По словам разработчиков, программа основана на технологии распознавания образов. Она вычленяет из каждого изображения отдельные элементы, распознаёт их и соотносит их с определённым типом эмоций. Например, каждому цвету в базе соответствует определённая эмоциональная окраска: красный — «страстный», жёлтый — «тёплый», и т.д. Далее с помощью большой базы данных нейросеть подбирает для каждого типа эмоций определённое звучание музыки. Так, к картине Ван Гога «Звёздная ночь» нейросеть сочинила мягкую созерцательную мелодию, а для изображения скачущих лошадей — быструю и экспрессивную.

Китайская компания Baidu — самая большая национальная поисковая сеть. В апреле компания Big Data Lab, входящая в корпорацию Baidu, разработала алгоритм, прогнозирующий массовые собрания. Обрабатывая поисковые запросы в Baidu Map (китайский аналог Google Maps), он сможет предсказывать массовые скопления людей определённом месте и оповещать об этом правительство за 1-3 часа.

В июне команда Magentа от Google Brain опубликовала мелодию для фортепиано, написанную искусственным интеллектом. Учёные использовали программу TensorFlow, которая импортирует музыку из MIDI-файлов в платформу машинного обучения.

Загрузить еще