Twitter научил нейросеть правильно обрезать фотографии

Татьяна Новак

Разработчики из компании Twitter создали машинный алгоритм, который позволяет автоматически обрезать изображения для предпросмотра, сохраняя в кадре самое важное. Об этом сообщается в блоге компании.

Как пишут авторы разработки, раньше для автоматической обрезки фотографий Twitter использовал программу распознавания лиц. Этот метод достаточно эффективен, однако только в том случае, если нужно кадрировать фотографию человека. Поэтому учёные компании решили разработать универсальный алгоритм обрезки фотографий, который сможет работать с любыми картинками — например, с популярными в Twitter фотографиями животных и природы.

Без использования алгоритма (слева) и с использованием его (справа)

Для обучения нейросети учёные использовали результаты академических исследований, изучавших с помощью глазных трекеров, на какие элементы изображений люди обращают внимание в первую очередь. «Это позволяет нам определять наиболее значимые элементы на каждой фотографии в момент загрузки и обрезать её в режиме реального времени», — пишут авторы.

Например, так выглядят одни и те же фотографии, автоматически обрезанные с использованием нового алгоритма и без него.

В ближайшее время новый алгоритм кадрирования заработает на iOS, Android и дестоп-версии Twitter.

Загрузить еще