Нейросеть научились предсказывать поведение собак

Татьяна Новак

Американские учёные из Вашингтонского университета и Института Аллена научили нейросеть прогнозировать действия собаки на одну секунду вперёд, изучая записи с закреплённых на ней камер и датчиков. Исследование опубликовано на arXiv.org.

Свой алгоритм учёные обучили и протестировали пока только на одной собаке породы маламут. Чтобы записывать всё, что, предположительно, видит собака, на её голове закрепили камеру GoPro, снимающую видео с частотой пять кадров в секунду. Помимо этого, на лапах, хвосте и туловище собаки закрепили инерциальные датчики, записывающие ее движения, а на спине — микрофон для записи звука.

Учёные записали много часов видео из жизни собаки — как она ест, гуляет в парке, играет с другими собаками и с людьми. Полученные кадры они синхронизировали с данными о действиях собаки, полученных при помощи инерциальных датчиков. Изучив базу данных из 21 000 кадров, система научилась предсказывать дальнейшие действия собаки на 5 кадров (или на 1 секунду) вперёд. «Наша модель правильно предсказывает будущие движения собаки, просто наблюдая за изображениями, которые видит собака», — объясняют учёные.

Кроме того, нейросеть научилась выполнять более сложные задачи: анализировать последовательные пары кадров и определять, какое движение собаки было пропущено, а также распознавать объекты в кадре и определять зоны, по которым может ходить собака.

«Мы надеемся, что эта работа станет важным шагом на пути к изучению явления визуального интеллекта, а также к пониманию других разумных существ, населяющих наш мир», — пишут учёные.

Загрузить еще