Искусственный интеллект не смог решить школьный тест для восьмого класса

Катерина Эсманова

Ученые из Института искусственного интеллекта Аллена (AI2) выяснили, может ли компьютер решить школьный тест. Об этом сообщает MIT Technology Review.

Исследователи провели конкурс на лучшее прохождение стандартного теста для восьмиклассников с помощью ИИ. При этом тест упростили, убрав из него вопросы с графиками и оставив только вопросы, в которых надо выбрать один из предложенных вариантов ответа.

Победил участник из Израиля Хаим Лингарт. Он использовал для машинного обучения алгоритма сотни тысяч вопросов с правильными ответами и различные базы научных данных. Программа Лингарта ответила правильно на 59% вопросов теста.

Несмотря на то, что тест был упрощен, а 59% правильных ответов недостаточно, чтобы получить оценку «удовлетворительно», ученые называют это неплохим результатом. По их оценкам, достичь результата в 60-80% правильных ответов можно будет только совмещая разные подходы к созданию ИИ. Пока же прохождение подобного теста — слишком сложная задача для существующих программ.

В сентябре 2015 года команда ученых из Института Аллена провела аналогичное исследование с школьным тестом для 4-го класса. Лучший из алгоритмов смог решить 75% тестов без графиков и 45% тестов, усложненных графиками.

Загрузить еще