Как сообщает Яндекс, разработанная им нейросеть YandexGPT 2 успешно справилась с единым государственным экзаменом по литературе. По результатам она преодолела минимальный порог оценки, набрав на 15 баллов больше требуемого количества.
В первой части экзамена нейросеть сделала анализ произведения и ответила на вопросы по нему, во второй – справилась с сочинением.
В итоге нейросеть набрала 55 баллов, что является достаточным количеством для поступления в высшее учебное заведение (пороговое значение – 40 баллов). Стоит отметить, что средний балл среди школьников, сдававших экзамен в прошлом году – 64.
Для определения возможностей нейросетей мы в компании используем тест MMLU, который позволяет провести сравнение нескольких ИИ между собой. Однако, MMLU не дает возможности проверить творческие способности нейросетей, поэтому мы и решили “отправить” YandexGPT 2 на ЕГЭ по литературе. И она справилась.
– Алексей Гусаков, технический директор «Поиска Яндекса»
Будет ли YandexGPT 2 поступать в ВУЗ и получать высшее образование не сообщается.