Нейросеть решала задания практически так же, как это делал бы любой школьник: генерировала ответы на открытые вопросы и выбирала один или несколько вариантов из предложенных, если они были. После этого решения языковой модели внесли в бланки и отправили на проверку официальным экспертам ЕГЭ по литературе.
В результате, нейросеть YandexGPT 2 набрала на ЕГЭ балл, необходимый для поступления в ВУЗ - ее средняя оценка составила 55 баллов. Это первый случай в России, когда генеративная сеть сдала этот экзамен и выполнила все задания, сообщает Яндекс.
Отмечается, что специалисты получили варианты ЕГЭ по литературе, которые использовались при проведении тренировочных экзаменов в 2021-2023 годах, от Московского центра непрерывного математического образования и убедились, что применявшаяся для обучения база данных не содержит ответов на них.