Домашние задания стали хуже отражать знания студентов после появления нейросетей
18 ноября. ПРАВМИР. После распространения искусственного интеллекта преподавателям стало сложнее оценивать знания студентов по домашним заданиям. Даже хорошая оценка теперь не всегда означает, что учащийся сможет самостоятельно справиться с похожей задачей на экзамене. К такому выводу пришли исследователи Центра макроэкономических исследований Сбера и экономического факультета МГУ, сообщает РБК.
Ученые проанализировали результаты 755 студентов, изучавших курс «Поведенческая и экспериментальная экономика» в 2019 году и в период с 2021 по 2025 год.
Оказалось, что после появления общедоступных нейросетей связь между оценками за домашние задания и результатами контрольных работ и экзаменов заметно ослабла.
В 2019–2022 годах коэффициент корреляции составлял 0,63, а в 2023–2025 годах снизился до 0,43. Чем выше этот показатель, тем точнее по домашним работам можно предсказать, насколько успешно студент справится с заданиями самостоятельно.
Раньше студенты, получавшие высокие баллы за домашние задания, в среднем писали очные работы на 2,6 балла из 10 лучше тех, у кого оценки были низкими. После распространения ИИ разница сократилась до 1,6 балла.
Исследователи предполагают, что нейросетями пользуются не только отстающие, но и успешные студенты. В результате преподавателям становится труднее понять, кому действительно необходима помощь.
При этом результаты очных контрольных и экзаменов по-прежнему хорошо согласуются между собой. Это позволяет предположить, что изменения связаны именно с выполнением заданий вне аудитории.
В Сбере считают, что полностью отказываться от домашних работ не нужно. Вместо этого преподавателям предлагают изменить способ проверки знаний.
Один из вариантов состоит в том, чтобы после сдачи домашнего задания студент выполнял на следующем семинаре небольшую аналогичную работу. На нее можно выделить десять минут. Если учащийся действительно разобрался в решении, он сможет самостоятельно справиться с похожей задачей.
Другой способ предполагает устную защиту домашних заданий. Преподаватель будет выборочно приглашать студентов и просить объяснить ход решения. При этом о возможности такой проверки учащихся предлагают предупреждать заранее.
Авторы исследования также предлагают использовать ИИ-репетиторов. В отличие от обычного чат-бота, такой помощник должен подсказывать, как разобраться в задаче, но не выдавать готовый ответ.
Руководитель Центра макроэкономических исследований Сбера Александр Исаков считает, что домашняя работа по-прежнему необходима: она заставляет студентов самостоятельно разбираться в материале и закреплять полученные знания.
«Главная проблема не в ИИ, а в том, что задание стало слишком легким для автоматизации», — отметил Исаков.
По его словам, проверять каждого студента только на очных занятиях было бы слишком затратно по времени. Поэтому задача преподавателей состоит не в запрете нейросетей, а в поиске способов убедиться, что учащиеся действительно освоили материал.