ChatGPT сдал экзамен по истории за 9 класс на тройку
ChatGPT, который ранее провалил российский ЕГЭ по литературе, сдал экзамен по истории для девятиклассников на «тройку», результаты исследования опубликованы на сайте онлайн-гимназии №1.
Учитель истории онлайн-гимназии №1 Максим Черкашин провёл эксперимент с нейросетью: он предложил ИИ решить ОГЭ по своему предмету. По словам педагога, тестовую часть ChatGPT выполнил идеально несмотря на то, что иногда допускал ошибки. Сложности возникли с тестом по истории Древней Руси. Эту часть нейросеть провалила полностью.
Трудности также возникли при выполнении письменной части заданий. В ней искусственный интеллект должен был проанализировать источник и дать развёрнутый ответ, но не смог назвать имя исторического деятеля или профессиональную принадлежность человека, когда это не было указано в документе.
«Я не могу точно указать имя царя, так как в отрывке из письма российского посла не указывается его имя. Однако, учитывая дату, можно предположить, что это письмо было адресовано Петру I», – так ответил ChatGPT на один из подобных вопросов.
При этом педагогов гимназии удивил тот факт, что ИИ выдвинул смелые, хотя и ошибочные предположения. Они полагают, что для ответов на вопросы нейросеть использует иностранные исторические источники.
Что касается заданий с изображением или картой, их нейросеть также выполнила неточно. Из пяти вопросов она дала только один правильный ответ.
В итоге за ОГЭ по истории, который сдают российские девятиклассники, нейросеть получила 14 из 21 балла. Это соответствует тройки.
К каким выводам пришёл педагог
Максим Черкашин считает, что ChatGPT не поможет школьникам подготовиться к сдаче ОГЭ по истории, поскольку он делает много ошибок и ему трудно работать с источниками.
Педагог планирует продолжить проводить эксперименты с нейросетью. Он хочет предложить сдать госэкзамен новой версии ChatGPT 4.0, в которой разработчики обещали улучшить работу с изображениями.
Чем прославился бот ChatGPT
ChatGPT представляет собой чат-бот, который может отвечать на вопросы, писать программный код, сценарии, конспекты и научные работы.
Ранее ChatGPT сдал экзамен United States Medical Licensing Examination (USMLE) на получение медицинской лицензии, которая даёт право работать врачом в США, Израиле, Катаре и Новой Зеландии. Этот тест считается одним из самых сложных медицинских испытаний в мире. Нейросеть набрала от 52,4% до 75% правильных ответов, тем самым преодолев пороговый уровень в 60%.
Однако искусственный интеллект не справился с российским ЕГЭ по литературе. Педагоги, которые оценивали работу, остались недовольны результатами экзаменационной работы. А публицист, депутат Госдумы РФ Анатолий Вассерман заявил, что сочинение писала «ограниченная личность».
Кроме того, с помощью ChatGPT выпускник российского вуза написал диплом и защитил его на тройку. Антиплагиат оценил оригинальность работы на 82%. Однако история вызвала скандал – преподаватели узнали, что выпускная квалификационная работа написана с помощью нейросети, и в вуз начали приходить жалобы. Но молодого человека не стали лишать диплома.
Дописать картину Вермеера, поставить диагноз и придумать логотип — что умеют нейросети
Читать подробнее