18.05.2023 16:57
Новости.
Просмотров всего: 8481; сегодня: 1.

Нейросети сдали экзамен по истории России на «тройку»

Доцент кафедры истории России УрФУ Михаил Киселев провел «экзамен» для Chat GPT и Sage. Он протестировал нейросети на знание истории России — исторических фактов и терминологии. По итогу преподаватель назвал нейросеть «студентом-импровизатором» и поставил ей «тройку». Результаты анализа историк озвучил на научном семинаре «Тексты, коды, смыслы: искусственный интеллект — помощник или соперник гуманитария», который состоялся в УрФУ.

«Есть три типа студентов на экзамене. Когда студент успешно осваивает дисциплину, он знает материал, понял, как работать с ним, основные подходы к анализу и может дать отличный самостоятельный ответ. Есть те, что ничего не учат и честно говорят: „Я ничего не знаю“, потом отправляются на пересдачу. Но есть третий тип, когда студент выучил кое-что, но делает вид, что он знает все. И тогда, опираясь на какие-то обрывочные сведения, он начинает импровизировать и строить целостные ответы, которые на самом деле оказываются проблемными. Примерно так делает нейросеть: там, где материал имеет однозначные ответы, нейросеть отвечает нормально, адекватно, но в остальном она имитирует самостоятельные рассуждения. И здесь начинаются проблемы, потому что нейросеть может просто выдумывать факты, несуществующие работы или авторов», — рассказывает Михаил Киселев.

Так, на вопросы, связанные с использованием устойчивой общей научной терминологии, давались вполне хорошие ответы, добавляет Киселев. Например, обе нейросети дали приемлемый ответ на вопрос «В чем разница между историческими и историографическим источниками? Однако со сложным гуманитарным (историческим) материалом нейросеть не справляется, утверждает доцент. Так, в работе историк имеет дело с языками нескольких эпох: терминология XVI века в нескольких вариантах (церковнославянский язык, язык деловой письменности, разговорный), XIX века, советско-марксистский язык XIX века и современный. И все это русский язык, который понимает человек. Нейросеть же владеет только современным русским языком и не воспринимает нюансы языков разных эпох.

«К примеру, я задал вопрос, „Что такое завещание Василия III?“ Ответ Chat GPT — „Завещание Василия III — это документ, составленный российским царем Василием III перед его смертью в 1533 году. В нем он указывал своих наследников и распоряжался имуществом. Согласно завещанию, престол достался его сыну Ивану IV (Грозному), а также были назначены его опекуны и министры“. Ответ Sage — „Завещание Василия III — это правовой акт, оставленный российским царем Василием III перед своей смертью в 1533 году. В завещании был определен порядок правления и наследования престола России. В соответствии с завещанием, после смерти Василия III престол должен был перейти к его сыну Ивану IV, который в то время был еще ребенком“, — рассказывает Киселев. — Обе нейросети неправильно назвали Василия III царем. Этот титул официально примет только Иван IV. А Chat GPT использовал анахронизм „министры“, однако ответ в целом можно считать удовлетворительным».

Затем экзаменатор немного переформулировал тот же вопрос: вместо слова «завещание» использовал исторический термин XVI века — «духовная».

«На вопрос, „что такое духовная Василия III?“ нейросети показали незнание исторической терминологии. Chat GPT заявил, что „это период правления российского царя Василия III (1479-1533), когда произошло значительное развитие православной церкви в России“, а Sage, что „это название церковной реформы, проведенной российским царем Василием III в конце XV — начале XVI веков“», — добавляет Михаил Киселев.

На вопрос «Какие историки писали о завещании Василия III?» обе нейросети сперва начали «лить воду», заявляя, что об этом «писали многие историки», после чего назвали наиболее известных дореволюционных историков типа Сергея Соловьева и Василия Ключевского.

«С учетом того, что им принадлежали обобщающие работы по истории России, это удачный ход: наверняка они что-то должны были об этом писать. В то же время нейросети проигнорировали авторов специальных работ по этой теме, которые ищутся обычным поисковиком. Примечательно, что нейросети наравне с реальными историками и их работами могут выдумывать как историков, так и книги. Sage назвала некоего Александра Васильевича Пильяра, а Chat GPT заявил, что Андрей Краевский якобы написал книгу „Истории Российского государства“. Если представить, что такая беседа велась на экзамене, то можно сказать, что студент „поплыл“ из-за неглубокой проработки материала, хотя и старался держаться уверенно, пытаясь доказать противоположное», — говорит Михаил Киселев.

Историк полагает, что «неподготовленность» нейросетей связана с тем, что они имитируют самостоятельное мышление посредством генерации правдоподобных текстов на основании загруженных данных. Однако если данные достаточно полные и однозначны, то нейросети показывают хорошие результаты. Так, физик, академик РАН Алексей Хохлов поставил бы нейросети как студенту отличную оценку.

«В тех дисциплинах, где повышается сложность из-за вариативности материала, существования разных подходов и концепций, а также использования разных языков, нейросеть превращается из „отличника“ в посредственного „троечника“, которого хочется отправить на пересдачу. Другое дело, что, возможно, в будущем все же на основе нейросети можно будет создать помощника, который будет на основе индексации загруженных материалов с соответствующими ссылками давать подсказки, где что упоминается. Или, например, возьмет часть технической работы — оформление списков литературы, составление аннотации и ключевых слов. То есть нейросеть не сможет думать за человека, она для этого не приспособлена, однако она сможет создать для этого более комфортные условия», — заключает Киселев.

Источник: https://urfu.ru/ru/news/46796/

Фото: УрФУ.


Участники событий и другие указанные лица:

Тематические сайты: Искусственный интеллект, История, Молодежь, Наука, Образование, Русский язык
Сайты субъектов РФ: Свердловская область
Сайты столиц субъектов РФ: Свердловская область - Екатеринбург
Сайты федеральных округов РФ: Уральский федеральный округ
Сайты стран: Россия

Ньюсмейкер: Альянс Медиа Центр — 13512 публикаций

Интересно:

В Казахстане разрушили российский памятник на могиле 72 солдат РККА
19.11.2026 09:55 Новости
В Казахстане разрушили российский памятник на могиле 72 солдат РККА
Генконсульство РФ просит власти республики расследовать осквернение военно-мемориального объекта. АСТАНА, 18 ноября. /ТАСС/. Генеральное консульство России в Алма-Ате просит власти Казахстана расследовать осквернение военно-мемориального объекта в Таразе, которое произошло через месяц после завершения его ремонта. "Сегодня, 18 ноября 2026 года, генконсульству стало известно о вопиющем акте вандализма в отношении российского военно-мемориального объекта на территории Казахстана. В городе Тараз (Жамбылская область) была осквернена памятная стела, открытая по завершении масштабного ремонта 15 октября сего года на средства российской стороны", - говорится в сообщении генконсульства в Telegram-канале. Отмечено, что монумент, установленный на месте госпитального захоронения 72 неизвестных бойцов, умерших от ран в эвакуационных госпиталях города Джамбула, был практически полностью разрушен...
Otvetdesign разработал коллекцию мерча для «Балтики»
17.11.2026 19:33 Новости
Otvetdesign разработал коллекцию мерча для «Балтики»
Брендинговое агентство Otvetdesign представило коллекцию одежды и аксессуаров для амбассадоров и сотрудников пивоваренной компании «Балтика». Переосмыслив визуальную айдентику бренда через эстетику old money и современного стритстайла, команда создала линейку, которая объединила фирменные коды, функциональный дизайн и нестандартные детали. Балтийский дух в новом прочтении За последние годы «Балтика» последовательно обновляет образ бренда, сохраняя связь с историей и одновременно открываясь новым аудиториям. Сегодня его присутствие не ограничивается продуктом: бренд становится частью повседневной городской культуры. Одним из способов такого взаимодействия с аудиторией стала новая коллекция мерча.  Изначально проект предполагал создание линейки одежды и аксессуаров для амбассадоров и сотрудников компании. Перед агентством стояла задача выйти за рамки привычного корпоративного...
Музыкальное исполнительское искусство: мир Валерия Вороны
14.11.2026 16:30 Персоны
Музыкальное исполнительское искусство: мир Валерия Вороны
Валерий Иосифович Ворона — из тех деятелей российской культуры, в чьей биографии исполнитель, педагог, организатор и общественный деятель неотделимы друг от друга. Скрипач и дирижёр, ректор Государственного музыкально-педагогического института имени М. М. Ипполитова-Иванова, президент Фонда «Русское исполнительское искусство», солист Московской филармонии, художественный руководитель и главный дирижёр Московского молодёжного камерного оркестра, профессор Московской консерватории — за каждым из этих слов стоит не формальная должность, а десятилетия работы на сохранение и развитие российского исполнительского искусства. Путь музыканта Валерий Ворона родился 12 декабря 1950 года в Херсоне. Профессиональное образование получил в Государственном музыкально-педагогическом институте имени Гнесиных по классу скрипки, а затем прошёл ассистентуру-стажировку при Московской государственной...
Кто изобрёл антибиотики?
13.11.2026 09:05 Аналитика
Кто изобрёл антибиотики?
Многие врачи и учёные раз за разом приходили к выводу: плесень может помочь организму бороться с бактериями. Зачем нам антибиотики? Почему появление антибиотиков стало событием в мире медицины? Всё просто — благодаря им стали лечить заболевания, которые на протяжении многих веков были лотереей со смертью — бактериальные инфекции. Долгое время медики и другие учёные пытались разобраться, что же именно вызывает болезнь. Врачи Античности интуитивно угадали, что должны быть некие внешние «агенты». Миазмы, невидимые семена, живые контагии, мельчайшие животные — как только ни называли бактерии. Но понимать — понимали, а справиться с ними не могли. Туберкулёз, сифилис, пневмония представляли огромную опасность, жертв от них было не меньше, чем от войн. Например, в середине XVIII в. две трети пациентов Петербургского генерального сухопутного госпиталя были, помимо основного заболевания...
Объявлен шорт-лист литературной премии «История будущего»
08.11.2026 18:09 Мероприятия
Объявлен шорт-лист литературной премии «История будущего»
Организаторы II Международной литературной премии в области научной фантастики «История будущего» огласили шорт-лист второго сезона. В финал вышли авторы в четырех номинациях: «Лучший рассказ», «Лучший рассказ для детей и подростков», «Лучший рассказ на иностранном языке» и «Лучшая сценарная заявка». Финал премии состоится 4 декабря 2026 года в музее «Атом» на ВДНХ в Москве.Авторы исследуют, как научные открытия и технологические достижения могут изменить жизнь общества, какие возможности открываются перед человечеством и с какими нравственными и социальными вызовами ему предстоит столкнуться.«Для нас „История будущего“ – гораздо больше, чем литературная премия. Это возможность говорить о будущем языком, который понятен и близок людям разных поколений. Неслучайно премия, учрежденная Музеем „АТОМ“ при поддержке Госкорпорации „Росатом“, посвящена научной фантастике. Атомная отрасль...