Эксперимент Физтеха показал, что нейросеть провалила экзамены по физике

После проверки оказалось, что ИИ получил менее 85 баллов –
ниже проходного барьера для Физтеха. При этом нейросеть допустила несколько
очевидных ошибок. Стало понятно, что в этом году Chat GPT-4 Turbo не сможет достичь
уровня успешного абитуриента МФТИ.  

Преподаватель Физтеха, известный эксперт по работе со школьниками Леонид Колдунов подготовил для эксперимента задачи из разделов по механике, оптике, термодинамике, электричеству, кинематике. 

Он пояснил, что нейросеть допустила ошибки не только в финальных расчетах и использовании терминов, но и в понимании физики процесса. По словам Колдунова, иногда ИИ делал совсем нелогичные выводы, путался в формулировке ответа.

Главный вывод, которые сделали ученые во время эксперимента, –пока у всего класса подобных систем искусственного интеллекта есть проблемы с цепью логических рассуждений. При этом в отдельных примерах они демонстрируют ее приемлемый уровень.

Кстати, в Подмосковье на сегодняшний день активно используют уже 30 проектов с применением ИИ в таких направлениях, как социальная сфера, здрав, городское хозяйство.