ChatGPT резко поглупел и ничего не объясняет — исследование ученых Стэнфорда
BTC
Bitcoin BTC
$ 73,566.00
0.06%
ETH
Ethereum ETH
$ 2,046.96
0.26%
USDT
Tether USDT
$ 0.9991
0.01%
XRP
XRP XRP
$ 1.05
0.65%
BNB
BNB BNB
$ 677.07
0.44%
SOL
Solana SOL
$ 82.94
0.28%
USDC
USDC USDC
$ 0.9995
0.00%
DOGE
Dogecoin DOGE
$ 0.0670
1.76%
ADA
Cardano ADA
$ 0.1728
1.27%
TRX
TRON TRX
$ 0.3168
0.28%
AVAX
Avalanche AVAX
$ 8.51
0.75%
LINK
Chainlink LINK
$ 10.09
2.40%
GRAM
Gram (prev. Toncoin) GRAM
$ 1.19
5.25%
DOT
Polkadot DOT
$ 0.8397
0.47%
SHIB
Shiba Inu SHIB
$ 0.00000433
2.61%
LTC
Litecoin LTC
$ 49.80
2.07%
>Нейросети Нейросети

Новости

21 июля 23

ChatGPT резко поглупел и ничего не объясняет — исследование ученых Стэнфорда

Исследование, проведенное учеными из университета Стэнфорд, обнаружило, что чатбот ChatGPT стал хуже выполнять некоторые задачи в июне по сравнению с мартовской версией.

Исследование, проведенное учеными из университета Стэнфорд, обнаружило, что популярный чатбот ChatGPT стал хуже выполнять некоторые задачи в июне по сравнению с мартовской версией.

Изображение сгенерировано Midjourney

Изображение сгенерировано Midjourney

В исследовании сравнивались результаты работы чатбота в течение нескольких месяцев в четырех разных задачах: решение математических проблем, ответы на сложные вопросы, написание программного кода и визуальное мышление.

Ученые обнаружили, что у технологии появились серьезные колебания в способности выполнять эти задачи. Исследование рассматривало две версии ChatGPT: GPT-3.5 и GPT-4.

Наиболее заметные изменения были связаны с решением математических проблем. В марте GPT-4 правильно определял число 17077 как простое в 97,6% случаев. Но уже через три месяца точность упала до 2,4%. В то же время, GPT-3.5 наоборот показал улучшение: с 7,4% правильных ответов в марте к почти 87% в июне.

Подобные изменения происходили и в других задачах, таких как написание программного кода и визуальное мышление. Ученые отметили, что непредсказуемые эффекты изменений в одной части модели могут отражаться на ее производительности в других задачах.

Чатбот также перестал объяснять свои выводы, что делает его работу менее прозрачной для исследователей. Это вызывает опасения, поскольку понимание работы такой технологии важно для улучшения ее надежности и безопасности. Ученые подчеркивают необходимость постоянного контроля за производительностью таких моделей.

Мы используем файлы cookie, чтобы улучшить работу сайта и анализировать посещаемость.
Подробнее — в политике конфиденциальности