Возможности ChatGPT впечатляют, но иногда эта нейросеть сыплется на примитивных примерах. К примеру, она неспособна решать простые математические задачи и даже детские загадки на логику.

Недавно ChatGPT версии 4.0 попросили решить тестовый вопрос для 6-летних детей в одной из школ. Нейросеть дала неверный ответ, она почему-то решила, что числами обозначено количество букв в этих словах. Ответом было число 5.



ChatGPT-3.5 решил ту же иначе, он подумал, что речь идёт о количестве лап у обозначенных животных. Нечётные значения его не смутили. После нескольких уточнений нейросеть предложила запутанный вариант — якобы это животные из детской считалки, а ослик ищет свою маму.



В самом деле речь шла о количестве звуков, которые, по версии говорящих на русском языке людей, произносят эти животные: кошка — «мяу» (три звука), петух — «кукареку» (8 звуков) и т. п. Ослик говорит «иа», соответственно правильным ответом в этой загадке было бы число 2. Нейросеть до этого не додумалась, а это свидетельствует о том, что ей ещё далеко до человеческого мышления.