Нейросеть в отпуске: упала точность ответов ChatGPT

В последнее время начала появляться информация о том, что самая популярная нейросеть сдаёт позиции. По наблюдениям пользователей, ChatGPT стал ошибаться всё чаще. Это подтвердили и учёные.

Исследователи из Калифорнии решили проверить, насколько сейчас эффективен искусственный интеллект. Эксперимент проводился на моделях GPT-4 и GPT-3.5. Первый вариант совсем потерял сноровку, а вот его младший брат кое-где преуспел.

Проверить пытались все аспекты работы нейросетей. Начали с математических задач. Эффективность решений у GPT-4 снизилась почти на 95 %. Точность второй модели, наоборот, повысилась. В написании кода провалились оба варианта. Многие неудобные вопросы языковые модели сейчас игнорируют, а иногда просто отказываются на них отвечать. А вот визуальные запросы они научились понимать лучше.

Учёные опасаются, что ухудшение эффективности нейросетей может плохо сказаться на реальной жизни общества, поскольку пользуются ими не только отдельные люди, но и целые компании. Неточность ответов на запросы может провоцировать сбои. Но есть и хорошая новость — мы точно не останемся без работы. По крайней мере, в ближайшее время.

Фото: Pexels, ClipDrop