Чат-боты постоянно дают вредные советы в сфере финансов — исследование

Популярные чат-боты с использованием так называемого искусственного интеллекта (ИИ) в большинстве случаев дают пользователям вредные советы, отвечая на финансовые вопросы, показало исследование технологической компании Saturn. Об этом 19 сентября сообщила газета Financial Times.

Согласно исследованию, ChatGPT, Claude, Copilot, Grok и Gemini — дают неверные ответы в среднем в 57% случаев. При вопросах, требующих нескольких вычислений, частота ошибок возрастает до 88%, а в отдельных моделях — 99%.

У ботов были ошибки в расчетах, игнорирование планируемых изменений в налоговом законодательстве и генерация несуществующих правил. Так, неверный ответ Claude Haiku 4.5 относительно пенсионного налога мог привести к штрафу в 17 500 фунтов стерлингов (около 2 млн рублей) со стороны налоговой службы Великобритании.

Платные модели демонстрируют более высокую точность: средняя частота ошибок составляет около 49% против 63% у бесплатных версий. Наилучший результат показала платная Claude Opus 5 в режиме рассуждений, однако и она ошибалась в 39% ответов.