Recurrir a chatbots de inteligencia artificial (IA) para responder a preguntas financieras podría conllevar el riesgo de graves pérdidas, ya que los modelos de diversos proveedores suelen dar respuestas erróneas la mayor parte del tiempo, reporta Financial Times, citando un estudio de la empresa tecnológica Saturn.
Así, los modelos de IA más populares de ChatGPT, Claude, Copilot, Grok y Gemini dieron respuestas incorrectas a consultas financieras el 57 % de las veces en promedio. Al plantearles preguntas más complejas, como aquellas que implicaban más de un cálculo, los modelos cometieron errores en el 88 % de los casos, en promedio. Algunos modelos dieron respuestas incorrectas al 99 % de estas preguntas más difíciles.
Riesgo de pérdidas económicas
La investigación utilizó más de 100 preguntas diferentes relacionadas con el dinero, que se repitieron hasta cinco veces. En total, se analizaron más de 10.000 preguntas con 18 modelos de IA, gratuitos y de pago. Sus respuestas contenían errores de cálculo, no tenían en cuenta futuros cambios fiscales o se basaban en normas imaginarias.
Así, un error en las normas fiscales sobre pensiones cometido por Claude Haiku 4.5, uno de sus modelos gratuitos lanzado el año pasado, puso en riesgo a un ahorrador de pensiones al tener que pagar una multa de 17.500 libras esterlinas (más de 23.000 dólares) a la Hacienda Pública británica, según reveló la investigación. En otro caso, al ser consultado sobre préstamos estudiantiles, Claude "se inventó una regla" y afirmó que un graduado podía dejar de pagar si se mudaba al extranjero.
"Millones de personas confían en los modelos de IA para obtener asesoramiento financiero, pero reciben respuestas erróneas que pueden provocarles pérdidas económicas", advirtió Amal Jolly, directora ejecutiva de Saturn. Mientras, Sarah Coles, directora de finanzas personales de la plataforma de inversión AJ Bell, indicó que los chatbots pueden seguir siendo útiles para la elaboración de presupuestos y la investigación, por ejemplo, al proporcionar una idea de dónde podría estar gastando de más una persona en función de sus ingresos y gastos.