KI-Modelle scheitern 99% der Zeit in komplexen Finanzberechnungen
Das Technologieunternehmen Saturn analysierte, wie die gängigsten Modelle der künstlichen Intelligenz (ChatGPT, Claude, Copilot, Grok, Gemini und andere) mit der Lösung finanzieller Probleme umgehen. In den Antworten auf gemittelte Fragen waren sie in 57% der Fälle falsch, bei komplexeren in 99%.
Das Technologieunternehmen Saturn analysierte, wie die gängigsten Modelle der künstlichen Intelligenz (ChatGPT, Claude, Copilot, Grok, Gemini und andere) mit der Lösung finanzieller Probleme umgehen. In den Antworten auf gemittelte Fragen waren sie in 57% der Fälle falsch, bei komplexeren in 99%. Die Ergebnisse der Studie werden von der Financial Times berichtet.
Die Forscher testeten KI-Modelle auf einer Liste von mehr als 100 finanzbezogenen Fragen. Fragen können bis zu fünfmal wiederholt werden. Experten stellen fest, dass neuronale Netze in Berechnungen falsch waren, ignoriert wurden, zum Beispiel bevorstehende Änderungen in der Steuergesetzgebung oder erfundene Normen. Chatbots waren am besten bei der Budgetierung.
"Millionen von Menschen vertrauen in Finanzangelegenheiten auf Modelle der künstlichen Intelligenz, aber sie bekommen die falschen Antworten, die dazu führen können, dass sie ihr Geld verlieren", sagte Amal Jolie, CEO von Saturn. Experten stellen fest, dass das beste nach den Ergebnissen der Studie das Modell Claude Opus 5 im Modus der "Vernunft" war.
