I modelli di IA più diffusi hanno fornito risposte errate nel 57% dei casi in materia di finanze personali, secondo la fintech britannica Saturn. La percentuale è salita all’88% per le domande più difficili e articolate in più passaggi.
I risultati arrivano mentre i consumatori si affidano sempre più spesso ai chatbot per porre domande sul denaro.
Le domande più difficili hanno messo in crisi quasi tutti i modelli
Lo studio ha sottoposto 121 domande a 18 modelli, gratuiti e a pagamento, offerti da fornitori tra cui ChatGPT, Gemini, Claude e Copilot. Ogni domanda è stata ripetuta fino a 5 volte, per un totale di oltre 10.000 risposte.
Una risposta è stata considerata errata se conteneva un errore fattuale, tralasciava un’informazione rilevante o ometteva un’avvertenza necessaria.
I modelli gratuiti hanno ottenuto i risultati peggiori, con il 63% di risposte errate, contro il 49% delle versioni a pagamento. Per le domande più difficili, i modelli gratuiti hanno sbagliato nel 93% dei casi.
Claude Opus 5 in modalità di ragionamento si è piazzato al primo posto. Tuttavia, ha comunque sbagliato il 39% delle risposte. Tra gli errori figuravano calcoli errati, modifiche fiscali ignorate e norme inesistenti.
Una risposta sulle imposte pensionistiche avrebbe potuto esporre un risparmiatore a un addebito di 17.500 £ da parte dell’HM Revenue and Customs.
«Milioni di persone si fidano dei modelli di IA per ricevere consigli sul denaro, ma ottengono risposte sbagliate che possono far perdere loro denaro», ha dichiarato Amal Jolly, amministratore delegato di Saturn.
Seguici su X per ricevere le ultime notizie in tempo reale
La fiducia nei chatbot di IA continua comunque a crescere
Nel frattempo, il ricorso a questi strumenti si è diffuso in diversi mercati e fasce d’età. Un’indagine globale di EY condotta su 18.000 consumatori ha rilevato che il 49% aveva utilizzato l’IA per prendere decisioni su risparmio e investimenti.
Ad agosto, l’autorità di regolamentazione finanziaria britannica ha riferito che quattro investitori meno esperti su cinque hanno usato l’IA per ricevere aiuto negli investimenti. Tra gli intervistati, il 56% ha dichiarato di fidarsi di questi strumenti, più che della televisione e della radio, che si fermano al 47%.
Nel frattempo, la stessa ricerca ha rilevato che il 44% crede erroneamente che le informazioni finanziarie generate dall’IA siano regolamentate.
Un’indagine di PensionBee condotta su 1.000 adulti statunitensi ha rilevato che quasi sei su dieci seguirebbero consigli finanziari senza verificarli autonomamente. Quasi uno su quattro ha dichiarato che un chatbot gli aveva già fornito informazioni errate sulle proprie finanze.
Jolly ha affermato che la consulenza finanziaria fornita dall’IA non è regolamentata, lasciando i consumatori senza le tutele di risarcimento previste quando si rivolgono a un consulente umano. Ha esortato la FCA ad agire rapidamente.
Iscriviti al nostro canale YouTube per vedere leader e giornalisti fornire approfondimenti esperti
Fonte: BeInCrypto
