Il recente lancio di ChatGPT Search da parte di OpenAI segna un passo significativo nell’evoluzione dei motori di ricerca potenziati dall’intelligenza artificiale. Un nuovo rapporto rivela che questa innovazione incontra delle difficoltà nel gestire i contenuti giornalistici. Con l’obiettivo di confrontare le performance del nuovo strumento con altri già esistenti, un’indagine ha evidenziato problemi preoccupanti.
Problemi di accuratezza in ChatGPT Search
Un’analisi condotta dal Tow Center for Digital Journalism ha testato ChatGPT Search, rivelando risultati ampliamenti insoddisfacenti. Durante un esperimento, è stato chiesto a ChatGPT di identificare l’origine di 200 citazioni provenienti da 20 articoli di notizie. Nonostante l’accesso all’internet e a contenuti di diversi siti di notizie, le prestazioni di ChatGPT Search sono state deludenti.
Su un totale di 200 risposte generate, solo 47 si sono dimostrate accurate, 57 parzialmente corrette e ben 89 errate. Solo in sette casi il sistema ha riconosciuto la sua ignoranza riguardo alla risposta richiesta. Si tratta di un test relativamente specifico, che ha messo in evidenza le limitazioni dell’algoritmo.
Esempi di errori riscontrati
Il Tow Center ha evidenziato alcuni esempi significativi degli errori commessi da ChatGPT Search. In uno dei casi, a fronte di una richiesta di attribuzione di una citazione da un articolo del New York Times, il motore di ricerca ha restituito un link a un sito che aveva plagiato il contenuto. In un altro caso, una citazione da un articolo del Orlando Sentinel è stata erroneamente attribuita alla Time.
Reazione di OpenAI e piani futuri
OpenAI ha reagito a questi risultati definendo il test come un “metodo atipico di verifica del prodotto” e ha illustrato che risolvere la questione dell’attribuzione è complesso senza dati e metodologie complete. L’azienda ha rassicurato il pubblico sull’impegno costante per migliorare la qualità dei risultati di ricerca. È lecito domandarsi se questa reazione possa essere interpretata come un’ammissione di difficoltà nella performance di ChatGPT Search, Si prevede che problematiche di questo tipo possano ridursi nel tempo.
Lascia un commento