I chatbot sono pessimi nel fornire notizie accurate. Ma rispetto a cosa? E cosa dovremmo fare al riguardo?
Un recente studio della BBC e dell'Unione Europea di Radiodiffusione ha rilevato un livello allarmante di problemi quando hanno testato una serie di chatbot popolari ( Gemini , ChatGPT , CoPilot , Perplexity ) su temi di attualità e hanno valutato le loro risposte con i giornalisti. I numeri principali hanno mostrato che il 45% di tutte le risposte presentava "almeno un problema significativo"; il 31% mostrava "seri problemi di reperimento"; e il 20% conteneva "gravi problemi di accuratezza", inclusi dettagli imprecisi o informazioni obsolete.
Il rapporto osserva:
"Questa ricerca dimostra in modo inequivocabile che queste carenze non sono episodi isolati", afferma Jean Philip De Tender, Direttore Media e Vicedirettore Generale dell'EBU. "Sono sistemiche, transfrontaliere e multilingue, e crediamo che ciò metta a repentaglio la fiducia del pubblico. Quando le persone non sanno di cosa fidarsi, finiscono per non fidarsi affatto, e questo può ostacolare la partecipazione democratica".
7 Comments
mikkaels@mastodon.uno · 1 pts · 297d
@macfranc @aitech Mi sembra un ottimo risultato! ChatGPT ha appena compiuto tre anni e già il 55% delle sue risposte non contengono errori significativi! Possiamo solo immaginare come saranno capaci questi modelli fra altri tre anni :-)
betelgeuse93@mastodon.uno · 1 pts · 297d
@mikkaels @macfranc @aitech saranno totalmente allucinati e drogati dall'apprendimento di materiale prodotto da altre IA.
macfranc@poliversity.it · 1 pts · 297d
@betelgeuse93 sì, è molto probabile e finora non si è riusciti a trovare un antidoto a questo problema
@mikkaels @aitech
mikkaels@mastodon.uno · 1 pts · 297d
@macfranc @betelgeuse93 @aitech Se noi riusciamo a fare fact-checking, ci riuscirà anche l'intelligenza artificiale, non temete 😉
macfranc@poliversity.it · 1 pts · 297d
@mikkaels l'intelligenza artificiale non è pensata per fare fact checking ma per dire cose false e sbagliate sotto una certa percentuale
@betelgeuse93 @aitech
mikkaels@mastodon.uno · 1 pts · 297d
@macfranc @betelgeuse93 @aitech E per raggiungerla l'unica è fare fact checking 😉
betelgeuse93@mastodon.uno · 1 pts · 297d
@mikkaels @macfranc @aitech mah, non ne sono convinto, e basta guardare l'ia overview di google o bing per vedere che minestroni di stronzate cacciano fuori.