Valentina Di Paola

I chatbot AI non sono efficaci come consulenza per i farmaci

(11 Ottobre 2024)

Roma –  I pazienti dovrebbero evitare di affidarsi ai motori di ricerca e ai chatbot basati sull’intelligenza artificiale per ottenere informazioni accurate e sicure sui farmaci, dato che questi strumenti presentano ancora diverse lacune. A dimostrarlo uno studio, pubblicato sul British Medical Journal Quality & Safety, condotto dagli scienziati dell’Istituto di farmacologia e tossicologia sperimentale e clinica, Friedrich-Alexander-Universität, in Germania. Il team, guidato da Wahram Andrikyan, ha valutato l’accuratezza dei chatbot di intelligenza artificiale nel fornire indicazioni in merito a farmaci e procedure mediche. Il gruppo di ricerca ha esaminato la leggibilità, la completezza e l’accuratezza delle risposte dei chatbot alle query sui 50 farmaci più frequentemente prescritti negli Stati Uniti nel 2020, utilizzando Bing Copilot, un motore di ricerca con funzionalità di chatbot basate sull’intelligenza artificiale. Per simulare la consultazione, gli autori hanno esaminato i database di ricerca e si sono consultati con un farmacista clinico e medici esperti in farmacologia per identificare le domande sui farmaci che i pazienti pongono più frequentemente ai loro operatori sanitari. Sono state quindi formulate dieci domande per ogni medicinale, e l’intelligenza artificiale ha restituito un totale di 500 risposte. Le domande riguardavano lo scopo, il principio attivo e le istruzioni d’uso dei farmaci, nonché effetti collaterali e controindicazioni. La leggibilità delle risposte è stata valutata calcolando il Flesch Reading Ease Score, che stima il livello di istruzione richiesto per comprendere un determinato testo. La completezza e l’accuratezza delle informazioni è stata invece calcolata confrontando i dati forniti dal chatbot con quelli raccolti in un sito sottoposto a revisione paritaria (drugs.com). Le risposte dell’intelligenza artificiale, riportano gli autori, richiedevano mediamente un’istruzione universitaria per essere comprese, e anche la massima leggibilità richiedeva un livello di istruzione di scuola superiore. Allo stesso tempo, le dichiarazioni del chatbot corrispondevano ai dati di riferimento nel 26 per cento ed erano totalmente incoerenti nel 3 per cento dei casi. Solo il 54 per cento delle indicazioni è stato valutato in linea con il consenso scientifico. Come limite dell’indagine, gli autori precisano che i dati non si basano sulle esperienze reali dei pazienti. “Abbiamo dimostrato – scrivono gli autori – che i motori di ricerca basati sull’intelligenza artificiale hanno prodotto risposte in gran parte considerate difficili da interpretare. In molti casi, inoltre, le informazioni riportate erano incomplete. Ciò potrebbe mettere a repentaglio la sicurezza dei pazienti”. “Nonostante l’innegabile potenziale degli strumenti basati sull’intelligenza artificiale – conclude Andrikyan – è fondamentale che i pazienti consultino gli operatori sanitari prima di affidarsi alle informazioni fornite dai chatbot”.(30Science.com)

Valentina Di Paola
Classe ’94, cresciuta a pane e fantascienza, laureata in Scienze della comunicazione, amante dei libri, dei gatti, del buon cibo, dei giochi da tavola e della maggior parte di ciò che è anche solo vagamente associato all’immaginario nerd. Collaboro con 30science dal gennaio 2020 e nel settembre 2021 ho ottenuto un assegno di ricerca presso l’ufficio stampa dell’Istituto di ricerca sugli ecosistemi terrestri del Consiglio nazionale delle ricerche. Se dovessi descrivermi con un aggettivo userei la parola ‘tenace’, che risulta un po’ più elegante della testardaggine che mi caratterizza da prima che imparassi a usare la voce per dar senso ai miei pensieri. Amo scrivere e disegnare, non riesco a essere ordinata, ma mi piace pensare che la mia famiglia e il mio principe azzurro abbiano imparato ad accettarlo. La top 3 dei miei sogni nel cassetto: imparare almeno una lingua straniera (il Klingon), guardare le stelle più da vicino (dal Tardis), pilotare un velivolo (il Millennium Falcon).