Pubblicato il
.tp{color:#333333 !important;line-height:1.7 !important;margin:0 0 16px 0 !important}
.th2{color:#0d2137 !important;margin:36px 0 14px 0 !important;line-height:1.3 !important}
.th3{color:#0d2137 !important;margin:24px 0 10px 0 !important;line-height:1.35 !important}
.tl{color:#003057 !important;font-weight:600;text-decoration:underline}
.tt{border-collapse:collapse;width:100%}
.tt th{background-color:#0d2137 !important;color:#ffffff !important;text-align:left;padding:10px 12px !important;font-size:.9rem;border:1px solid #0d2137 !important}
.tt td{color:#333333 !important;padding:9px 12px !important;font-size:.9rem;vertical-align:top;border:1px solid #d8dee6 !important;line-height:1.5}
.tt td.w{background-color:#ffffff !important}
.tt td.g{background-color:#f6f9fc !important}
.tt td.rg{background-color:#f1f8f3 !important}
.tt td.rp{background-color:#fff9ec !important}
.tt td.rn{background-color:#fef1f1 !important}
.tt td.rj{background-color:#f0f4fc !important}
.tt td.vg{background-color:#d9eee0 !important;color:#14532d !important;font-weight:700}
.tt td.vp{background-color:#ffecc2 !important;color:#6b4200 !important;font-weight:700}
.tt td.vn{background-color:#fbd5d5 !important;color:#7f1d1d !important;font-weight:700}
.tt td.vj{background-color:#d6e0f7 !important;color:#1e3a8a !important;font-weight:700}
La checklist DECIDE-AI è la linea guida per la rendicontazione dei primi test su piccola scala di un sistema di supporto decisionale basato sull'intelligenza artificiale, condotti su pazienti reali. Pubblicata nel maggio 2022 sia sul BMJ che su Nature Medicine da Vasey e colleghi, elenca 17 elementi specifici dell'IA (28 righe una volta contati i sotto-elementi) e 10 elementi generici, e richiede dettagli che le linee guida per studi clinici e modelli non avevano mai richiesto, come ad esempio come sono stati addestrati gli utenti, quale versione del software è stata utilizzata per ciascun paziente e cosa è andato storto. 1,2
La maggior parte delle guide si limita a elencare gli elementi. Questa va oltre. Dopo la checklist vera e propria, la applichiamo riga per riga a uno studio reale ad accesso aperto su un sistema di intelligenza artificiale chirurgica, pubblicato nell'ottobre 2026, che dichiara di aver seguito DECIDE-AI, con la sezione dell'articolo accanto a ogni verdetto. La checklist DECIDE-AI è la versione preliminare della nostra checklist CONSORT-AI e non ne ripetiamo il contenuto in questa sede.
In parole semplici
La checklist DECIDE-AI è un elenco di 38 righe (28 relative all'IA e 10 generiche) per gli articoli che descrivono il primo utilizzo di uno strumento di IA su pazienti reali. Non fornisce istruzioni su come condurre lo studio, ma indica cosa un lettore deve essere in grado di trovare, tra cui la versione esatta del software utilizzata su ciascun paziente, ogni errore e come il personale addetto allo strumento ha gestito la situazione. Prima di inviare l'articolo, indicare la posizione di ciascuna riga accanto ad essa e fornire una breve risposta negativa laddove lo studio non ha raggiunto un determinato obiettivo.
Cos'è la checklist DECIDE-AI e dove si colloca tra le linee guida per la rendicontazione sull'IA
DECIDE-AI è l'acronimo di Developmental and Exploratory Clinical Investigations of DEcision support systems driven by Artificial Intelligence (Indagini cliniche di sviluppo ed esplorazione di sistemi di supporto alle decisioni basati sull'intelligenza artificiale). La checklist DECIDE-AI è specifica per fase e non per progettazione. La linea guida si concentra sulla valutazione in tempo reale, ovvero le decisioni prese con il sistema di intelligenza artificiale hanno un effetto reale sulla cura del paziente, a differenza dei test offline o in modalità "ombra" in cui ciò non avviene. <sup>1 </sup> Non prescrive un disegno di studio specifico, quindi può essere utilizzata da una coorte prospettica, da un confronto non randomizzato o da una serie di casi, e copre sistemi di rilevamento, diagnosi, prognosi e terapia.<sup> 1</sup>
La linea guida è il risultato di un processo Delphi modificato in due fasi, seguito da una riunione di consenso virtuale. Degli esperti che hanno partecipato, 123 hanno completato la prima fase, 138 la seconda e 16 hanno partecipato alla riunione di consenso; gli autori riportano un totale di 151 esperti provenienti da 18 paesi e 20 gruppi di stakeholder.<sup> 1</sup> La checklist è descritta come un insieme di standard minimi di rendicontazione e non sostituisce i requisiti normativi.<sup> 1</sup>
La tabella seguente mostra la posizione della checklist DECIDE-AI all'interno delle linee guida sull'IA. Segue la struttura della mappa delle fasi presente nel documento originale, riformulata con parole nostre. 1
Tabella 1. Posizione della checklist DECIDE-AI tra le linee guida per la rendicontazione sull'IA. Struttura adattata da Vasey et al., BMJ 2022.
| Orientamento | Fase di valutazione | Progettazione dello studio che mira |
|---|---|---|
| TRIPOD-AI (ora TRIPOD+AI) | Sviluppi preclinici | Sviluppo e validazione di modelli predittivi |
| STANDARD-AI | Sviluppo preclinico e validazione offline | Studi sull'accuratezza diagnostica |
| DECIDE-AI | Valutazione clinica precoce in vivo | Vari modelli, con funzionalità aggiuntive quali modifiche al sistema, sottogruppi predefiniti o curve di apprendimento |
| SPIRIT-AI | Valutazione prospettica comparativa | Protocolli di studi randomizzati sui sistemi di intelligenza artificiale |
| CONSORT-AI | Valutazione prospettica comparativa | Rapporti di studi randomizzati sui sistemi di intelligenza artificiale |
Per la tua presentazione, sono importanti tre punti. Innanzitutto, la checklist DECIDE-AI si colloca tra la fase preclinica e il grande studio comparativo, quindi uno studio che ha già raggiunto la fase di randomizzazione dovrebbe utilizzare la checklist CONSORT-AI e, per il protocollo, la guida al protocollo SPIRIT . La nostra guida CONSORT 2025 spiega perché CONSORT 2025, con i suoi 30 elementi, ha sostituito CONSORT 2010. In secondo luogo, la checklist DECIDE-AI è una linea guida per la rendicontazione e non uno strumento di valutazione. Verifica se hai descritto ciò che hai fatto, non se ciò che hai fatto è valido, e per la valutazione dei modelli predittivi i revisori utilizzano PROBAST . In terzo luogo, se la tua domanda riguarda esclusivamente l'accuratezza del modello, leggi prima il nostro confronto tra STARD e TRIPOD e utilizza il nostro albero decisionale per scegliere una linea guida per la rendicontazione tra le opzioni disponibili.
La checklist DECIDE-AI in sintesi: tutti i 17 elementi relativi all'IA e i 10 elementi generici.
La tabella condensa la checklist ufficiale in 38 righe. I numeri arabi indicano i 17 elementi specifici dell'IA e i numeri romani indicano i 10 elementi generici. Abbiamo parafrasato la formulazione per brevità, quindi si prega di utilizzare la checklist ufficiale del documento BMJ o Nature Medicine per il testo esatto da inviare. 1,2
Tabella 2. Le 38 righe della checklist DECIDE-AI, in forma condensata. Struttura di origine tratta da Vasey et al., BMJ 2022.
| Articolo | Argomento | Cosa segnalare (parafrasato) |
|---|---|---|
| 1 | Titolo | Denominare lo studio come una valutazione clinica preliminare di un sistema di supporto decisionale basato sull'intelligenza artificiale e specificare il problema che intende risolvere. |
| I | Astratto | Fornire un riepilogo strutturato che includa l'uso previsto, il tipo di algoritmo, il contesto, il numero di pazienti e utenti, gli esiti, gli endpoint di sicurezza, i fattori umani, i risultati e le conclusioni. |
| 2a | Uso previsto, condizione | Descrivere la condizione e il problema, le attuali pratiche standard e il gruppo di pazienti a cui è destinato il trattamento. |
| 2b | Uso previsto, utenti | Descrivere gli utenti previsti, la posizione prevista nel percorso di cura e l'impatto atteso, compresi gli esiti per il paziente. |
| II | Obiettivi | Indicare gli obiettivi. |
| III | Governance della ricerca | Indicare il protocollo, il numero di registrazione e l'approvazione etica. |
| 3a | Partecipanti, pazienti | Descrivi il reclutamento, l'inclusione e l'esclusione a livello di paziente e di dati, e come è stato determinato il numero. |
| 3b | Partecipanti, utenti | Rispondi alle stesse domande anche per gli utenti del sistema di intelligenza artificiale. |
| 3c | Partecipanti, familiarizzazione | Descrivi le fasi intraprese per familiarizzare gli utenti con la procedura, inclusa l'eventuale formazione preliminare allo studio. |
| 4a | Sistema di intelligenza artificiale, identità | Indicare la versione e il tipo di algoritmo, la popolazione di addestramento e le prestazioni precliniche, oppure un riferimento diretto. |
| 4b | Sistema di intelligenza artificiale, input | Descrivi i dati di input, le modalità di acquisizione e inserimento, la pre-elaborazione e la gestione dei dati mancanti o di scarsa qualità. |
| 4c | Sistema di intelligenza artificiale, output | Descrivi i risultati ottenuti e le modalità di visualizzazione per gli utenti, idealmente con un'immagine. |
| 5a | Implementazione, impostazione | Descrivi dove è stato valutato il sistema di intelligenza artificiale. |
| 5b | Implementazione, flusso di lavoro | Descrivi il percorso assistenziale, in quale fase è stato utilizzato il sistema e chi ha preso la decisione finale supportata e in che modo. |
| IV | Risultati | Specificare gli esiti primari e secondari. |
| 6a | Sicurezza ed errori, definizione | Descrivi come sono stati definiti e identificati gli errori o i malfunzionamenti significativi. |
| 6b | Sicurezza ed errori, rischio | Descrivi come sono stati identificati, analizzati e ridotti i rischi per la sicurezza o il danno al paziente. |
| 7 | fattori umani, metodi | Descrivi gli strumenti, i metodi o i modelli relativi ai fattori umani, i casi d'uso e gli utenti coinvolti. |
| V | Analisi | Descrivi i metodi statistici, le analisi aggiuntive predefinite e le analisi dei sottogruppi. |
| 8 | Etica | Descrivi un qualsiasi metodo utilizzato per raggiungere un obiettivo etico, come ad esempio l'equità algoritmica, e spiegane il motivo. |
| VI | Coinvolgimento del paziente | Descrivi in che modo i pazienti hanno influenzato la domanda, la progettazione o la conduzione dello studio. |
| 9a | Partecipanti, pazienti (risultati) | Riportare le caratteristiche di base dei pazienti e i dati mancanti nei dati di input. |
| 9b | Partecipanti, utenti (risultati) | Riporta le caratteristiche di base degli utenti. |
| 10a | Implementazione, esposizione | Segnalare l'esposizione degli utenti, il numero di utilizzi e il rispetto dell'implementazione prevista. |
| 10b | Implementazione, modifica del flusso di lavoro | Segnalare qualsiasi modifica significativa al flusso di lavoro o al percorso di cura. |
| VII | Risultati principali | Riportare i risultati predefiniti, includendo un gruppo di confronto se presente. |
| VIII | sottogruppi | Riportare le differenze nei risultati principali per sottogruppo predefinito. |
| 11 | modifiche | Segnalare le modifiche apportate al sistema o all'hardware di intelligenza artificiale, indicandone tempi e motivazioni, nonché eventuali cambiamenti nei risultati successivi a ciascuna modifica. |
| 12 | Accordo uomo-computer | Segnalare l'accordo dell'utente con l'IA, i motivi di un eventuale abbandono e qualsiasi ripensamento. |
| 13a | Sicurezza ed errori, eventi | Elencare gli errori significativi indicandone la frequenza, la causa apparente, la possibilità di correggerli e il potenziale impatto sull'assistenza. |
| 13b | Sicurezza ed errori, danni | Segnalare i rischi per la sicurezza e i danni osservati, compresi i danni indiretti. |
| 14a | fattori umani, usabilità | Redigere un rapporto di valutazione dell'usabilità utilizzando standard o framework riconosciuti. |
| 14b | fattori umani, curve di apprendimento | Redigere una relazione che valuti le curve di apprendimento degli utenti. |
| 15 | Supporto per l'uso previsto | Discutere se i risultati supportano l'uso previsto in ambito clinico. |
| 16 | Sicurezza ed errori, discussione | Discutere il profilo di sicurezza, gli errori e i danni, le loro implicazioni e come possono essere ridotti. |
| IX | Punti di forza e limiti | Discutere punti di forza e limiti. |
| 17 | Disponibilità dei dati | Indicare se e come i dati e il codice sono disponibili. |
| X | Conflitti di interesse | Indicare i finanziamenti, il ruolo dei finanziatori e delle aziende, nonché gli eventuali conflitti di interesse personali di ciascun autore. |
Si noti quante righe si trovano sotto le voci sicurezza, errori e fattori umani. Le righe 3c, 6a, 6b, 7, 11, 12, 13a, 13b, 14a, 14b e 16 insieme rappresentano 11 delle 28 righe relative all'IA, il che riflette l'attenzione della linea guida sulla sicurezza e sul lato umano del sistema.
Cosa distingue la checklist DECIDE-AI da CONSORT-AI e TRIPOD+AI?
Il documento originale elenca le sfide metodologiche che emergono non appena un sistema di intelligenza artificiale entra in contatto con la pratica clinica, e ognuna di esse corrisponde a una riga che ti verrà chiesto di compilare. Quattro di queste riguardano il modo in cui viene scritto un manoscritto.
I fattori umani sono parte integrante dell'intervento (righe 3c, 7 e 14)
La checklist DECIDE-AI considera il sistema di intelligenza artificiale e i suoi utenti come due forme di intelligenza collaborative, quindi il modo in cui le persone hanno utilizzato lo strumento viene riportato come risultato e non lasciato alla discussione. La riga 7 chiede quali metodi di fattori umani sono stati utilizzati, la riga 14a chiede una valutazione dell'usabilità rispetto a standard riconosciuti e la riga 14b chiede le curve di apprendimento. Uno studio che combina questionari, osservazione e interviste è un disegno di ricerca a metodi misti e le stesse regole di integrazione si applicano quando lo si redige. Una piccola serie di test preliminari sull'uomo è anche vicina nello spirito agli studi pilota che descriviamo altrove, con la fattibilità e il perfezionamento come obiettivo.
Il sistema può cambiare (righe 4a e 11)
In una sperimentazione farmacologica, il prodotto è fisso. Nei primi studi sull'intelligenza artificiale, il software, l'hardware e l'interfaccia utente vengono spesso rivisti tra un paziente e l'altro. La riga 4a richiede la versione, mentre la riga 11 richiede ogni modifica, quando è avvenuta, perché e cosa è successo ai risultati in seguito. Senza questo registro, un lettore non può stabilire a quale sistema appartiene un determinato risultato.
Gli errori sono dati (righe 6, 13 e 16)
La linea guida richiede agli autori di definire in anticipo gli errori significativi, elencare ciascuno di essi verificatosi con la relativa frequenza e la causa apparente, indicare se sia possibile correggerli e discutere il loro significato per l'assistenza al paziente.<sup> 1 </sup> L'impostazione rispecchia quella degli studi clinici di fase 1 e 2, dove la sicurezza è la priorità assoluta. Previene inoltre il fenomeno del "dataset shift", in cui piccole differenze tra i dati di training e i dati clinici modificano le prestazioni. <sup> 1</sup>
Viene riportato l'accordo tra esseri umani e IA (riga 12)
La riga 12 della checklist DECIDE-AI chiede con quale frequenza gli utenti si sono trovati d'accordo con il sistema, perché se ne sono discostati e se l'IA ha fatto cambiare idea a qualcuno. CONSORT-AI e TRIPOD+AI chiedono informazioni sull'interazione con gli utenti e sulle competenze necessarie, ma non abbiamo trovato in nessuno dei due una riga che chieda i tassi di accordo e le ragioni per cui ci si discosta dall'output dell'IA. Per un articolo incentrato sul modello, la nostra guida alla checklist TRIPOD+AI tratta la parte di reporting che si trova nelle fasi precedenti del percorso.
Esempio pratico di applicazione della checklist DECIDE-AI a uno studio reale ad accesso aperto.
Per mostrare l'utilizzo della checklist, abbiamo valutato un articolo pubblicato. Khan e colleghi hanno riportato una prima valutazione sull'uomo della segmentazione anatomica in tempo reale tramite IA durante la chirurgia endoscopica dell'ipofisi, pubblicata su Pituitary nell'ottobre 2026. L'articolo è pubblicato con licenza CC BY 4.0, motivo per cui possiamo citarlo e riprodurre due delle sue figure. Abbiamo confermato la licenza in tre punti: il campo della licenza della versione di riferimento di Crossref, il campo della licenza di Europe PMC e le autorizzazioni JATS del testo completo. 3
Lo abbiamo scelto per una ragione pratica. Si tratta di un articolo reale che applica la checklist DECIDE-AI, con un disegno IDEAL Fase 1, uno studio registrato, otto pazienti e un team chirurgico di quattro utenti. Include anche la checklist DECIDE-AI compilata come Materiale Supplementare 2. Abbiamo valutato prima il testo dell'articolo e poi lo abbiamo confrontato con la checklist degli autori, quindi i verdetti che seguono sono una lettura indipendente del testo completo. Il framework IDEAL, per i lettori che non lo conoscono, è un percorso a fasi per la valutazione dell'innovazione chirurgica. 4
Nello studio, un modello di visione artificiale delineava la sella turcica e le arterie carotidi su un monitor secondario accanto al flusso video chirurgico originale, e l'équipe chirurgica attivava la sovrapposizione tramite un pedale. La registrazione è presente su ClinicalTrials.gov e il testo completo è disponibile su PubMed Central.

Come leggere i verdetti
"Segnalato" significa che la riga è stata risposta nel testo. "Parzialmente segnalato" significa che alcuni elementi sono presenti e altri mancano. "Non trovato" significa che non siamo riusciti a individuarlo nel testo completo e nei due supplementi che abbiamo potuto leggere. "Valutazione discrezionale" significa che un revisore ragionevole potrebbe assegnare un punteggio alla riga in entrambi i modi, e la nota spiega il perché. Questa è una lettura del testo effettuata da Editverse e non una valutazione ufficiale della checklist DECIDE-AI.
Tabella 3. Righe della checklist DECIDE-AI valutate rispetto a Khan et al., Pituitary 2026 (CC BY 4.0). Lettura del testo completo tramite Editverse.
| Articolo | Dove cercare nel giornale | Cosa riporta il giornale | Giudizio |
|---|---|---|---|
| 1 | Titolo | Il titolo fa riferimento alla prima valutazione sull'uomo della segmentazione anatomica in tempo reale assistita dall'intelligenza artificiale in neurochirurgia. Le parole "supporto decisionale" non compaiono. | Decisione di giudizio |
| I | Astratto | Strutturato in quattro sezioni. Indica il tipo di algoritmo (un trasformatore di visione derivato da DINOv3), l'impostazione monocentrica, otto pazienti, gli esiti e i principali risultati. Il numero di utenti e i punteggi delle scale non sono riportati. | Parzialmente riportato |
| 2a | Premessa, paragrafi da 1 a 3 | Il documento inquadra l'errore di navigazione nella chirurgia endoscopica dell'ipofisi come un rischio per la sicurezza del paziente, elenca i sistemi di guida per immagini esistenti e definisce la popolazione nei Metodi come adulti sottoposti a chirurgia endoscopica transfenoidale elettiva per adenoma ipofisario. | Segnalati |
| 2b | Premesse, paragrafi conclusivi e punti di forza e di debolezza | Gli utenti sono i membri dell'équipe chirurgica e l'interfaccia è progettata attorno al chirurgo. Il paragrafo relativo alle limitazioni afferma poi che il sistema è stato "inizialmente implementato come strumento di formazione e istruzione piuttosto che come sistema primario di supporto alle decisioni", quindi il ruolo previsto risulta più chiaro solo alla fine. | Decisione di giudizio |
| II | Premesse, paragrafo finale e Metodi, Panoramica | L'obiettivo è valutare la fattibilità della segmentazione anatomica durante la chirurgia endoscopica dell'ipofisi in tempo reale, migliorando il sistema in modo iterativo. | Segnalati |
| III | Metodi, Panoramica | Il documento riporta un numero di registrazione e un riferimento etico (IRAS 127474) con il consenso. Il testo afferma che lo studio è stato "registrato in un database di studi clinici (NCT07568366; registrato il 5 maggio 2026)". Non abbiamo trovato date di reclutamento, quindi il lettore non può stabilire se la registrazione sia avvenuta prima del primo caso, e non è presente alcuna citazione separata del protocollo. | Parzialmente riportato |
| 3a | Metodi, procedura di studio di prova di concetto e risultati, panoramica | Erano previsti sei pazienti, i criteri di esclusione sono elencati e il campione è descritto come "una piccola coorte di sviluppo predefinita piuttosto che un campione con potenza statistica adeguata". I risultati riportano poi il reclutamento di otto pazienti consecutivi e la sezione Discussione fa riferimento a "sei degli otto casi previsti". Il passaggio da sei a otto non viene spiegato. I criteri di ammissibilità a livello di dati non sono descritti. | Decisione di giudizio |
| 3b | Metodi, procedura di studio di prova di concetto e risultati, panoramica | Ogni intervento è stato eseguito da un unico chirurgo e dalla sua équipe, e la sezione Risultati indica quattro utenti (tre chirurghi e un infermiere strumentista). Non vengono specificati i criteri di selezione degli utenti, i requisiti di ammissibilità e il numero di partecipanti. | Parzialmente riportato |
| 3c | Metodi, procedura di studio di fattibilità | Il team è stato addestrato su un simulatore ad alta fedeltà con un "briefing standardizzato sull'uso previsto, sull'interpretazione dei risultati e sui limiti del sistema". | Segnalati |
| 4a | Metodi, Panoramica del sistema | Il nome dell'architettura ViT-B è stato utilizzato per l'addestramento su 2157 frame provenienti da 110 pazienti, con una suddivisione a livello di paziente (97 per l'addestramento, 13 per il test). Il valore di Dice utilizzato per il set di test era dell'86.4% per la sella turcica e del 21.8% per le carotidi, con un recall per le carotidi del 13.6%. Le versioni del modello V1, V2, V2.1 e V2.2 sono indicate nella Tabella 1 dell'articolo. "Non è stata predefinita alcuna soglia di prestazione formale", sebbene un valore di Dice vicino al 70% per la sella turcica sia stato considerato un minimo ragionevole. | Segnalati |
| 4b | Metodi, Panoramica del sistema | Viene descritto in dettaglio l'input video, con una risoluzione di 1920 x 1080 pixel a 24 fotogrammi al secondo, proveniente dal sistema endoscopico e acquisito tramite una scheda di acquisizione. Non viene invece descritto come venivano gestiti i fotogrammi di bassa qualità durante l'utilizzo in tempo reale. | Parzialmente riportato |
| 4c | Metodi, panoramica del sistema e figure 1 e 2 dell'articolo. | Contorni anziché maschere piene, sovrapposizione disattivata per impostazione predefinita e attivabile tramite pedale, una percentuale di confidenza smussata accanto a ciascuna etichetta e una latenza end-to-end da 50 a 100 ms nei test pre-operatori. | Segnalati |
| 5a | Metodi, panoramica del sistema e procedura di prova di concetto | Un unico centro, l'Ospedale Nazionale di Neurologia e Neurochirurgia, con la sovrapposizione del monitor secondario esistente del sistema endoscopico. | Segnalati |
| 5b | Metodi, procedura di studio di fattibilità | L'intervento chirurgico è proceduto come di consueto sul display primario invariato, e la sovrapposizione è stata utilizzata durante l'orientamento anatomico prima della cellotomia e della durotomia. Chi ha preso la decisione finale è sottinteso (il chirurgo, con la sovrapposizione disattivata di default) e non esplicitamente dichiarato. | Decisione di giudizio |
| IV | Metodi, raccolta dati, analisi e iterazione del sistema | Gli esiti primari comprendono la dimostrazione di fattibilità, la valutazione della fattibilità (tramite questionario FIM) e l'osservazione della sicurezza. Gli esiti secondari comprendono il rendimento formativo e il feedback degli utenti (tramite AIM, SUS e STIAS). | Segnalati |
| 6a | Metodi, procedura di studio di fattibilità | È stato effettuato un controllo preliminare, ovvero "un controllo standardizzato della funzionalità", con analisi delle cause profonde di eventuali guasti, oltre a una relazione soggettiva sulla latenza. Non esiste una definizione formale di errore o malfunzionamento significativo né una classificazione della gravità. | Parzialmente riportato |
| 6b | Metodi, raccolta dati e didascalia della Figura 1 dell'articolo | La sicurezza è stata monitorata tramite il conteggio degli eventi relativi alla distrazione del chirurgo e all'interruzione del flusso di lavoro nelle registrazioni video in sala operatoria, mediante OSATS in cieco e confronto del tempo operatorio con una coorte retrospettiva abbinata, e attraverso i risultati clinici di routine. Il flusso di dati è stato instradato in modo da non compromettere il flusso video chirurgico principale. | Segnalati |
| 7 | Metodi, Raccolta dati | Il sistema utilizza strumenti standard (FIM, AIM, SUS, STIAS, MAILS) e note di osservazione strutturate redatte da un ricercatore. Gli utenti sono i chirurghi e gli infermieri che hanno interagito con il sistema, e il design dell'interfaccia si ispira a precedenti studi di simulazione. | Segnalati |
| V | Metodi, raccolta dati e materiale supplementare 1 | Statistiche riassuntive e analisi tematica dei dati qualitativi. Il Materiale supplementare 1 afferma che non è stata eseguita alcuna verifica formale delle ipotesi a causa delle ridotte dimensioni del campione. | Segnalati |
| 8 | Testo completo | Nell'articolo non si fa menzione dell'equità algoritmica né di alcun metodo correlato all'etica. La checklist degli autori stessi afferma che questo aspetto non è riportato, ma è stato trattato in un precedente lavoro dello stesso centro. | Non trovato |
| VI | Testo completo | Nell'articolo non si fa menzione del coinvolgimento dei pazienti. La lista di controllo degli autori indica che il coinvolgimento è previsto per studi futuri. | Non trovato |
| 9a | Risultati, panoramica e tabella 1 | Per ogni caso vengono forniti età, sesso, diagnosi e categoria di dimensione del tumore. Non viene menzionata la presenza di dati mancanti, ad eccezione dei due casi in cui il sistema non si è avviato. | Parzialmente riportato |
| 9b | Risultati, Panoramica | Quattro utenti con livello di formazione (un medico strutturato, un medico specializzando senior, un medico residente, un infermiere strumentista), fascia d'età, sesso e alfabetizzazione all'IA (mediana MAILS 6.1, IQR da 5 a 7.1). | Segnalati |
| 10a | Risultati, Panoramica | Il sistema è stato utilizzato in sei degli otto casi, in quattro delle cinque sessioni operative. "L'utilizzo significativo del sistema è stato limitato alla fase di vendita, come previsto". Non vengono forniti i dati relativi all'esposizione per utente e al tempo di attivazione della sovrapposizione. | Parzialmente riportato |
| 10b | Risultati, sicurezza e Figura 3 dell'articolo | Non si sono verificati "eventi di significativa distrazione per il chirurgo principale o di interruzione del flusso di lavoro dell'équipe chirurgica". La Figura 3 dell'articolo riporta inoltre che solo un'infermiera ha interagito con il sistema e prevede di spostare o aggiungere uno schermo. | Segnalati |
| VII | Risultati, fattibilità, sicurezza, feedback sull'implementazione più ampia e Tabella 1 | La maggior parte degli esiti predefiniti sono riportati con mediane e intervalli interquartile (FIM 4.8, AIM 4, SUS 78, STIAS 4.3 su 7). Il rendimento educativo, misurato tramite un questionario basato sul modello di Kirkpatrick, appare solo come un'affermazione secondo cui tutti i partecipanti hanno percepito un potenziale educativo. Nella versione della Tabella 1 che abbiamo letto, la cella FIM è vuota per i casi 6 e 8. | Parzialmente riportato |
| VIII | Testo completo | Non sono descritti sottogruppi predefiniti, quindi la riga potrebbe non essere applicabile. La checklist degli autori afferma che non è stata riportata perché si tratta di un piccolo studio IDEAL di Fase 1. | Decisione di giudizio |
| 11 | Risultati, iterazione del dispositivo, tabella 1 e figura 3 dell'articolo | La Figura 3 dell'articolo elenca, per sessione operativa, il problema riscontrato e la modifica apportata al modello di IA, all'hardware, all'interfaccia e all'implementazione, mentre la Tabella 1 riporta la versione del modello per ciascun caso. La variazione del risultato dopo ogni versione è qualitativa (ad esempio, carotide "più accurata e coerente rispetto alla sessione precedente"), e non viene riportato alcun valore di Dice per le versioni successive. | Decisione di giudizio |
| 12 | Risultati, Tabella 1, e Punti di forza e limiti | La Tabella 1 riporta, in forma verbale, l'allineamento tra chirurgo e IA per ciascun caso. Non sono inclusi i conteggi dei disaccordi, le motivazioni per le divergenze dall'allineamento o i ripensamenti, e gli autori riconoscono di aver prestato "minore attenzione ai casi in cui il modello ha potenzialmente superato le prestazioni umane o ha influenzato positivamente la loro decisione". | Parzialmente riportato |
| 13a | Risultati, panoramica, sicurezza e iterazione del dispositivo | Due degli otto casi (casi 2 e 3) sono andati persi a causa di un errore di avvio dopo un riavvio, risolto tramite consultazione con il produttore, modifica della voce di avvio e aggiornamento del firmware. "Si è trattato di un errore a livello di piattaforma, non di un malfunzionamento dell'applicazione CVAI". Altri eventi includevano un falso positivo del contorno della sella turcica sopra la carotide, distorsione della sovrapposizione da parte degli strumenti e una latenza percepita di circa 100 ms in un caso. | Segnalati |
| 13b | Risultati, Sicurezza | Nessuna complicanza intraoperatoria, inclusi danni vascolari o nervosi. Due pazienti hanno presentato iponatriemia che ha richiesto trattamento, uno in un caso senza il sistema (caso 2) e uno con esso (caso 5). Il valore medio di OSATS in fase sellare nei sei casi in cui è stato impiantato il sistema è stato di 27.2 su 30, contro 28.6 nella coorte retrospettiva. | Segnalati |
| 14a | Risultati, feedback sull'implementazione più ampia e fattori umani | L'usabilità viene valutata tramite la System Usability Scale (mediana 78, intervallo interquartile da 65 a 79), insieme all'accettabilità (AIM) e alla fiducia (STIAS). | Segnalati |
| 14b | Testo completo | Nessuna analisi della curva di apprendimento. La checklist degli autori indica il disegno IDEAL Fase 1 come motivazione, e la sezione Discussione elenca le curve di apprendimento per studi successivi. | Non trovato |
| 15 | Discussione, principali risultati e conclusioni | Si afferma che la segmentazione in tempo reale è fattibile durante interventi chirurgici dal vivo, che la maggior parte delle limitazioni sono correggibili e che una serie più ampia monocentrica (IDEAL Fase 2a) rappresenta il passo successivo. | Segnalati |
| 16 | Discussione, principali risultati e sottosezione dedicata alla letteratura | Il documento identifica come principali rischi il contorno falso positivo sulla carotide e la distorsione della sovrapposizione da parte degli strumenti, e la Figura 3 illustra le misure di mitigazione previste, tra cui l'occultamento della sovrapposizione al di sotto di una determinata soglia di confidenza. | Segnalati |
| IX | Discussione, punti di forza e limiti | Vengono citati il singolo centro, l'unica équipe chirurgica e le piccole casistiche, l'attenzione agli errori dell'IA e l'impiego come strumento di formazione. | Segnalati |
| 17 | Materiale di supporto, Disponibilità dei dati | La dichiarazione recita: "Disponibile su richiesta motivata e previa approvazione istituzionale". Non viene detto nulla riguardo al codice o all'accesso al modello. | Parzialmente riportato |
| X | Appendici, finanziamenti, conflitti di interesse e ringraziamenti | Vengono dichiarate le fonti di finanziamento, le partecipazioni azionarie personali e i rapporti di lavoro con aziende commerciali. Si ringraziano Medtronic, NVIDIA ed Encord per la collaborazione, ma non vengono specificati i ruoli di queste aziende e dei finanziatori. | Parzialmente riportato |
Nelle 38 righe analizzate, ne abbiamo classificate 18 come "Segnalate", 11 come "Parzialmente segnalate", 6 come "Valutazione discrezionale" e 3 come "Non trovate". Le tre righe "Non trovate" (8, VI e 14b) sono quelle che gli autori stessi segnalano come non segnalate nella loro checklist, con una motivazione, mentre la riga VIII è la quarta da loro segnalata. Il documento è valido per quanto riguarda gli aspetti che DECIDE-AI si proponeva di rilevare, ovvero errori, modifiche e usabilità, mentre le sue lacune riguardano i dettagli della governance, il numero dei partecipanti, i dati e il codice, e il ruolo delle aziende.
Cosa ci insegna l'esempio annotato sulla checklist DECIDE-AI
Fornisci i dati previsti e quelli effettivi, spiegando perché differiscono.
La riga 3a chiede come sia stato deciso il numero di pazienti. La sezione Metodi prevede sei pazienti, la sezione Risultati ne recluta otto e la sezione Discussione definisce sei degli otto interventi come i casi pianificati. Ciascuna affermazione può essere vera, ma un lettore non può conciliarle senza una frase che spieghi perché l'obiettivo è stato modificato. In una serie di studi in fase iniziale, dove il campione è volutamente piccolo, i numeri sono la prima cosa che un revisore controlla.
Scrivi le risposte negative, come hanno fatto gli autori.
La checklist supplementare degli autori riporta le righe 8, VI, VIII e 14b come non riportate, ciascuna con una breve motivazione, ad esempio "progettazione IDEAL Fase 1". Questa è una buona prassi, ed è ciò che la linea guida richiede, perché una motivazione specifica è meglio di uno spazio vuoto. Tuttavia, le motivazioni sono riportate nel supplemento, quindi un lettore del solo articolo non le vede. Una frase nel paragrafo dedicato ai limiti dello studio conterrebbe le stesse informazioni.
Registra ogni versione, come fa la Figura 3 dell'articolo.
La riga 11 richiede la tempistica e la motivazione di ogni modifica e i risultati successivi. La Figura 3 dell'articolo è un modello compatto delle prime due, con una colonna per ogni sessione operativa e una riga per ciascuna delle seguenti voci: modello di IA, interfaccia utente, hardware e implementazione. La sezione Metodi aggiunge che il modello è stato riaddestrato "utilizzando i dati di tutti i 110 pazienti e di ogni paziente successivo incluso nella sperimentazione". Quando i dati di addestramento aumentano con ogni caso, la riga 4a viene soddisfatta al meglio indicando la dimensione del set di dati di addestramento per ogni versione etichettata.

Definire un errore significativo prima del primo caso
La riga 6a chiede come sono stati definiti gli errori significativi. L'esempio esegue un controllo di funzionalità preliminare e un'analisi delle cause principali dei guasti, il che è corretto, ma non specifica in anticipo cosa si intende per errore significativo. Questo è importante perché il contorno della sella turcica del primo modello si estendeva sulla carotide (una "zona di accesso" sopra una "zona di non accesso" nella figura sopra), il modello che un chirurgo considererebbe più pericoloso, e la classe carotidea stessa si è dimostrata debole nei test preclinici (Dice 21.8%, recall 13.6%). Una definizione su una sola riga, come ad esempio una sovrapposizione che posiziona un contorno sicuro sopra una struttura di non accesso, permetterebbe al lettore di contare gli eventi nello stesso modo in cui li ha contati il team.
Contare l'accordo, non solo descriverlo
La riga 12 è quella in cui gli articoli sull'IA in fase iniziale tendono più spesso a essere vaghi. L'esempio riporta l'allineamento per caso a parole, ad esempio sella accurata e carotide solo parzialmente corretta. Un semplice conteggio per struttura e per caso, con una motivazione per ogni scostamento dalla sovrapposizione, trasforma le stesse osservazioni in dati. Gli autori stessi definiscono questa lacuna, notando che i casi in cui il modello ha contribuito a una decisione hanno ricevuto meno attenzione.
Indica cosa hanno fatto le aziende e i finanziatori
La riga X richiede di specificare il ruolo dei finanziatori e di eventuali aziende. L'esempio dichiara chiaramente le partecipazioni azionarie e i rapporti di lavoro, e ringrazia tre aziende per la collaborazione, ma non specifica il contributo di ciascuna. Una singola frase su chi ha fornito l'hardware, la piattaforma di registrazione e gli strumenti di annotazione, e se qualcuna di queste aziende ha visionato il manoscritto, completa la riga. Per la riga 17, una dichiarazione relativa al codice e al modello dovrebbe essere inserita accanto alla dichiarazione relativa ai dati, anche quando la risposta è che nessuna delle due può essere condivisa.
Eseguire un controllo di coerenza tra abstract e tabelle
L'abstract riporta che il sistema ha dimostrato "un'accuratezza accettabile nella segmentazione della sella turcica a livello di pixel in tempo reale". Nei risultati, l'accuratezza nell'uso reale appare come note qualitative sull'allineamento nella Tabella 1, senza alcuna accuratezza quantitativa in tempo reale. La colonna FIM nella Tabella 1, così come la interpretiamo, è vuota per due dei sei casi implementati, mentre il testo riporta la mediana. Nessuno di questi errori altera i risultati, ed è facilmente risolvibile prima della presentazione.
Come completare la checklist DECIDE-AI prima dell'invio
La procedura descritta di seguito funziona sia per un manoscritto completo che per l'invio della checklist DECIDE-AI, e i primi due passaggi risultano più efficaci se eseguiti durante la fase di pianificazione dello studio.
- Scarica la checklist ufficiale Prendete spunto dall'articolo del BMJ o di Nature Medicine e mantenete la data di versione nel nome del file.
- Pianifica lo studio attorno alle file in modo che la familiarizzazione (3c), le definizioni degli errori (6a), il registro delle modifiche (11) e gli strumenti di usabilità (14a) siano inclusi nel protocollo prima del primo paziente.
- Decidi cosa si applica contrassegnando le righe non pertinenti, come ad esempio i sottogruppi o le curve di apprendimento, e indicando la motivazione sia nel manoscritto che nella checklist.
- Inserisci una posizione in ogni riga della checklist DECIDE-AI Utilizzando i numeri di pagina e di riga del file inviato, scrivi una breve risposta negativa per ogni riga che non hai completato.
- Riconciliare tutti i numeri Attraverso l'abstract, i metodi, i risultati, le tabelle e le figure, a partire dai pazienti e dagli utenti pianificati e reclutati.
- Aggiungi il registro delle versioni sotto forma di tabella o figura, con la data, il motivo e l'effetto di ogni modifica apportata al modello, all'hardware o all'interfaccia.
- Conta gli errori per tipologia, con indicazione della frequenza, della causa e della possibilità di correzione, e discutendo le implicazioni di ciascuna per l'assistenza al paziente.
- Dati statali, codici e ruoli aziendali nelle pagine finali, inclusi i nomi dei fornitori di hardware, software e strumenti di registrazione.
Anche i disegni di studio misti richiedono buone pratiche di indagine, e la nostra guida alla progettazione di questionari negli studi epidemiologici aiuta a valutare l'usabilità e l'accettabilità degli strumenti. Se il sistema è uno strumento di previsione basato su dati di routine, la nostra guida all'implementazione dell'IA in ambito sanitario fornisce un contesto più ampio, e uno studente che deve allineare un capitolo della tesi alle linee guida appropriate può utilizzare la guida alle linee guida per la rendicontazione delle tesi di medicina . Per le parti osservazionali di una serie clinica, la guida STROBE rimane il punto di riferimento standard.
La fase successiva alla checklist DECIDE-AI è uno studio comparativo. Una volta raggiunta questa fase, si passa alla checklist CONSORT-AI e alla guida del protocollo SPIRIT . I documenti delle linee guida sono ad accesso aperto e il registro per lo studio di esempio è disponibile su ClinicalTrials.gov . Il framework IDEAL a cui DECIDE-AI si allinea è descritto dalla IDEAL Collaboration e in un aggiornamento del 2019 pubblicato su Annals of Surgery . 4
Strumenti di ricerca gratuiti da Editverse
- GraphProCrea grafici pronti per la pubblicazione, di 25 tipologie diverse, con test t, ANOVA, correlazione e valori p del chi-quadrato integrati. Gratuito, senza registrazione.
- StatiProCalcolatori statistici gratuiti e uno strumento di selezione dei test che copre confronti tra gruppi, risultati categorici, analisi del tempo all'evento e accuratezza diagnostica.
- Flowchart Pro: Genera diagrammi di flusso PRISMA 2020, PRISMA-ScR, CONSORT, STROBE, STARD, MOOSE e ARRIVE direttamente nel tuo browser.
Supporto professionale per la creazione di report secondo il modello DECIDE-AI.
Una valutazione clinica precoce è più facile da documentare quando le questioni relative alla progettazione vengono risolte prima del primo paziente e il manoscritto viene revisionato successivamente in base alla checklist. Due servizi di Editverse si basano su questo principio. Il primo consiste in una serie di sessioni di consulenza metodologica, utili quando si definiscono gli esiti, il campionamento di utenti e pazienti, la raccolta dei dati e la validità per uno studio di fattibilità con metodi misti. Il secondo è la revisione sostanziale del manoscritto stesso. Il supporto di Editverse per la redazione e la revisione è conforme alle linee guida COPE, ICMJE e GPP 2022, nonché ai requisiti etici della vostra istituzione e del vostro paese.
Consulenza metodologica
$400
Tre sessioni di 45 minuti con metodologi con dottorato di ricerca, incentrate sulla revisione del disegno di ricerca, il campionamento, la raccolta e la validità dei dati, con un quadro metodologico scritto. Il ciclo di sessioni si svolgerà nell'arco di 4-6 settimane.
Modifica avanzata
$550
Revisione sostanziale, perfezionamento del linguaggio scientifico, adattamento agli stili APA, AMA o Vancouver e verifica della bibliografia. Tariffa fissa, da 7 a 10 giorni lavorativi, una revisione gratuita.
Conclusione
La checklist DECIDE-AI richiede 38 righe che descrivono il primo contatto di uno strumento di intelligenza artificiale con pazienti reali, e le righe più importanti sono quelle che le linee guida per la sperimentazione non hanno mai richiesto, ovvero errori, versioni, consenso dell'utente e usabilità. Il nostro esempio pratico illustra questo schema. Un articolo può registrare ogni modifica al modello e indicarne apertamente i fallimenti, ma lasciare comunque inspiegabili una variazione nel numero di pazienti, una definizione di errore significativo, una dichiarazione di codice e il ruolo dei suoi partner commerciali. Iniziate dalla checklist DECIDE-AI quando pianificate lo studio, indicate la posizione di ogni riga durante la stesura della bozza ed eseguite un controllo di coerenza prima dell'invio. Un revisore in grado di trovare ogni riga in pochi minuti dedicherà la revisione alla qualità scientifica del vostro lavoro.
Domande frequenti
Quanti elementi contiene la checklist DECIDE-AI?
La checklist DECIDE-AI contiene 17 elementi specifici per l'IA, che si espandono a 28 righe una volta contati i sotto-elementi, più 10 elementi generici numerati con numeri romani. Ciò dà un totale di 38 righe.
La checklist DECIDE-AI è valida solo per gli studi randomizzati?
No. La checklist DECIDE-AI è specifica per la fase di sviluppo e non prescrive un disegno di studio. È pensata per valutazioni cliniche precoci, su piccola scala e in vivo, e può essere utilizzata in studi di coorte prospettici, studi comparativi non randomizzati o serie di casi. Gli studi randomizzati sull'IA utilizzano CONSORT-AI.
Cosa si intende per valutazione clinica in fase iniziale ai fini dello studio DECIDE-AI?
Il sistema di intelligenza artificiale viene utilizzato su pazienti reali e i suoi risultati influenzano l'assistenza, seppur su piccola scala. I test offline o in modalità "ombra", in cui i risultati non incidono sulle decisioni, non rientrano nelle linee guida.
In che modo la checklist DECIDE-AI si differenzia da TRIPOD+AI e CONSORT-AI?
TRIPOD+AI si occupa dello sviluppo e della validazione dei modelli predittivi, mentre CONSORT-AI si concentra sugli studi clinici randomizzati. La checklist DECIDE-AI si colloca tra le due e aggiunge fattori umani, consenso degli utenti, modifiche al sistema e segnalazione dettagliata degli errori.
La checklist DECIDE-AI sostituisce le altre linee guida sull'IA?
No. Le linee guida coprono fasi diverse, quindi un progetto può utilizzare la checklist DECIDE-AI per la sua prima serie di studi clinici e successivamente CONSORT-AI per uno studio randomizzato. Si noti che CONSORT 2025 ha sostituito CONSORT 2010 e che CONSORT-AI è stato sviluppato come estensione di CONSORT 2010.
Gli autori devono allegare al manoscritto una checklist DECIDE-AI compilata?
Molte riviste richiedono una checklist compilata con il numero di pagina o di riga per ogni riga. Consulta le istruzioni per l'autore e scrivi una breve risposta negativa per ogni riga che non hai preso in considerazione.
Dove è pubblicata la checklist ufficiale di DECIDE-AI?
La checklist è pubblicata sul BMJ e su Nature Medicine, entrambi a partire da maggio 2022. La versione del BMJ è ad accesso libero.
Referenze
- Vasey B, Nagendran M, Campbell B, Clifton DA, Collins GS, Denaxas S, et al. Linee guida per la rendicontazione della valutazione clinica in fase iniziale dei sistemi di supporto decisionale basati sull'intelligenza artificiale: DECIDE-AI. BMJ. 2022;377:e070904. doi:10.1136/bmj-2022-070904. PMID: 35584845. PMCID: PMC9116198. PubMed, PMC.
- Vasey B, Nagendran M, Campbell B, Clifton DA, Collins GS, Denaxas S, et al. Linee guida per la rendicontazione della valutazione clinica in fase iniziale dei sistemi di supporto decisionale basati sull'intelligenza artificiale: DECIDE-AI. Nat Med. 2022;28(5):924-933. doi:10.1038/s41591-022-01772-9. PMID: 35585198. Nature Medicine.
- Khan DZ, Mao Z, Wijekoon A, Das A, Williams SC, Blandford A, et al. Prima valutazione sull'uomo della segmentazione anatomica assistita dall'IA a livello di pixel in tempo reale in neurochirurgia: la chirurgia ipofisaria come esempio. Pituitary. 2026;29(5):163. doi:10.1007/s11102-026-01762-x. PMID: 42829367. PMCID: PMC13634013. CC BY 4.0. PubMed, PMC.
- Hirst A, Philippou Y, Blazeby J, Campbell B, Campbell M, Feinberg J, et al. Nessuna innovazione chirurgica senza valutazione: evoluzione e ulteriore sviluppo del quadro IDEAL e delle relative raccomandazioni. Ann Surg. 2019;269(2):211-220. doi:10.1097/SLA.0000000000002794. PMID: 29697448. PubMed.
