Pubblicato il
La National Trauma Data Bank e il suo successore, il file di utilizzo dei partecipanti al Trauma Quality Programs dell'American College of Surgeons, attingono ora a oltre 900 centri traumatologici partecipanti negli Stati Uniti. La scalabilità viene spesso considerata un sostituto del rigore più di quanto dovrebbe. Una revisione sistematica del 2018 di 539 manoscritti di registri di traumi pubblicati tra gennaio 2015 e marzo 2017 ha rilevato che il 38.6% non menzionava se i dati fossero completi e un ulteriore 16.3% segnalava dati mancanti senza descrivere come li avesse gestiti. Quanto segue illustra cosa possono supportare i dati NTDB e TQP, dove il disegno dello studio fallisce e le decisioni analitiche, sulla codifica della gravità delle lesioni, sui dati fisiologici mancanti e sul raggruppamento delle strutture, che distinguono uno studio di registro di traumi pubblicabile da uno scartato a priori.
Cosa sono realmente NTDB e TQP
L'American College of Surgeons ha istituito la National Trauma Data Bank (NTDB) nel 1989, basandosi sui registri dei traumi che i centri partecipanti già tenevano per i propri programmi di qualità. La crescita è stata costante, non improvvisa. Nel 2004 si erano accumulati un milione di record, e nel 2014 il totale ha raggiunto i cinque milioni. Nel 2017 l'ACS ha integrato la NTDB nel più ampio quadro dei Trauma Quality Programs (TQP), e il file per uso interno, ora pubblicato ogni anno nell'ambito del TQP, è il diretto discendente dell'estratto originale della NTDB. I ricercatori che oggi citano "NTDB" lavorano solitamente con un file a marchio TQP, creato con la stessa procedura di invio, e i due nomi compaiono in modo intercambiabile nella letteratura scientifica proprio per questo motivo.
La partecipazione è volontaria ma concentrata. I centri di Livello I e Livello II, verificati dal Comitato per i Traumi dell'ACS secondo uno standard definito di risorse e volume di casi, contribuiscono alla maggior parte dei dati, e i report di benchmarking del TQIP sono elaborati a partire da questo sottoinsieme verificato. I centri di Livello III e IV partecipano con percentuali inferiori e più variabili, un aspetto direttamente rilevante per chiunque cerchi di generalizzare i risultati del TQIP all'assistenza traumatologica al di fuori dei centri di riferimento più grandi.
Quando i dati TQP sono lo strumento giusto
I dati del TQP rispondono a domande sugli esiti intraospedalieri in numerosi centri su una scala che nessuna singola istituzione può raggiungere da sola, sui tassi di mortalità e complicanze in base al tipo di lesione, sulle variazioni nelle pratiche di rianimazione, sulle disparità nell'assistenza traumatologica in base allo stato assicurativo o alla posizione geografica e sull'epidemiologia dei meccanismi di lesione troppo rari perché un singolo centro possa studiarli con precisione. Il confronto della mortalità di un centro, aggiustata per il rischio, con il campione nazionale di partecipanti, utilizzando rapporti osservati/attesi con un'adeguata correzione, è uno degli scopi per cui è stato concepito questo studio.
Qualsiasi dato che richieda un denominatore di popolazione non è adatto al TQP. Il TQP è un campione di convenienza di centri che hanno scelto di partecipare, non un registro basato sulla popolazione, quindi non può supportare un tasso di incidenza, e i revisori che lavorano nel campo della traumatologia lo confermeranno immediatamente. I pazienti deceduti prima di raggiungere un centro partecipante, o che sono stati curati interamente al di fuori della rete, sono semplicemente assenti dal file, e l'insieme degli ospedali partecipanti cambia di anno in anno, il che trasforma le tendenze pluriennali ingenue in effetti di composizione, a meno che tale variazione non venga verificata direttamente. Anche il follow-up dopo la dimissione è assente. Tutto si ferma alla porta dell'ospedale, quindi qualsiasi informazione sulla funzionalità a lungo termine, sui ricoveri o sulla mortalità tardiva richiede una fonte di dati completamente diversa. Una simile limitazione dovuta al campione di convenienza si applica più in generale alla sorveglianza pubblica degli infortuni, e trattiamo la versione generale del problema nella nostra analisi sull'affidabilità delle statistiche sugli infortuni del NEISS.
La gravità delle lesioni viene calcolata, non misurata.
Nessun dato presente in un registro dei traumi fornisce direttamente all'analista un punteggio di gravità delle lesioni. L'ISS e il NISS vengono calcolati a partire da codici diagnostici basati sull'ICD, mappati sui livelli di gravità dell'Abbreviated Injury Scale (AIS), ed è proprio in questa fase di mappatura che ha origine una sorprendente quantità di errori pubblicati. Diverse versioni del dizionario AIS assegnano livelli di gravità differenti allo stesso codice diagnostico, pertanto due studi basati sugli stessi ricoveri possono riportare distribuzioni ISS sostanzialmente diverse, semplicemente a causa di una scelta di mappatura che nessuno dei due articoli menziona. Uno studio difendibile basato su un registro dei traumi indica la versione della mappatura utilizzata e, laddove il periodo di studio coincida con un cambio di versione, verifica se tale scelta influisce sulle conclusioni, anziché presumere il contrario.
Il fatto che vengano inclusi o meno i decessi precoci complica ulteriormente la situazione. I pazienti che muoiono entro pochi minuti dall'arrivo, prima che sia possibile una valutazione fisiologica completa, vengono esclusi da alcune analisi e mantenuti in altre, e ciascuna scelta modifica il denominatore proprio per i pazienti più gravi della coorte. Nessuna delle due scelte è di per sé errata. Ciò che un revisore verifica è la scelta effettuata e la valutazione del suo effetto sul risultato principale.
La mancanza fisiologica è il problema centrale
Il punteggio GCS, la pressione arteriosa sistolica e la frequenza respiratoria del pronto soccorso presentano la più alta percentuale di dati mancanti tra tutte le variabili utilizzate abitualmente per l'aggiustamento del rischio traumatico, e il meccanismo non è casuale. Un'analisi di registro su 2,520 casi del Registro dei Traumi dello Stato di Victoria ha rilevato che la frequenza respiratoria, il punteggio GCS e la pressione arteriosa sistolica, insieme a un indicatore di qualificazione per l'intubazione, presentavano la più alta percentuale di osservazioni mancanti tra tutte le variabili necessarie per l'analisi basata sul TRISS, e che la regressione logistica sui predittori di dati mancanti ha identificato un chiaro schema clinico alla base delle lacune, piuttosto che una mancata risposta casuale. I pazienti che arrivano intubati, sedati o in condizioni critiche sono quelli che un paramedico o un infermiere di triage non possono valutare completamente, e sono in modo sproporzionato i pazienti che poi muoiono. Analizzare solo le cartelle cliniche complete, quindi, non si limita a ridurre il campione. Di conseguenza, sia il numeratore che il denominatore perdono i pazienti più gravi, e qualsiasi tasso di mortalità calcolato sui pazienti rimanenti risulta distorto a favore di una coorte più sana rispetto a quella effettivamente trattata.
Né il meccanismo né la direzione di tale distorsione sono specifici di un singolo registro. Una simulazione Monte Carlo condotta su 63,020 pazienti del NTDB in 68 ospedali ha dimostrato che il metodo statistico scelto per gestire i dati mancanti relativi alla componente motoria del GCS influenza quali ospedali vengono segnalati come outlier di qualità, confrontando l'imputazione multipla con l'analisi dei casi completi e con l'eliminazione totale del predittore interessato, prendendo come riferimento i dati reali e completamente osservati. Un modello di imputazione multipla separato, costruito specificamente per le variabili fisiologiche del NTDB, e uno studio di validazione extraospedaliera che ha confrontato direttamente i valori imputati con i valori noti registrati dai paramedici, sono giunti entrambi alla stessa conclusione, pur utilizzando registri diversi. L'analisi dei casi completi delle variabili fisiologiche del trauma non è un'impostazione predefinita neutrale. Si muove in una direzione prevedibile e verificabile, che tende a sottovalutare la reale gravità della malattia nella coorte.
Abbiamo realizzato una simulazione indipendente, convalidata da due motori statistici, per quantificare tale distorsione anziché affermarla. Per i risultati completi, consultare la sezione relativa all'entità della distorsione nell'analisi dei casi completi, che include la mortalità per traumi e l'aggiustamento del rischio .
Non si può ignorare il raggruppamento delle strutture.
I pazienti trattati nello stesso centro traumatologico non sono statisticamente indipendenti l'uno dall'altro. Condividono un'équipe chirurgica, un protocollo di rianimazione e una casistica istituzionale, e la regressione logistica aggregata che tratta ogni paziente come un'osservazione indipendente sottovaluta l'incertezza relativa a qualsiasi confronto a livello di struttura. I modelli a effetti misti con un'intercetta casuale a livello di struttura, o le equazioni di stima generalizzate con errori standard robusti, sono la soluzione accettata, e la correlazione intraclasse derivante da entrambi gli approcci merita di essere riportata separatamente, poiché un basso ICC è di per sé una prova che la variabilità a livello di centro non è la causa del risultato. Il livello di certificazione e il volume di attività del centro sono fattori confondenti tanto quanto i termini di clustering, poiché i centri di livello I, II e III trattano casistiche strutturalmente diverse, e un confronto che non tenga conto dello stato di certificazione confronta popolazioni che non sono mai state simili fin dall'inizio.
Trasferimenti e doppio conteggio
Una quota significativa di pazienti gravemente traumatizzati giunge presso un centro partecipante dopo essere stata trasferita da un altro ospedale, e la loro cartella clinica TQP può riflettere l'appartenenza a una delle due strutture a seconda delle procedure di invio dei dati. Se non si interviene, questo problema comporta sia un doppio conteggio di alcuni pazienti nel file aggregato, sia la mescolanza di esiti relativi a due diversi episodi di cura in un'unica cartella clinica. Una regola di trasferimento definita e collaudata, applicata in modo coerente e verificata rispetto all'alternativa, è un passaggio obbligatorio, non un'opzione, e rappresenta una delle lacune più comuni segnalate dai revisori nei manoscritti dei registri dei traumi inviati.
In parole semplici
NTDB e TQP sono grandi database multicentrici sui traumi, creati a partire dai dati forniti volontariamente dagli ospedali, e non rappresentano un censimento nazionale di tutti i pazienti traumatizzati. Sono efficaci per confrontare gli esiti tra diversi centri, ma inadeguati per qualsiasi analisi che richieda un tasso di incidenza reale sulla popolazione. Trattare i pazienti con parametri vitali mancanti come se fossero semplicemente assenti dallo studio è la principale fonte di errore evitabile, poiché nei registri dei traumi i pazienti con maggiori probabilità di non avere una misurazione della scala di Glasgow (GCS) o della pressione sanguigna sono quelli troppo instabili per una valutazione completa e, spesso, quelli con maggiori probabilità di decesso.
Confronto tra NTDB/TQP e gli altri principali registri.
| Caratteristica | NTDB / TQP | SEER | NHANES |
|---|---|---|---|
| Tipo di campione | Campione di convenienza dei centri partecipanti | Registro basato sulla popolazione, circa la metà degli Stati Uniti | campione di indagine probabilistica complessa |
| Follow-up dopo l'evento indice | Nessuno, termina al momento delle dimissioni. | Sopravvivenza a lungo termine e causa di morte | Solo mortalità collegata, tramite NDI |
| Problema di dati mancanti nella firma | Variabili fisiologiche mancanti in modo informativo in base alla gravità | Errore di codifica per stadio e causa di morte sconosciuti | Mancata risposta agli item nell'intervista e componenti MEC |
| Può stimare un tasso nazionale? | No, il denominatore è sconosciuto | Sì, all'interno dei registri coperti | Sì, applicando i pesi del sondaggio. |
Come ottenere l'accesso a un file di utilizzo del partecipante TQP
L'accesso ai dati passa attraverso l'istituzione del richiedente, anziché direttamente attraverso un singolo ricercatore. L'American College of Surgeons richiede un accordo firmato sull'utilizzo dei dati che nomini l'istituzione ricevente, limiti chi all'interno di tale istituzione può gestire il file e stabilisca le modalità di condivisione e pubblicazione dei risultati. Il supporto analitico esterno, da parte di uno statistico, di un fornitore di servizi di gestione dati o di un'azienda come Editverse che lavora a partire da un estratto dati fornito dal cliente, è generalmente consentito, ma solo laddove l'accordo con l'istituzione lo permetta esplicitamente. È responsabilità del richiedente confermare tale consenso prima di iniziare qualsiasi analisi, non è un'ipotesi da dare per scontata. I tempi di risposta per la domanda variano di anno in anno e in base al livello di dettaglio della richiesta iniziale, pertanto è consigliabile pianificare con anticipo rispetto alla data di presentazione prevista, piuttosto che scoprire il problema dopo aver già fissato la scadenza per la pubblicazione del manoscritto.
Cosa controlla per prima cosa un revisore in un manoscritto TQP
I manoscritti sui registri dei traumi tendono a non superare la fase di revisione per una serie di motivi ristretti e ripetibili, la maggior parte dei quali emerge prima ancora che il revisore legga la sezione relativa ai metodi. Quattro domande si presentano con sufficiente frequenza da poter essere considerate una sorta di checklist preliminare alla presentazione, piuttosto che un ripensamento successivo.
La sezione relativa ai metodi indica con precisione la versione e l'anno del file utilizzato dai partecipanti? La dicitura "dati NTDB" senza numero di versione non fornisce al revisore alcuna informazione sul ciclo di invio, sullo standard di codifica o sull'insieme dei centri partecipanti che hanno effettivamente prodotto i risultati, ed è uno dei modi più rapidi per ricevere una richiesta di revisione dei metodi.
Il problema dei dati mancanti nelle variabili fisiologiche è stato affrontato in qualche modo? Un manoscritto che riporta GCS, pressione sanguigna sistolica o frequenza respiratoria come covariate senza specificare come sono stati gestiti i valori mancanti, o con una tacita restrizione ai casi completi nascosta in un diagramma di flusso, appare a un revisore esperto come indice di inesperienza o di un bias non esaminato.
La composizione dei casi è comparabile tra i centri o gli anni presi in esame? I centri di livello I, II e III trattano per definizione popolazioni diverse, e un confronto che raggruppa i dati tra i vari livelli di verifica senza apportare le dovute correzioni, o senza almeno spiegare perché tale raggruppamento sia giustificabile, si presta a un'ovvia obiezione.
La regola relativa al trasferimento dei pazienti viene specificata da qualche parte? Il silenzio su questo punto è abbastanza frequente, tanto che i revisori ora la richiedono esplicitamente quando un manoscritto la omette, poiché una regola di trasferimento non definita lascia aperta la questione se i pazienti o gli esiti siano stati conteggiati due volte.
Nessuna di queste quattro domande richiede statistiche sofisticate per essere risolta. Rispondere in modo chiaro, nella sezione dedicata ai metodi, prima ancora che un revisore debba chiedere, è ciò che distingue un manoscritto accettato al primo tentativo da uno che necessita di una revisione sostanziale.
Domande comuni
I dati NTDB o TQP possono supportare una stima nazionale dell'incidenza dei traumi? No. Un campione di convenienza con un denominatore sconosciuto e variabile non può rispondere a questa domanda, e qualsiasi affermazione sull'incidenza basata su di esso non supererebbe il vaglio di chiunque lavori nel campo dell'epidemiologia dei traumi.
È sufficiente un solo anno di dati TQP per individuare un meccanismo raro? A volte sì, ma l'aggregazione dei dati di più anni solleva il problema dell'effetto di composizione menzionato in precedenza, poiché l'insieme di ospedali che contribuiscono al file cambia di anno in anno. È necessario verificarlo prima di aggregare i dati, non darlo per scontato.
L'imputazione multipla risolve completamente il problema dei dati fisiologici mancanti? La maggior parte del bias scompare quando l'esito viene incluso nel modello di imputazione, ma la soluzione è solo un palliativo e non una cura definitiva, e i revisori si aspettano comunque un'analisi di sensibilità sui casi completi.
Qual è la differenza tra NTDB e TQP nella sezione Metodi? Nella maggior parte dei casi, non ha importanza. Indica la versione effettiva del file utilizzato dai partecipanti e l'anno di utilizzo, poiché è ciò di cui ha bisogno un revisore o chi desidera replicare lo studio, piuttosto che discutere su quale dei due nomi sia tecnicamente corretto.
Strumenti gratuiti per la gestione dei registri dei traumi
- Tutorial sulla checklist di segnalazione STROBE, per lo standard di segnalazione ogni manoscritto TQP viene controllato rispetto
- Sei tecniche per la pulizia dei dati dei registri clinici, per le fasi di preparazione dei dati che precedono qualsiasi modello
- Livelli di evidenza nella ricerca clinica, per aver correttamente confrontato un risultato di registro con uno studio clinico o una meta-analisi
Servizi professionali
Editverse crea studi NTDB e TQP con aggiustamento del rischio secondo gli standard sopra indicati, gestendo i dati mancanti informativi con imputazione multipla e un'analisi di sensibilità sui casi completi, modellando il raggruppamento delle strutture anziché ignorarlo, e rimappando la gravità delle lesioni anziché basandosi esclusivamente sui dati del registro.
router
$450
Valutazione di fattibilità e protocollo. Verifica se la tua domanda di ricerca, l'accordo sull'utilizzo dei dati con l'ACS e la rivista di destinazione sono effettivamente compatibili prima di impegnarti in uno studio completo. Il credito verrà interamente riconosciuto per qualsiasi studio tu commissioni.
Prezzo fisso
$2,400
Studio del Registro dei Traumi NTDB/TQP. Rimappatura da ICD ad AIS, gestione dei dati mancanti informativi con imputazione multipla, aggiustamento del rischio per struttura e compilazione della checklist STROBE. 15 giorni lavorativi dalla ricezione dei dati.
Citato
A partire da $ 3,500
Studio di registro esteso e multi-database. Per una domanda TQP collegata a un altro database, un modello predittivo che necessita di validazione esterna o un programma di pubblicazioni correlate sui traumi. Preventivo fisso prima dell'inizio dei lavori.
Conclusione
I dati NTDB e TQP premiano gli analisti che considerano la struttura stessa del file come parte integrante della sezione relativa ai metodi, e non come un ripensamento a posteriori prima dei risultati. I centri partecipanti sono volontari, i campi relativi alla gravità delle lesioni sono derivati anziché misurati, e le variabili fisiologiche più importanti per l'aggiustamento del rischio risultano mancanti secondo uno schema che riflette le condizioni di salute del paziente al momento del ricovero. Nulla di tutto ciò rende i dati inutilizzabili. La versione della mappatura, il meccanismo di mancata rilevazione e il raggruppamento per struttura, verificati e dichiarati anziché dati per scontati, sono ciò che distingue un manoscritto che supera la revisione da uno che non la supera.
Referenze
- Shivasabesan G, Mitra B, O'Reilly GM. Dati mancanti nei registri dei traumi: una revisione sistematica. ferita. 2018;49(9):1641-1647. doi: 10.1016/j.injury.2018.03.035
- Glance LG, Osler TM, Mukamel DB, Meredith W, Dick AW. Impatto degli approcci statistici per la gestione dei dati mancanti sulla qualità dei centri traumatologici. Annali di Chirurgia. 2009;249(1):143-148. doi: 10.1097/SLA.0b013e31818e544b
- O'Reilly GM, Cameron PA, Jolley DJ. Quali pazienti presentano dati mancanti? Un'analisi dei dati mancanti in un registro dei traumi. ferita. 2013;43(11):1917-1923. doi: 10.1016/j.injury.2012.07.185
- Moore L, Hanley JA, Turgeon AF, Lavoie A, Emond M. Un modello di imputazione multipla per l'imputazione di dati fisiologici mancanti nella banca dati nazionale sui traumi. Ufficiale dell'American College of Surgeons. 2009;209(5):572-579. doi: 10.1016/j.jamcollsurg.2009.07.004
- Newgard CD. La validità dell'utilizzo dell'imputazione multipla per i dati mancanti relativi ai traumi extraospedalieri in un registro statale dei traumi. Medicina accademica di emergenza. 2006;13(3):314-324. doi: 10.1197/j.aem.2005.09.011
- O'Reilly GM, Jolley DJ, Cameron PA, Gabbe B. Dispersi in azione: un caso di studio sull'applicazione di metodi per la gestione dei dati mancanti al benchmarking dei sistemi di gestione dei traumi. Medicina accademica di emergenza. 2011;17(10):1122-1129. doi: 10.1111 / j.1553-2712.2010.00887.x
