Revisione sistematica vs meta-analisi: spiegate le differenze chiave

TL; DR

• A revisione sistematica è una metodologia di ricerca basata su un protocollo predefinito, una ricerca esaustiva e criteri di inclusione espliciti. meta-analisi È una tecnica statistica che aggrega le dimensioni dell'effetto tra diversi studi. Una meta-analisi può essere inserita all'interno di una revisione sistematica; una revisione sistematica non la richiede necessariamente.
• Scegli la sintesi narrativa quando gli studi sono troppo eterogenei per essere combinati. Scegli la meta-analisi a coppie quando due o più studi misurano lo stesso risultato in modo comparabile. Scegli la meta-analisi di rete quando devi confrontare tre o più trattamenti che non sono mai stati testati direttamente.
• Entrambi gli approcci seguono le linee guida di reporting PRISMA 2020 e dovrebbero essere registrati preventivamente, idealmente in PROSPERO, prima dell'inizio dell'estrazione dei dati.

Se non hai familiarità con la sintesi delle evidenze, la differenza tra una revisione sistematica e una meta-analisi può sembrare una sottigliezza. I due termini vengono spesso usati in modo intercambiabile nelle conversazioni informali, nelle lettere di presentazione e, a volte, nei titoli dei manoscritti che i revisori segnalano per la correzione. Descrivono cose diverse e la distinzione cambia il modo in cui pianifichi un progetto, registri un protocollo e descrivi il tuo lavoro a una rivista.

Questa guida separa la metodologia dalle statistiche, illustra quando si applica ciascuna e mostra come gli standard di reporting (PRISMA 2020, GRADE, RoB 2) le colleghino nella pratica.

Definizioni rapide

Revisione sistematica: una revisione della letteratura completa e trasparente che segue un protocollo predefinito per identificare, valutare e sintetizzare tutti gli studi pertinenti su una specifica questione.

Meta-analisi: una tecnica statistica che combina i risultati quantitativi di più studi per produrre una stima aggregata dell'effetto.

La relazione è di contenimento, non di equivalenza. Una meta-analisi è una componente statistica che può essere inclusa in una revisione sistematica, ma una revisione sistematica non richiede una meta-analisi per essere valida o pubblicabile.

Revisione sistematica: la metodologia di ricerca

Una revisione sistematica è un metodo per condurre una ricerca, non una procedura statistica. La dichiarazione PRISMA 2020 , pubblicata sul BMJ da Page e colleghi, ha sostituito la versione del 2009 con una lista di controllo di 27 punti che illustra come i revisori dovrebbero identificare, selezionare, valutare e sintetizzare gli studi, riflettendo un decennio di progressi metodologici dall'uscita della linea guida originale.

Funzionalità principali

• Protocollo predefinito: Domanda di ricerca, strategia di ricerca e piano di analisi documentati prima dell'inizio dello screening
• Ricerca completa: molteplici database, letteratura grigia e ricerca manuale negli elenchi di riferimenti
• Criteri espliciti di inclusione ed esclusione: regole chiare applicate in modo coerente a tutti gli studi di fattibilità
• Valutazione formale del rischio di pregiudizio: uno strumento strutturato, non una valutazione informale
• Reporting trasparente: documentazione completa di ogni decisione di screening ed esclusione
• Sintesi narrativa o quantitativa: I risultati possono essere riassunti in prosa, aggregati statisticamente o entrambi.

La registrazione del protocollo è più importante di quanto la maggior parte dei revisori alle prime armi si aspetti. Un'analisi del 2019 su 182 revisioni sistematiche in ortodonzia ha rilevato che solo 37 revisioni, il 20.3% del totale, erano state registrate in PROSPERO , e le revisioni registrate hanno ottenuto punteggi sensibilmente più alti nello strumento di valutazione della qualità AMSTAR rispetto a quelle non registrate. Registrare un protocollo in anticipo, tramite PROSPERO o un protocollo PRISMA-P, protegge dalla possibilità di modificare i criteri di inclusione dopo aver verificato quali studi supportano la propria ipotesi.

Quando una revisione sistematica narrativa è la scelta giusta

Non tutte le revisioni sistematiche necessitano di un'aggregazione statistica. Una sintesi narrativa, senza meta-analisi, è il risultato appropriato quando gli studi sono troppo eterogenei per essere combinati, quando gli esiti sono misurati su scale diverse nei vari studi, quando i disegni degli studi variano troppo ampiamente perché un singolo valore aggregato abbia un significato, o quando la domanda è di natura esplorativa e una mappatura qualitativa delle evidenze è più adatta rispetto a una singola stima dell'effetto.

Meta-analisi: la tecnica statistica

La meta-analisi è un metodo statistico per combinare i dati, non un disegno di ricerca a sé stante. Prende le dimensioni dell'effetto già estratte attraverso un processo sistematico e produce una singola stima aggregata, ponderata in modo che gli studi più ampi e precisi contribuiscano in misura proporzionalmente maggiore al risultato.

Funzionalità principali

• Pooling quantitativo: combina le dimensioni dell'effetto (odds ratio, differenze medie, hazard ratio) tra gli studi
• Media ponderata: Gli studi più ampi e precisi hanno un peso maggiore nella stima complessiva.
• Appezzamenti forestali: Rappresentazione visiva dell'effetto di ciascuno studio insieme alla stima aggregata
• Test di eterogeneità: L'indice I-quadrato e la statistica Q quantificano il grado di disaccordo tra gli studi.
• Analisi dei sottogruppi: esplora se la popolazione di pazienti, la dose o il disegno dello studio spiegano la variazione dei risultati
• Test di bias di pubblicazione: I grafici a imbuto e il test di Egger verificano se mancano nella letteratura piccoli studi con risultati negativi.

La meta-analisi ha senso quando gli studi affrontano la stessa domanda, misurano gli esiti in modo sufficientemente simile da poterli standardizzare e sono almeno due, sebbene un numero maggiore di studi produca generalmente una stima aggregata più stabile. L'eterogeneità non deve essere pari a zero. Deve essere sufficientemente bassa da poter essere spiegata, oppure modellata esplicitamente attraverso l'analisi dei sottogruppi e la meta-regressione.

Editverse supporta da tempo i team di sintesi delle evidenze in diverse specialità, avendo potuto osservare il ripetersi dello stesso schema di presentazione. Il motivo più comune di rifiuto preliminare è un manoscritto intitolato come revisione sistematica, la cui sezione sui metodi non specifica mai una strategia di ricerca, non menziona mai un doppio screening indipendente e non applica mai uno strumento formale per la valutazione del rischio di bias. I revisori individuano la discrepanza tra titolo e metodologia già alla prima lettura, ed è uno dei problemi più facili da prevenire seguendo le linee guida PRISMA 2020 fin dalla fase di protocollo.

Confronto affiancato

La relazione tra revisione sistematica e meta-analisi

Una revisione sistematica senza meta-analisi è una pratica comune e valida. Consiste nell'identificare e valutare in modo esaustivo gli studi, per poi riassumere i risultati in forma narrativa quando l'aggregazione statistica non sarebbe significativa.

Una revisione sistematica con meta-analisi rappresenta una base di prove più solida quando i dati lo consentono. Si completano tutti i passaggi sopra descritti, quindi si aggiunge una stima dell'effetto aggregato statisticamente con una misura quantificata di precisione ed eterogeneità.

Una meta-analisi senza una revisione sistematica alle spalle è la combinazione che revisori ed editori guardano con maggiore scetticismo. L'aggregazione di dati senza un processo di identificazione documentato e riproducibile rischia di tralasciare studi rilevanti o di introdurre un bias di selezione in cui le dimensioni dell'effetto vengono mediate.

Standard di reporting: PRISMA 2020, RoB 2 e GRADE

La dichiarazione PRISMA 2020 copre sia le revisioni sistematiche narrative che le meta-analisi sotto un'unica checklist di 27 elementi, insieme a una checklist di abstract complementare e diagrammi di flusso rivisti per le revisioni originali e aggiornate. La rendicontazione della fase di protocollo è trattata separatamente da PRISMA-P , che documenta la strategia di ricerca e il piano di analisi prima dell'inizio di qualsiasi screening, proteggendo da modifiche post-hoc ai criteri di ammissibilità.

Il rischio di bias nei singoli studi influisce direttamente sul peso che una meta-analisi attribuisce a ciascun risultato. Per gli studi randomizzati, lo strumento RoB 2 pubblicato da Sterne e colleghi valuta il bias in cinque ambiti, dal processo di randomizzazione alla selezione del risultato riportato, sostituendo il precedente strumento Cochrane per la valutazione del rischio di bias, meno strutturato.

Una volta aggregate le stime degli effetti, il sistema GRADE valuta il grado di fiducia da riporre in esse. Il framework GRADE assegna uno dei quattro livelli di certezza (alto, moderato, basso o molto basso) a un insieme di evidenze, piuttosto che a un singolo studio. Gli studi randomizzati partono da un livello di certezza elevato, mentre gli studi osservazionali da un livello basso, prima di essere aggiustati, in aumento o in diminuzione, in base a fattori quali imprecisione, incoerenza e bias di pubblicazione, come spiegato da Guyatt e colleghi nell'articolo fondativo del framework pubblicato sul BMJ.

Meta-analisi di rete: confronto tra trattamenti mai testati direttamente.

La meta-analisi di rete (NMA) estende la meta-analisi a coppie per confrontare tre o più trattamenti contemporaneamente, incluse coppie che nessuno studio ha confrontato direttamente. Come descritto da Puerto Nino e Brignardello-Petersen nella loro panoramica metodologica, la NMA integra le evidenze dirette provenienti da studi comparativi diretti con le evidenze indirette ottenute tramite un comparatore comune, come il placebo, per stimare come due trattamenti si comporterebbero anche in assenza di uno studio che li abbia messi a confronto.

L'analisi di rete meta-analitica (NMA) richiede una rete interconnessa di confronti, il che significa che ogni trattamento deve essere collegato alla rete tramite almeno un comparatore condiviso. Produce classifiche dei trattamenti oltre alle stime aggregate degli effetti, motivo per cui i comitati che elaborano le linee guida la richiedono sempre più spesso quando esistono diverse terapie concorrenti per la stessa patologia e i confronti diretti sono scarsi.

Quale dovresti scegliere?

Scegli una revisione sistematica narrativa quando:

• La tua domanda è di carattere generale, esplorativo o mira a delineare un panorama di ricerca (una revisione preliminare).
• Gli studi sono troppo diversi per progettazione o misure di risultato per poterli combinare in modo significativo
• La sintesi qualitativa coglie una parte maggiore della risposta rispetto a un singolo dato aggregato.

Scegli la revisione sistematica con meta-analisi quando:

• La tua domanda è specifica e il risultato è quantitativo.
• Gli studi misurano gli stessi risultati o risultati standardizzabili
• È necessaria una stima precisa dell'effetto aggregato con un intervallo di confidenza.
• Il pubblico di riferimento è costituito da coloro che elaborano le linee guida o che sono responsabili delle politiche.

Scegli la revisione sistematica con meta-analisi di rete quando:

• Tre o più trattamenti competono per la stessa indicazione
• Mancano studi comparativi diretti per alcune coppie di trattamenti
• Un gruppo di esperti per le linee guida cliniche necessita di un confronto classificato tra tutte le opzioni, non solo tra una coppia.

Errori comuni da evitare

Definire una revisione della letteratura come revisione sistematica senza seguire un protocollo documentato è l'errore più frequente che riscontriamo tra i redattori. Al secondo posto, a breve distanza, si colloca l'esecuzione di una meta-analisi su studi con una sostanziale eterogeneità non spiegata (I-quadro superiore al 75%, senza una struttura di sottogruppi che la giustifichi) e la presentazione della stima aggregata come se risolvesse la questione. Un terzo errore consiste nel saltare completamente la registrazione preventiva, per poi modificare i criteri di inclusione a metà revisione una volta ottenuti i risultati della ricerca, che rappresenta esattamente il rischio di reporting selettivo che la registrazione PROSPERO e i protocolli PRISMA-P mirano a prevenire.

Impatto della pubblicazione e della citazione

Sia le revisioni sistematiche che le meta-analisi rientrano tra le tipologie di pubblicazione più citate in ambito biomedico. Le meta-analisi spesso superano in termini di citazioni le revisioni sistematiche narrative sullo stesso argomento, poiché risolvono un dibattito riducendolo a un singolo dato numerico. Di conseguenza, riviste, commissioni di elaborazione delle linee guida e revisioni successive tendono a citare l'articolo che fornisce la stima aggregata definitiva, piuttosto che quello che riassume i risultati in forma narrativa. Questo vantaggio in termini di citazioni è una conseguenza del rigore metodologico, non una scorciatoia. Una meta-analisi condotta in modo inadeguato, con un'elevata eterogeneità non spiegata, è meno citabile e più soggetta a una confutazione pubblicata.

Per la crescita dell'indice h , entrambi gli approcci sono valide opzioni. La decisione dovrebbe essere guidata dal metodo che effettivamente risponde al quesito di ricerca, non da quello percepito come più prestigioso.

Domande frequenti

È possibile che una revisione sistematica esista senza una meta-analisi?
Sì. Una revisione sistematica narrativa è di per sé un lavoro di ricerca completo, pubblicabile e conforme alle linee guida PRISMA. L'aggregazione statistica viene aggiunta solo quando gli studi inclusi sono sufficientemente simili da poter essere combinati in modo significativo.

È possibile eseguire una meta-analisi senza prima aver condotto una revisione sistematica completa?
Tecnicamente sì, ma i revisori e gli editori trattano le meta-analisi indipendenti con maggiore attenzione, poiché non esiste un processo documentato e riproducibile che confermi che ogni studio rilevante sia stato identificato e valutato equamente per l'inclusione.

Di quanti studi hai bisogno per una meta-analisi?
Due è il minimo statistico, ma la maggior parte dei metodologi raccomanda almeno da tre a cinque prima che la stima aggregata diventi stabile e le statistiche sull'eterogeneità diventino interpretabili.

Qual è la differenza tra una revisione sistematica e una revisione esplorativa?
Una revisione sistematica risponde a una domanda specifica e in genere include una valutazione del rischio di bias. Una revisione esplorativa (scoping review) mappa l'ampiezza della letteratura su un argomento più vasto, spesso per identificare lacune, e non sempre applica lo stesso rigore alla valutazione della qualità.

È necessaria la registrazione su PROSPERO per effettuare una meta-analisi?
La registrazione non è obbligatoria per legge, ma è richiesta dalla maggior parte delle riviste ad alto impatto e da Cochrane. I protocolli registrati sono associati a punteggi di qualità misurabilmente più elevati su strumenti come AMSTAR, e la registrazione appone un timestamp ai vostri metodi prima ancora che abbiate visto i risultati.

Che cos'è una meta-analisi di rete e quando è necessaria?
La meta-analisi di rete confronta simultaneamente tre o più trattamenti, combinando le evidenze dirette degli studi clinici con confronti indiretti tramite comparatori condivisi. È necessaria quando i gruppi di esperti che elaborano le linee guida devono classificare diverse terapie concorrenti che sono state raramente o mai confrontate direttamente tra loro.

Ottenere l'aiuto di esperti

Che si tratti di una revisione sistematica narrativa, di una meta-analisi a coppie o di una meta-analisi di rete, il rigore metodologico nella fase di protocollo è fondamentale per garantire che il manoscritto finale superi la revisione paritaria. Il nostro team supporta i ricercatori in ciascuna delle seguenti fasi.

• Sviluppo del protocollo e PROSPERO Registrazione
• Progettazione della strategia di ricerca bibliografica e screening da parte di due revisori.
• Estrazione dei dati e valutazione della qualità RoB 2 / GRADE
• Analisi statistica, comprese meta-analisi a coppie e di rete
• Redazione del manoscritto, verifiche di conformità PRISMA 2020 e invio alla rivista.

Pronti a iniziare il vostro progetto di sintesi delle evidenze? Esplorate il nostro servizio di revisione sistematica e meta-analisi , leggete la nostra guida completa ai metodi di meta-analisi o consultate i nostri esempi pratici di forest plot e di eterogeneità . Per approfondimenti metodologici, consultate le nostre guide al diagramma di flusso PRISMA , all'analisi intention-to-treat rispetto all'analisi per protocollo , alla registrazione degli studi per disegni non sperimentali e a come le metriche di citazione delle riviste influenzano la scelta della pubblicazione. In alternativa, contattateci per una consulenza gratuita.

Referenze

1. Page MJ, McKenzie JE, Bossuyt PM, et al. La dichiarazione PRISMA 2020: una linea guida aggiornata per la rendicontazione delle revisioni sistematiche. BMJ2021;372:n71. https://doi.org/10.1136/bmj.n71
2. Shamseer L, Moher D, Clarke M, et al. Elementi preferenziali per la rendicontazione di protocolli di revisione sistematica e meta-analisi (PRISMA-P) 2015: elaborazione e spiegazione. BMJ. Italiano: 2015;350:g7647. https://doi.org/10.1136/bmj.g7647
3. Sterne JAC, Savović J, Page MJ, et al. RoB 2: uno strumento rivisto per la valutazione del rischio di bias negli studi randomizzati. BMJ2019;366:l4898. https://doi.org/10.1136/bmj.l4898
4. Balshem H, Helfand M, Schünemann HJ, et al. Linee guida GRADE: 3. Valutazione della qualità delle prove. J Clin Epidemiol. 2011;64(4):401-406. https://doi.org/10.1016/j.jclinepi.2010.07.015
5. Guyatt GH, Oxman AD, Vist GE, et al. GRADE: un consenso emergente sulla valutazione della qualità delle prove e della forza delle raccomandazioni. BMJ. 2008;336(7650):924-926. https://doi.org/10.1136/bmj.39489.470347.AD
6. Sideri S, Papageorgiou SN, Eliades T. La registrazione dei protocolli di revisione sistematica in PROSPERO è risultata associata a un miglioramento della qualità della revisione. J Clin Epidemiol. 2019; 100: 103-110. https://doi.org/10.1016/j.jclinepi.2018.01.003
7. Puerto Nino AK, Brignardello-Petersen R. Come leggere una meta-analisi di rete. Eur Urol Focus. 2023. https://doi.org/10.1016/j.euf.2023.10.018