Systematische Übersichtsarbeit vs. Metaanalyse: Die wichtigsten Unterschiede erklärt

TL; DR

• A systematische Überprüfung ist eine Forschungsmethodik, die auf einem vordefinierten Protokoll, einer umfassenden Suche und expliziten Einschlusskriterien basiert. Meta-Analyse Eine Metaanalyse ist eine statistische Methode, die Effektstärken aus verschiedenen Studien zusammenfasst. Sie kann Teil einer systematischen Übersichtsarbeit sein, ist aber nicht zwingend erforderlich.
• Wählen Sie die narrative Synthese, wenn die Studien zu heterogen sind, um sie zusammenzufassen. Wählen Sie die paarweise Metaanalyse, wenn zwei oder mehr Studien dasselbe Ergebnis vergleichbar messen. Wählen Sie die Netzwerk-Metaanalyse, wenn Sie drei oder mehr Behandlungen vergleichen müssen, die noch nie direkt miteinander verglichen wurden.
• Beide Ansätze orientieren sich an den PRISMA 2020-Berichtsrichtlinien und sollten vor Beginn der Datenerhebung prospektiv, idealerweise in PROSPERO, registriert werden.

Wenn Sie sich mit Evidenzsynthese noch nicht auskennen, mag der Unterschied zwischen einem systematischen Review und einer Metaanalyse zunächst wie Haarspalterei erscheinen. Die beiden Begriffe werden im allgemeinen Sprachgebrauch, in Anschreiben und gelegentlich sogar in Manuskripttiteln synonym verwendet, was Gutachter dann zur Korrektur markieren. Sie beschreiben jedoch unterschiedliche Sachverhalte, und diese Unterscheidung beeinflusst, wie Sie ein Projekt planen, ein Protokoll einreichen und Ihre Arbeit einer Fachzeitschrift präsentieren.

Dieser Leitfaden trennt die Methodik von den Statistiken, erläutert, wann die jeweilige Methodik Anwendung findet, und zeigt, wie die Berichtsstandards (PRISMA 2020, GRADE, RoB 2) die beiden Aspekte in der Praxis miteinander verbinden.

Kurzdefinitionen

Systematische Übersichtsarbeit: Eine umfassende, transparente Literaturübersicht, die einem vordefinierten Protokoll folgt, um alle relevanten Studien zu einer bestimmten Fragestellung zu identifizieren, zu bewerten und zusammenzufassen.

Metaanalyse: Eine statistische Methode, die quantitative Ergebnisse aus mehreren Studien kombiniert, um eine zusammengefasste Schätzung des Effekts zu erhalten.

Es handelt sich um eine Art der Einbettung, nicht der Gleichwertigkeit. Eine Metaanalyse ist eine statistische Komponente, die in eine systematische Übersichtsarbeit einbezogen werden kann; eine systematische Übersichtsarbeit benötigt jedoch keine Metaanalyse, um gültig oder publikationsfähig zu sein.

Systematische Übersichtsarbeit: Die Forschungsmethodik

Eine systematische Übersichtsarbeit ist eine Forschungsmethode, kein statistisches Verfahren. Die PRISMA-2020-Leitlinie , veröffentlicht im BMJ von Page et al., ersetzte die Version von 2009 durch eine Checkliste mit 27 Punkten, die beschreibt, wie Gutachter Studien identifizieren, auswählen, bewerten und zusammenfassen sollen. Sie trägt den methodischen Fortschritten der letzten zehn Jahre seit der ursprünglichen Leitlinie Rechnung.

Hauptfunktionen

• Vordefiniertes Protokoll: Forschungsfrage, Suchstrategie und Analyseplan werden vor Beginn des Screenings dokumentiert.
• Flächendeckende Suche: mehrere Datenbanken, graue Literatur und manuelle Suche in Referenzlisten
• Explizite Ein- und Ausschlusskriterien: klare Regeln, die in allen Kandidatenstudien einheitlich angewendet werden.
• Formale Risikobewertung für Verzerrungen: ein strukturiertes Instrument, keine informelle Ermessensentscheidung
• Transparente Berichterstattung: vollständige Dokumentation jeder Screening- und Ausschlussentscheidung
• Narrative oder quantitative Synthese: Die Ergebnisse können in Prosa zusammengefasst, statistisch ausgewertet oder beides dargestellt werden.

Die Protokollregistrierung ist wichtiger, als die meisten Erstgutachter annehmen. Eine Analyse von 182 systematischen Übersichtsarbeiten im Bereich der Kieferorthopädie aus dem Jahr 2019 ergab, dass nur 37 dieser Arbeiten (20.3 %) in PROSPERO registriert waren . Registrierte Übersichtsarbeiten erzielten im AMSTAR-Qualitätsinstrument messbar höhere Werte als nicht registrierte. Die vorherige Registrierung eines Protokolls über PROSPERO oder ein PRISMA-P-Protokoll schützt davor, die Einschlusskriterien nachträglich ändern zu müssen, nachdem man gesehen hat, welche Studien die Hypothese stützen.

Wann eine narrative systematische Übersichtsarbeit die richtige Wahl ist

Nicht jede systematische Übersichtsarbeit erfordert eine statistische Zusammenfassung der Daten. Eine narrative Synthese ohne Metaanalyse ist das angemessene Ergebnis, wenn die Studien zu heterogen sind, um sie zusammenzufassen, wenn die Ergebnisse in den Studien auf unterschiedlichen Skalen gemessen werden, wenn die Studiendesigns zu stark variieren, als dass ein einzelner zusammengefasster Wert aussagekräftig wäre, oder wenn die Fragestellung explorativ ist und eine qualitative Darstellung der Evidenz besser geeignet ist als eine einzelne Effektstärkeschätzung.

Metaanalyse: Die statistische Technik

Die Metaanalyse ist eine statistische Methode zur Zusammenführung von Daten, kein eigenständiges Forschungsdesign. Sie verwendet Effektstärken, die bereits systematisch ermittelt wurden, und liefert eine einzige zusammengefasste Schätzung, die so gewichtet wird, dass größere und präzisere Studien proportional stärker zum Ergebnis beitragen.

Hauptfunktionen

• Quantitative Pooling-Methode: kombiniert Effektstärken (Odds Ratios, mittlere Differenzen, Hazard Ratios) aus verschiedenen Studien
• Gewichteter Durchschnitt: Größere, präzisere Studien haben bei der Gesamtschätzung ein höheres Gewicht.
• Waldparzellen: Visuelle Darstellung des Effekts jeder einzelnen Studie zusammen mit der gepoolten Schätzung
• Heterogenitätstest: Der I-Quadrat-Wert und die Q-Statistik quantifizieren, wie stark die Studien voneinander abweichen.
• Subgruppenanalyse: untersucht, ob die Patientenpopulation, die Dosis oder das Studiendesign die Ergebnisvariabilität erklären.
• Test auf Publikationsbias: Mithilfe von Funnel-Plots und dem Egger-Test wird überprüft, ob kleinere negative Studien in der Literatur fehlen.

Eine Metaanalyse ist sinnvoll, wenn Studien dieselbe Fragestellung behandeln, die Ergebnisse ausreichend ähnlich messen, um eine Standardisierung zu ermöglichen, und mindestens zwei Studien vorliegen. Mehr Studien führen jedoch in der Regel zu einer stabileren Gesamtschätzung. Die Heterogenität muss nicht null sein. Sie muss gering genug sein, um Unterschiede zu erklären, oder explizit durch Subgruppenanalysen und Meta-Regressionen modelliert werden.

Editverse unterstützt Teams für die Evidenzsynthese verschiedenster Fachrichtungen schon lange genug, um ein wiederkehrendes Muster bei der Einreichung von Manuskripten zu beobachten. Der häufigste Grund für eine Ablehnung ist ein Manuskript mit dem Titel „Systematic Review“, dessen Methodenteil weder eine Suchstrategie benennt noch ein unabhängiges Doppelscreening erwähnt oder ein formales Instrument zur Bewertung des Verzerrungsrisikos anwendet. Gutachter erkennen die Diskrepanz zwischen Titel und Methodik bereits beim ersten Durchlesen. Dieses Problem lässt sich am einfachsten vermeiden, indem man die PRISMA-2020-Richtlinien ab der Protokollphase befolgt.

Direktvergleich

Die Beziehung zwischen systematischer Übersichtsarbeit und Metaanalyse

Eine systematische Übersichtsarbeit ohne Metaanalyse ist üblich und zulässig. Dabei werden Studien umfassend identifiziert und bewertet, und die Ergebnisse werden anschließend narrativ zusammengefasst, wenn eine statistische Zusammenführung nicht sinnvoll wäre.

Eine systematische Übersichtsarbeit mit Metaanalyse stellt die solideste Evidenzbasis dar, sofern die Daten dies zulassen. Sie führen alle oben genannten Schritte durch und fügen anschließend eine statistisch gepoolte Effektstärkeschätzung mit einem quantifizierten Maß für Präzision und Heterogenität hinzu.

Eine Metaanalyse ohne zugrundeliegende systematische Übersichtsarbeit wird von Gutachtern und Herausgebern mit größter Skepsis betrachtet. Die Zusammenführung von Daten ohne dokumentiertes und reproduzierbares Identifizierungsverfahren birgt das Risiko, relevante Studien zu übersehen oder eine Selektionsverzerrung einzuführen, in deren Folge Effektstärken gemittelt werden.

Berichtsstandards: PRISMA 2020, RoB 2 und GRADE

Die PRISMA-2020-Leitlinie umfasst sowohl narrative systematische Reviews als auch Metaanalysen anhand einer einzigen Checkliste mit 27 Punkten, ergänzt durch eine Checkliste für Abstracts und überarbeitete Flussdiagramme für Original- und aktualisierte Reviews. Die Berichterstattung in der Protokollphase wird separat in PRISMA-P geregelt . Dieses Dokument legt die Suchstrategie und den Analyseplan fest, bevor mit dem Screening begonnen wird, und beugt so nachträglichen Änderungen der Einschlusskriterien vor.

Das Verzerrungsrisiko in den Einzelstudien beeinflusst direkt, wie stark die Ergebnisse in einer Metaanalyse gewichtet werden. Für randomisierte Studien bewertet das von Sterne et al. veröffentlichte RoB-2-Tool Verzerrungen in fünf Bereichen, vom Randomisierungsprozess bis zur Auswahl des berichteten Ergebnisses, und ersetzt damit das ältere, weniger strukturierte Cochrane-Risiko-für-Verzerrungen-Tool.

Sobald die Effektschätzungen zusammengeführt sind, bewertet GRADE deren Vertrauenswürdigkeit. Das GRADE-System ordnet einer Gesamtheit von Evidenz – und nicht einzelnen Studien – eine von vier Vertrauenswürdigkeitsstufen zu: hoch, mittel, niedrig oder sehr niedrig. Randomisierte Studien gelten zunächst als Evidenz mit hoher Vertrauenswürdigkeit, Beobachtungsstudien hingegen mit niedriger. Diese Werte werden dann, wie Guyatt und Kollegen in der grundlegenden BMJ-Veröffentlichung zum GRADE-System darlegten, anhand von Faktoren wie Ungenauigkeit, Inkonsistenz und Publikationsbias nach oben oder unten korrigiert.

Netzwerk-Metaanalyse: Vergleich von Behandlungen, die nie direkt miteinander getestet wurden

Die Netzwerk-Metaanalyse (NMA) erweitert die paarweise Metaanalyse, um drei oder mehr Behandlungen gleichzeitig zu vergleichen, einschließlich solcher Paare, die in keiner Studie direkt miteinander verglichen wurden. Wie Puerto Nino und Brignardello-Petersen in ihrer Methodenübersicht beschreiben, integriert die NMA direkte Evidenz aus direkten Vergleichsstudien mit indirekter Evidenz, die über einen gemeinsamen Vergleichspräparat, wie beispielsweise Placebo, gewonnen wird, um abzuschätzen, wie sich zwei Behandlungen auch ohne eine Studie, die sie direkt miteinander verglichen hat, vergleichen ließen.

Netzwerk-Metaanalysen (NMA) erfordern ein zusammenhängendes Netzwerk von Vergleichsbehandlungen. Das bedeutet, dass jede Behandlung über mindestens eine gemeinsame Vergleichsbehandlung mit dem Netzwerk verknüpft sein muss. NMA liefert neben gepoolten Effektschätzungen auch Behandlungsrangfolgen. Daher wird sie von Leitlinienkommissionen zunehmend angefordert, wenn mehrere konkurrierende Therapien für dieselbe Erkrankung existieren und direkte Vergleiche selten sind.

Welches sollten Sie wählen?

Wählen Sie eine narrative systematische Übersichtsarbeit, wenn:

• Ihre Frage ist breit gefasst, explorativ oder kartiert eine Forschungslandschaft (eine Übersichtsarbeit).
• Die Studien sind hinsichtlich ihres Designs oder ihrer Ergebnismessungen zu unterschiedlich, um sie sinnvoll zusammenführen zu können.
• Eine qualitative Synthese erfasst mehr von der Antwort als eine einzelne zusammengefasste Zahl.

Systematische Übersichtsarbeit mit Metaanalyse wählen, wenn:

• Ihre Frage ist präzise formuliert und das Ergebnis ist quantitativ.
• Studien messen die gleichen oder standardisierbaren Ergebnisse.
• Sie benötigen eine präzise Schätzung des gepoolten Effekts mit einem Konfidenzintervall.
• Die Zielgruppe sind Leitlinienentwickler und politische Entscheidungsträger.

Systematische Übersichtsarbeit mit Netzwerk-Metaanalyse wählen, wenn:

• Drei oder mehr Behandlungen konkurrieren um dieselbe Indikation.
• Für einige Behandlungspaare fehlen direkte Vergleichsstudien.
• Ein Expertengremium für klinische Leitlinien benötigt einen Rangvergleich aller Optionen, nicht nur eines einzelnen Paares.

Häufige zu vermeidende Fehler

Eine Literaturübersicht ohne Einhaltung eines dokumentierten Protokolls als systematische Übersichtsarbeit zu bezeichnen, ist der häufigste Fehler, der uns Redakteuren unterläuft. Knapp dahinter folgt die Durchführung einer Metaanalyse von Studien mit erheblicher, unerklärter Heterogenität (I²-Wert über 75 Prozent, ohne Subgruppenstruktur zur Erklärung dieser Heterogenität) und die Präsentation des gepoolten Schätzwerts, als sei die Frage damit endgültig geklärt. Ein dritter Fehler ist das vollständige Auslassen der prospektiven Registrierung und die anschließende Anpassung der Einschlusskriterien während des Review-Prozesses, sobald die Suchergebnisse vorliegen. Genau dieses Risiko selektiver Berichterstattung sollen durch die PROSPERO-Registrierung und die PRISMA-P-Protokolle verhindert werden.

Publikations- und Zitationswirkung

Systematische Reviews und Metaanalysen zählen zu den meistzitierten Publikationstypen in der Biomedizin. Metaanalysen werden oft häufiger zitiert als narrative systematische Reviews zum selben Thema, da sie eine Debatte in einer einzigen Zahl zusammenfassen. Fachzeitschriften, Leitlinienkommissionen und nachfolgende Reviews zitieren tendenziell eher die Arbeit mit der definitiven gepoolten Schätzung als diejenige, die die Ergebnisse narrativ zusammenfasst. Dieser Zitationsvorteil ist eine Folge methodischer Strenge, keine Abkürzung. Eine schlecht durchgeführte Metaanalyse mit hoher, unerklärter Heterogenität ist weniger zitierfähig und zieht mit größerer Wahrscheinlichkeit eine veröffentlichte Widerlegung nach sich.

Für das Wachstum des h-Index sind beide Ansätze gute Optionen. Die Entscheidung sollte davon abhängen, welche Methode Ihre Forschungsfrage tatsächlich beantwortet, und nicht davon, welche Methode als prestigeträchtiger gilt.

Häufig gestellte Fragen

Kann eine systematische Übersichtsarbeit ohne Metaanalyse existieren?
Ja. Ein narratives systematisches Review ist eine in sich abgeschlossene, publikationsfähige und PRISMA-konforme Forschungsarbeit. Statistische Zusammenführung erfolgt nur dann, wenn die eingeschlossenen Studien ausreichend ähnlich sind, um eine sinnvolle Kombination zu ermöglichen.

Kann man eine Metaanalyse durchführen, ohne vorher eine vollständige systematische Übersichtsarbeit durchzuführen?
Technisch gesehen ja, aber Gutachter und Redakteure behandeln eigenständige Metaanalysen mit größerer Sorgfalt, da es kein dokumentiertes, reproduzierbares Verfahren gibt, das bestätigt, dass jede relevante Studie identifiziert und fair auf ihre Eignung für die Aufnahme bewertet wurde.

Wie viele Studien benötigt man für eine Metaanalyse?
Zwei ist das statistische Minimum, aber die meisten Methodiker empfehlen mindestens drei bis fünf, bevor die gepoolte Schätzung stabil wird und Heterogenitätsstatistiken interpretierbar werden.

Worin besteht der Unterschied zwischen einer systematischen Übersichtsarbeit und einer Scoping Review?
Eine systematische Übersichtsarbeit beantwortet eine klar definierte Fragestellung und beinhaltet typischerweise eine Bewertung des Verzerrungsrisikos. Eine Scoping Review hingegen erfasst die vorhandene Literatur zu einem breiteren Thema, oft um Forschungslücken zu identifizieren, und wendet nicht immer denselben strengen Qualitätsmaßstab an.

Ist für eine Metaanalyse eine PROSPERO-Registrierung erforderlich?
Die Registrierung ist zwar nicht gesetzlich vorgeschrieben, wird aber von den meisten hochrangigen Fachzeitschriften und von Cochrane erwartet. Registrierte Protokolle erzielen messbar höhere Qualitätsbewertungen in Tools wie AMSTAR, und die Registrierung protokolliert Ihre Methoden, noch bevor die Ergebnisse vorliegen.

Was ist eine Netzwerk-Metaanalyse und wann ist sie notwendig?
Die Netzwerk-Metaanalyse vergleicht drei oder mehr Behandlungen gleichzeitig und kombiniert direkte Studienergebnisse mit indirekten Vergleichen über gemeinsame Vergleichsgruppen. Sie ist erforderlich, wenn Leitlinienkommissionen mehrere konkurrierende Therapien bewerten müssen, die selten oder nie direkt miteinander verglichen wurden.

Expertenhilfe erhalten

Ob Sie eine narrative systematische Übersichtsarbeit, eine paarweise Metaanalyse oder eine Netzwerk-Metaanalyse planen – die methodische Strenge im Protokollstadium entscheidet darüber, ob das fertige Manuskript die Begutachtung durch Fachkollegen besteht. Unser Team unterstützt Forschende in jeder der folgenden Phasen.

• Protokollentwicklung und PROSPERO Anmeldung
• Strategieentwicklung für die Literaturrecherche und Screening durch zwei Gutachter
• Datenextraktion und RoB 2 / GRADE Qualitätsbewertung
• Statistische Analysen, einschließlich paarweiser und Netzwerk-Metaanalysen
• Manuskripterstellung, Prüfung der PRISMA-2020-Konformität und Einreichung bei Fachzeitschriften

Sind Sie bereit für Ihr Evidenzsynthese-Projekt? Entdecken Sie unseren Service für systematische Reviews und Metaanalysen , lesen Sie unseren umfassenden Leitfaden zu Metaanalyse-Methoden oder sehen Sie sich unsere ausgearbeiteten Forest-Plots und Beispiele zur Heterogenitätsanalyse an . Weiterführende Methoden finden Sie in unseren Leitfäden zum PRISMA-Flussdiagramm , zur Intention-to-Treat- versus Per-Protocol-Analyse , zur Studienregistrierung für nicht-klinische Studiendesigns und zur Bedeutung von Zitationsmetriken für die Wahl des Publikationsortes. Oder kontaktieren Sie uns für eine kostenlose Beratung.

Referenzen

1. Page MJ, McKenzie JE, Bossuyt PM, et al. Die PRISMA 2020-Leitlinie: ein aktualisierter Leitfaden für die Berichterstattung über systematische Reviews. BMJ. 2021;372:n71. https://doi.org/10.1136/bmj.n71
2. Shamseer L, Moher D, Clarke M, et al. Bevorzugte Berichtselemente für systematische Übersichtsarbeiten und Metaanalysen (PRISMA-P) 2015: Erläuterung und Erklärung. BMJ. 2015;350:g7647. https://doi.org/10.1136/bmj.g7647
3. Sterne JAC, Savović J, Page MJ, et al. RoB 2: ein überarbeitetes Instrument zur Beurteilung des Verzerrungsrisikos in randomisierten Studien. BMJ. 2019;366:l4898. https://doi.org/10.1136/bmj.l4898
4. Balshem H, Helfand M, Schünemann HJ, et al. GRADE-Leitlinien: 3. Bewertung der Qualität der Evidenz. J Clin Epidemiol. 2011;64(4):401-406. https://doi.org/10.1016/j.jclinepi.2010.07.015
5. Guyatt GH, Oxman AD, Vist GE, et al. GRADE: ein sich abzeichnender Konsens zur Bewertung der Qualität von Evidenz und der Stärke von Empfehlungen. BMJ. 2008;336(7650):924-926. https://doi.org/10.1136/bmj.39489.470347.AD
6. Sideri S, Papageorgiou SN, Eliades T. Die Registrierung von Protokollen für systematische Reviews in PROSPERO war mit einer erhöhten Review-Qualität verbunden. J Clin Epidemiol. 2019; 100: 103-110. https://doi.org/10.1016/j.jclinepi.2018.01.003
7. Puerto Nino AK, Brignardello-Petersen R. Wie man eine Netzwerk-Metaanalyse liest. Eur Urol Fokus. 2023. https://doi.org/10.1016/j.euf.2023.10.018