Veröffentlicht
Die Nationale Traumadatenbank (NTDB) und ihr Nachfolger, die Teilnehmerdatei der Trauma-Qualitätsprogramme des American College of Surgeons (ACS), greifen mittlerweile auf Daten von über 900 teilnehmenden Traumazentren in den USA zurück. Umfang wird dabei häufiger als nötig als methodische Strenge angesehen. Eine systematische Übersichtsarbeit aus dem Jahr 2018, die 539 zwischen Januar 2015 und März 2017 veröffentlichte Traumaregister-Manuskripte analysierte, ergab, dass 38.6 % der Studien die Vollständigkeit ihrer Daten nicht angaben und weitere 16.3 % fehlende Daten erwähnten, ohne deren Handhabung zu beschreiben. Im Folgenden wird erläutert, welche Aussagekraft die Daten der NTDB und der Trauma-Qualitätsprogramme haben, wo die methodischen Schwächen liegen und welche analytischen Entscheidungen – hinsichtlich der Kodierung des Schweregrades von Verletzungen, fehlender physiologischer Daten und der Clusterung von Einrichtungen – darüber entscheiden, ob eine publizierbare Traumaregisterstudie veröffentlicht werden kann oder nicht.
Was NTDB und TQP eigentlich sind
Das American College of Surgeons (ACS) gründete 1989 die National Trauma Data Bank (NTDB). Sie basierte auf den Traumaregistern, die teilnehmende Zentren bereits für ihre eigenen Qualitätsprogramme führten. Das Wachstum verlief stetig, nicht sprunghaft. Bis 2004 wurden eine Million Datensätze erfasst, 2014 waren es bereits fünf Millionen. 2017 integrierte das ACS die NTDB in das umfassendere Rahmenwerk der Trauma Quality Programs (TQP). Die jährlich im Rahmen der TQP veröffentlichte Teilnehmerdatei ist die direkte Weiterentwicklung des ursprünglichen NTDB-Auszugs. Forschende, die heute „NTDB“ zitieren, arbeiten in der Regel mit einer TQP-Datei, die auf demselben Übermittlungsprozess basiert. Aus diesem Grund werden die beiden Bezeichnungen in der Fachliteratur synonym verwendet.
Die Teilnahme ist freiwillig, aber konzentriert. Zentren der Stufen I und II, die vom ACS-Ausschuss für Trauma nach festgelegten Ressourcen- und Fallzahlenstandards zertifiziert wurden, liefern den Großteil der Datensätze. Die TQIP-Benchmarking-Berichte basieren auf dieser verifizierten Teilmenge. Zentren der Stufen III und IV beteiligen sich in geringerem und variablerem Umfang, was unmittelbar relevant ist, wenn man die Ergebnisse des TQIP auf die Traumabehandlung außerhalb der größten Überweisungszentren übertragen möchte.
Wann TQP-Daten das richtige Instrument sind
Die TQP-Daten liefern Antworten auf Fragen zu den Behandlungsergebnissen im Krankenhaus in zahlreichen Zentren – in einem Umfang, den keine einzelne Einrichtung allein erreichen kann. Sie liefern Informationen zu Mortalitäts- und Komplikationsraten nach Verletzungsmuster, Unterschieden in der Reanimationspraxis, Ungleichheiten in der Traumabehandlung je nach Versicherungsstatus oder Region sowie zur Epidemiologie von Verletzungsmechanismen, die für ein einzelnes Zentrum zu selten sind, um sie präzise zu untersuchen. Die risikoadjustierte Mortalität eines Zentrums mit der nationalen Teilnehmerpopulation zu vergleichen und dabei die Verhältnisse von beobachteten zu erwarteten Werten unter Berücksichtigung der entsprechenden Reduktion zu berechnen, ist einer der Anwendungsbereiche, für die das Studiendesign entwickelt wurde.
Alles, was eine Populationsbasis benötigt, ist für TQP ungeeignet. TQP ist eine Stichprobe von teilnehmenden Zentren und kein bevölkerungsbasiertes Register. Daher kann es keine Inzidenzrate liefern, was Experten im Bereich der Traumabehandlung sofort bestätigen. Patienten, die vor Erreichen eines teilnehmenden Zentrums verstarben oder vollständig außerhalb des Netzwerks behandelt wurden, fehlen in der Datei. Die teilnehmenden Krankenhäuser ändern sich jährlich, wodurch einfache mehrjährige Trends zu Kompositionseffekten verkommen, sofern diese Veränderungen nicht direkt untersucht werden. Auch Nachbeobachtungen nach der Entlassung fehlen. Alles endet mit der Entlassung aus dem Krankenhaus. Daher sind für Informationen zur Langzeitfunktion, Wiederaufnahme oder Spätmortalität völlig andere Datenquellen erforderlich. Eine ähnliche Einschränkung durch die Stichprobenziehung gilt allgemein für die öffentliche Verletzungsüberwachung. Wir behandeln dieses Problem in unserer Analyse zur Zuverlässigkeit der NEISS-Verletzungsstatistik.
Der Schweregrad der Verletzung wird abgeleitet, nicht gemessen.
In einem Traumaregister wird dem Analysten kein direkter Schweregrad der Verletzung (ISS) angezeigt. ISS und NISS werden aus ICD-basierten Diagnosecodes berechnet, die den Schweregraden der Abbreviated Injury Scale (AIS) zugeordnet werden. Dieser Zuordnungsschritt ist die Ursache für einen überraschend hohen Anteil veröffentlichter Fehler. Unterschiedliche AIS-Wörterbuchversionen ordnen demselben Diagnosecode unterschiedliche Schweregrade zu. Daher können zwei Studien, die auf denselben zugrunde liegenden Einweisungen basieren, allein aufgrund einer Zuordnungswahl, die in keiner der Studien offengelegt wird, deutlich unterschiedliche ISS-Verteilungen berichten. Eine seriöse Studie in einem Traumaregister gibt die verwendete Zuordnungsversion an und prüft, ob die Wahl die Schlussfolgerung beeinflusst, wenn der Studienzeitraum einen Versionswechsel umfasst, anstatt dies anzunehmen.
Ob frühe Todesfälle miteinbezogen werden, verschärft das Problem. Patienten, die innerhalb weniger Minuten nach ihrer Ankunft versterben, bevor eine vollständige physiologische Untersuchung möglich ist, werden von einigen Analysen ausgeschlossen und von anderen beibehalten. Jede dieser Entscheidungen verändert den Nenner für genau die schwerstkranken Patienten der Kohorte. Keine der beiden Entscheidungen ist für sich genommen falsch. Die Überprüfung der getroffenen Entscheidung und ihrer Auswirkungen auf das Hauptergebnis ist das, was ein Gutachter prüft.
Physiologisches Fehlen ist das zentrale Problem
Die Glasgow Coma Scale (GCS), der systolische Blutdruck und die Atemfrequenz weisen in der Notaufnahme die höchste Ausfallrate aller routinemäßig zur Risikoadjustierung bei Traumata verwendeten Variablen auf, und dieser Mechanismus ist nicht zufällig. Eine Registeranalyse von 2,520 Fällen aus dem Traumaregister des Bundesstaates Victoria ergab, dass Atemfrequenz, GCS und systolischer Blutdruck zusammen mit einem Intubationskriterium den größten Anteil fehlender Messwerte aller für die TRISS-basierte Analyse benötigten Variablen aufwiesen. Die logistische Regression der Prädiktoren für fehlende Werte identifizierte ein klares klinisches Muster hinter den Lücken und nicht etwa zufällige Nichtbeantwortung. Patienten, die intubiert, sediert oder in lebensbedrohlichem Zustand eintreffen, können von Rettungssanitätern oder Triage-Kräften nicht vollständig beurteilt werden und versterben überproportional häufig. Die Analyse ausschließlich vollständiger Datensätze reduziert daher nicht nur die Stichprobe. Sowohl im Zähler als auch im Nenner gehen dadurch die schwerstkranken Patienten verloren, und jede auf Basis der verbleibenden Patienten berechnete Sterblichkeitsrate ist zugunsten einer gesünderen Patientengruppe verzerrt als derjenigen, die tatsächlich behandelt wurde.
Weder der Mechanismus noch die Richtung dieser Verzerrung sind auf ein einzelnes Register beschränkt. Eine Monte-Carlo-Simulation mit Daten von 63,020 NTDB-Patienten aus 68 Krankenhäusern zeigte, dass die gewählte statistische Methode zum Umgang mit fehlenden GCS-Motorikkomponentendaten beeinflusst, welche Krankenhäuser als Qualitätsausreißer eingestuft werden. Dabei wurden multiple Imputation, vollständige Fallanalyse und das vollständige Weglassen des betroffenen Prädiktors verglichen, jeweils anhand der tatsächlichen, vollständig erfassten Daten. Ein separates, speziell für physiologische NTDB-Variablen entwickeltes multiples Imputationsmodell sowie eine Validierungsstudie außerhalb des Krankenhauses, die imputierte Werte direkt mit bekannten, von Rettungssanitätern dokumentierten Werten verglich, kamen in verschiedenen Registern zum selben Ergebnis. Die vollständige Fallanalyse physiologischer Traumavariablen ist kein neutraler Standard. Sie verläuft in eine vorhersehbare und überprüfbare Richtung, nämlich in Richtung einer Unterschätzung des tatsächlichen Schweregrades der Erkrankung der Kohorte.
Wir haben eine unabhängige Simulation entwickelt und diese anhand zweier statistischer Modelle validiert, um diese Verzerrung zu quantifizieren, anstatt sie nur zu behaupten. Sehen Sie, inwieweit die vollständige Fallanalyse die Traumamortalität und die Risikoadjustierung für das Gesamtergebnis tatsächlich verzerrt.
Die Clusterbildung von Einrichtungen darf nicht ignoriert werden.
Patienten, die im selben Traumazentrum behandelt werden, sind statistisch nicht unabhängig voneinander. Sie teilen sich ein OP-Team, ein Reanimationsprotokoll und eine ähnliche Fallzusammensetzung. Eine gepoolte logistische Regression, die jeden Patienten als unabhängige Beobachtung behandelt, unterschätzt die Unsicherheit bei jedem Vergleich auf Einrichtungsebene. Mixed-Effects-Modelle mit einem zufälligen Achsenabschnitt für die Einrichtung oder generalisierte Schätzgleichungen mit robusten Standardfehlern gelten als Standard. Die Intraclass-Korrelation (ICC) beider Ansätze ist an sich schon aussagekräftig, da ein niedriger ICC-Wert belegt, dass die Variation zwischen den Zentren das Ergebnis nicht bedingt. Verifizierungsstufe und Fallzahl des Zentrums sind hier ebenso Störfaktoren wie Clustering-Faktoren, da Zentren der Stufen I, II und III strukturell unterschiedliche Fallzusammensetzungen behandeln. Ein Vergleich, der den Verifizierungsstatus nicht berücksichtigt, vergleicht Populationen, die von vornherein nicht vergleichbar waren.
Übertragungen und Doppelzählung
Ein erheblicher Anteil schwerverletzter Patienten wird nach Verlegung aus einem anderen Krankenhaus in ein teilnehmendes Zentrum eingeliefert, und ihre TQP-Akte kann je nach Übermittlungspraxis die jeweilige Einrichtung widerspiegeln. Wird dies nicht behoben, führt es sowohl zu Doppelzählungen einiger Patienten in der zusammengefassten Datei als auch zur Vermischung von Behandlungsergebnissen aus zwei verschiedenen Fällen in einer einzigen Akte. Eine festgelegte, erprobte Verlegungsregel, die konsequent angewendet und mit der Alternative abgeglichen wird, ist ein notwendiger Schritt und keine optionale Verbesserung. Sie gehört zu den häufigsten Mängeln, die Gutachter in eingereichten Manuskripten zu Traumaregistern bemängeln.
In einfachen Worten
NTDB und TQP sind große, multizentrische Traumadatenbanken, die auf freiwilligen Daten von Krankenhäusern basieren und keine nationale Erfassung aller verletzten Patienten darstellen. Sie eignen sich hervorragend für den Vergleich von Behandlungsergebnissen verschiedener Zentren, sind jedoch weniger geeignet für die Ermittlung einer tatsächlichen Populationsrate. Die Behandlung von Patienten mit fehlenden Vitalparametern, als wären sie einfach nicht in der Studie erfasst, ist die größte vermeidbare Fehlerquelle. Denn in Traumaregistern fehlen am häufigsten GCS- oder Blutdruckwerte bei Patienten, die zu instabil für eine vollständige Beurteilung waren und oft ein hohes Sterberisiko hatten.
NTDB/TQP im Vergleich zu den anderen großen Registern
| Funktion | NTDB / TQP | SEER | NHANES |
|---|---|---|---|
| Beispielstyp | Gelegenheitsstichprobe der teilnehmenden Zentren | Bevölkerungsbasiertes Register, etwa die Hälfte der US-Bevölkerung | Stichprobe aus einer komplexen Wahrscheinlichkeitserhebung |
| Nachbereitung nach dem Indexereignis | Keine, endet bei Entladung | Langzeitüberleben und Todesursache | Verknüpfte Mortalität nur über NDI |
| Problem mit fehlenden Signaturdaten | Physiologische Variablen, die in Bezug auf den Schweregrad aussagekräftig fehlen | Fehlkodierung von Todesstadium und Todesursache unbekannt | Fehlende Antworten auf einzelne Fragen in Interviews und MEC-Komponenten |
| Kann es einen nationalen Wert schätzen? | Nein, der Nenner ist unbekannt. | Ja, innerhalb der abgedeckten Register. | Ja, unter Berücksichtigung der Gewichtung der Umfrageergebnisse. |
Zugriff auf eine TQP-Teilnehmernutzungsdatei
Der Zugriff erfolgt über die Institution des Antragstellers und nicht direkt über den einzelnen Forscher. Das American College of Surgeons verlangt eine unterzeichnete Datenverwendungsvereinbarung, die die empfangende Institution benennt, die Zuständigkeiten innerhalb dieser Institution für die Bearbeitung der Datei einschränkt und die Bedingungen für die Weitergabe und Veröffentlichung der Ergebnisse festlegt. Externe analytische Unterstützung, beispielsweise durch Statistiker, Datenmanagement-Dienstleister oder Unternehmen wie Editverse, die mit einem vom Kunden bereitgestellten Datenauszug arbeiten, ist grundsätzlich zulässig, jedoch nur, wenn die Vereinbarung mit der Institution dies ausdrücklich erlaubt. Die Bestätigung dieser Erlaubnis vor Beginn jeglicher Analyse obliegt dem Antragsteller und darf nicht als gegeben angenommen werden. Die Bearbeitungszeit für den Antrag selbst variiert je nach Jahr und Detaillierungsgrad der ursprünglichen Anfrage. Daher ist es ratsam, frühzeitig Vorlaufzeit vor dem angestrebten Einreichungstermin einzuplanen, anstatt die Lücke erst nach Festlegung der Manuskriptfrist zu bemerken.
Was ein Gutachter als Erstes in einem TQP-Manuskript prüft
Eingereichte Manuskripte für Traumaregister scheitern häufig aus wenigen, wiederkehrenden Gründen an der Begutachtung, und die meisten dieser Gründe treten bereits zutage, bevor der Gutachter den Methodenteil gelesen hat. Vier Fragen tauchen so oft auf, dass sie als Checkliste vor der Einreichung und nicht als nachträgliche Überlegung dienen sollten.
Wird im Methodenteil die genaue Version und das Jahr der Teilnehmerdatei angegeben? „NTDB-Daten“ ohne Versionsnummer geben dem Gutachter keinerlei Auskunft darüber, welcher Einreichungszyklus, welcher Kodierungsstandard oder welche Gruppe von teilnehmenden Zentren die Ergebnisse tatsächlich hervorgebracht hat, und dies ist einer der schnellsten Wege, eine Überarbeitung der Methoden zu fordern.
Wird das Muster fehlender Werte bei den physiologischen Variablen überhaupt berücksichtigt? Ein Manuskript, das GCS, systolischen Blutdruck oder Atemfrequenz als Kovariaten angibt, ohne zu erklären, wie mit fehlenden Werten umgegangen wurde, oder mit einer stillschweigenden Einschränkung auf vollständige Datensätze, die in einem Flussdiagramm versteckt ist, wirkt auf einen erfahrenen Gutachter entweder wie Unerfahrenheit oder wie eine nicht reflektierte Voreingenommenheit.
Ist die Fallzusammensetzung in den verschiedenen Zentren oder den verglichenen Jahren vergleichbar? Zentren der Stufen I, II und III behandeln systembedingt unterschiedliche Patientengruppen, und ein Vergleich, der Daten über verschiedene Verifizierungsstufen hinweg zusammenfasst, ohne dies zu berücksichtigen oder zumindest zu erörtern, warum eine solche Zusammenfassung gerechtfertigt ist, lädt geradezu zu Einwänden ein.
Wird die Transferregel irgendwo angegeben? Das Fehlen dieser Angabe ist so häufig, dass Gutachter mittlerweile direkt danach fragen, wenn ein Manuskript sie auslässt, da eine undefinierte Transferregel die Frage offenlässt, ob Patienten oder Ergebnisse doppelt gezählt wurden.
Keine dieser vier Fragen erfordert ausgefeilte statistische Kenntnisse. Sie im Methodenteil klar zu beantworten, bevor ein Gutachter nachfragen muss, ist das, was eine Zusage im ersten Anlauf von einer umfangreichen Überarbeitung unterscheidet.
Häufige Fragen
Können NTDB- oder TQP-Daten eine nationale Schätzung der Traumahäufigkeit ermöglichen? Nein. Eine Gelegenheitsstichprobe mit unbekannter und sich ändernder Bezugsgröße kann diese Frage nicht beantworten, und jede darauf basierende Inzidenzbehauptung wird einer Überprüfung durch Experten der Traumaepidemiologie nicht standhalten.
Reichen TQP-Daten eines einzelnen Jahres für die Untersuchung eines seltenen Mechanismus aus? Manchmal ja, doch die Zusammenfassung von Daten aus mehreren Jahren führt zum oben genannten Problem des Kompositionseffekts, da sich die zu den Daten beitragenden Krankenhäuser jährlich ändern. Prüfen Sie dies daher vor der Zusammenführung der Daten und ignorieren Sie es nicht einfach.
Behebt die multiple Imputation das Problem fehlender physiologischer Daten vollständig? Ein Großteil der Verzerrung verschwindet, wenn das Ergebnis in das Imputationsmodell einbezogen wird, aber die Behebung ist eher eine Abschwächung als eine Heilung, und eine Sensitivitätsanalyse mit vollständigen Datensätzen wird von den Gutachtern weiterhin erwartet.
Worin besteht der Unterschied zwischen NTDB und TQP im Methodenteil? Für die meisten Zwecke ist er irrelevant. Geben Sie die tatsächlich verwendete Version und das Jahr der Teilnehmerdatei an, da dies für Gutachter und Replikatoren relevant ist, anstatt darüber zu diskutieren, welcher der beiden Namen technisch korrekt ist.
Kostenlose Tools für die Arbeit mit Traumaregistern
- STROBE-Meldecheckliste – TutorialFür den Berichtsstandard wird jedes TQP-Manuskript überprüft.
- Sechs Techniken zur Bereinigung klinischer Registerdatenfür die Datenaufbereitungsschritte, die vor jedem Modell erfolgen
- Evidenzstufen in der klinischen Forschung, um einen Registerbefund korrekt einer Studie oder einer Metaanalyse zuzuordnen
Professional Services
Editverse erstellt risikoadjustierte NTDB- und TQP-Studien nach dem oben genannten Standard, wobei informative fehlende Werte mit multipler Imputation und einer Sensitivitätsanalyse vollständiger Fälle behandelt werden, die Clusterbildung von Einrichtungen modelliert statt ignoriert wird und der Schweregrad von Verletzungen neu zugeordnet wird, anstatt sich auf die Angaben im Register zu verlassen.
Router
$450
Machbarkeits- und Protokollprüfung. Wir prüfen, ob Ihre Fragestellung, Ihre Datenverwendungsvereinbarung mit der American Cancer Society (ACS) und die Zielzeitschrift tatsächlich zusammenpassen, bevor Sie eine vollständige Studie in Auftrag geben. Die Leistungen werden Ihnen bei jeder von Ihnen beauftragten Studie voll angerechnet.
Festpreis
$2,400
NTDB/TQP-Traumaregisterstudie. ICD-zu-AIS-Umrechnung, Umgang mit informativen fehlenden Daten mittels multipler Imputation, einrichtungsbezogene Risikoadjustierung und eine vollständig ausgefüllte STROBE-Checkliste. Bearbeitungszeit: 15 Werktage ab Dateneingang.
Zitiert
Von $ 3,500
Erweiterte Registerstudie mit mehreren Datenbanken. Für eine TQP-Fragestellung mit Bezug zu einer anderen Datenbank, ein Vorhersagemodell, das extern validiert werden muss, oder ein Programm verwandter Trauma-Studien. Festpreis vor Beginn der Arbeiten.
Fazit
Die Daten von NTDB und TQP belohnen Analysten, die die Struktur der Datei als Teil der Methoden und nicht erst im Nachhinein vor den Ergebnissen betrachten. Die teilnehmenden Zentren arbeiten freiwillig, die Felder zum Schweregrad von Verletzungen werden abgeleitet statt gemessen, und die für die Risikoadjustierung wichtigsten physiologischen Variablen fehlen in einem Muster, das den Gesundheitszustand eines Patienten bei der Aufnahme widerspiegelt. All dies macht die Daten jedoch nicht unbrauchbar. Die Kartierungsversion, der Mechanismus für fehlende Werte und die Clusterung der Einrichtungen – geprüft und angegeben statt angenommen – entscheiden darüber, ob ein Manuskript die Begutachtung besteht oder nicht.
Referenzen
- Shivasabesan G, Mitra B, O'Reilly GM. Fehlende Daten in Traumaregistern: Eine systematische Übersicht. Verletzung. 2018;49(9):1641-1647. doi: 10.1016/j.injury.2018.03.035
- Glance LG, Osler TM, Mukamel DB, Meredith W, Dick AW. Einfluss statistischer Ansätze zum Umgang mit fehlenden Daten auf die Qualität von Traumazentren. Annalen der Chirurgie. 2009;249(1):143-148. doi: 10.1097/SLA.0b013e31818e544b
- O'Reilly GM, Cameron PA, Jolley DJ. Bei welchen Patienten fehlen Daten? Eine Analyse fehlender Daten in einem Traumaregister. Verletzung. 2013;43(11):1917-1923. doi: 10.1016/j.injury.2012.07.185
- Moore L, Hanley JA, Turgeon AF, Lavoie A, Emond M. Ein multiples Imputationsmodell zur Imputation fehlender physiologischer Daten in der nationalen Traumadatenbank. Zeitschrift des American College of Surgeons. 2009;209(5):572-579. doi: 10.1016/j.jamcollsurg.2009.07.004
- Newgard CD. Die Validität der Verwendung von multipler Imputation für fehlende Daten außerhalb des Krankenhauses in einem staatlichen Traumaregister. Akademische Notfallmedizin. 2006;13(3):314-324. doi: 10.1197/j.aem.2005.09.011
- O'Reilly GM, Jolley DJ, Cameron PA, Gabbe B. Missing in action: a case study of the application of methods for handling with missing data to trauma system benchmarking. Akademische Notfallmedizin. 2011;17(10):1122-1129. doi: 10.1111 / j.1553-2712.2010.00887.x
