Umfassender Leitfaden zur IVDR-Leistungsbewertung und zu den Anforderungen an den Leistungsnachweis

Wie sieht ein belastbarer Leistungsbewertungsbericht aus?

Ein belastbarer Leistungsbewertungsbericht (PER) gemäß der EU-IVDR ist mehr als nur eine Zusammenstellung von Studien. Er ist eine strukturierte, wissenschaftlich fundierte Darstellung, die die Leistung belegt, die Ausreichendheit der Daten begründet und erklärt, wie die Leistung im Zeitverlauf überwacht und aufrechterhalten wird.

Ein hochwertiger Leistungsbewertungsbericht (PER) gemäß IVDR ermöglicht es Prüfern, mit minimalem Interpretationsaufwand folgende Fragen zu beantworten:

• Welchen Zweck erfüllt das Produkt und in welchem klinischen Kontext wird es angewendet?
• Welche wissenschaftliche Begründung stützt den Zusammenhang zwischen dem Analyten und dem klinischen Zustand?
• Wie zuverlässig erbringt das Produkt seine analytische Leistung unter den vorgesehenen Einsatzbedingungen?
• Wie wirksam weist das Produkt die klinische Leistung in der vorgesehenen Zielgruppe nach?
• Wie untermauern die Nachweise jede einzelne Angabe und welche Einschränkungen bestehen?
• Warum reichen die Nachweise für den Verwendungszweck und die Risikoklasse des Produkts aus?
• Wie stellen die Überwachung nach dem Inverkehrbringen und die Leistungsbewertung nach dem Inverkehrbringen sicher, dass das Vertrauen in die Leistung langfristig gewahrt bleibt?

Der Verwendungszweck als „Fokus“ für sämtliche Nachweise

Einer der häufigsten Gründe, warum Leistungsnachweise schwer zu rechtfertigen sind, liegt darin, dass der Verwendungszweck zu allgemeinein beschrieben wird, während die Studien einen engeren oder anderen Kontext widerspiegeln. So verhält sich beispielsweise ein Test in einer symptomatischen Population anders als derselbe Test in einem Screening-Umfeld. Abweichungen bei der Prävalenz von Krankheiten, dem Patientenspektrum, den Vorhersagewerten und dem Referenzstandard stimmen oft nicht überein. Ein verteidigbarer PER antizipiert diese Probleme, indem er den Anwendungszweck explizit darlegt und sicherstellt, dass die unterstützenden Nachweise genau zu diesem Zweck passen.

Wissenschaftliche Validität als strukturiertes Argument

Die wissenschaftliche Validität wird oft als Sammlung von Literaturstellen präsentiert, doch im Rahmen der IVDR wird erwartet, dass sie als strukturiertes und schlüssiges Argument fungiert. Sie sollte zeigen, dass der Analyt sinnvoll mit dem entsprechenden klinischen Zustand zusammenhängt und dass dieser Zusammenhang den angegebenen Verwendungszweck des Produkts stützt. Die stärksten Abschnitte zur wissenschaftlichen Validität stützen sich auf hochwertige Quellen wie klinische Leitlinien, Konsenserklärungen und peer-reviewed Synthesen, anstatt sich nur auf einzelne Studien zu verlassen. Zudem verdeutlichen sie die Relevanz: warum die Nachweise auf die vorgesehene Population und Anwendung zutreffen.

Wenn die wissenschaftliche Validität schwach oder zu allgemein ist, fragen Benannte Stellen häufig, ob der Verwendungszweck des Produkts im Vergleich zur verfügbaren Wissenschaft zu hoch angesetzt ist. Aus diesem Grund ist es sinnvoll, die Argumentation zur wissenschaftlichen Validität anerkannte Prinzipien zu stützen, wie sie beispielsweise in MDCG 2022-2 beschrieben werden.

Analytische Leistung als Zuverlässigkeit unter Realbedingungen

Bei der analytischen Leistung wird die Performance in messbare und wiederholbare Ergebnisse übertragen. Dies ist auch der Punkt, an dem das Studiendesign die Bedingungen der routinemäßigen Anwendung realistisch widerspiegeln muss – einschließlich der Variabilität bei der Probennahme und -handhabung, Umweltfaktoren, anwenderabhängiger Einflüsse (sofern zutreffend), Chargenvariabilität, potenzieller Interferenzen und der Drift von Instrumenten im Laufe der Zeit. Ein verteidigbarer PER beschreibt nicht nur die Ergebnisse, sondern auch die Logik, die analytische Designs mit den Bedingungen des Verwendungszwecks verknüpft.

Analytische Abschnitte sind zudem aussagekräftiger, wenn sie einen Bezug zum Risikomanagement und zur Kennzeichnung aufweisen. Wenn bestimmte Einschränkungen bestehen – beispielsweise eine verringerte Leistung bei Vorhandensein einer Interferenzen –, verbessert sich die Nachvollziehbarkeit, wenn der PER erläutert, wie mit dieser Einschränkung umgegangen wird (Warnhinweise, Anweisungen in der Gebrauchsanweisung, Akzeptanzkriterien, Qualitätskontrollmaßnahmen).

Klinische Leistung als Test für die klinische Glaubwürdigkeit

Die klinische Leistung ist für viele In-vitro-Diagnostika (IVD) der am kritischsten beurteilte Pfeiler, da sie bestimmt, ob ein Testergebnis in seinem vorgesehenen Kontext sinnvoll mit einem klinischen Zustand oder Ergebnis korreliert. Die zentrale Herausforderung besteht darin, dass die klinische Leistung überbewertet werden kann, wenn das Studiendesign Verzerrungen (Bias) mit sich bringt oder Referenzstandards unvollkommen angewendet werden. Aus diesem Grund sind die Kontrolle von Verzerrungen, die Auswahl von Endpunkten und die Begründung von Referenzstandards von zentraler Bedeutung für verteidigbare klinische Nachweise.

Wenn Nachweise zur klinischen Leistung die diagnostische Genauigkeit betreffen, ist QUADAS-2 ein nützlicher Ansatzpunkt – ein häufig verwendetes Instrument zur Bewertung des Verzerrungsrisikos und der Anwendbarkeit in Studien zur diagnostischen Genauigkeit. QUADAS-2 konzentriert sich nicht darauf, ob die Ergebnisse günstig ausfallen, sondern darauf, ob sie glaubwürdig sind. Eine zuverlässige Übersicht bietet QUADAS-2 (Universität Bristol). Hersteller müssen QUADAS-2 nicht als regulatorische Anforderung betrachten, aber das Verständnis hilft dabei, die Berichterstattung über Studien an die Denkweise von Prüfern in Bezug auf Glaubwürdigkeit anzupassen.

Diese Überlegungen werden besonders wichtig, wenn klinische Leistungsergebnisse in vertretbare regulatorische Schlussfolgerungen übersetzt werden, da Designentscheidungen direkt beeinflussen, wie Prüfer die Glaubwürdigkeit und Anwendbarkeit interpretieren. Ein strukturierter Ansatz zur Bias-Kontrolle, Endpunktauswahl, Begründung des Referenzstandards und Anwendbarkeitsbewertung, wie die in der Gestaltung einer klinischen Leistungsstudie beschriebene Methodik, trägt dazu bei, dass klinische Leistungsnachweise nicht nur statistisch fundiert, sondern auch klinisch bedeutsam und gemäß IVDR prüfbereit sind.

Konzeption klinischer Leistungsnachweise, die einer Prüfung standhalten

Nachweise zur klinischen Leistung sind dann aussagekräftig, wenn sie klar mit dem klinischen Pfad und der Entscheidung verknüpft sind, die durch den Test unterstützt wird. Ein wiederkehrendes Problem in Leistungsdossiers besteht darin, dass Nachweise präsentiert werden, ohne zu verdeutlichen, wie das Ergebnis verwendet wird. Ein Screening-Test hat andere Anforderungen an den Nachweis als ein Triage-Test; ein Überwachungstest hat andere Anforderungen als ein bestätigender diagnostischer Test.

Ein verteidigbarer Ansatz beginnt damit, die Rolle des Tests zu klären:

• Welche klinische Entscheidung wird dadurch unterstützt?
• Was geschieht, wenn das Ergebnis positiv oder negativ ausfällt?
• Welche Folgen haben falsch positive und falsch negative Ergebnisse?
• Welche Patientengruppen werden in der Praxis voraussichtlich getestet?

Wenn diese Fragen beantwortet sind, lassen sich Leistungsziele leichter begründen. Metriken zur diagnostischen Genauigkeit sind nicht nur Statistiken, sie stellen Abwägungen dar. Der Sensitivität wird möglicherweise Priorität eingeräumt, wenn das Übersehen einer Erkrankung schwerwiegende Folgen hat. Der Spezifität wird möglicherweise Priorität eingeräumt, wenn ein unnötiger Eingriff schwerwiegende Folgen hat. Vorhersagewerte spielen in Umgebungen mit geringer Prävalenz eine zentrale Rolle, und eine stratifizierte Leistungsanalyse kann für wichtige Untergruppen angezeigt sein, wenn die klinische Praxis signifikante Unterschiede aufzeigt.

Auch die Bias-Kontrolle ist von zentraler Bedeutung. Wenn die Patientenauswahl überproportional fortgeschrittene Fälle umfasst, kann die Leistung künstlich hoch erscheinen. Wenn die Referenzstandards an verschiedenen Standorten variieren, können die Ergebnisse inkonsistent sein. Wenn der Index-Test in Kenntnis des Referenzstandards interpretiert wird, kann dies zu Verzerrungen führen. Ein vertretbarer Evidenzbericht erkennt diese Risiken an und erläutert, wie Studiendesigns diese abmildern.

Evidenzdichte nach IVDR: Aus „Wir haben Daten“ wird „Das reicht aus“

Eine der schwierigsten Herausforderungen bei der Leistungsbewertung gemäß IVDR besteht darin, die Evidenzdichte zu erklären. Hersteller haben oft das Gefühl, dass umfangreiche Daten von Natur aus überzeugend sein sollten, aber Benannte Stellen bewerten die Evidenzdichte aus einem anderen Blickwinkel: Übereinstimmung, Relevanz, Qualität und Begründung.

Die Evidenzdichte wird im Kontext beurteilt. Zu den Faktoren, die die Erwartungen an die Evidenzdichte häufig beeinflussen, gehören:

• Risikoklasse und potenzieller Schaden durch falsche Ergebnisse
• Zweckbestimmung und klinische Auswirkungen von Entscheidungen auf Basis der Ergebnisse
• Komplexität des Tests und seines Auswertungspfads
• Verfügbarkeit alternativer Methoden und Standards der Versorgung
• Neuheit des Analyten oder der Ansprüche an die Zweckbestimmung
• Die Bandbreite der beanspruchten Populationen und Anwendungsumgebungen

Hier ist MDCG 2022-2 besonders hilfreich, da es den Gedanken bekräftigt, dass die Evidenzdichte als kontinuierlicher Prozess begründet und aufrechterhalten werden muss. Es ermutigt die Hersteller zudem implizit, transparent mit Einschränkungen umzugehen und Unsicherheiten durch strukturierte Mechanismen nach dem Inverkehrbringen zu steuern.

Ein vertretbarer PER enthält in der Regel eine explizite Begründung der Evidenzdichte. Diese Beschreibung erläutert nicht nur, welche Evidenz vorliegt, sondern auch, warum sie für den beabsichtigten Zweck relevant und robust ist. Sie benennt, was durch die Evidenz nicht abgedeckt wird, und erklärt, wie mit der verbleibenden Unsicherheit durch gezielte PMPF-Maßnahmen und die Überwachung nach dem Inverkehrbringen umgegangen wird.

In vielen Überprüfungen werden ausreichende Nachweise weitaus weniger umstritten, wenn sie transparent dargelegt und auf einer klaren regulatorischen Logik basieren. Wenn Behauptungen angemessen formuliert sind, Endpunkte dem beabsichtigten klinischen Verwendungszweck entsprechen, Einschränkungen anerkannt werden und Erkenntnisse aus der Marktbeobachtung in das Nachweissystem integriert werden, liest sich die Begründung der ausreichenden Nachweise als kohärent, vertretbar und verhältnismäßig zum beabsichtigten Zweck und Risiko des Produkts.

Überwachung nach dem Inverkehrbringen und PMPF: Die Leistungsfähigkeit langfristig absichern

Ein prägendes Merkmal der IVDR ist ihr ausdrücklicher Fokus auf Evidenz im Lebenszyklus. Medizinprodukte werden nicht nur beim Markteintritt bewertet; es wird erwartet, dass sie sicher und leistungsfähig bleiben, während sich die klinische Praxis, die Bevölkerung und reale Kontexte weiterentwickeln. Aus diesem Grund ist die Überwachung nach dem Inverkehrbringen keine isolierte Compliance-Aufgabe. Sie ist Teil des Evidenzsystems, das die Leistungsfähigkeit absichert.

Erkenntnisse nach dem Inverkehrbringen können Probleme aufdecken, die prä-market Studien nicht vollständig vorhersagen können, wie z. B. Veränderungen der Prävalenz, Unterschiede zwischen Patientengruppen, unerwartete Interferenzen, Variabilität im Nutzerverhalten, chargenabhängige Leistungsänderungen und operative Faktoren in Routine-Labors. Ein ausgereiftes Evidenzsystem antizipiert dies und nutzt Mechanismen nach dem Inverkehrbringen, um diese Signale zu erkennen und zu interpretieren.

Der Rahmen für die Zeit nach dem Inverkehrbringen gemäß IVDR umfasst eine strukturierte PMS-Planung und, sofern angemessen, PMPF-Aktivitäten. PMPF sind nicht einfach „weitere Studien“. Es handelt sich um eine gezielte Anstrengung, spezifische Leistungsfragen zu beantworten, die nach der Vorab-Bewertung offen geblieben sind – Fragen, die sich auf klinische Untergruppen, reale Arbeitsabläufe, langfristige Trends oder die Ausweitung der Anwendung beziehen können.

Die stärksten Lebenszyklus-Nachweissysteme zeigen, wie Daten aus der Marktbeobachtung in die Leistungsbewertung zurückfließen. Dazu gehört, wie Signale erkannt, Trends bewertet und Leistungsbewertungsergebnisse im IVDR-Leistungsbewertungsbericht aktualisiert werden. Diese Lebenszyklusintegration ist der Kern von IVDR PMS, PMPF und PSUR, wo die Nachweisbarkeit zu einem praktischen Governance-Modell und nicht zu einem theoretischen Ideal wird.

Rückverfolgbarkeit: Das Merkmal, das einen PER überprüfbar und für KI extrahierbar macht

Die Rückverfolgbarkeit ist einer der wichtigsten „stillen Erfolgsfaktoren“ unter der IVDR. Sie bestimmt, ob ein Prüfer Ihrer Argumentation ohne Mehrdeutigkeit folgen kann. Sie beeinflusst auch, wie gut KI-Suchwerkzeuge Ihre Inhalte extrahieren und zusammenfassen können: Klare Zusammenhänge zwischen Ansprüchen, Endpunkten, Evidenz und Schlussfolgerungen erhöhen die „Antwortbereitschaft“.

Ein vertretbarer Leistungsbewertungsbericht (PER) macht die Rückverfolgbarkeit in der Regel im Fließtext sichtbar, nicht nur in Tabellen. Er erläutert:

• Der Verwendungszweck und der klinische Pfad
• Die aus dem Verwendungszweck abgeleiteten Produktangaben
• Die aus den Produktangaben abgeleiteten Endpunkte und Akzeptanzkriterien
• Die zur Unterstützung der jeweiligen Endpunkte ausgewählten Evidenzquellen
• Die zur Bewertung der Evidenz verwendete Beurteilungslogik
• Die aus dieser Bewertung abgeleiteten Schlussfolgerungen und Einschränkungen
• Die Post-Market-Mechanismen zur Überwachung und Aktualisierung des Vertrauens in die Leistung

Dieser Ansatz reduziert den Prüfungsaufwand, da er „Lücken“ verhindert, die ein Prüfer ansonsten füllen müsste. Zudem verbessert er die interne Unternehmensführung: Wenn die Evidenz nachvollziehbar ist, lassen sich Aktualisierungen besser bewältigen. Sie können genau ermitteln, welche Produktangabe und welcher Endpunkt durch neue Informationen betroffen sind, und die Begründungen für die Ausreichendheit der Evidenz entsprechend anpassen.

Organisationen, die die Nachweisbarkeit mit umfassenderen Praktiken der klinischen und Leistungsbewertung in Einklang bringen, stellen oft fest, dass Leistungsnachweise im Laufe der Zeit nachhaltiger werden. Der Schlüssel liegt darin, die Nachweisbarkeit als Designmerkmal des Nachweissystems zu behandeln und nicht als nachträgliche Dokumentationsaktivität.

Häufige Fragen Benannter Stellen und wie belastbare PERs diese vorwegnehmen

Benannte Stellen stellen häufig Fragen, die sich auf einige wenige vorhersehbare Bereiche konzentrieren. Ein belastbares System zum Nachweis der Leistung nimmt diese Bereiche vorweg und geht proaktiv darauf ein.

Eine häufige Frage ist, ob die Studienpopulationen die beabsichtigte Verwendung widerspiegeln. Evidenz, die bei einer kleinen Gruppe aussagekräftig erscheint, rechtfertigt möglicherweise keine weitreichenden Produktangaben. Eine weitere häufige Frage ist, ob der Referenzstandard geeignet ist und konsequent angewendet wird. Inkonsistente Referenzstandards können die Glaubwürdigkeit der klinischen Leistung beeinträchtigen, selbst wenn die Ergebnisse positiv ausfallen. Prüfer fragen zudem häufig, ob die Endpunkte einen klinischen Nutzen zeigen – das heißt, spielt das Leistungsergebnis im vorgesehenen klinischen Entscheidungsweg tatsächlich eine Rolle?

Auch die Verwendung von Fachliteratur ist ein wichtiger Bereich. Benannte Stellen achten oft auf eine kritische Bewertung und nicht nur auf einfache Zitate. Sie möchten sehen, dass die Literatur relevant ist, die Einschränkungen verstanden wurden und die Schlussfolgerungen nicht übertrieben sind. Dies steht im Einklang mit den Prinzipien zur Evidenzbewertung, die in MDCG 2022-2 hervorgehoben werden.

Schließlich wird die Marktbeobachtung nach dem Inverkehrbringen zunehmend kritisch geprüft. Wenn Unsicherheiten bestehen (was fast immer der Fall ist), erwarten die Prüfer einen angemessenen Plan, wie die Marktbeobachtung und PMPF diese Unsicherheiten verringern und die Leistung im Laufe der Zeit bestätigen. Wenn die Governance der postmarketlichen Evidenz schlüssig ist, stärkt dies den gesamten PER, da sie zeigt, dass das Vertrauen in die Leistung kontinuierlich aufrechterhalten und nicht nur vorausgesetzt wird.

Fazit

Der EU-IVDR-Rahmen betrachtet die Leistungsbewertung als fortlaufenden Prozess und nicht als einmalige Dokumentationsaufgabe. Von Herstellern wird erwartet, dass sie nachweisen, dass Leistungsangaben wissenschaftlich fundiert, analytisch zuverlässig und klinisch aussagekräftig sind und dass diese Angaben auch bei fortschreitenden wissenschaftlichen Erkenntnissen und zunehmenden Real-World-Daten verteidigungsfähig bleiben.

Ein vertretbarer Ansatz für die IVDR-Leistungsbewertung basiert auf einer klaren Planung, einer schlüssigen Evidenzlogik und einer transparenten Rückverfolgbarkeit. Der Leistungsbewertungsplan schafft das methodische Fundament, das den beabsichtigten Zweck mit Produktangaben, Endpunkten, Evidenzquellen und Bewertungsmethoden verknüpft. Der IVDR-Leistungsbewertungsbericht wird dann zu dem Dokument, das die Leistung darlegt, die ausreichende Evidenz begründet, Einschränkungen benennt und erklärt, wie verbleibende Unsicherheiten im Laufe der Zeit gehandhabt werden.

Das Lernen aus der Marktbeobachtung ist der entscheidende Baustein, um Leistungsevidenz dauerhaft zu sichern. Robuste Marktbeobachtungen und gezielte PMPF-Aktivitäten machen die Leistungsbewertung zu einem lebendigen System: Es bestätigt die Leistung bei der routinemäßigen Anwendung, erkennt wichtige Trends und unterstützt bei Bedarf geeignete Aktualisierungen von Evidenz und Schlussfolgerungen. Wenn diese Elemente in eine einheitliche Lifecycle-Evidenzstrategie integriert werden, ist die Leistungsbewertung mehr als nur Pflichterfüllung: Sie wird zu einer soliden Vertrauensbasis für Diagnoseergebnisse und klinische Entscheidungen.

Wie Freyr helfen kann

Freyr unterstützt IVD-Hersteller bei der End-to-End-Leistungsbewertung, von der Definition des Verwendungszwecks und der Stärkung der Entwicklung des Leistungsbewertungsplans bis zur Erstellung vertretbarer Leistungsbewertungsberichte, die den Erwartungen der Benannten Stellen entsprechen. Darüber hinaus unterstützt Freyr Hersteller bei der Entwicklung von MDR-konformen klinischen Bewertungsberichten (CERs) und lebenszyklusbasierten klinischen Nachweissystemen, die der Prüfung durch Benannte Stellen standhalten.

Wenn Sie Unterstützung bei der Generierung von Leistungsevidenz, der Konzeption oder Bewertung von Studien, dem Schließen von Evidenzlücken oder dem Aufbau eines nachvollziehbaren Lifecycle-Evidenzsystems benötigen, das Verpflichtungen aus Marktbeobachtung, PMPF und PSUR integriert, sprechen Sie mit unseren Experten für eine Beratung in jeder Phase des IVDR-Evidenzlebenszyklus.