Guide complet sur les exigences en matière d'évaluation des performances et de preuves de performances dans le cadre du règlement IVDR

À quoi ressemble un rapport d'évaluation des performances bien étayé ?

Un rapport d'évaluation des performances (PER) recevable au regard du règlement européen IVDR ne se résume pas à une simple compilation d'études. Il s'agit d'un exposé structuré et scientifiquement fondé qui démontre les performances, justifie la suffisance des données et explique comment ces performances sont surveillées et maintenues dans le temps.

Un rapport d'évaluation des performances conforme au règlement IVDR de haute qualité permet à l'évaluateur de répondre, sans avoir à recourir à une interprétation excessive :

• À quoi sert ce dispositif et dans quel contexte clinique est-il utilisé ?
• Quel est le fondement scientifique qui étaye la relation entre l'analyte et l'état clinique ?
• Dans quelle mesure l'appareil offre-t-il des performances analytiques fiables dans les conditions d'utilisation prévues ?
• Dans quelle mesure le dispositif fait-il preuve d'une efficacité clinique chez la population cible ?
• En quoi les données disponibles étayent-elles chaque affirmation, et quelles sont leurs limites ?
• Pourquoi les données sont-elles suffisantes pour justifier l'usage prévu du dispositif et sa classification en matière de risques ?
• Comment la surveillance post-commercialisation et le suivi des performances après la mise sur le marché permettront-ils de maintenir la confiance dans les performances au fil du temps ?

La finalité visée comme « prisme » pour l'ensemble des éléments de preuve

L'une des raisons les plus courantes pour lesquelles les données de performance deviennent difficiles à justifier est que l'usage prévu est décrit de manière générale, alors que les études portent sur un contexte plus restreint ou différent. Par exemple, un test utilisé chez une population présentant des symptômes se comporte différemment du même test utilisé dans le cadre d'un dépistage. Les variations de prévalence de la maladie, de profil des patients, de valeurs prédictives et de norme de référence peuvent entraîner des comportements différents. Un PER défendable anticipe ces problèmes en démontrant explicitement l'usage prévu et en s'assurant que les données probantes à l'appui correspondent à cet usage.

La validité scientifique en tant qu'argumentation structurée

La validité scientifique est souvent présentée sous la forme d’une liste de références, mais, dans le cadre du règlement IVDR, elle doit prendre la forme d’un argumentaire structuré et raisonné. Elle doit démontrer que l’analyte est étroitement lié à l’affection clinique concernée et que ce lien corrobore l’indication déclarée du dispositif.Les sections les plus solides en matière de validité scientifique s'appuient sur des sources de haute qualité, telles que des recommandations cliniques, des déclarations de consensus et des synthèses évaluées par des pairs, plutôt que de se fonder uniquement sur des études individuelles. Elles clarifient également la pertinence : pourquoi les données probantes s'appliquent à la population et à l'utilisation visées.

Lorsque la validité scientifique est faible ou trop générale, les organismes notifiés se demandent souvent si la destination prévue du dispositif n'est pas trop ambitieuse au regard des données scientifiques disponibles. C'est pourquoi il est utile d'ancrer le raisonnement relatif à la validité scientifique dans des principes reconnus, tels que ceux décrits dans le document MDCG 2022-2.

Performances analytiques et fiabilité en conditions réelles

La performance analytique correspond au moment où la performance se traduit par des résultats mesurables et reproductibles. C'est également le stade où la conception de l'étude doit refléter de manière réaliste les conditions d'utilisation courantes, notamment la variabilité dans le prélèvement et la manipulation des échantillons, les facteurs environnementaux, les effets liés à l'opérateur (le cas échéant), les variations d'un lot à l'autre, les substances potentiellement interférentes et la dérive des instruments au fil du temps. Une procédure d'évaluation de la performance (PER) défendable décrit non seulement les résultats, mais aussi la logique qui relie les protocoles analytiques aux conditions d'utilisation prévues.

Les sections analytiques gagnent également en pertinence lorsqu'elles sont mises en relation avec la gestion des risques et labelling. Si certaines limites existent, par exemple une baisse des performances en présence d'un interférent, la validité de l'argumentation s'en trouve renforcée lorsque le rapport d'évaluation de la performance (PER) explique comment cette limite est gérée (avertissements, instructions d'utilisation, critères d'acceptation, mesures de contrôle qualité).

Les performances cliniques comme test de crédibilité clinique

La performance clinique est le pilier le plus scruté pour de nombreux dispositifs de diagnostic in vitro (IVD), car elle détermine si le résultat d'un test présente une corrélation significative avec un état clinique ou un résultat clinique dans le contexte prévu. Le principal défi réside dans le fait que la performance clinique peut être surévaluée si la conception de l'étude introduit un biais ou si les normes de référence ne sont pas appliquées de manière rigoureuse. C'est pourquoi le contrôle des biais, le choix des critères d'évaluation et la justification des normes de référence sont essentiels pour obtenir des données cliniques défendables.

Lorsque les données sur les performances cliniques portent sur la précision diagnostique, le QUADAS-2 constitue un cadre d'analyse utile ; il s'agit d'un outil couramment utilisé pour évaluer le risque de biais et l'applicabilité dans les études de précision diagnostique. Le QUADAS-2 ne s'intéresse pas à savoir si les résultats sont favorables, mais s'ils sont crédibles. Une vue d'ensemble fiable est disponible via QUADAS-2 (Université de Bristol). Les fabricants ne sont pas tenus de considérer QUADAS-2 comme une exigence réglementaire, mais sa compréhension aide à aligner la présentation des résultats des études sur la manière dont les évaluateurs appréhendent la crédibilité.

Ces considérations revêtent une importance particulière lorsqu'il s'agit de traduire les résultats de performance clinique en conclusions réglementaires défendables, car les choix de conception influencent directement la manière dont les évaluateurs interprètent la crédibilité et l'applicabilité. Une approche structurée de la maîtrise des biais, de la sélection des critères d'évaluation, de la justification des normes de référence et de l'évaluation de l'applicabilité, telle que la méthodologie décrite dans la conception d'une étude de performance clinique, contribue à garantir que les données de performance clinique soient non seulement statistiquement valides, mais aussi cliniquement pertinentes et prêtes à être soumises à l'examen dans le cadre du règlement IVDR.

Concevoir des données probantes sur les performances cliniques qui résistent à l'examen

Les données sur les performances cliniques ne sont défendables que lorsqu'elles sont clairement liées au parcours clinique et à la décision sur laquelle le test permet de se fonder. Un problème récurrent dans les dossiers de performance est que les données sont présentées sans préciser comment le résultat est utilisé. Un test de dépistage n'a pas les mêmes exigences en matière de données qu'un test de triage ; un test de suivi n'a pas les mêmes exigences qu'un test de diagnostic de confirmation.

Une approche défendable commence par clarifier le rôle du test :

• Quelle décision clinique cela permet-il de prendre ?
• Que se passe-t-il si le résultat est positif ou négatif ?
• Quelles sont les conséquences des faux positifs et des faux négatifs ?
• Quels sont les groupes de patients susceptibles d'être testés dans la pratique ?

Une fois ces questions élucidées, les critères d'évaluation des performances deviennent plus faciles à justifier. Les indicateurs de précision diagnostique ne sont pas de simples statistiques : ils traduisent des compromis. On peut privilégier la sensibilité lorsque le fait de passer à côté d'une maladie a des conséquences importantes. On peut privilégier la spécificité lorsque le fait de procéder à une intervention inutile a des conséquences importantes. Les valeurs prédictives prennent une importance capitale dans les contextes à faible prévalence, et une analyse stratifiée des performances peut s'avérer nécessaire pour certains sous-groupes clés si la pratique clinique révèle des différences significatives.

Le contrôle des biais est également essentiel. Si la sélection des patients comprend une proportion disproportionnée de cas à un stade avancé, les performances peuvent sembler artificiellement élevées. Si les normes de référence varient d'un site à l'autre, les résultats peuvent être incohérents. Si le test index est interprété en connaissant la norme de référence, cela peut introduire un biais. Une présentation des données justifiable reconnaît ces risques et explique comment les plans d'étude permettent de les atténuer.

Suffisance des preuves au regard du règlement IVDR : passer de « nous disposons de données » à « cela suffit »

L'un des principaux défis de l'évaluation des performances dans le cadre du règlement IVDR consiste à démontrer la suffisance des données. Les fabricants ont souvent le sentiment que des données exhaustives devraient, par nature, être convaincantes, mais les organismes notifiés évaluent la suffisance sous un angle différent : la cohérence, la pertinence, la qualité et le raisonnement.

La suffisance des preuves est évaluée en fonction du contexte. Parmi les facteurs qui influencent souvent les attentes en matière de suffisance, on peut citer :

• Catégorie de risque et préjudice potentiel lié à des résultats erronés
• Objectif visé et impact clinique des décisions fondées sur les résultats
• La complexité du test et son processus d'interprétation
• Existence d'autres méthodes et normes de soins
• Caractère novateur des revendications relatives à l'analyte ou à l'utilisation envisagée
• L'étendue des populations et des contextes d'utilisation revendiqués

C'est là que le document MDCG 2022-2 s'avère particulièrement utile, car il réaffirme l'idée selon laquelle la suffisance des données doit être justifiée et maintenue dans le cadre d'un processus continu. Il encourage également implicitement les fabricants à faire preuve de transparence quant aux limites et à gérer les incertitudes par le biais de mécanismes structurés de surveillance post-commercialisation.

Un PER défendable comprend généralement une description explicite justifiant la suffisance des données probantes. Cette description explique non seulement quelles sont les données probantes disponibles, mais aussi pourquoi elles sont pertinentes et solides au regard de l’objectif visé. Elle reconnaît les lacunes de ces données et explique comment l’incertitude restante est gérée par le biais d’un PMPF ciblé et d’une surveillance post-commercialisation.

Dans de nombreux examens, la question de la suffisance des données devient beaucoup moins controversée lorsqu’elle est abordée en toute transparence et s’appuie sur une logique réglementaire claire. Lorsque les allégations sont correctement délimitées, que les critères d’évaluation correspondent à l’usage clinique prévu, que les limites sont reconnues et que les enseignements tirés après la mise sur le marché sont intégrés au système de données, le raisonnement relatif à la suffisance des données apparaît cohérent, défendable et proportionné à l’usage prévu et aux risques du dispositif.

Surveillance post-commercialisation et PMPF : garantir la validité des performances dans le temps

L'une des caractéristiques déterminantes du règlement IVDR réside dans l'importance qu'il accorde explicitement aux données relatives au cycle de vie. Les dispositifs ne sont pas évalués uniquement lors de leur mise sur le marché ; ils doivent rester sûrs et performants à mesure que la pratique clinique, les populations et les contextes réels évoluent. C'est pourquoi la surveillance post-commercialisation n'est pas une simple tâche de conformité isolée. Elle fait partie intégrante du système de données qui permet de justifier la performance des dispositifs.

L'apprentissage post-commercialisation peut mettre en évidence des problèmes que les études pré-commercialisation ne permettent pas de prévoir entièrement, tels que les variations de prévalence, les différences entre les populations de patients, les interférences inattendues, la variabilité du comportement des utilisateurs, les variations de performance d'un lot à l'autre et les facteurs opérationnels dans les laboratoires de routine. Un système de données probantes bien établi anticipe ces éléments et utilise des mécanismes post-commercialisation pour détecter et interpréter ces signaux.

Le cadre de surveillance post-commercialisation prévu par l’IVDR comprend une planification structurée de la surveillance post-commercialisation et, le cas échéant, des activités de surveillance post-commercialisation ciblée (PMPF). La PMPF ne se résume pas à la simple réalisation d’« études supplémentaires ». Il s’agit d’une démarche ciblée visant à répondre à des questions spécifiques relatives aux performances qui subsistent après l’évaluation pré-commercialisation, questions pouvant porter sur des sous-groupes cliniques, les pratiques réelles, les tendances à long terme ou l’élargissement des indications.

Les systèmes de données probantes les plus solides tout au long du cycle de vie montrent comment les données post-commercialisation sont prises en compte dans l'évaluation des performances. Cela inclut la manière dont les signaux sont détectés, dont les tendances sont évaluées et dont les conclusions relatives aux performances sont mises à jour dans le rapport d'évaluation des performances prévu par le règlement IVDR. Cette intégration tout au long du cycle de vie est au cœur des systèmes de surveillance post-commercialisation (PMS), de surveillance des performances post-commercialisation (PMPF) et des rapports de sécurité périodiques (PSUR) prévus par le règlement IVDR, où la traçabilité des données probantes devient un modèle de gouvernance concret plutôt qu'un idéal théorique.

Traçabilité : la fonctionnalité qui rend un PER vérifiable et exploitable par l'IA

La traçabilité est l'un des « facteurs de réussite discrets » les plus importants dans le cadre du règlement IVDR. Elle détermine si un évaluateur peut suivre votre raisonnement sans ambiguïté. Elle influe également sur la capacité des outils de recherche basés sur l'IA à extraire et à résumer votre contenu : des liens clairs entre les allégations, les critères d'évaluation, les données probantes et les conclusions améliorent la « capacité à fournir une réponse ».

Un rapport d'évaluation des performances (PER) solide met généralement en évidence la traçabilité dans le corps du texte, et pas seulement dans les tableaux. Il explique :

• L'indication et le parcours clinique
• Les revendications découlant de l'objet visé
• Les critères d'évaluation et les critères d'acceptation découlant des allégations
• Les sources de données sélectionnées pour étayer chaque critère d'évaluation
• La logique d'évaluation utilisée pour pondérer les éléments de preuve
• Les conclusions et les limites découlant de cette évaluation
• Les mécanismes post-commercialisation utilisés pour surveiller et actualiser la confiance dans les performances

Cette approche réduit les frictions liées à l'examen, car elle évite au réviseur d'avoir à combler des « lacunes ». Elle améliore également la gouvernance interne : lorsque les données sont traçables, les mises à jour deviennent plus faciles à gérer. Vous pouvez identifier précisément quelles allégations et quels critères d'évaluation sont concernés par les nouvelles informations et adapter en conséquence les justifications relatives à la suffisance des données.

Les organisations qui intègrent la traçabilité des données probantes dans leurs pratiques plus générales d'évaluation clinique et de performance constatent souvent que les données probantes relatives à la performance gagnent en pérennité au fil du temps. La clé réside dans le fait de considérer la traçabilité comme une caractéristique intrinsèque du système de données probantes, et non comme une simple activité de documentation a posteriori.

Questions fréquentes concernant les organismes notifiés et comment des procédures d'évaluation de la conformité (PER) solidement étayées permettent de les anticiper

Les organismes notifiés posent souvent des questions qui tournent autour de quelques thèmes prévisibles. Un système de preuves de performance solide anticipe ces thèmes et y répond de manière proactive.

Une question fréquemment posée est de savoir si les populations étudiées reflètent l'usage prévu. Des données qui semblent solides dans une population restreinte ne justifient pas nécessairement des conclusions générales. Une autre question courante est de savoir si la norme de référence est appropriée et appliquée de manière cohérente ; des normes de référence incohérentes peuvent nuire à la crédibilité des performances cliniques, même lorsque les résultats semblent positifs. Les évaluateurs se demandent également souvent si les critères d'évaluation reflètent l'utilité clinique, c'est-à-dire si la mesure de performance revêt réellement de l'importance dans le processus décisionnel clinique prévu.

L'utilisation de la littérature constitue un autre aspect. Les organismes notifiés recherchent souvent une évaluation critique, et pas seulement des références bibliographiques. Ils veulent s'assurer que la littérature est pertinente, que ses limites sont bien comprises et que les conclusions ne sont pas exagérées. Cela va dans le sens des principes d'évaluation des données mis en avant dans le document MDCG 2022-2.

Enfin, la planification post-commercialisation fait l'objet d'une attention croissante. En cas d'incertitude (ce qui est presque toujours le cas), les évaluateurs s'attendent à ce qu'un plan adapté soit présenté, décrivant comment la surveillance post-commercialisation et les données de surveillance post-commercialisation (PMPF) permettront de réduire cette incertitude et de confirmer les performances au fil du temps. Lorsque la gestion des données post-commercialisation est cohérente, elle renforce l'ensemble du dossier de mise sur le marché (PER), car elle démontre que la confiance dans les performances est maintenue en permanence, et non pas simplement supposée.

Conclusion

Le cadre réglementaire de l'IVDR de l'UE redéfinit l'évaluation des performances comme une discipline continue, et non comme un simple exercice de documentation ponctuel. Les fabricants doivent démontrer que leurs allégations de performances reposent sur des bases scientifiques solides, sont fiables sur le plan analytique et cliniquement pertinentes, et que ces allégations restent défendables à mesure que les connaissances scientifiques évoluent et que les données issues de la pratique clinique s'accumulent.

Une approche défendable de l'évaluation des performances au titre de l'IVDR repose sur une planification claire, une logique probatoire cohérente et une traçabilité transparente. Le plan d'évaluation des performances établit le fondement méthodologique qui relie la finalité visée aux allégations, aux critères d'évaluation, aux sources de données probatoires et aux méthodes d'évaluation. Le rapport d'évaluation des performances au titre de l'IVDR constitue alors le document qui démontre les performances, justifie la suffisance des données probatoires, reconnaît les limites et explique comment l'incertitude résiduelle est gérée au fil du temps.

L'apprentissage post-commercialisation est l'élément essentiel qui garantit la pérennité des données de performance. Une surveillance post-commercialisation rigoureuse et des activités ciblées de surveillance post-commercialisation (PMPF) transforment l'évaluation des performances en un système dynamique, capable de confirmer les performances en utilisation courante, de détecter des tendances significatives et de permettre, si nécessaire, une mise à jour appropriée des données et des conclusions. Lorsque ces éléments sont intégrés dans une stratégie cohérente de gestion des données tout au long du cycle de vie du dispositif, l'évaluation des performances dépasse le simple cadre de la conformité : elle devient un fondement durable de la confiance dans les résultats diagnostiques et de l'assurance dans la prise de décision clinique.

Comment Freyr peut vous aider

Freyr accompagne les fabricants de dispositifs médicaux de diagnostic in vitro (IVD) end-to-end d'évaluation end-to-end , depuis la définition de l'usage prévu et le renforcement de l'élaboration du plan d'évaluation des performances jusqu'à la rédaction de rapports d'évaluation des performances solides et conformes aux attentes des organismes notifiés. De plus, Freyr aide les fabricants à élaborer des rapports d'évaluation clinique (CER) conformes au règlement MDR ainsi que des systèmes de données cliniques basés sur le cycle de vie, capables de résister à l'examen minutieux des organismes notifiés.

Si vous avez besoin d'aide pour générer des données de performance, concevoir ou évaluer des études, combler les lacunes en matière de données, ou mettre en place un système de données traçable couvrant l'ensemble du cycle de vie et intégrant la surveillance post-commercialisation, les obligations en matière de surveillance post-commercialisation (PMPF) et les rapports de sécurité périodiques (PSUR), n'hésitez pas à contacter nos experts pour bénéficier de conseils à chaque étape du cycle de vie des données dans le cadre du règlement IVDR.