Guida completa alla valutazione delle prestazioni IVDR e ai requisiti di prova delle prestazioni

Come si presenta una relazione di valutazione delle prestazioni ben argomentata?

Una relazione di valutazione delle prestazioni (PER) valida ai sensi del regolamento IVDR dell'UE non è semplicemente una raccolta di studi. Si tratta di una descrizione strutturata e scientificamente fondata che dimostra le prestazioni, giustifica l'adeguatezza delle prove e spiega in che modo tali prestazioni vengono monitorate e mantenute nel tempo.

Un rapporto di valutazione delle prestazioni IVDR di alta qualità consente al revisore di rispondere, con un minimo sforzo interpretativo:

• A cosa serve il dispositivo e in quale contesto clinico viene utilizzato?
• Qual è la base scientifica che sta alla base della relazione tra l'analita e la condizione clinica?
• In che misura il dispositivo garantisce prestazioni analitiche affidabili nelle condizioni d'uso previste?
• In che misura il dispositivo dimostra l'efficacia clinica nella popolazione di destinazione?
• In che modo i dati scientifici avvalorano ciascuna affermazione e quali sono i limiti?
• Perché le prove sono sufficienti ai fini della destinazione d'uso del dispositivo e della sua classificazione di rischio?
• In che modo la sorveglianza post-commercializzazione e il monitoraggio delle prestazioni post-commercializzazione contribuiranno a mantenere la fiducia nelle prestazioni nel tempo?

Finalità prevista come «lente» per tutte le prove

Uno dei motivi più comuni per cui le prove di efficacia diventano difficili da sostenere è che lo scopo previsto è descritto a un livello generale, mentre gli studi riflettono un contesto più ristretto o diverso. Ad esempio, un test utilizzato in una popolazione sintomatica si comporta in modo diverso rispetto allo stesso test utilizzato in contesti di screening. Le variazioni nella prevalenza della malattia, nello spettro dei pazienti, nei valori predittivi e nello standard di riferimento potrebbero non comportarsi allo stesso modo. Un PER difendibile anticipa queste problematiche dimostrando esplicitamente l'uso previsto e assicurando che le prove a sostegno siano in linea con tale uso.

La validità scientifica come argomentazione strutturata

La validità scientifica viene spesso presentata come un insieme di riferimenti bibliografici, ma ai sensi dell’IVDR dovrebbe configurarsi come un’argomentazione strutturata e ragionata. Dovrebbe dimostrare che l’analita è significativamente associato alla condizione clinica pertinente e che tale associazione avvalora la destinazione d’uso dichiarata del dispositivo.Le sezioni di validità scientifica più solide si basano su fonti di alta qualità, quali linee guida cliniche, dichiarazioni di consenso e sintesi sottoposte a revisione tra pari, piuttosto che fare affidamento esclusivamente su singoli studi. Esse chiariscono inoltre la rilevanza: perché l’evidenza si applica alla popolazione e all’uso previsti.

Quando la validità scientifica è debole o generica, gli organismi notificati spesso si chiedono se la destinazione d’uso del dispositivo sia eccessiva rispetto alle conoscenze scientifiche disponibili. Ecco perché è utile fondare il ragionamento sulla validità scientifica su principi riconosciuti, come quelli descritti nella MDCG 2022-2.

Prestazioni analitiche in termini di affidabilità in condizioni reali

Per "prestazioni analitiche" si intende la traduzione delle prestazioni in risultati misurabili e ripetibili. Si tratta inoltre del punto in cui il disegno dello studio deve riflettere in modo realistico le condizioni d'uso di routine, comprese la variabilità nella raccolta e nella manipolazione dei campioni, i fattori ambientali, gli effetti legati all'operatore (ove applicabile), la variazione da lotto a lotto, le potenziali sostanze interferenti e la deriva strumentale nel tempo. Un PER (Protocollo di valutazione delle prestazioni) ben fondato descrive non solo i risultati, ma anche la logica che collega i disegni analitici alle condizioni d'uso previste.

Le sezioni analitiche risultano inoltre più convincenti quando sono collegate alla gestione dei rischi e all'etichettatura. Se sussistono determinate limitazioni, ad esempio un calo delle prestazioni in presenza di un interferente, la fondatezza della relazione migliora quando il PER spiega in che modo tale limitazione viene gestita (avvertenze, istruzioni per l'uso, criteri di accettazione, misure di controllo qualità).

I risultati clinici come prova di credibilità clinica

Le prestazioni cliniche rappresentano l'aspetto più attentamente valutato per molti dispositivi diagnostici in vitro (IVD), poiché determinano se il risultato di un test sia significativamente correlato a una condizione clinica o a un esito nel contesto previsto. La sfida principale risiede nel fatto che le prestazioni cliniche possono risultare gonfiate se il disegno dello studio introduce un bias o se gli standard di riferimento vengono applicati in modo imperfetto. Ecco perché il controllo del bias, la selezione degli endpoint e la giustificazione degli standard di riferimento sono fondamentali per ottenere prove cliniche difendibili.

Quando i dati sulle prestazioni cliniche riguardano l'accuratezza diagnostica, uno strumento utile è QUADAS-2, un metodo comunemente utilizzato per valutare il rischio di bias e l'applicabilità negli studi sull'accuratezza diagnostica. QUADAS-2 non si concentra sul fatto che i risultati siano favorevoli, ma sulla loro credibilità. Una panoramica affidabile è disponibile tramite QUADAS-2 (Università di Bristol). produttori considerare QUADAS-2 come un requisito normativo, ma comprenderlo aiuta ad allineare la rendicontazione dello studio al modo in cui i revisori valutano la credibilità.

Queste considerazioni diventano particolarmente importanti quando si traducono i risultati delle prestazioni cliniche in conclusioni regolatorie difendibili, poiché le scelte di progettazione influenzano direttamente il modo in cui i revisori interpretano la credibilità e l'applicabilità. Un approccio strutturato al controllo dei bias, alla selezione degli endpoint, alla giustificazione dello standard di riferimento e alla valutazione dell'applicabilità, come la metodologia descritta nella progettazione di uno studio sulle prestazioni cliniche, contribuisce a garantire che le evidenze sulle prestazioni cliniche non siano solo statisticamente valide, ma anche clinicamente significative e pronte per la revisione ai sensi dell'IVDR.

Elaborare dati clinici che reggano a un esame approfondito

Le prove relative alle prestazioni cliniche risultano attendibili solo se sono chiaramente collegate al percorso clinico e alla decisione su cui il test influisce. Un problema ricorrente nei dossier sulle prestazioni è che le prove vengono presentate senza chiarire in che modo il risultato venga utilizzato. Un test di screening ha esigenze probatorie diverse rispetto a un test di triage; un test di monitoraggio ha esigenze diverse rispetto a un test diagnostico di conferma.

Un approccio valido inizia con il chiarire il ruolo del test:

• A quale decisione clinica serve come base?
• Cosa succede se il risultato è positivo o negativo?
• Quali sono le conseguenze dei falsi positivi e dei falsi negativi?
• Quali gruppi di pazienti sono più suscettibili di sottoporsi al test nella pratica clinica?

Una volta chiariti questi aspetti, diventa più facile giustificare i parametri di valutazione delle prestazioni. Gli indicatori di accuratezza diagnostica non sono semplici dati statistici, ma rappresentano dei compromessi. Si può dare priorità alla sensibilità quando la mancata diagnosi della malattia comporta conseguenze significative. Si può dare priorità alla specificità quando un intervento non necessario comporta conseguenze significative. I valori predittivi assumono un ruolo centrale in contesti a bassa prevalenza, e può essere opportuno effettuare un’analisi stratificata delle prestazioni per sottogruppi chiave qualora la pratica clinica evidenzi differenze significative.

Anche il controllo dei fattori di distorsione è fondamentale. Se la selezione dei pazienti comprende in misura sproporzionata casi in stadio avanzato, i risultati potrebbero apparire artificialmente elevati. Se gli standard di riferimento variano da un centro all’altro, i risultati possono risultare incoerenti. Se il test indice viene interpretato tenendo conto dello standard di riferimento, si può introdurre un fattore di distorsione. Una narrazione delle prove scientifiche ben argomentata riconosce questi rischi e spiega in che modo il disegno dello studio li mitiga.

Sufficienza delle prove ai sensi dell’IVDR: trasformare un «Abbiamo i dati» in un «Questo è sufficiente»

Una delle sfide più ardue nella valutazione delle prestazioni ai sensi dell'IVDR consiste nel dimostrare l'adeguatezza delle prove. produttori ritengono produttori che una grande quantità di dati sia di per sé persuasiva, ma gli organismi notificati valutano l'adeguatezza delle prove secondo criteri diversi: coerenza, pertinenza, qualità e ragionamento.

La sufficienza delle prove viene valutata nel contesto. Tra i fattori che spesso influenzano le aspettative in materia di sufficienza figurano:

• Classe di rischio e potenziale danno derivante da risultati errati
• Finalità e impatto clinico delle decisioni basate sui risultati
• La complessità del test e il suo percorso interpretativo
• Disponibilità di metodi alternativi e standard di cura
• Novità delle rivendicazioni relative all'analita o all'uso previsto
• L'ampiezza delle popolazioni e dei contesti di utilizzo dichiarati

È proprio in questo ambito che la MDCG 2022-2 risulta particolarmente utile, poiché ribadisce l'idea che la sufficienza delle prove debba essere giustificata e mantenuta nell'ambito di un processo continuo. Inoltre, incoraggia implicitamente produttori garantire la trasparenza riguardo ai limiti e a gestire l'incertezza attraverso meccanismi strutturati di post-commercializzazione.

Un PER sostenibile comprende solitamente una descrizione esplicita che giustifichi la sufficienza delle prove. Tale descrizione spiega non solo quali prove siano disponibili, ma anche perché siano pertinenti e solide ai fini previsti. Essa riconosce gli aspetti non coperti dalle prove e illustra in che modo l’incertezza residua venga gestita attraverso un PMPF mirato e la sorveglianza post-commercializzazione.

In molte revisioni, la sufficienza delle evidenze diventa molto meno controversa quando è argomentata in modo trasparente e basata su una chiara logica regolatoria. Quando le affermazioni sono definite in modo appropriato, gli endpoint corrispondono all'uso clinico previsto, i limiti sono riconosciuti e l'apprendimento post-commercializzazione è integrato nel sistema di evidenze, la logica di sufficienza risulta coerente, difendibile e proporzionata allo scopo previsto e al rischio del dispositivo.

Sorveglianza post-commercializzazione e PMPF: garantire la sostenibilità dei risultati nel tempo

Una caratteristica distintiva dell'IVDR è la sua attenzione esplicita alle prove relative all'intero ciclo di vita. I dispositivi non vengono valutati solo al momento dell'immissione sul mercato; ci si aspetta infatti che mantengano la loro sicurezza ed efficacia man mano che la pratica clinica, le popolazioni e i contesti reali evolvono. Ecco perché la sorveglianza post-commercializzazione non è un semplice adempimento normativo a sé stante, ma fa parte del sistema di prove che garantisce la difendibilità delle prestazioni.

L'analisi post-commercializzazione può mettere in luce aspetti che gli studi pre-commercializzazione non sono in grado di prevedere appieno, quali variazioni nella prevalenza, differenze tra le popolazioni di pazienti, fattori di interferenza imprevisti, variabilità nel comportamento degli utenti, variazioni nelle prestazioni da lotto a lotto e fattori operativi nei laboratori di routine. Un sistema di evidenze ben consolidato tiene conto di questi aspetti e utilizza meccanismi post-commercializzazione per individuare e interpretare tali segnali.

Il quadro normativo post-commercializzazione dell'IVDR prevede una pianificazione strutturata del monitoraggio post-commercializzazione (PMS) e, ove opportuno, attività di monitoraggio delle prestazioni post-commercializzazione (PMPF). Il PMPF non consiste semplicemente in «ulteriori studi», bensì in uno sforzo mirato a rispondere a specifiche domande sulle prestazioni che permangono dopo la valutazione pre-commercializzazione, domande che possono riguardare sottogruppi clinici, flussi di lavoro nella pratica clinica, tendenze a lungo termine o l'estensione dell'uso.

I sistemi di evidenze del ciclo di vita più robusti mostrano come i dati post-commercializzazione confluiscono nella valutazione delle prestazioni. Ciò include come vengono rilevati i segnali, come vengono valutate le tendenze e come vengono aggiornate le conclusioni sulle prestazioni nel rapporto di valutazione delle prestazioni IVDR. Questa integrazione del ciclo di vita è al centro di IVDR PMS, PMPF e PSUR, dove la tracciabilità delle evidenze diventa un modello di governance pratico piuttosto che un ideale teorico.

Tracciabilità: la caratteristica che rende un PER verificabile ed estraibile tramite IA

La tracciabilità è uno dei più importanti «fattori di successo silenziosi» nell'ambito dell'IVDR. Essa determina se un revisore è in grado di seguire il vostro ragionamento senza ambiguità. Inoltre, influisce sulla capacità degli strumenti di ricerca basati sull'intelligenza artificiale di estrarre e sintetizzare i vostri contenuti: relazioni chiare tra affermazioni, endpoint, prove e conclusioni aumentano la «prontezza delle risposte».

Una relazione di valutazione delle prestazioni (PER) ben argomentata rende solitamente visibile la tracciabilità nel testo descrittivo, non solo nelle tabelle. Essa spiega:

• La finalità prevista e il percorso clinico
• Le rivendicazioni derivanti dalla destinazione d'uso
• I parametri di valutazione e i criteri di accettazione derivati dalle indicazioni terapeutiche
• Le fonti di dati selezionate a sostegno di ciascun endpoint
• La logica di valutazione utilizzata per ponderare le prove
• Le conclusioni e i limiti derivanti da tale valutazione
• I meccanismi post-commercializzazione utilizzati per monitorare e aggiornare la fiducia nelle prestazioni

Questo approccio riduce gli attriti nel processo di revisione, poiché evita che il revisore debba colmare eventuali «lacune». Migliora inoltre la governance interna: quando le prove sono tracciabili, gli aggiornamenti diventano più gestibili. È possibile identificare con esattezza quali affermazioni e quali endpoint sono interessati dalle nuove informazioni e adeguare di conseguenza le motivazioni relative alla sufficienza delle prove.

Le organizzazioni che allineano la tracciabilità delle prove con pratiche più ampie di valutazione clinica e delle prestazioni spesso riscontrano che le prove di prestazione diventano più sostenibili nel tempo. La chiave è trattare la tracciabilità come una caratteristica di progettazione del sistema di prove, non come un'attività di documentazione successiva.

Domande frequenti rivolte agli organismi notificati e come i PER difendibili possano prevenirle

Gli organismi notificati pongono spesso domande che ruotano attorno ad alcune aree prevedibili. Un sistema di documentazione delle prestazioni ben strutturato anticipa tali aspetti e li affronta in modo proattivo.

Una domanda ricorrente è se le popolazioni oggetto dello studio siano rappresentative dell'uso previsto. Dati che sembrano solidi in una popolazione ristretta potrebbero non giustificare affermazioni di portata più ampia. Un'altra domanda frequente riguarda l'adeguatezza e l'applicazione coerente dello standard di riferimento: standard di riferimento incoerenti possono minare la credibilità delle prestazioni cliniche anche quando i risultati appaiono positivi. I revisori si chiedono inoltre spesso se gli endpoint riflettano l'utilità clinica, ovvero se la misura delle prestazioni sia effettivamente rilevante nel percorso decisionale clinico previsto.

Un altro aspetto riguarda l'uso della letteratura. Gli organismi notificati spesso richiedono una valutazione critica, non solo una citazione. Vogliono verificare che la letteratura sia pertinente, che i limiti siano ben compresi e che le conclusioni non siano esagerate. Ciò è in linea con i principi di valutazione delle prove sottolineati nella MDCG 2022-2.

Infine, la pianificazione post-commercializzazione è oggetto di un’attenzione sempre maggiore. In presenza di incertezze (e quasi sempre è così), i revisori si aspettano di vedere un piano adeguato che illustri in che modo la sorveglianza post-commercializzazione e il PMPF contribuiranno a ridurre tali incertezze e a confermare le prestazioni nel tempo. Quando la gestione delle prove post-commercializzazione è coerente, rafforza l’intero PER, poiché dimostra che la fiducia nelle prestazioni viene costantemente mantenuta, anziché data per scontata.

Conclusione

Il quadro normativo dell'IVDR dell'UE ridefinisce la valutazione delle prestazioni come un processo continuo, non come un'operazione di documentazione una tantum. produttori tenuti a dimostrare che le dichiarazioni relative alle prestazioni siano scientificamente fondate, analiticamente affidabili e clinicamente significative, e che tali dichiarazioni rimangano difendibili man mano che le conoscenze scientifiche evolvono e si accumulano prove provenienti dal mondo reale.

Un approccio valido alla valutazione delle prestazioni ai sensi dell’IVDR si basa su una pianificazione chiara, una logica probatoria coerente e una tracciabilità trasparente. Il piano di valutazione delle prestazioni definisce le basi metodologiche che collegano la destinazione d’uso alle indicazioni, agli endpoint, alle fonti di prova e ai metodi di valutazione. La relazione sulla valutazione delle prestazioni ai sensi dell’IVDR diventa quindi la descrizione che dimostra le prestazioni, giustifica l’adeguatezza delle prove, riconosce i limiti e spiega come viene gestita l’incertezza residua nel tempo.

L'apprendimento post-commercializzazione è l'ingrediente finale che garantisce la durata nel tempo delle prove di prestazione. Una solida sorveglianza post-commercializzazione e attività mirate di monitoraggio post-commercializzazione (PMPF) trasformano la valutazione delle prestazioni in un sistema dinamico, in grado di confermare le prestazioni nell'uso quotidiano, individuare tendenze significative e supportare, all'occorrenza, adeguati aggiornamenti delle prove e delle conclusioni. Quando questi elementi vengono integrati in una strategia coerente di gestione delle prove lungo il ciclo di vita del prodotto, la valutazione delle prestazioni va oltre la semplice conformità: diventa una base solida su cui fondare la fiducia nei risultati diagnostici e la sicurezza nel processo decisionale clinico.

Come Freyr può essere d'aiuto

Freyr supporta i produttori di IVD con la Valutazione delle prestazioni End-to-End, dalla definizione dello scopo previsto e dal rafforzamento dello sviluppo del Piano di valutazione delle prestazioni alla creazione di Rapporti di valutazione delle prestazioni difendibili e allineati alle aspettative dell'Organismo Notificato. Inoltre, Freyr aiuta i produttori nello sviluppo di Rapporti di valutazione clinica (CER) allineati al MDR e di sistemi di evidenze cliniche basati sul ciclo di vita che resistono al controllo dell'Organismo Notificato.

Se avete bisogno di assistenza per raccogliere dati sulle prestazioni, progettare o valutare studi, colmare le lacune nelle prove scientifiche o creare un sistema di gestione delle prove scientifiche tracciabile che integri gli obblighi relativi alla sorveglianza post-commercializzazione, al PMPF e ai PSUR, rivolgetevi ai nostri esperti per ricevere assistenza in ogni fase del ciclo di vita delle prove scientifiche previsto dall'IVDR.