Évaluation clinique MDR : test de notre grille d'audit

Évaluation clinique MDR: test de notre grille d’audit

Il s’agit d’un processus systématique et planifié destiné à produire, recueillir, analyser et évaluer les données cliniques d’un dispositif afin d’en vérifier la sécurité, les performances et le bénéfice clinique. Le processus doit se poursuivre pendant le cycle de vie du dispositif, et non s’arrêter au moment où le rapport d’évaluation clinique — le CER — est signé.

C’est ce point qui déstabilise encore les fabricants habitués à produire un CER une fois pour toutes, puis à le laisser dormir dans un coin de leur système de management de la qualité jusqu’au prochain audit. Sous le MDR, le rapport n’est pas un instantané isolé. Il doit rester cohérent avec les évolutions du dispositif, les données de surveillance après commercialisation, les réclamations, les incidents, la littérature et, lorsque cela s’applique, les résultats du suivi clinique après commercialisation.

Ma grille d’audit ne cherche donc pas à mesurer la longueur d’un CER. Elle cherche à repérer les ruptures de logique: une indication plus large que les données disponibles, une équivalence décrite sans démonstration suffisante, un plan d’évaluation clinique impossible à exécuter, ou encore un PMCF conçu comme une annexe administrative. Ce sont ces décalages, plus que le nombre de pages, qui fragilisent un dossier devant un organisme notifié.

Ce que dit vraiment le MDR — et ce que la pratique déforme

L’article 61 du MDR impose au fabricant de démontrer la conformité du dispositif aux exigences générales de sécurité et de performance de l’Annexe I au moyen d’une évaluation clinique. Cette démonstration est documentée dans un rapport d’évaluation clinique, construit à partir d’un plan d’évaluation clinique et de données adaptées au dispositif concerné.

Ces données peuvent provenir de plusieurs sources: littérature scientifique, données cliniques relatives au dispositif lui-même, données issues d’un dispositif équivalent lorsque les conditions réglementaires sont réunies, investigations cliniques, retours d’expérience et informations recueillies après la mise sur le marché. Le choix d’une source ne dispense pas le fabricant d’examiner sa pertinence ni ses limites. Une publication portant sur une technologie proche ne devient pas automatiquement une preuve applicable au dispositif évalué.

L’Annexe XIV organise cette démarche autour de trois éléments qui doivent rester alignés:

• le plan d’évaluation clinique, qui définit les objectifs, les méthodes, les sources de données et les critères d’appréciation;
• le rapport d’évaluation clinique, qui analyse les données disponibles et justifie les conclusions;
• les mises à jour successives, déclenchées par les nouvelles données pertinentes et par les changements intervenant pendant le cycle de vie.

Dans les dossiers examinés, les mêmes faiblesses reviennent avec une régularité presque mécanique:

• le CEP est rédigé comme un document stratégique de quelques pages, sans objectifs mesurables, sans critères d’analyse clairement définis et sans lien avec la stratégie de surveillance après commercialisation;
• le CER reprend la version précédente en modifiant la page de garde, la désignation commerciale ou quelques caractéristiques techniques, sans réévaluer les conclusions;
• la recherche bibliographique est résumée par une liste de références issue d’une recherche non documentée, sans équation, sans période couverte et sans critères d’inclusion ou d’exclusion;
• les données favorables sont développées, tandis que les résultats négatifs, les limites méthodologiques ou les événements indésirables sont traités en quelques lignes;
• la conclusion clinique affirme la conformité sans montrer comment les données soutiennent chaque indication, chaque population et chaque revendication de performance.

Un CER robuste ne prouve pas seulement que des données existent: il montre pourquoi elles sont pertinentes pour ce dispositif, cette indication et cette population.

La différence avec l’ancien cadre de la directive 93/42/CEE n’est pas seulement une question de vocabulaire. Le MDR attend une démonstration clinique proportionnée au risque, au degré d’innovation, aux caractéristiques du dispositif et à la solidité des données disponibles. La charge de justification augmente lorsque le fabricant revendique une technologie nouvelle, une indication étendue ou une performance qui n’est pas suffisamment documentée par l’état de l’art.

Une évaluation continue, mais pas une mise à jour automatique

Le terme « continu » ne signifie pas qu’un fabricant doit réécrire intégralement son CER à intervalles fixes, indépendamment de l’évolution réelle du dossier. Il signifie que l’évaluation clinique doit être intégrée au système de surveillance et réexaminée lorsque de nouvelles informations peuvent modifier l’analyse de la sécurité, des performances ou du bénéfice clinique.

La fréquence de révision dépend donc du dispositif, de sa classe, de son profil de risque, de ses données disponibles, des changements apportés au produit et des résultats de la surveillance après commercialisation. Une procédure peut prévoir une revue périodique, mais elle doit aussi identifier les événements qui déclenchent une réévaluation en dehors du calendrier prévu: incident grave, signal de vigilance, nouvelle publication importante, modification de la destination, changement de conception, extension d’indication ou évolution significative de l’état de l’art.

L’absence de nouvelle donnée ne conduit pas automatiquement à une non-conformité. En revanche, une mise à jour purement formelle, qui reconduit les conclusions sans démontrer que les sources pertinentes ont été recherchées et examinées, laisse le dossier sans véritable justification.

La grille: douze points pour mettre un CER à l’épreuve

Voici les points que je passe au crible, dans un ordre proche de celui qu’adopte généralement un évaluateur externe. Ils ne constituent pas une recette mécanique. Leur intérêt est de faire apparaître les dépendances entre les différentes parties du dossier.

1. Identification et qualification du dispositif

Le CER commence par une description technique et clinique suffisamment précise pour que le lecteur sache exactement quel dispositif est évalué. Il faut notamment retrouver la destination, les indications, les contre-indications, la population cible, le principe de fonctionnement, les caractéristiques pertinentes de conception, les matériaux en contact avec le corps et la durée d’utilisation.

La description doit correspondre au produit réellement mis sur le marché. Une différence entre le modèle évalué dans les données cliniques et le modèle décrit dans la documentation technique peut être acceptable si elle est analysée et justifiée. Elle ne peut pas être simplement ignorée.

Une formule telle que « usage général en milieu hospitalier » ne permet ni de définir la population concernée ni d’apprécier la pertinence des données. Pour un dispositif laser, un logiciel de planification ou un système de photothérapie, le CER doit également préciser le rôle de l’utilisateur, les conditions d’utilisation, les paramètres susceptibles d’influencer la performance et les limites prévues par le fabricant.

2. Qualification du besoin clinique

L’évaluation clinique ne commence pas par la recherche d’articles favorables. Elle commence par la question clinique à laquelle le dispositif doit répondre.

Le fabricant doit décrire l’état de l’art, les options thérapeutiques ou diagnostiques disponibles, les pratiques usuelles et les limites des solutions existantes. Cette analyse sert de point de comparaison pour le bénéfice clinique et la performance revendiqués. Elle doit aussi tenir compte des risques associés aux alternatives, et pas uniquement de leurs avantages.

Le besoin clinique doit rester relié à la destination du dispositif. Une revendication de réduction de la douleur, d’amélioration du diagnostic ou de diminution de la durée d’un traitement exige des données adaptées à cette finalité. Une description générale de l’utilité du produit ne remplace pas une démonstration ciblée.

3. Plan d’évaluation clinique

Le CEP est le document qui donne sa direction à l’ensemble de la démarche. Il fixe les questions auxquelles l’évaluation doit répondre, les sources de données envisagées, la méthode de recherche, les critères d’analyse, la stratégie d’équivalence éventuelle et les conditions dans lesquelles de nouvelles données seront intégrées.

Un CEP correctement versionné permet de comprendre ce qui était prévu avant l’analyse des résultats. C’est un point important: lorsque la méthode est modifiée après la collecte des données, le fabricant doit expliquer pourquoi et mesurer l’effet de cette modification sur les conclusions.

Le plan doit aussi distinguer ce qui relève de la sécurité, de la performance et du bénéfice clinique. Ces notions sont liées, mais elles ne sont pas interchangeables. Un dispositif peut fonctionner conformément à ses spécifications techniques sans que son bénéfice pour le patient soit suffisamment établi. À l’inverse, un bénéfice observé dans une étude ne permet pas de conclure sans examiner les risques et les conditions d’utilisation.

4. Recherche documentaire

Une recherche bibliographique exploitable est reproductible. Le CER doit permettre de comprendre quelles bases ont été interrogées, à quelles dates, avec quelles équations de recherche, sur quelle période et selon quels critères de sélection.

La recherche doit être adaptée à la discipline médicale et au type de dispositif. PubMed peut être pertinent, mais une seule base ne suffit pas nécessairement, notamment lorsque la littérature utile est dispersée dans des revues spécialisées, des registres ou des sources propres à une technologie. Le fabricant doit pouvoir justifier le périmètre retenu.

Le processus de sélection doit également être traçable. Les références exclues, les doublons, les articles portant sur une population différente ou sur une technologie non comparable ne doivent pas disparaître sans explication. Un diagramme de type PRISMA ou une présentation équivalente peut aider à rendre cette sélection lisible, à condition de refléter un processus réellement suivi.

Une bibliographie trouvée au hasard sur un moteur de recherche ne constitue pas une stratégie documentaire. Elle peut contenir des articles intéressants, mais elle ne démontre ni l’exhaustivité de la recherche ni la maîtrise des biais de sélection.

5. Évaluation critique des données

Chaque étude retenue doit être examinée selon sa qualité méthodologique, sa pertinence pour le dispositif et sa contribution à la démonstration recherchée. Un résumé narratif de l’article ne suffit pas.

L’analyse doit notamment porter sur la population étudiée, le comparateur, les critères de jugement, la durée du suivi, les biais possibles, la gestion des données manquantes et la cohérence entre les résultats publiés et la revendication du fabricant. Une étude réalisée sur une population très sélectionnée ne peut pas être extrapolée sans discussion à l’ensemble de la population cible.

Un tableau de synthèse est utile lorsqu’il contient une véritable analyse: niveau de preuve, pertinence clinique, limites, résultats de sécurité, résultats de performance et rôle de l’étude dans la conclusion. Une cotation n’a de valeur que si sa méthode est définie. Attribuer une note sans expliquer le raisonnement donne une apparence de rigueur, pas une démonstration.

6. Équivalence, le cas échéant

L’équivalence ne doit pas être utilisée comme un raccourci permettant d’éviter toute réflexion clinique. Le fabricant doit démontrer la comparabilité technique, biologique et clinique dans les conditions prévues par le MDR et les orientations pertinentes du MDCG.

La comparaison doit porter sur les caractéristiques qui peuvent influencer la sécurité ou les performances. Une ressemblance générale entre deux produits ne suffit pas. Il faut aussi démontrer l’accès aux données cliniques du dispositif de comparaison lorsque le raisonnement réglementaire l’exige. La simple présence d’un produit comparable sur le marché ne donne pas automatiquement le droit d’utiliser ses données.

7. Investigations cliniques

Lorsque la littérature disponible et les données d’équivalence ne suffisent pas, une investigation clinique peut être nécessaire pour démontrer la conformité du dispositif. Elle doit être conçue et conduite conformément aux exigences applicables du MDR, notamment celles de l’Annexe XV, ainsi qu’aux règles nationales pertinentes.

La traçabilité ne se limite pas au rapport final. Le dossier doit permettre de relier la question clinique au protocole, les critères du protocole aux résultats, puis les résultats aux conclusions du CER. Les documents relatifs à l’autorisation de l’investigation, à l’avis du comité d’éthique compétent, à l’information et au consentement des participants, aux déviations au protocole et à la gestion des événements indésirables doivent être conservés selon les exigences applicables.

Le règlement européen relatif aux essais cliniques sur les médicaments n’est pas le cadre de référence à invoquer pour qualifier une investigation portant sur un dispositif médical. La référence centrale est le MDR, son chapitre consacré aux investigations cliniques et son Annexe XV, complétés par les dispositions nationales qui encadrent notamment le rôle du comité d’éthique et les autorisations nécessaires.

8. Analyse bénéfice/risque

Le CER doit expliquer pourquoi les bénéfices cliniques revendiqués l’emportent sur les risques résiduels dans la population et les conditions d’utilisation prévues. Une conclusion favorable n’est pas une analyse.

Il faut relier les risques identifiés dans la gestion des risques aux données cliniques disponibles: fréquence, gravité, contexte de survenue, facteurs aggravants et mesures de maîtrise. Les risques liés à l’utilisation par un professionnel insuffisamment formé, à un mauvais réglage ou à une interprétation erronée de la sortie d’un logiciel doivent être examinés lorsqu’ils sont prévisibles.

L’état de l’art joue ici un rôle concret. Un risque peut être acceptable dans un contexte thérapeutique donné, mais devenir difficile à justifier si une alternative comparable apporte le même bénéfice avec une exposition moindre. Le raisonnement doit être spécifique au dispositif, et non reprendre une formule standard de conclusion.

9. Conclusion clinique

La conclusion doit répondre aux questions posées dans le CEP. Elle doit couvrir la sécurité, les performances, le bénéfice clinique et la conformité aux exigences générales de sécurité et de performance concernées.

Une bonne conclusion indique également les limites de la démonstration: sous-populations insuffisamment documentées, durée de suivi limitée, données manquantes, dépendance à une formation utilisateur ou nécessité de compléter les données après commercialisation. Reconnaître une limite ne fragilise pas nécessairement le dossier. Ce qui le fragilise, c’est de présenter une preuve limitée comme une preuve générale.

Les revendications figurant dans la notice, l’étiquetage, le matériel promotionnel et le SSCP doivent rester dans le périmètre effectivement soutenu par le CER. Une conclusion prudente ne peut pas coexister avec une communication commerciale beaucoup plus large.

10. Cycle de vie et mises à jour

La date du CER ne suffit pas à démontrer qu’il est maintenu. Le fabricant doit disposer d’une procédure décrivant les responsabilités, les sources surveillées, les critères de déclenchement, le processus d’approbation et l’archivage des versions.

Une revue périodique peut être prévue selon le type de dispositif et les exigences de l’organisme notifié. Elle ne remplace pas les revues déclenchées par un événement significatif. Les informations issues de la vigilance, des réclamations, du PMS, du PMCF, de la littérature et des changements de conception doivent être évaluées pour déterminer si elles modifient les conclusions cliniques.

Dans certains dossiers, une mise à jour ciblée peut suffire. Dans d’autres, une modification de la destination ou l’apparition d’un signal de sécurité impose de reprendre une partie substantielle de l’analyse. La conformité ne dépend donc pas d’un calendrier uniforme, mais de la capacité à démontrer que le fabricant a identifié et traité les informations pertinentes.

11. PMCF: plan, données et rapport

Le plan de suivi clinique après commercialisation doit être cohérent avec les incertitudes restantes de l’évaluation clinique. Il ne devrait pas se résumer à une formule générale prévoyant de surveiller la littérature et les réclamations.

Le PMCF peut mobiliser différentes sources:

• des registres de patients ou de procédures;
• des enquêtes structurées auprès des utilisateurs;
• des études de suivi ou des investigations cliniques complémentaires;
• l’analyse des données de vigilance, des incidents, des réclamations et des retours clients;
• la revue de la littérature et des pratiques cliniques après la mise sur le marché.

Le plan doit préciser ce que chaque activité cherche à établir, quelle population sera observée, quels critères seront analysés, quelles limites sont prévisibles et comment les résultats seront intégrés au CER, au rapport PMS et, lorsque cela s’applique, au PSUR.

Un PMCF peut être conforme même si toutes ses activités ne produisent pas immédiatement de nouvelles données primaires. Il doit toutefois être justifié, proportionné et effectivement exécuté. Un plan générique, reconduit sans résultat exploitable, ne répond pas à cette logique.

12. Cohérence documentaire

La dernière vérification est souvent la plus révélatrice. Le CER ne vit pas seul. Ses conclusions doivent correspondre à la notice, à l’étiquetage, aux informations destinées aux patients, au SSCP, au dossier de gestion des risques et aux documents de PMS et de PMCF.

Il faut comparer les indications, les contre-indications, la population cible, les performances revendiquées, les avertissements et les limites d’utilisation. Une indication présente dans la documentation commerciale mais absente de l’analyse clinique crée une rupture immédiate. La même difficulté apparaît lorsqu’un bénéfice est décrit dans le SSCP avec un niveau de certitude supérieur à celui des données disponibles.

La cohérence documentaire n’est pas un contrôle de forme. Elle permet de vérifier que la conclusion clinique a réellement été transmise aux documents qui encadrent l’utilisation du dispositif.

Équivalence: l’angle mort des habitudes MDD

Sous la directive 93/42/CEE, les dossiers d’équivalence pouvaient parfois reposer sur une comparaison assez générale entre deux dispositifs. Le MDR a resserré cette possibilité. Le MDCG 2020-5 insiste sur la nécessité d’examiner ensemble les dimensions technique, biologique et clinique.

Ces trois dimensions ne se compensent pas entre elles. Une proximité technique ne corrige pas une différence clinique importante. De même, une indication comparable ne suffit pas lorsque les matériaux ou les conditions de contact présentent une différence susceptible d’influencer le profil de risque.

Le fabricant doit aussi examiner la disponibilité et l’accès aux données du dispositif de comparaison. Lorsque l’équivalence ne peut pas être démontrée de façon complète et documentée, il faut revoir la stratégie d’évaluation clinique plutôt que maintenir une équivalence fragile par habitude. Les données propres au dispositif, une investigation clinique ou une combinaison de sources peuvent alors devenir nécessaires.

Logiciels dispositifs médicaux: trois niveaux de preuve

Pour les logiciels dispositifs médicaux, les orientations du MDCG, notamment le MDCG 2019-11 et le MDCG 2020-1, conduisent à distinguer plusieurs niveaux qui sont souvent confondus dans les dossiers techniques.

Le premier concerne l’association clinique valide: le logiciel doit traiter un état clinique pertinent, pour une population définie, et produire une information ayant une signification médicale dans le contexte prévu. Une sortie mathématiquement cohérente n’est pas nécessairement une information cliniquement utile.

Le deuxième niveau est celui de la performance technique. Il s’agit de démontrer que le logiciel fonctionne comme prévu: traitement des données, stabilité, exactitude, gestion des erreurs, logique de l’algorithme et respect des spécifications. Cette partie est généralement bien documentée par les équipes de développement.

Le troisième niveau est la performance clinique. Il faut montrer que l’utilisation du logiciel dans le flux de travail prévu permet d’obtenir le résultat clinique revendiqué, avec les utilisateurs et la population concernés. Pour un logiciel d’aide à la décision, une bonne performance algorithmique ne démontre pas à elle seule une amélioration du diagnostic ou de la prise en charge. Il faut examiner le rôle du professionnel, les conditions d’interprétation, les conséquences d’un résultat erroné et l’effet réel sur la décision clinique.

Le point faible récurrent est le passage trop rapide de la performance technique au bénéfice clinique. Le CER doit rendre explicite ce qui est démontré, ce qui repose encore sur une hypothèse et ce qui devra être vérifié par le PMCF.

PMCF: ni formalité, ni unique source possible

Le suivi clinique après commercialisation est souvent rédigé trop tard, après l’obtention du marquage CE, comme une réponse administrative à une demande d’audit. Cette approche produit un plan générique et un rapport pauvre en données utiles. Elle prive surtout le fabricant d’un outil pour traiter les incertitudes identifiées avant la mise sur le marché.

Le PMCF doit être proportionné à ces incertitudes. Un dispositif bien documenté par des données cliniques robustes n’appelle pas nécessairement le même programme qu’un dispositif innovant, qu’un logiciel évolutif ou qu’un produit fondé en partie sur l’équivalence. Dans tous les cas, le fabricant doit expliquer pourquoi les activités retenues permettent de confirmer la sécurité et les performances, d’identifier les risques émergents et de vérifier la persistance du bénéfice clinique.

Les résultats du PMCF ont vocation à alimenter le CER, mais ils ne constituent pas la seule source possible de mise à jour. Le fabricant doit également prendre en compte les informations de surveillance après commercialisation, la vigilance, les réclamations, les retours d’utilisateurs, les publications nouvelles, les données de registres et les changements de l’état de l’art. Selon le dispositif, certaines sources seront plus informatives que d’autres.

Un CER doit évoluer lorsque les données pertinentes évoluent; le PMCF est l’un des moteurs de cette mise à jour, pas une formule qui la remplace à elle seule.

L’absence de nouvelles données PMCF ne permet donc pas, à elle seule, de conclure que le CER est non conforme. Elle devient problématique lorsque le plan prévoyait des activités nécessaires, que ces activités n’ont pas été réalisées ou que les données disponibles n’ont pas été examinées. À l’inverse, un fabricant qui justifie l’absence d’une activité PMCF supplémentaire et documente les autres sources pertinentes peut défendre une stratégie proportionnée.

Le verdict

Un CER solide n’est pas un document long. C’est un document juste, aligné, traçable et capable d’expliquer ses propres limites. La grille d’audit sert moins à compter les insuffisances qu’à vérifier la continuité du raisonnement: le dispositif décrit est-il bien celui qui a été étudié? Les données répondent-elles aux revendications? Les risques sont-ils comparés à l’état de l’art? Les conclusions sont-elles reprises sans déformation dans les autres documents?

Trois signaux doivent alerter avant même l’audit:

• un CER qui n’a pas été réexaminé depuis le marquage initial, sans justification de l’absence de données nouvelles;
• une équivalence revendiquée à partir d’une comparaison partielle, sans démonstration technique, biologique et clinique suffisamment documentée;
• un PMCF décrit comme une intention générale, sans objectifs, sans résultats attendus ou sans lien avec les incertitudes identifiées.

Ces signaux ne constituent pas tous, à eux seuls, une conclusion réglementaire. Ils indiquent en revanche que le système d’évaluation clinique n’est probablement pas piloté comme un processus vivant. C’est là que l’organisme notifié cherchera les incohérences: dans les versions qui ne se répondent pas, les données écartées sans explication et les revendications qui dépassent la preuve disponible.

Un dossier d’évaluation clinique ne se « passe » pas: il se construit, s’audite et se maintient.

La conformité n’est pas un état atteint une fois pour toutes. C’est une démonstration qui se consolide au fil des données, des révisions et des décisions documentées. Une bonne grille d’audit ne promet pas de faire disparaître les questions difficiles. Elle permet de les poser assez tôt, avec les bonnes sources, avant qu’elles ne deviennent les objections centrales du prochain audit.