Marguerite Brac de La Perrière, associée en Numérique & Data au sein du cabinet Lerins, experte en Santé Numérique, présente dans ce second volet, les points de vigilance pour les établissements de santé. Tenant compte du RGPD, des exigences de la Loi de bioéthique, et du projett de règlement sur l’intelligence artificielle, Marguerite Brac de La Perrière aborde dans ces articles, en filigrane, les obligations des éditeurs, la gouvernance des données collectées pour alimenter les systèmes d’IA, la garantie humaine, les mentions obligatoires aux utilisateurs à faire figurer dans la notice d’utilisation, l’explicabilité et l’auditabilité.
Cliquez ici pour consulter l’article.
Intelligence artificielle, algorithmes d’aide à la décision et à la thérapeutique : quelles exigences pour les utilisateurs des établissements de santé ?
Dans le précédent volet, les obligations des professionnels utilisant des outils d’intelligence artificielle (IA), dans le cadre d’actes de prévention, de diagnostic ou de soins, ont été présentées. L’objet du présent papier est de s’intéresser aux obligations des établissements de santé en cas de recours à un éditeur fournissant un système d’IA.
Tout d’abord, avant toute utilisation des systèmes d’IA générant des traitements de données à caractère personnel, il appartient à l’établissement de santé, en sa qualité de responsable du traitement au sens du RGPD, de s’assurer que l’éditeur du système, en sa qualité de sous-traitant, présente les garanties suffisantes quant à la mise en œuvre des mesures techniques et organisationnelles appropriées de manière que le traitement réponde aux exigences du RGPD. En ce sens, tout établissement de santé doit requérir de la part de l’éditeur un plan d’assurance sécurité et/ou un projet d’analyse d’impact sur le périmètre fonctionnel concerné, ainsi que la documentation technique pertinente, en tenant compte des risques spécifiques des systèmes d’IA par rapport à des systèmes d’information classiques, les capacités d’apprentissage automatique augmentant la « surface d’attaque » de ces systèmes, en introduisant de nombreuses nouvelles vulnérabilités (voir le dossier Linc Cnil).
Bien sûr, chaque système d’IA doit permettre le respect des mesures de la PGSSI-S et être hébergé par un hébergeur certifié de données de santé en Europe ou, en cas de recours à un prestataire américain, faire l’objet de dispositions supplémentaires de nature à exclure la possibilité d’accès aux données des services de renseignements américains.
Pour mémoire, les marchés et/ou contrats à conclure doivent inclure un « data processing agreement » définissant les caractéristiques des traitements confiés et les engagements de l’éditeur, notamment à l’égard du recours à des sous-traitants ultérieurs, ainsi que l’annexe Hébergement de données de santé requise par la réglementation.
Outre les mesures de sécurité propres au système d’IA utilisé, les mesures de sécurité habituelles pour un traitement utilisant des données personnelles ou ayant des conséquences pour les personnes doivent être mises en place et, le cas échéant, évaluées dans le cadre d’une analyse d’impact.
Une attention particulière doit être portée aux conditions de réutilisation éventuelle des données traitées à l’aide du système d’IA par l’éditeur aux fins d’amélioration de l’algorithme, dont la maîtrise incombe à l’établissement seul décisionnaire.
Par ailleurs et classiquement, l’établissement de santé devra s’assurer du bon niveau de marquage CE médical : classe II a) en matière d’aide au diagnostic ou d’aide à la thérapeutique conformément au règlement relatif aux dispositifs médicaux, et non classe I comme certains dispositifs d’aide au diagnostic mis sur le marché.
Enfin, la conformité aux exigences du projet de règlement sur l’intelligence artificielle doit être établie dans la documentation technique relative au système d’IA à haut risque. La notice d’utilisation doit permettre aux utilisateurs de l’établissement non seulement d’interpréter les résultats du système et de l’utiliser de manière appropriée, c’est-à-dire conformément à sa destination d’usage, mais aussi d’être en mesure d’exercer un contrôle humain.
Rappelons que les sanctions encourues en matière de protection des données et en matière d’intelligence artificielle sont similaires, les dernières pouvant toutefois s’élever jusqu’à 30 millions d’euros s’agissant des exigences relatives à la gouvernance des données.