Résumé

Dans le cadre du déploiement de l'IA Générative au sein du Groupe Inovie et pour des applications d'aides au diagnostic médical et aide à l'interprétation. Nous avons développé un Benchmark privé pour évaluer la performance des IA génératives Large Language Models Locales (LLM Locales). 5 médecins ont developpé 50 questions : 25 en Cardiologie, 25 en Néphrologie avec des questions d'urgences vitales. Réponses évaluées par 2 médecins spécialistes en biologie médicale.

L'IA LLM LLAMA de Meta fait 0% d'erreur grave vitale en Néphrologie. Cependant elle réalise 63% d'erreurs graves vitales en Cardiologie.

QWEN d'Alibaba réalise le moins d'erreurs vitale en Cardiologie : 18.18% d'erreurs suivi de Copilot ChatGPT (36.36% d'erreurs).

En vue de déploiement d'une IA d'aide au diagnostic pour le groupe Inovie, il devient urgent d'utiliser des LLMs locaux et d'établir des benchmarks privés pour mesurer réellement le taux d'erreurs des LLMs sur des cas de "vie réelle".

A propos - Inovie

Le Groupe INOVIE Acteur majeur du diagnostic médical en France Créé en 2010, le Groupe Inovie est l’acteur majeur du diagnostic médical en France (biologie humaine et vétérinaire, anatomopathologie et radiologie) avec près de 20% de l’activité libérale en France métropolitaine et d’Outre-Mer.

Le Groupe INOVIE c’est :

+ de 650 sites de proximité en biologie médicale
+ de 85 plateaux techniques de pointe en biologie médicale humaine, répartis sur 23 filiales appelées LBM (LBM : Laboratoires de Biologie Multi-sites)
+ 20 centres AMP
+ 2 plateaux techniques dédiés à la biologie médicale vétérinaire
+ 7 laboratoires d’anatomopathologie

Forts d’un ancrage sur 8 grandes régions de France, les 710 professionnels de santé et les 7 000+ collaborateurs d’INOVIE prennent en charge plus de 100 000 patients par jour.

De proximité et d’urgence, notamment avec l’ouverture de certains de nos plateaux techniques 24/24h, 7/7j, et 365/365j. Historiquement, Inovie a toujours été tourné vers la biologie de spécialité et a su développer cette expertise en créant des pôles de spécialité dans la biologie de la reproduction (Inovie Fertilité), dans la génomique et la biologie moléculaire (Imagenome), dans l’internalisation des analyses spécialisées (Inovie AS), et dans la biologie du sport (Inovie Sport)

. Aujourd'hui Inovie se tourne vers l'avenir en développant des initiatives en IA en interne. Ces initiatives permettront de renforcer la coopération avec les médecin prescripteurs et les patients.

https://www.inovie.fr/

A propos de l'orateur