MedGPT, l’assistant conversationnel médical développé par Synapse Medicine, a surpassé ChatGPT (GPT-5) lors d’une évaluation basée sur les Épreuves Classantes Nationales (ECN) 2023, l’examen de référence des étudiants en médecine.
Résultats : MedGPT parmi les 5 % meilleurs étudiants
Selon notre protocole, MedGPT obtient un score équivalent à celui d’un étudiant du top 500 (mieux que 95 % des candidats). ChatGPT (GPT-5) se situe plutôt au niveau du top 2000 (75–80 % des candidats).
Pourquoi avoir choisi l’ECN ?
Chaque année, près de 10 000 étudiants passent l’EDN (Épreuves Dématérialisées Nationales), le concours qui détermine leur futur poste d’interne.
NB : Autrefois appelées ECN (Épreuves Classantes Nationales), notamment en 2023, nous parlerons dans cet article d’ECN et non d’EDN.
C’est un test redouté… mais surtout un référentiel objectif : standardisé et reconnu. Il mesure de façon claire et structurée (QCM) la maîtrise des connaissances médicales. C’est le terrain parfait : exigeant et représentatif, pour comparer les performances de MedGPT et ChatGPT (GPT-5).
Et ce n’est qu’un début : une étude académique plus large est déjà en préparation pour confirmer et approfondir ces premiers résultats.
Notre protocole d’évaluation
L’évaluation a porté sur les annales ECN 2023, limitées aux cas cliniques progressifs et aux questions isolées :
- Exclus : la Lecture Critique d’Article (LCA) et les 27 questions d’imagerie, les modèles n’étant pas encore adaptés à ce type d’exercice.
- Total analysé : 223 questions.
La correction utilisée provenait d’une source tiers, indépendante de Synapse Medicine. Comme nous ne disposions pas du barème officiel (non communiqué), nous avons utilisé deux approches distinctes pour le calcul des scores.
1. Approche QRU stricte
- Toutes les questions sont corrigées comme si elles étaient des **Questions à Réponse Unique (QRU) (**plus sévère que celui appliqué aux étudiants)
- Barème binaire 1/0 appliqué : 1 point si tous les items sont justes, 0 si au moins un item est faux.
- Résultats (% de bonnes réponses) :
- MedGPT : 80%
- ChatGPT (GPT-5) : 73%
➡️ Soit 7 points d’écart en faveur de MedGPT.
%201%20-%20Blog.webp)
2. Approche « pseudo-officielle » QRU + QRM et comparaison au classement étudiant
- QRU pour les questions avec une seule réponse attendue : barème binaire 1/0, .
- QRM (Questions à Réponse Multiples) pour les questions avec plusieurs réponses possibles : barème dit « par discordance » (1 point si 0 discordance, 0,5 si 1 discordance, 0,2 si 2 discordances, 0 sinon), sans disposer des modalités spécifiques (type « Pas mis zéro »…)
- Résultats (note standardisée sur 100) :
- MedGPT : 84,3 / 100
- ChatGPT (GPT-5) : 78,9 / 100
➡️ Permet une mise en perspective par rapport aux classements des étudiants (en faisant l’hypothèse d’une difficulté identique des questions non évaluées d’imagerie).
👉 MedGPT se situe au niveau du top 500 (mieux que 95 % des candidats)
👉 ChatGPT (GPT-5) se situe autour du top 2000 (75–80 % des candidats)
%202%20-%20Blog.webp)
Une différence basée sur des réponses cliniques adaptées au contexte francais
Ce résultat s’explique par deux facteurs clés :
- Un alignement direct sur les référentiels français.
- Des réponses issues de sources médicales fiables ( comme HAS, Thériaque, ANSM,…), mises à jour en temps réel.
Là où ChatGPT (GPT-5) peut proposer des recommandations américaines ou imprécises, MedGPT fournit des réponses adaptées au contexte clinique français.
« Ces résultats montrent qu’une IA pensée pour la médecine française apporte des réponses plus pertinentes et plus sûres qu’un modèle généraliste. » - Louis Létinier, cofondateur et directeur médical de Synapse Medicine
Pourquoi une IA spécialisée pour les pros de santé, c’est important ?
De plus en plus de professionnels de la santé utilisent l’IA, et notamment Chat GPT (GPT-5), dans leur pratique.
Mais le constat est clair :
- des hallucinations fréquentes,
- aucune traçabilité,
- et des recommandations parfois… hors sujet.
MedGPT a été conçu pour :
- réduire le risque d’erreur,
- faire gagner du temps pour la synthèse documentaire,
- redonner confiance dans l’usage de l’IA en santé.
Son rôle n’est pas de remplacer le jugement clinique, mais de donner aux professionnels de santé un outil sûr, souverain et adapté à leur pratique.
Conclusion
MedGPT démontre qu’une IA souveraine et spécialisée peut dépasser les modèles généralistes sur un test aussi exigeant que les ECNs.
👉 Disponible dès aujourd’hui en version bêta gratuite, MedGPT est accessible en ligne pour tous les professionnels de santé qui souhaitent découvrir une alternative crédible à ChatGPT (GPT-5).
