Sous certaines conditions, le logiciel d’IA a pu obtenir le nombre minimum de points requis dans les trois parties théoriques de l’examen de licence médicale des États-Unis (USMLE). Ceci est rapporté par des experts américains dans la revue “PLOS Digital Health”. Cependant, l’équipe dirigée par Victor Tseng de la startup californienne AnsibleHealth a laissé de côté quelques questions.
L’USMLE est un examen standardisé en trois parties que les étudiants en médecine doivent réussir pour exercer la médecine aux États-Unis. Les connaissances de la plupart des disciplines médicales – de la biochimie à la pensée diagnostique en passant par la bioéthique – sont évaluées.
Cependant, lors des tests avec ChatGPT, les auteurs de l’étude ont dû tenir compte du fait que le logiciel OpenAI AI ne peut accepter que la saisie de texte. Après avoir supprimé les questions basées sur des images, les auteurs ont testé le logiciel sur 350 questions destinées au public qui faisaient partie de l’examen USMLE de l’été dernier.
Après la suppression des réponses ambiguës, ChatGPT a obtenu 52,4 à 75 % des points qui pouvaient encore être obtenus dans les trois parties USMLE de l’examen. Les résultats variaient en fonction de la partie du test et du type de tâche – comme les tests de coche ou les questions ouvertes. Le seuil de réussite est d’environ 60% et change légèrement selon l’année. Si les réponses ambiguës étaient incluses dans le résultat, ChatGPT a obtenu 36,1 à 61,5 % des points possibles.
Selon les auteurs, ChatGPT a surpassé PubMedGPT, un contre-modèle formé exclusivement sur la littérature biomédicale.
L’équipe a conclu que ChatGPT avait le potentiel d’améliorer l’éducation médicale et, par conséquent, la pratique clinique. “Atteindre la note de passage minimale pour cet examen d’expert notoirement difficile, et le faire sans aucune aide humaine, est une étape remarquable dans le développement de l’IA clinique”, ont écrit les auteurs.
Le robot textuel ChatGPT s’était auparavant affirmé dans d’autres matières universitaires, même s’il n’obtenait pas les meilleures notes aux examens. Selon des professeurs de l’Université du Minnesota, l’outil de chatbot d’IA a réussi les examens de droit dans quatre cours et un autre cours à la Wharton School of Business de l’Université de Pennsylvanie.
Après le lancement public de ChatGPT par la start-up californienne OpenAI en novembre 2022, nombre d’acteurs de l’industrie tech se sont lancés dans une véritable course aux faveurs des utilisateurs. OpenAI est soutenu par Microsoft avec des milliards de dollars. En retour, Microsoft peut intégrer la technologie dans son moteur de recherche Bing et d’autres produits. Le grand adversaire d’OpenAI et de Microsoft est Google. Le géant des moteurs de recherche a lancé mardi son propre chat bot Bard. Des acteurs plus petits tels que You.com du chercheur allemand en intelligence artificielle Richard Socher participent également à la course. Socher vient de Dresde, mais vit et travaille aux États-Unis depuis des années.
Les actions de Microsoft, cotées au NASDAQ, ont chuté de 0,2% à 263,10 dollars.
/chd/DP/stk
SAN FRANCISCO (dpa-AFX)
L’effet de levier doit être compris entre 2 et 20
Pas de données
Plus d’actualités sur Alphabet C (ex Google)
Sources des images : Den Rise / Shutterstock.com