Meditron se distingue dans le domaine des LLM, qui sont généralement formés sur des textes volumineux afin d’apprendre des relations mathématiques complexes entre les mots. Alors que les modèles généralistes comme ChatGPT servent un large éventail de tâches, l’orientation médicale de Meditron lui permet d’être plus compact tout en étant tout aussi efficace. Son développement est un pas en avant dans la démocratisation de l’accès à des informations médicales de haute qualité, aidant ainsi à des décisions cliniques basées sur des preuves.
La Faculté informatique et communications de l’EPFL a développé deux versions de Meditron – MEDITRON 7B et 70B, comportant respectivement 7 et 70 milliards de paramètres. Contrairement à d’autres modèles d’IA dans le domaine médical, qui sont soit fermés, soit limités en termes d’échelle, Meditron offre à la fois l’accessibilité et l’échelle. Les modèles ont été entraînés sur des sources de données médicales sélectionnées et de haute qualité, y compris la littérature évaluée par les pairs et diverses directives de pratique clinique, ce qui garantit une base de connaissances large et précise.
Une étape importante dans le développement de l’IA médicale
L’auteur principal, Zeming Chen, candidat au doctorat, a souligné que Meditron surpasse les autres modèles open-source en termes de performances et est compétitif par rapport aux principaux modèles fermés, ce qui constitue une avancée majeure dans le domaine de l’IA médicale. La nature open-source de Meditron est cruciale, car elle favorise la transparence et permet une amélioration continue grâce aux contributions des chercheurs du monde entier. Cette approche est essentielle pour favoriser la confiance et la fiabilité dans les progrès de l’IA. En outre, la conception de Meditron est axée sur la sécurité, en utilisant des sources transparentes de preuves de haute qualité pour garantir son efficacité et sa fiabilité dans des contextes cliniques.
En collaboration avec le Comité international de la Croix-Rouge, Meditron intègre également des directives de pratique clinique humanitaire, ce qui le rend sensible aux divers contextes de soins de santé. Le Dr Javier Elkin, du CICR, loue le potentiel de l’outil dans les situations humanitaires. Un atelier coordonné par le centre EssentialTech de l’EPFL explorera les capacités et les défis de Meditron, en particulier dans les applications humanitaires.
En outre, Meditron s’aligne sur la mission du nouveau AI Center de l’EPFL, dédié à l’exploitation de l’IA pour le bien sociétal. Ce développement constitue une avancée significative dans la technologie médicale, offrant un accès universel aux connaissances médicales et transformant potentiellement les pratiques de soins de santé à l’échelle mondiale.
