Chercheur en évaluation de grands modèles de langue en santé (H/F)

Description du Poste

Les Missions

Dans le cadre du projet collaboratif PARTAGES financé par la BPI, il s'agit de concevoir et coordonner l'évaluation de grands modèles de langue en santé et de l'application de ces modèles à sept cas d'usage en santé. Cela inclut notamment la définition des protocoles d'évaluation pour chaque cas d'usage en fonction du type de cas et de son cadre d'application, la mise en application des protocoles spécifiques pour l’évaluation des cas d'usage et des modèles de fondation, et le suivi des résultats des évaluations des algorithmes de chaque cas d’usage et des modèles de fondation. Ces dernières tâches notamment impliqueront une forte interaction avec les partenaires responsables du développement des modèles de langue et des partenaires responsables des cas d'usage, l'organisation d'évaluations similaires à des campagnes d'évaluation, l'organisation d'ateliers de restitution de ces évaluations. Les méthodes et les résultats feront l'objet d'une documentation qui a vocation à être publique et de publications dans les conférences ou revues pertinentes du domaine.

L'Activité

Dans le contexte de l'évaluation de systèmes de traitement automatique des langues (TAL) du projet PARTAGES, principalement à base de méthodes neuronales, qui seront appliqués au domaine médical :
- concevoir et mettre en œuvre des méthodes à l'état de l'art pour l'évaluation de systèmes de TAL,
- piloter l'activité d'évaluation des partenaires du projet,
- planifier et conduire des réunions de projet,
- participer à des réunions de projet, des comités de pilotage, des comités de suivi,
- créer et implémenter des protocoles d'évaluation,
- analyser des résultats d'évaluations,
- rédiger des rapports, guides, publications,
- participer à des conférences scientifiques.

Votre Profil

Compétences

- Thèse en traitement automatique des langues ayant mobilisé de l'apprentissage automatique,
- maîtrise des méthodes et outils de TAL et d'apprentissage automatique, y compris neuronaux,
- maîtrise des mesures et protocoles d'évaluation du TAL,
- expérience de projets de recherche collaboratifs,
- goût du travail en équipe,
- facilité de contact avec les équipes extérieures,
- maîtrise des temps et ponctualité dans les livrables,
- aisance en français et en anglais technique.

Votre Environnement de Travail

Le laboratoire LISN
https://www.lisn.upsaclay.fr/
Le Laboratoire Interdisciplinaire des Sciences du Numérique (LISN) est une Unité Mixte de Recherche (UMR 9015) créé le 1er janvier 2021 grâce à la coopération des équipes de recherche du LIMSI et du LRI. Ses tutelles sont le CNRS, l’Université Paris-Saclay, l’INRIA et CentraleSupélec. Composé de près de 400 personnes, ses domaines de recherche couvrent d’une part des thématiques cœurs des sciences du numérique et des sciences de l’ingénieur, et d’autre part des thématiques interdisciplinaires par nature : intelligence artificielle et science des données, interaction humain-machine, traitement automatique des langues et de la parole, et bio-informatique.

Les activités de recherche sont organisées en 5 départements, 5 actions transversales et 16 équipes de recherche. 5 équipes de soutien et support à la recherche assurent le bon fonctionnement du laboratoire. Les travaux prendront place au sein de l'équipe SEME du département Sciences et Technologies des Langues.

Le projet PARTAGES
https://www.health-data-hub.fr/actualites/democratiser-lia-generative-en-sante-letat-travers-france-2030-selectionne-le-projet
Le projet PARTAGES, porté par un consortium d’une trentaine de partenaires incluant des laboratoires de recherches (du CNRS, de l’INRIA, ou de diverses universités), des établissements de santé, et des entreprises deep tech est l’un des lauréats de l’appel à projets France 2030 sur l’IA générative. Coordonné par le Health Data Hub (HDH), ce projet a pour but de mettre l’intelligence artificielle générative au service des professionnels de santé pour leur faire gagner un temps médical précieux.

L'équipe SEME du LISN est en charge du lot Évaluation du projet, lot dans lequel s'inscrira l'essentiel de l'activité de la personne recrutée. Elle y collaborera notamment avec Pierre Zweigenbaum et Aurélie Névéol, ainsi qu'avec une chercheuse contractuelle déjà recrutée dans ce projet. Des collaborations se tiendront aussi avec l'équipe ASARD du LISN, en charge de l'infrastructure d'évaluation du projet sous la responsabilité d'Anne-Catherine Letournel.

Le poste est situé au LISN, sur la commune d'Orsay. Il donnera lieu à des déplacements chez les partenaires ainsi qu'à des réunions et conférences.

Contraintes et risques

- travail sur écran

Rémunération et avantages

Rémunération

Entre 3131 et 4341,70 € brut mensuel

Congés et RTT annuels

44 jours

Pratique et Indemnisation du TT

Pratique et indemnisation du TT

Transport

Prise en charge à 75% du coût et forfait mobilité durable jusqu’à 300€

À propos de l’offre

À propos du CNRS

Le CNRS est un acteur majeur de la recherche fondamentale à une échelle mondiale. Le CNRS est le seul organisme français actif dans tous les domaines scientifiques. Sa position unique de multi-spécialiste lui permet d’associer les différentes disciplines pour affronter les défis les plus importants du monde contemporain, en lien avec les acteurs du changement.

Le CNRS

Les métiers de la recherche