Missions

Feedback adaptatif pour obtenir l'illusion d'être touché par un agent virtuel dans un environnement virtuel immersif
10 mois post-doctorat
Projet ANR
Co direction : Indira Thouvenin et Catherine Pelachaud

Activités

SUJET

Hypothèses de recherche
Les recherches menées sur la définition et la classification du contact social (Hertenstein et al., 2006 ; Kirsch et al., 2018) est une source d'information essentielle pour préciser les exigences des systèmes technologiques visant à produire un contact social crédible. Ces études montrent comment les différents types de toucher peuvent être définis en fonction de leurs propriétés physiques et comment chacun d'eux peut être plus ou moins adéquat pour exprimer des émotions spécifiques et transmettre des intentions. Ces études montrent également comment le toucher est en soi un sens véritablement multimodal avec des caractéristiques aussi diverses que la pression, la vitesse d'impact, la vitesse du mouvement du toucher sur la peau (en cas de caresse par exemple) ou la durée totale du geste. Cependant, il n'existe actuellement aucune interface tactile permettant d'exprimer les sentiments transmis par un agent à un être humain, avec un large éventail de possibilités (Boucaud et al., 2019). Notre hypothèse est qu'il est possible d'augmenter, et au mieux d'induire, le sentiment d'être touché par d'autres modalités sensorielles, l'agence et les finances sociales. Le principal goulet d'étranglement est de trouver les combinaisons appropriées de correspondances audio-tactiles transmodales, la représentation visuelle des parties du corps touchées, l'agence de l'utilisateur et les repères contextuels.

Afin d'étudier comment les gens peuvent se sentir touchés par un agent virtuel dans un environnement virtuel immersif, nous nous appuierons sur des études expérimentales menées sur des humains, basées sur des recherches fondamentales en sciences cognitives. Les résultats de ces études seront ensuite intégrés dans des modèles de simulation de mouvements tactiles par des agents virtuels et de conception de rétroaction adaptative 3D pour l'environnement virtuel immersif.

Feedback adaptatif sous forme de métaphores incarnées
Le feedback sensoriel dans les interactions 3D ou les métaphores 3D (Bowman et al, 2012) sont utilisées dans des environnements virtuels (VE), pour aider les utilisateurs à sélectionner ou manipuler des objets virtuels. Par exemple, la métaphore visuelle du ray casting est un rayon virtuel utilisé comme retour pour représenter des actions de pointage sur des objets virtuels lors de leur sélection/déplacement.
En règle générale, le retour sensoriel ne fournit pas suffisamment de variabilité et doit être adaptée à la situation et adaptée à chaque utilisateur. Dans le domaine de la formation par le biais de la VE (Jeanne et al., 2017) et en l'absence d'un instructeur pendant la formation gestuelle, les apprenants ont besoin d'une rétroaction améliorée (également appelée rétroaction extrinsèque). Il s'agit d'informations qui ne peuvent être données sans l'aide d'un formateur ou d'un présentateur (Sigrist et al., 2013) et qui sont utilisées pour aider les apprenants à visualiser les gestes, à les guider, à corriger ou à signaler les erreurs. Nous voulons étendre ce concept à la communication entre l'agent et l'utilisateur, en enrichissant le corps de l'utilisateur de commentaires visuels et sonores adaptatifs, également appelés "métaphores incarnées" (Antle et al., 2009). Ces augmentations seront adaptées à la situation, au rapport social entre l'agent et l'humain, et aux émotions de l'agent. Pour toutes ces raisons, ce projet vise à créer des métaphores incarnées multisensorielles (son, visuel) appelées aussi "feedback adaptatifs" (Jeanne et al., 2017) qui favorisent l'expérience d'être touché. Le modèle de décision actuel de l'agent sera élargi afin de choisir le feedback adaptatif appropriée.

Compétences

Profil du candidat et exigences en matière de candidature
Le candidat doit détenir une thèse de doctorat en informatique, réalité virtuelle, haptique, interaction 3D.

Contexte de travail

ENVIRONNEMENT

Lieu de la recherche : Laboratoire Heudiasyc, Université de technologie de Compiègne
(40 minutes en train de Paris) et le laboratoire de l'ISIR, UPMC, Paris.
Salaire : selon l'expérience du candidat
Durée : 10 mois
Date de début : 2 Juin

Le candidat bénéficiera des travaux passés des deux superviseurs
et certains de leurs étudiants sur des sujets similaires, ainsi que des avantages généraux
offert par la Sorbonne en termes de visibilité, possibilité de financer des voyages,
etc. Ce poste postdoctoral est lié au projet ANR MATCH dont les membres font partie des laboratoires Heudiasyc et ISIR.

Le poste se situe dans un secteur relevant de la protection du potentiel scientifique et technique (PPST), et nécessite donc, conformément à la réglementation, que votre arrivée soit autorisée par l'autorité compétente du MESR.


Le poste se situe dans un secteur relevant de la protection du potentiel scientifique et technique (PPST), et nécessite donc, conformément à la réglementation, que votre arrivée soit autorisée par l'autorité compétente du MESR.

Contraintes et risques

Deux sites sont prevus sur ce post doc: Compiegne, UTC et Paris UPMC.