Environnements Virtuels Hautement Interactifs(EVHI)

Cette UE vise à présenter les principes, technologies et principaux axes de recherches dans le domaine de la conception d'environnements virtuels interactifs, qui incluent la réalité virtuelle et le jeu vidéo.

Objectifs du cours
L'objectif principal est de comprendre les concepts principaux d'interaction et d'adaptation à l'utilisateur dans les EVHI.
Cet objectif sera décliné sur trois dimensions :

  1. Savoir quoi tracer et comment ?
    Interactions clavier-souris, gestes, regard, physiologie...
  2. Savoir quoi modéliser et comment ?
    mémoire, perception,connaissances, émotions,...
  3. Savoir quoi adapter et comment ?
    Agents, scénarios, feedbacks, prochaine action...

De plus vous devriez:

  • apprendre à définir et mener une expérimentation pour valider des hypothèses sur l’interaction en milieu complexe.
  • Comprendre les enjeux de l’intégration des résultats de recherche des sciences cognitives pour les modèles informatiques (environnements virtuels, robotique,…)

Thématiques

  1. Introduction EVHI, formes d'interaction modélisation de l'utilisateur
  2. introduction Unity (8h)
  3. Réalité Virtuelle, interactions 3D
  4. Modélisation de l'utilisateur
  5. Modélisation de l'apprenant
  6. Scénarisation et adaptation dynamique d’environnements virtuels
  7. Agents adaptatifs via apprentissage par renforcement
  8. Feedback adaptatif
  9. Interaction avec casque RV
  10. collecte et traitement des données physiologiques (émotion, exp. faciales, GSR, EEG…)
  11. collecte et traitement des données oculométriques
  12. IA pour adaptation : classif. supervisée/non supervisée

Évaluation

  • Etude de cas EVHI 15%
  • TP Unity 15%
  • Projet EVHI (70%): cahier de charge, conception et réalisation d’un environnement interactif (Unity 3D) 40%, cahier de charge 5%, vidéo demo 5%; rapport 5%, soutenance 15%
Responsable: 
François Bouchet
Equipe: 
Gilles Bailly, François Bouchet, thibault Carron, Vincent Corruble, Sébastien Lallé, Domitile Lourdeaux, Vanda Luengo, Indira Thouvenin
ECTS: 
6
Semestre: 
M2S3

User login