Environnements Virtuels Hautement Interactifs(EVHI)

Cette UE vise à présenter les principes, technologies et principaux axes de recherches dans le domaine de la conception d'environnements virtuels interactifs, qui incluent la réalité virtuelle et le jeu vidéo.

Objectifs du cours
L'objectif principal est de comprendre les concepts principaux d'interaction et d'adaptation à l'utilisateur dans les EVHI.
Cet objectif sera décliné sur trois dimensions :

  1. Savoir quoi tracer et comment ?
    Interactions clavier-souris, gestes, regard, physiologie...
  2. Savoir quoi modéliser et comment ?
    mémoire, perception,connaissances, émotions,...
  3. Savoir quoi adapter et comment ?
    Agents, scénarios, feedbacks, prochaine action...

De plus vous devriez:

  • apprendre à définir et mener une expérimentation pour valider des hypothèses sur l’interaction en milieu complexe.
  • Comprendre les enjeux de l’intégration des résultats de recherche des sciences cognitives pour les modèles informatiques (environnements virtuels, robotique,…)

Plan du cours

  1. Introduction EVHI, formes d'interaction modélisation de l'utilisateur + introduction Unity (3h)
  2. Modélisation de l'utilisateur 1/2 + introduction Projet
  3. Modélisation de l'utilisateur 2/2 + Prise en compte des traces
  4. Unity (4h)
  5. Réalité Virtuelle, interactions 3D + Évaluation Unity
  6. Interaction avec casque RV
  7. collecte et traitement des données physiologiques (modélisation émotion, exp. faciales, GSR, EEG…)
  8. collecte et traitement des données oculométriques
  9. IA pour adaptation : classif. supervisée/non supervisée
  10. Scénarisation et adaptation dynamique d’environnements virtuels
  11. Agents adaptatifs (1) via apprentissage par renforcement + suivi projet
  12. Agents adaptatifs (2) via apprentissage par renforcement
  13. Feedback adaptatif + suivi de projet
  14. Suivi de projets

Évaluation

  • Etude de cas EVHI 15%
  • TP Unity 15%
  • Projet EVHI (70%): cahier de charge, conception et réalisation d’un environnement interactif (Unity 3D) 40%, cahier de charge 5%, vidéo demo 5%; rapport 5%, soutenance 15%
Responsable: 
Vanda Luengo
Equipe: 
Gilles Bailly, François Bouchet, thibault Carron, Vincent Corruble, Domitile Lourdeaux, Vanda Luengo, Indira Thouvenin
ECTS: 
6
Semestre: 
M2S3

User login