FONDEMENTS DE LA RÉALITÉ VIRTUELLE (FV91)

Transcription

1 Master E3A Parcours RVSI FONDEMENTS DE LA RÉALITÉ VIRTUELLE (FV91) Objectifs Master 2 Recherche Pas ingénieur, licence ou master pro Initiation à la recherche : connaitre et comprendre l existant et les problématiques, capacité d initiative, se poser des questions, être curieux, imaginer des réponses, les évaluer Connaître Les concepts théoriques Les besoins des utilisateurs en termes d applications, de fonctionnalités Les technologies disponibles et les problèmes techniques, logiciels à résoudre Les méthodes et rendus possibles pour la conception d applications et d'interactions 3D utiles et utilisables Être capable de Analyser, formuler un problème Étudier et synthétiser l existant («état de l art») Proposer, mettre en œuvre et évaluer une solution 2

2 Contenu du cours et planning S38 S40 S41 S42 S45 S46 S47 S48 S51 Cours 1 : Historique, Concepts et Applications de la RV Cours 2 : Canaux sensori-moteurs et Interfaces de RV TP Cx158 : Moteur de jeu Unity TD/TP : Techniques de bibliographie en RV- Visite EVR@ Cours 3 + TD : Interactions 3D et Conception TP : Bibliographie (2h) TP : Bibliographie TD/TP : Soutenance + rapport bibliographie Examen Rq : cours en sections de 25 min, horaires stricts (technique pomodoro) 3 E3A RVSI FV91 #1 Histoire, Concepts & Applications [email protected]

3 Contenu du cours #1 Historique Définitions et concepts essentiels Applications 1 ère Analyse Tâches Réalisme et interactions Compléments 5 Introduction

4 A votre avis? Quelles applications? Quels matériels? Des mots-clés, des concepts? Aujourd hui 8

5 Un peu de recul 9 Vue actuelle 10

6 Concepts clés de la RV Un environnement, des objets et des personnages numériques Simulés par un système informatique Qui ressemblent ou non au monde réel selon les besoins Le joueur Apparence visuelle, sons, comportement Est assis ou debout Perçoit le monde numérique via les écrans et un casque audio Agit sur ce monde + ou - naturellement via des capteurs et des manettes de formes diverses Peut effectuer des actions possibles ou impossibles dans la réalité Est coupé du monde extérieur, "se croit" dans le monde virtuel 11 Concepts clés de la RV Un environnement, des objets et des avatars virtuels Simulés par un système informatique Possédant différents degrés de "réalisme" ou de "crédibilité" Apparence visuelle, sons, comportement L utilisateur est en Interaction en temps réel avec cet environnement Via des capteurs et des interfaces Selon différents canaux sensori-moteurs : visuel, sonore, haptique, vestibulaire, manuel De manière la plus naturelle possible Pour effectuer des tâches Immersion (et présence) dans l environnement virtuel 12

7 Un peu d Histoire Résumé Simulateurs Ordinateurs 30's 3D Wand Haptique Videoplace 70's CAVE Echecs commerciaux 90's 60's Sensorama Sketchpad Sword of Damocles Mother of all demos 80's Virtual reality HMD Data glove 3D 00's Interaction gestuelle Cinéma relief HMD grand public Domaines connexes : Informatique, Interaction homme-machine (IHM), Simulation, Télé-opération, Robotique, Électronique, Industrie du loisir

8 Préhistoire 1900 : Mareorama (H. d'alesi) Simulateur de croisière Marseille-Yokohama Réplique bateau de 70m (700 pers.) 2 panoramas peints (750m x 13m) Roulis et tangage (20-50cm) Vent, lumières, odeurs Acteurs 15 Préhistoire 1928 : Link Trainer 1 er simulateur de vol mécanique (Edwin Albert Link) Commandes Mouvements pneumatiques Instruments 1940 s : 1 ers ordinateurs électroniques 16

9 60-70's 1960 : Sensorama (Morton Heilig) 1 er système immersif et multimodal Projection de scènes filmées Système vidéo 3D et grand angle Sons stéréophoniques Siège vibrant Vent et odeurs 's 1963 : Sketchpad, 1 ère interface graphique (Ivan Sutherland) 18

10 60-70's 1963 : 1 ère souris (Douglas Engelbart) 1968 : Mother of all demos (Douglas Engelbart) Fenêtres, hypertexte, interface graphique, navigation et commande, vidéo conférence, souris, traitement de texte, gestion de fichiers, éditeur collaboratif temps réel 's 1966 : The sword of Damocles, 1 er casque de visualisation stéréoscopique (+ RA) (Ivan Sutherland) 1970 : Capture mécanique de position et de mouvement de la tête (Donald Vickers) 20

11 60-70's 1971 : Videoplace (Myron Krueger) Rendus visuels et sonores artistiques Traitement d'image / reconnaissance de gestes 21 70's 1972 : 3D wand, 1 ère interaction 3d (Vickers) [Donald Lee Vickers Sorcerer's Apprentice: Head-Mounted Display and Wand. Ph.D. Dissertation. University of Utah. ] 22

12 60-70's 1967 : 1 er retour d effort 2D (haptique) ensuite appliqué en 6D à la simulation (Frederick Brooks) GROPE I (1967) GROPE II (1976) GROPE III (1986) [Brooks Jr, F. P., Ouh-Young, M., Batter, J. J., & Jerome Kilpatrick, P. (1990, September). Project GROPE Haptic displays for scientific visualization. In ACM SIGGraph computer graphics (Vol. 24, No. 4, pp ). ACM.] 23 80's Projet VIEW (NASA, Scott Fisher) Casque de visualisation LCD EyePhone Environnement artificiel ou transmis à partir de caméras distantes Gant de données DataGlove (Thomas Zimmerman, Jaron Lanier, VPL) + DataSuit + avatar de main Audio 3D Convolvotron Introduction du terme "Virtual Reality" (Lanier) 24

13 90's 1989 : Premier gant de données destiné aux consommateurs, PowerGlove (VPL pour Nintendo) 1991 : Tentatives de RV grand public [Sega VR] 25 90's 1991 : CAVE - Cave Automatic Virtual Environment (Univ. Illinois, Cruz-Neira, Sandin et DeFanti) 4 faces Stéréoscopie active Point de vue adapté 26

14 2000's 2006 : Nintendo Wii et interaction gestuelle 2010 : Microsoft Kinect, Playstation Move 's 2009 : Essor du cinéma relief et début des tv 3d 2013 : 1er HMD grand public 28

15 The ultimate display "The ultimate display would, of course, be a room within which the computer can control the existence of matter. A chair displayed in such a room would be good enough to sit in. Handcuffs displayed in such a room would be confining, and a bullet displayed in such a room would be fatal. With appropriate programming such a display could literally be the Wonderland into which Alice walked." Ivan E. Sutherland, The Ultimate Display, Domaines impliqués robotique acoustique STIC informatique mécanique optique RÉALITÉ VIRTUELLE Sciences humaines / du vivant ergonomie psychophysique pédagogie design 30

16 La RV en chiffres Facebook-Oculus : $2 billion Google-Magic Leap : $542 million $136 million invested into VR in November 2015 $132 million in July+August+September Projections 2015->2020 : $150 billion [ [ ] 31 Hype Cycle [Gartner 2017] [ 32

17 Définitions Définitions littérales Virtuel, elle [Larousse] du latin virtus : force «Qui n'est qu'en puissance : potentiel, possible» Virtual [Dict. Oxford Hachette] «Quasiment, pratiquement, presque, de fait» Virtual Reality [Jaron Lanier, 1980] Littéralement : «qui fait office de réalité» Réalité Virtuelle 34

18 Définition technique «La réalité virtuelle est un domaine scientifique et technique exploitant l informatique et des interfaces en vue de simuler dans un environnement virtuel le comportement d entités 3D, qui sont en interaction en temps réel entre elles et avec un ou des utilisateurs en immersion pseudo-naturelle par l intermédiaire de canaux sensori-moteurs.» [Traité de la RV, 2005] 35 Environnement virtuel (EV) Monde artificiel composé d un ensemble d objets 3d créés numériquement et pouvant être [Fuchs, 1996] : Une copie du réel Une simulation de certains aspects du réel Une représentation symbolique Imaginaire Cas particulier : Réalité Mixte Associer environnement réel et environnement virtuel Réalité Augmentée, Virtualité Augmentée 36

19 Interaction avec l utilisateur Principe fondamental de la RV : L humain perçoit et agit physiquement dans et sur l EV L EV réagit à ces actions et en informe l humain 2 composantes : Interfaces Homme-Machine physiques Techniques d interactions logicielles animation / simulation graphique : Les entités 3D interagissent uniquement entre elles, sans interaction humaine (ex : images de synthèse, film ) Certaines technologies communes mais 2 domaines différents 37 Interfaces Homme-Machine Couplage physique entre l humain et le système Interfaces sensorielles Informent l utilisateur de l évolution du monde virtuel, par l intermédiaire de ses sens Interfaces motrices / interfaces de commande Informent le système des actions de l homme sur le monde virtuel Interfaces sensori-motrices Défi principal : faire correspondre la technologie aux capacités humaines 38

20 Temps réel et latence Interaction doit être en temps réel = pas de décalage temporel (latence) perçu entre l action sur l EV et la réponse sensorielle de ce dernier Au minimum «en temps interactif» : latence compatible avec l interaction (fluidité) [B. Arnaldi, IRISA] 39 Temps réel et latence Causes de latences Contenu de l'environnement virtuel : calculs Distance, réseau Temps de réponse des interfaces Conséquences Inconfort, nausées, tâche impossible, inutilisabilité Dépendent beaucoup des utilisateurs Solutions Augmenter la puissance de calcul et la vitesse de transmission des données Améliorer les algo et la répartition des calculs, optimiser l'environnement virtuel Entrainer l'utilisateur, prédire son comportement 40

21 Immersion «Etat psychologique où le sujet cesse de se rendre compte de son propre état physique. Il est fréquemment accompagné d'une intense concentration, d'une notion perturbée du temps et de la réalité.» (Wikipédia) Terme largement répandu dans le milieu de l'informatique, des jeux vidéo, du cinéma, voire d autres activités (lecture ) Immersion physique!= psychologique 41 Immersion en RV Niveau objectif de fidélité sensorielle qu'un système de RV fournit [M. Slater, A Note on Presence Terminology, Presence-Connect, Jan. 2003] Dépend des interfaces et technologies de rendu (sur tous les canaux sensoriels) des interactions Utiliser plusieurs canaux sensori-moteurs : visuel, auditif, haptique (tactile + kinesthésique), odorat, goût, vestibulaire Interactions les plus naturelles possibles : schèmes, temps réel, pas d'apprentissage de l'occultation de l environnement réel Totale : immersion omnidirectionnelle Partielle : l opérateur regarde l EV comme à travers une fenêtre du logiciel Objective et mesurable Un système peut avoir un degré d'immersion plus élevé que l'autre 42

22 Présence Réponse psychologique subjective d'un utilisateur à un système de RV Individuelle et dépendante du contexte, liée à l'expérience d'"être là-bas" ("being there") Différents utilisateurs peuvent connaître différents niveaux de présence avec le même système Un seul utilisateur peut rencontrer différents niveaux de présence avec le même système à différents moments, en fonction de l'état d'esprit, de l'histoire récente et d'autres facteurs Conséquence de l'immersion [M. Slater, A Note on Presence Terminology, Presence-Connect, Jan. 2003] 43 Immersion pseudo-naturelle L immersion ne peut être totalement naturelle dans un EV car nous avons appris à agir «naturellement» dans un monde réel et non virtuel. Des biais sensori-moteurs sont créés, d où le terme «pseudo» Dans l EV nous ré-exploitons un comportement acquis dans le monde réel -> les schèmes 44

23 Schèmes comportementaux Comportement "naturel" dans le monde réel = inconsciemment et sans grand effort mental Notion de schèmes [Piaget 1979] : Organisation mentale des actions pour des classes de situations Se transfèrent, se reproduisent ou se généralisent lors de la répétition de ces actions en des circonstances analogues Inconscients Exemple : préhension d'un objet Canevas général reproduit dans des conditions différentes (distance, poids ) Donne lieu à des réalisations variées caractérisées par des paramètres sensori-moteurs (ouverture de la main, tension du bras ) 45 Schèmes comportementaux Transposition et adaptation des schèmes du monde réel dans l'environnement virtuel Efforts cognitifs : dispositif matériel, incohérences Exemple : préhension d'un objet en RV Réutilisation du schème naturel Dépendant de l'interface : gant de donnée, traqueur 6dof Biais sensori-moteurs : regard vers l'écran, main non fermée, pas de poids de l objet 46

24 A retenir 2 conditions principales : Interaction ET Immersion RV = Interaction Homme-Environnement plutôt que Interaction Homme-Machine Boucle Perception-Cognition-Action 47 Vocabulaire ENVIRONNEMENT REEL ENVIRONNEMENT VIRTUEL INTERACTION HUMAIN Informations Données Modèles COMMANDE RENDU Médias ou Interfaces Canaux sensorimoteurs 48

25 Applications de la Réalité Virtuelle Domaines et besoins Santé et sport Formation par la simulation (geste ) Recherche Thérapeutique Militaire Formation, entrainement par la simulation Gestion, supervision d'opérations Construction et urbanisme Information, visite Étude Gestion Culturel Jeux Visite virtuelle Création Diffusion Science et recherche Exploration de phénomènes, analyse de données Enseignement, diffusion Collaboration Industrie & services Marketing Revue de projet, collaboration Design Ingénierie, conception Ergonomie Simulation Production Maintenance Formation 50

26 Simulation chirurgicale Interaction laparoscopique [Texas Medical School, 2010] [Rensselaer Polytechnic Institute, 2010] [Stanford] 51 Simulation chirurgicale Interaction réaliste [NRC Industrial Materials Institute] [Ohio Supercomputer Center] 52

27 Simulation chirurgicale Rendu réaliste visuel et haptique [Delaware Biotechnology Institute] [De S, Lim Y, Manivannan M, Srinivasan MA, 2006] 53 Simulation médicale [Patient-GeneSys 2015]] [VirTeaSy Implant Pro, Didhaptic] 54

28 Thérapie Phobies : insectes, vertige, avion, voiture Troubles post-traumatiques, stress [US Department of Defense Congressionally Directed Medical Research Programs 2009] [Advanced Interface Group, Manchester University, 2006] [HITLab] 55 Thérapie Accompagnement de rééducation physique et psychologique Distraction [ETH Zurich] [University of Pittsburgh 2008] [Agathe] [Seattle's Harborview Burn Center 2005] 56

29 Santé/sport Etude du geste sportif Thérapie motrice par le sport [CRVM, 2007] [INRIA, équipe SIAMES] 57 Militaire Entrainement de soldats Simulation de conduite de véhicules Simulation d arme, de combats [Rapport OTAN, Danemark, 2003] Formation au déminage [DGA-ETAS, Laval Virtual 2000] [Nautilus] 58

30 Militaire SITAC 3D : représentation de situation tactique pour les opérations navales [DCNS, Clarté] 59 Construction et urbanisme Visite de bâtiment ou site urbains Ergonomie, ambiance, sécurité [CRVM] [Le2i, 2005] 60

31 Construction et urbanisme Sensibilisation, étude environnementale, urbanisme Transports SIG [Bouygues TP] [Montbéliard 3D, Virtuel City] 61 Formation Geste technique [Le2i, 2005] [ETICS VR, Clarté, St Gobain, 2010] [Virtual Technical Trainer, 2005] 62

32 Formation [EDF] [Alterface] Visite virtuelle 63 Formation Simulateur de voies à la SNCF 64

33 Formation Navigation fluviale [Heudiasyc, CETMEF, 2010] 65 Formation [V3S (Virtual Reality for Safe Seveso Substractors), Heudiasyc et al. 2011] [Station ISS, Silicon Worlds] [DCNS, Reviatech. 2011] [MacGregor ] 66

34 Science et recherche Compréhension de données et de phénomènes [LIMSI-CNRS, 2007] [NVIS, 2005] 67 Science et recherche Compréhension de phénomènes [HMolDock 2011] [LIMSI-CNRS, 2007] [HaptiMol] [IBISC, BRGM, 2008] 68

35 Travail collaboratif / télétravail [Part@ge, 2008] 69 Etudes marketing Magasin virtuel d expérimentation commerciale [CAOR Mines de Paris 2002] 70

36 Industrie Prototypage virtuel Revue de projet Design Ingénierie Ergonomie (utilisateur et employés) Simulation Aide à la conception Aide à la maintenance Aide à la production Etudes marketing Principalement automobile et aéronautique 71 Industrie : Marketing Présentation produit, configuration Publicité Sensibilisation [PSA 1999] [GM] [CRVM] 72

37 Industrie : Revue de projet [PSA 2004] [PSA 2009] 73 Industrie : Revue de projet 74

38 Industrie : Design [GM 2015] 75 Industrie : Design [Ford Motor Company, Immersion Lab, 2014] 76

39 Industrie : Ingénierie [Jaguar Land Rover 2010] 77 Industrie : Ingénierie 78

40 Industrie : Ingénierie 79 Industrie : Conception [VRAD, LIMSI-CNRS, 2006] [VR4D, Clarté, 2010] 80

41 Industrie : Ergonomie utilisateur [GM 2015] 81 Industrie : Ergonomie production Validation des postes de production Réduction des TMS Geste technique [CEA-List] [EADS] [ErgoWide 3, Clarté / Didhaptic] 82

42 Industrie : Production Chaines de montage Collaboration homme-robot [PSA/CAOR Mines Paris-Tech 2012] 83 Industrie : Simulation [PSA] [Simulateurs PSA : statique, StelLab, dynamique] 84

43 Industrie : Maintenance [EDF] 85 Télé-opération 86

44 Jeux 87 Culture et Patrimoine [Château des Ducs de Bretagne, 2007] 88

45 Création [ATI Université Paris 8, 2008] [LIMSI, 2008] 89 Exercice Résumer les apports et identifier un risque de la RV pour 1. La formation 2. Le prototypage 90

46 Tâches en RV Types de tâche [Bowman] Tâches élémentaires et fondamentales, souvent combinées pour créer une interaction plus complexe Navigation Sélection Manipulation Contrôle d application Liées aux objectifs de l'application Conditionnent le contenu de l'ev et les interactions/interfaces utilisées 93

47 Navigation 2 composantes Déplacement ("Travel") : Partie mobile de la navigation, déplacement physique d'un endroit à l'autre (déplacement du point de vue) Recherche de chemin ("Wayfinding") : Composante cognitive, prise de décision de navigation ("où suis-je?", "où dois-je aller?", "comment arriver là?") Exemples Exploration : navigation sans but explicite ni restriction, découverte et connaissance de l'environnement Recherche de cible : Naïve (position cible inconnue), Ciblée (position connue), Assistée (position connue par le système) Manœuvre : Tâche nécessitant mouvements courts et précis, Changement faible du point de vue 94 Sélection Acquisition d'une cible pour un certain objectif Etapes 1. Désignation par l'utilisateur d un objet ou d un ensemble d objets 2. Nécessite une validation de l'utilisateur 3. Puis une confirmation du système 95

48 Manipulation Spécification/Modification des propriétés d un objet ou d'un ensemble d'objets virtuels Géométriques : position, orientation, échelle Autres : couleur, texture Nécessite une sélection préalable Manipulation directe ou indirecte (via outils virtuels ou matériels) 96 Contrôle d'application Regroupe les techniques d'interaction indirecte Exécuter une application Changer l état du système Changer le mode d interaction Envoi d'ordres (explicite ou implicite) au système 97

49 Exercice 1. Choisissez une application dans les slides précédents 2. Identifiez les tâches de navigation, sélection et manipulation par quels moyens matériels et logiciels ces tâches sont mises en œuvre? Quelles sont les contraintes de ces tâches dans l application choisie? 98 Réalisme et interactions

50 Réalisme idéal? Proposer à l utilisateur une expérience en EV identique au monde réel Réalisme visuel : images HD, stéréoscopie, moteur graphique Réalisme auditif : sons HD, spatialisation, moteur sonore Réalisme comportemental de l EV : moteur physique Interactions naturelles : schèmes comportementaux, déplacement réel, poids et efforts des objets Stimuler tous les canaux sensori-moteurs Occultation totale du monde réel Interfaces identiques aux caractéristiques humaines 101 Limites Technologies limitées ou inadaptées par rapport aux caractéristiques humaines Transposition des schèmes comportementaux biaisée voire impossible Réel besoin? Uncanny Valley [Masahiro Mori, 1970] 102

51 Degré élevé de réalisme Réalisme + poussé de certains aspects ciblés Transposition de l existant dans le virtuel Besoins et applications Caractère critique : entrainement médical, simulateurs (conduite, vol) Besoin économique : Prototypage virtuel : produit virtuel "ressenti" comme le produit final Formation : tâche réalisée comme les professionnels Objectif ludique : jeux vidéo Difficultés et bénéfices Technologiques : dispositifs visuels, périphériques d interaction, calculateurs Logiciels : algorithmes, rendus Coûts économiques Attractivité et diffusion 103 [Id software, 2011] [Nvidia, 2008] [Rensselaer Polytechnic Institute, 2010] 104

52 Au-delà du réalisme Applications, environnements et interactions nouveaux, efficaces et pertinents pour la tâche Définition fonctionnelle de la RV [Fuchs, 1996] «La réalité virtuelle permet à un utilisateur humain de s extraire de la réalité physique pour changer virtuellement de temps, de lieu et/ou de type d interaction» 105 Changer virtuellement de temps Autre temps : passé, futur Perception irréelle du temps : ralenti, accéléré, autres lois, sauts temporels Ex. : Nantes en 1757, Laval en 1750, relativité virtuelle 106

53 Changer virtuellement de lieu Plusieurs utilisateurs dans un même lieu virtuel (travail collaboratif, formation à distance, télémédecine ) Télé-présence (visite virtuelle d un endroit, d un site) Perception irréelle du lieu : Changement de point de vue (repère non égocentré) Avatar du sujet Point de vue d une autre personne 107 Changer virtuellement de type d interaction Navigation non naturelle : Ex : vol 3D, accéleration Interaction non naturelle, impossible Ex : atteindre des objets lointains Modèles physiques différents Modification de l EV par le sujet immergé 108

54 Compléments Ex. de Call for Papers (VR 2013) Immersive gaming VR systems and toolkits Computer graphics techniques for VR Immersive projection technology Serious games Tracking and Sensing User studies and Evaluation Navigation Tele-operation and tele-presence 3D Interaction for VR Augmented and mixed reality Advanced display technology Multi-user and distributed VR Haptics, audio and other non-visual interfaces Modeling and Simulation Presence and Cognition Applications of AR/MR/VR Input Devices for VR/AR 110

55 Ex. de Call for Papers (3DUI 2013) 3D input devices 3D displays and sensory feedback 3D interaction techniques 3D user interface metaphors Desktop 3D UIs 3D UIs for Virtual or Augmented Reality Evaluation methods for 3D UIs Biologically inspired 3D UIs Human perception of 3D interaction Collaborative 3D interaction Applications of 3D UI: CAD and design, architecture, historical heritage, industry, games and entertainment, education and learning, etc. 111 Ex. de program (VR 2012) Simulation On Delay Adjustment for Dynamic Load Balancing in Distributed Virtual Environments - Yunhua Deng and Rynson W.H. Lau [short]crowd Simulation using Discrete Choice Model - Wenxi Liu, Rynson Lau and Dinesh Manocha Locomotion Redirecting Walking and Driving for Natural Navigation in Immersive Virtual Environments - Gerd Bruder, Victoria Interrante, Lane Phillips and Frank Steinicke Walking in a Cube: Novel Metaphors for Safely Navigating Large Virtual Environments in Restricted Real Workspaces - Gabriel Cirio, Peter Vangorp, Emmanuelle Chapoulie, Maud Marchal, Anatole Lecuyer and George Drettakis Impossible Spaces: Maximizing Natural Walking in Virtual Environments with Self-Overlapping Architecture - Evan A. Suma, Zachary Lipps, Samantha Finkelstein, David M. Krum and Mark Bolas [short] Sensor-Fusion Walking-in-Place Interaction Technique using Mobile Devices - Ji-Sun Kim, Denis Gracanin and Francis Quek [short] A Taxonomy for Deploying Redirection Techniques in Immersive Virtual Environments - Evan A. Suma, Gerd Bruder, Frank Steinicke, David M. Krum and Mark Bolas [short] The Cognitive Implications of Semi-Natural Virtual Locomotion - William E. Marsh, Marisa Putnam, Jonathan W. Kelly, Veronica J. Dark and James H. Oliver Perception and Cognition The Right View from the Wrong Location: Depth Perception in Stereoscopic Multi-User Environments - Brice Pollock, Melissa Burton, Jonathan W. Kelly, Stephen Gilbert and Eliot Winer Geometric Calibration of Head-Mounted Displays and its Effects on Distance Estimation - Falko Kellner, Benjamin Bolte, Gerd Bruder, Ulrich Rautenberg, Frank Steinicke, Markus Lappe and Reinhard Koch Effects of Immersion on Visual Analysis of Volume Data - Bireswar Laha, Kriti Sensharma, James D. Schiffbauer and Doug A. Bowman [short]the Effects of Navigational Control and Environmental Detail on Learning in 3D Virtual Environments - Eric D. Ragan, Karl J. Huber, Bireswar Laha and Doug A. Bowman Getting Physical [short] Increasing Agent Physicality to Raise Social Presence and Elicit Realistic Behavior - Joon Hao Chuah, Andrew Robb, Casey White, Adam Wendling, Samsun Lampotang, Regis Kopper and Benjamin Lok [short] Evaluation of Visual and Force Feedback in Virtual Assembly Verifications - Mikel Sagardia, Bernhard Weber, Thomas Hulin, Carsten Preusche and Gerd Hirzinger [short] Puzzle AssemblyTraining: Real World vs. Virtual Environment - Mike Oren, Patrick Carlson, Stephen Gilbert and Judy M. Vance [short] Can physical motions prevent disorientation in naturalistic VR? - Salvar Sigurdarson, Andrew P. Milne, Daniel Feuereissen and Bernhard E. Riecke 112

56 Ex. de program (VR 2012) Mixed and Augmented Reality [tvcg]real-time Evaluation and Visualization of Learner Performance in a Mixed Reality Environment for Clinical Breast Examination - Aaron Kotranza, D Scott Lind and Benjamin Lok Extended Overview Techniques for Outdoor Augmented Reality - Eduardo Veas, Raphaël Grasset, Ernst Kruijff and Dieter Schmalstieg Online Tracking of Outdoor Lighting Variations for Augmented Reality with Moving Cameras - Yanli Liu and Xavier Granier [short]spatial Augmented Augmented Reality for Environmentally-Lit Real-World Objects - Alvin J. Law and Daniel G. Aliaga Interaction Techniques Haptic Palpation for Medical Simulation in Virtual Environments - Sebastian Ullrich and Torsten Kuhlen Evaluating Display Fidelity and Interaction Fidelity in a Virtual Reality Game - Ryan P. McMahan, Doug A. Bowman, David J. Zielinski and Rachael B. Brady Dense and Dynamic 3D Selection for Game-based Virtual Environments - Jeffrey Cashion, Chadwick Wingrave and Joseph J. LaViola Jr. [short]self-motion Illusions (Vection) in VR - Are They Good For Anything? - Bernhard E. Riecke, Daniel Feuereissen, John J. Rieser and Timothy P. McNamara Modeling with Depth Sensors Scanning 3D Full Human Bodies Using Kinects - Jing Tong, Jin Zhou, Ligang Liu, Zhigeng Pan and Hao Yan Interactive 3D Model Acquisition and Tracking of Building Block Structures - Andrew Miller, Brandyn White, Emiko Charbonneau, Zach Kanzler and Joseph J. LaViola Jr. [short] Reducing Interference Between Multiple Structured Light Depth Sensors Using Motion - Andrew Maimone and Henry Fuchs View Generation Effective Replays and Summarization of Virtual Experiences - Kevin Ponto, Joe Kohlmann and Michael Gleicher [short]room-sized Informal Telepresence System - Mingsong Dou, Ying Shi, Jan-Michael Frahm, Henry Fuchs, Bill Mauchly and Mod Marathe 113 Le traité de la réalité virtuelle 74 auteurs, éditeur : les Presses de L Ecole des Mines de Paris 3 ème édition (2005) Téléchargement gratuit pour étudiants (voir page web) 114

57 Quelques liens Association française de RV : Laboratoires : evra.ibisc.univ-evry.fr/ crvm.ism.univ-amu.fr/ team.inria.fr/hybrid/ team.inria.fr/potioc/ caor-mines-paristech.fr/ Salon : Blogs : A VR Geek's Blog : cb.nowan.net/blog/ Johnny Chung Lee : procrastineering.blogspot.com Logiciels Unity : unity3d.com Technologies : Bilan Nombreux domaines d'applications Tâches communes Réalisations diverses Cibler les besoins des utilisateurs! Besoin de (moins en moins de) moyens Nombreuses problématiques de recherche spécialisées Pas encore mature (début pour grand public et pour la plupart des entreprises) 116