| Marie-Odile Berger
Senior Researcher INRIA |
![]() |
Notre objectif est d'insérer des objets virtuels dans des séquences vidés de la manière la plus réaliste possible. Afin d'obtenir des systèmes de réalité augmentée effectifs, il est nécessaire que les objets virtuels soient inscrutés avec le même point de vue que celui adopté par la caméra pendant le tournage: c'est le problème de l'alignement. Pouvoir calculer de fa,on robuste le point de vue n'est évidemment pas suffisant pour obtenir des incrustations réalistes. Le réalisme d'une scène composée passe également par la prise en compte des interactions entre les objets de la scène réelle et les objets ajoutés. Les objets ajoutés peuvent être en effet occultés par des objets de la scène, les inter-reflexions lumineuses dans la scène sont modifiées par la présence de nouveaux objets... Nos travaux concernent le calcul robuste du point de vue, la gestion des occultations pour les systèmes de réalité augmentée. Dans le cadre du projet européen ARIS, nous travaillons également à des méthodes temps réel de calcul du point de vue afin de pouvoir développer des applications interactives de réalité augmentée.
Calcul du point de vueNotre objectif est de développer des méthodes permettant de calculer le point de vue séquentiellement (les images sont traitées au fur et à mesure où elles sont acquises) et ceci de façon robuste. Nos travaux ont d'abord porté sur la determination robuste du point de vue à partir de quelques connaissances 3D sur la scène et de correspondances de points d'intérêts dans la séquence (
Démos ). Nous avons ensuite étendu ces travaux au cas d'une caméra à focale variable (Démos). Cette méthode suppose que la focale et la position de la caméra ne changent pas en même temps. Résolution des occultationsComme les objets vurtuels peuvent occulter les objets réels dans la scène, nous avons à déterminer la prtie visible de l'objet virtuel. Théoriquement, résoudre les occultations revient à comparer la profondeur de la scène à la profondeur de l'objet virtuel. Cependant, il est difficile de calculer une reconstruction précise et fiable de l'environnement. De plus, le mouvement de la caméra calculé entre les images est entaché d'imprécision ce qui ne permet pas une reconstruction fiable. Nous avons donc proposé une méthode semi-interactive basée sur le concept de vues-clés pour faciliter l''identifaction des objets occultants dans les images. Uen fois les objets occultants détourés dans les images clés, le système détecte automatiquement l'objet occultant dans les vues intermédiares en utilisant une reconstruction partielle de la scène et un suivi à base de régions. Pour des détails techniques (méthode et démo)
Calcul temps réel du point de vue dans un environnement multi-planaireDans le cadre du projet européen ARIS, nous développons des méthodes temps réel de calcul du point de vue pour des environnements d'intérieur. Notre méthode utilise l'observation et le suivi de structures planaires dans la scène pour obtenir une détermination rapide et robuste de la position de la caméra. Afin d'améliorer les trajectoires reconstruites, une méthode par sélection de modèles a été définie et permet d'améliorer l'impression visuelle de la scène augmentée ainsi que la précision des points de vues calculés. Enfin, un système hybride a été conçu, alliant un capteur inertiel et la caméra afin d'améliorer la robustesse du système aux mouvements brusques de l'utilisateur (mouvements de tête par exemple). Méthodes et demos . Une équence montrant l'integraloite du processus Ici
Workshop Sattelite de Miccai 04 sur la Réalité augmentée pour l'imagerie médicale: AMI-ARCS 2004 à Rennes Actes en ligne