RA
Dr Riadh HARIZI
Problèmes à résoudre
Alignement entre la caméra réelle et virtuelle
Image pas encore réaliste
Voiture n'est pas correctement éclairée,
Gestion de l’occlusion pas encore considérée.
Le problème revient à correspondre la
perspective de l'objet virtuel avec
celle de la scène réelle:
Problème d'alignement des caméras réelle et
virtuelle.
Solution: Retrouver les propriétés de la
caméra réelle et calculer les images
synthétiques en utilisant une caméra virtuelle
reprenant ces propriétés.
Ce problème concerne les déplacements des objets virtuels
dans la scène réelle:
• positionnement relatif,
• synchronisation temporelle
Gestion des occultations et interpénétrations qui peuvent se
produire entre éléments de natures différentes.
La prise en compte des inter-réflexions lumineuses entre les
scènes réelle et virtuelle:
ombres,
reflets.
leur résolution sous la contrainte du temps réel impose de mettre en oeuvre
des techniques particulières ce qui demande de la rapidité dans les traitements
logiciels et un matériel puissant.
Sources de difficulté:
Les images arrivent en flux, c'est-à-dire qu'à chaque instant nous disposons de
l'image courante mais pas des images futures.
Au début du processus, le nombre d'images dont nous disposons est donc trop
petit pour utiliser une technique de post-production ([Link], Boujou,
...).
On distingue principalement trois types de dispositifs
de visualisation:
Porté sur la tête (head-worn displays): dispositifs de types casques ou lunettes
portés par l’utilisateur. Ces types de dispositifs sont les plus courants dans les divers
projets de
réalité augmentée car ce sont les plus séduisants de la réalité augmentée ;
Porté par la main (hand-held displays)dispositifs portés par l’utilisateur de type
tablet-pc, assistant personnel ou plus récemment téléphones cellulaires. La réalité
augmentée sur ces dispositifs est apparue en même temps ou peu de temps après
l’apparition de cesmatériels ;
Projeté (projective displays) dispositifs utilisant des projecteurs destinés à
augmenter les objets réels par projection directe d’informations supplémentaires sur les
objets eux-mêmes.
Les dispositifs portés sur la tête de l’utilisateur, ou head worn display ou encore
plus généralement HMD (head mounted display ), Permet d’afficher des images
tridimensionnelles (grâce à un affichage pour chaque oeil) modifiées par la position
de l’utilisateur dans l’environnement.
On peut distinguer principalement deux types de dispositifs
pour assurer lemélange réel/virtuel.
Les dispositifs de type Optical see-through apportent une vision directe dans laquelle
l’utilisateur perçoit le monde réel à travers un dispositif optique dans lequel sont
projetés les images virtuelles destinées à l’augmentation.
Handheld displays
Offrir à l’utilisateur une « vision additionnelle» sur le monde réel en
équipant un PDA ou un tablet PC d’une caméra et d’un système de
tracking permettant ainsi d’augmenter la vue fournie par la caméra.
Ces dispositifs portables sont relativement bien adaptés à la réalité
augmentée en extérieur, car ils sont de plus en plus souvent équipés de
caméras,mais plus rarement encore aujourd’hui deGPS.
Offrir à l’utilisateur une « vision
additionnelle» sur le monde réel en
équipant un PDA ou un tablet PC d’une
caméra et d’un système de
tracking permettant ainsi d’augmenter la
vue fournie par la caméra.
Ces dispositifs portables sont relativement
bien adaptés à la réalité
augmentée en extérieur, car ils sont de
plus en plus souvent équipés de
caméras,mais plus rarement encore
aujourd’hui deGPS.
Projective displays
Les projectives displays dans le cadre de la réalité augmentée utilisent des
projecteurs pour superposer des données supplémentaires sur le surfaces
(table, sol,murs) .
Il est possible d’utiliser un miroir mobile pour orienter la projection et
d’augmenter des maquettes physiques ou plus généralement n’importe
quelle surface grâce à des projecteurs prenant en compte la géométrie de
la surface de projection.
Références
Le problème revient à correspondre la
perspective de l'objet virtuel avec
celle de la scène réelle:
Problème d'alignement des caméras réelle et
virtuelle.
Solution: Retrouver les propriétés de la
caméra réelle et calculer les images
synthétiques en utilisant une caméra virtuelle
reprenant ces propriétés.
