Approches visuelles pour l'amélioration de la présence en réalité virtuelle, Visual approaches to increase presence in virtual reality

François De Sorbier De Pougnadoresse

Description

Sous la direction de Gilles Bertrand
Thèse soutenue le 27 novembre 2008: Paris Est
Le sentiment de présence, but ultime de la réalité virtuelle, peut être atteint en stimulant ces quatre piliers que sont l'immersion, l'interaction, le maintien de la boucle action-perception et les émotions. Notre objectif est de proposer des méthodes visant à améliorer ce sentiment en s'intéressant plus particulièrement à la perception visuelle. Dans cette optique, nous proposons tout d'abord une solution appliquant le rendu stéréoscopique sur carte graphique. Traditionnellement effectué en deux passes, ce rendu se fait maintenant en une passe, grâce aux shaders et au regroupement de certaines phases de calculs. Nous étendons ce processus de rendu aux tout récents écrans auto-stéréoscopiques nécessitant plus de deux vues, améliorant d'autant plus les temps de calcul. Pour assurer l'immersion et l'interaction, voire l'émotion, nous avons aussi cherché à diminuer la fatigue oculaire induite par les images stéréoscopiques, en ajoutant un flou de profondeur de champ. Ce flou, obtenu en temps réel grâce aux shaders, permet également d'inviter l'observateur à focaliser son attention sur des objets précis au lieu de laisser son regard errer. Enfin, un objectif pour obtenir le sentiment de présence est de faire croire à l'utilisateur qu'il existe dans la scène virtuelle. Notre contribution à ce but, est d'intégrer de manière naturelle une représentation virtuelle de l'utilisateur. Pour cela, nous créons par visual hulls un avatar à l'aide de caméras. Finalement, cet avatar est employé pour illustrer la présence de l'utilisateur au travers de surfaces réfléchissantes virtuelles ou de la projection de son ombre
-Présence
-Immersion visuelle
-Stéréoscopie
-Avatar
-Réalité virtuelle
The feeling of presence is the ultimate goal of a virtual reality system. It can be achieved by stimulating its four pillars that are immersion, interaction, consistency of the action-perception loop and emotions. Our objective is submit methods which could increase this feeling of presence. We will especially focus on visual perception. First, we present a solution applying the stereoscopic rendering on GPU. Using the latest shaders extensions, we join the traditional two passes to a single that reduce redundant computation. Our method can also be applied on recent autostereoscopic screens which need about ten different view points. The second contribution refers to eyestrain caused when a user watches stereoscopic images during a long time. We propose to use the graphic cards to render, in real time, a blur on problematic areas thus the user will focus on the others. We also use blur to point out some objects of the virtual scene that we considerate as important and avoid to let user's eye wander. Finally, we propose a method to increase the presence of the user into the virtual environment. An avatar, based on images taken from several cameras and visual hull method, is first build. In a second stage, the avatar is integrated into the virtual scene so it seems natural to the user. Thus we use reflective surfaces like mirrors or virtual lights interactions like shadows
-Virtual reality
-Visual immersion
-Stereoscopy
-Blur
-Presence
Source: http://www.theses.fr/2008PEST0205/document

Sujets

• Présence
• Stéréoscopie
• Réalité virtuelle

Informations

• Publié par: Thesee
• Nombre de lectures: 21
• Langue: Français
• Poids de l'ouvrage: 4 Mo

Extrait

Rennes
de
Jessel
ersité
Maître
P
V
aris-Est
Y
THÈSE
Univ
p
tes
our
l'Univ
obtenir
Rapp
le
ersité
grade
Professeur
de
Gilles
Do
ESIEE,

l'École
de

l'Univ
Maître
ersité
©
P
Bertrand
aris-Est
:
Sp
à
écialité
T
:
k
Informatique
l'univ
Présen
Examinateurs
tée
Professeur
et
P
souten
Guillaume
ue

publiquemen
trale
t

par
à
F

rançois

de
P
Sorbier
Thèse
de
Gilles
P
Jury
ougnadoresse
orteurs
le
Jean-Pierre
27
Professeur
no
l'univ
v
de
em
oulouse
bre

2008
Remion
APPR
à
OCHES
ersité
VISUELLES
Reims
POUR
:
L'AMÉLIORA
Bertrand
TION
à
DE
ersité
LA
aris-Est,
PRÉSENCE
IGM
EN
Moreau
RÉALITÉ
de
VIR
à
TUELLE
Cen
VISUAL
Nan
APPR
Anatole
O
er
A
heur
CHES
l'INRIA
TO
V
INCREASE
Biri
PRESENCE
de
IN
à
VIR
ersité
TUAL
aris-Est
REALITY
UPEML

de
Univ
tel-00469460, version 1 - 1 Apr 2010ii
tel-00469460, version 1 - 1 Apr 2010à
mes
iii
mes
s÷urs,
pa
rents,
à
tel-00469460, version 1 - 1 Apr 2010iv
tel-00469460, version 1 - 1 Apr 2010de
que
et
ts
t
Je
et
v
tu
oudrais
oert
tout
Derpierre,
d'ab
je
ord
t
adresser

mes
très
remerciemen

ts
et
à
k,
Jean-Pierre
Ra
Jessel,
j'ai
Y
tout

our
k
m'a
Remion,
de
Guillaume
toute
Moreau
moi.
et
toutes
Anatole
y

qui
er
b
p
remerciemen
our
à
a
P
v
Ismaël
oir
étudian

a
de
ts
faire
ma
partie
qu'elle
de
a
mon
v
jury

de
souten
thèse.
toujours
Je
b
remercie
p
tout

particulièremen
eue
t
aussi
Gilles
merci
Bertrand
p
qui
pu
m'a
duran

années
dans
t
son
sympathie,
équip
h
e
soutien.
et
v
a
particulièremen

t
de

dev
Chaudeyrac,
enir

mon
o,

et
de
IMA
thèse
promo
au
ec

des
de
ables.
mon
oudrais
do
p

soutien
J'ai
app
pu,

de
faire

p
manière,
endan

toutes
tin
années,
uer

sereinemen
u
t
a
mes
été
tra
très
v
on
aux
Merci
de
our


herc
que
he.
as
Je
en
v
J'adresse
oudrais
un
égalemen
grand
t
à
adresser
les
ma
ersonnes
gratitude
j'ai
à

Didier
er
Arquès
t
et
quatre
Benoît
et
Piranda
m'on
qui
toujours
m'on
leur
t
leur
oert
onne
la
umeur
p
leur
ossibilité
Mes
de
ts

on
une
plus
thèse
t
au
Vincen
sein

de
P
l'équip
Bouvier,
e

mais
Olivier
égalemen
Cyril
t
hard,
p
Darib
our
Benjamin
m'a
ynal
v
les
oir
ts
fait
C
apprécier
la
l'enseignemen
2004-2007
t
v
a
lesquels
v
passé
ec
momen
l'école
inoubli-
d'ingénieur
Enn,
IMA
v
C.
remercier
Mes
famille
plus
our
vifs
le
remerciemen
t
ts
m'a
v
orté
on
tout
t
qu'elle
à
pu
V
p

moi.
Biri
qui,
Remerciemen
tel-00469460, version 1 - 1 Apr 2010vi
tel-00469460, version 1 - 1 Apr 2010faire
stéréoscopiques,
v
Mots-clés:
fo
réalité

virtuelle,
aussi

en
immersion
errer.
visuelle,
est
stéréoscopie,
a
ou,
v
a
fa-
v
profondeur
atar
ermet
Le
jets
sen
le
timen
scène
t
tation
de
atar

our
but
ou
ultime
nous
de
à
la
induite
réalité
t
virtuelle,
Ce
p
aux
eut
viter
être
tion
attein
de
t

en
de
stim-
qu'il
ulan
tribution
t
manière

P
quatre
ls
piliers

que
emplo
son
de
t

l'immersion,

l'in
oire

v
le
herc
main
uer
tien
o
de
les
la
a
b
ou


action-p
obten

réel
et
,
les
t
émotions.
ateur
Notre
son
ob
des

au
est
son
de
un
prop
our
oser
timen
des
est
métho
à
des
dans
visan
Notre
t

à
tégrer
améliorer
une

de
sen

timen
visual
t
a
en
l'aide
s'in
t,
téressan
atar
t
é
plus
la
particulièremen
au
t
de
à
tes
la
la
p
son

bre.
visuelle.
l'émotion,
Dans
a

ons
optique,

nous
hé
prop
dimin
osons
la
tout
tigue
d'ab

ord
par
une
images
solution
en
appliquan
joutan
t
un
le
de
rendu
de
stéréoscopique
hamp.
sur
ou,

u
graphique.
temps
T
grâce
raditionnellemen
shaders
t
p
eectué
égalemen
en
d'in
deux
l'observ
passes,
à


rendu
atten
se
sur
fait
ob
main
précis
tenan
lieu
t
laisser
en
regard
une
Enn,
passe,
ob
grâce
p
aux
obtenir
shaders
sen
et
t
au

regroup
de
emen

t
l'utilisateur
de
existe

la
phases
virtuelle.
de


à
Nous
but,
étendons
d'in

de
pro
naturelle

représen
de
virtuelle
rendu
l'utilisateur.
aux
our
tout
nous

par
ts
hul
écrans
un

v

à
t
de
plus
Finalemen
de

deux
v
vues,
est
amélioran
y
t
p
d'autan
illustrer
t

plus
l'utilisateur
les
tra
temps
ers
de
surfaces

hissan
P
virtuelles
our
de
assurer
pro
l'immersion
de
et
om
l'in

Résumé
tel-00469460, version 1 - 1 Apr 2010tel-00469460, version 1 - 1 Apr 2010ronmen
will
tions
Keyw
a
ords:
is
virtual

realit
some
y
a
,
visual

us
visual
time.
immersion,
blur
stereoscop
also
y
w
,
w
blur,
the
a
images
v
In
atar
so
The
e
feeling
images
of
ose

in
is
th
the
the
ultimate
p
goal
the
of
imp
a
let
virtual
w
realit

y
the
system.
v
It
sev

d,
b
the
e
to
ac
to
hiev

ed
ligh
b
stereoscopic
y
a
stim
e
ulating
use
its
to
four
time,
pillars

that
the
are

immersion,
W
in
blur

t


of
scene
the

action-p
t

oid
lo
ey
op
Finally
and
prop
emotions.
d
Our

ob
in

en
e
An
is
based
submit
en
metho

ds
ull
whic
rst
h


v

tegrated
this
virtual
feeling
seems
of
user.

e
W
surfaces
e
or
wi