Contributions à la reconnaissance automatique de la parole avec données manquantes, Contributions to automatic speech recognition with missing data

Sébastien Demange

Description

Sous la direction de Jean-Paul Haton
Thèse soutenue le 08 novembre 2007: Nancy 1
Ce mémoire propose, dans un premier temps, une introduction détaillée de la reconnaissance automatique de la parole avec données manquantes appuyée par de nombreuses références bibliographiques. Il est montré que l'estimation de masques constitue une étape cruciale. En effet, la qualité des masques estimés conditionne les performances du système de reconnaissance. L'amélioration de la fiabilité des masques constitue donc un enjeu important. Dans un second temps, les travaux menés dans le cadre de l'estimation bayésienne des masques de données manquantes sont présentés. D'une part je propose de nouveaux modèles de masques permettant de modéliser les dépendances entre les masques de différents coefficients d'un signal. Ces modèles sont évalués comparativement à un modèle de référence. Les résultats sont présentés en termes d'erreur de masques ainsi qu'en taux de reconnaissance. Les résultats montrent que ces dépendances contribuent à améliorer les taux de reconnaissance et soulignent l'importance du contexte temporel d'un masque. Je présente, dans un second temps, une nouvelle définition de masque: les masques de contribution. Ces nouveaux masques sont évalués comparativement aux masques usuellement utilisés, fondés sur le seuillage du SNR. Je montre que cette nouvelle définition permet d'améliorer l'algorithme de décodage en affinant les intervalles de marginalisation. L’évaluation, dans le cadre de la marginalisation de données et en présence d'un bruit stationnaire, montrent que les intervalles sont considérablement réduits entraînant une nette amélioration des taux de reconnaissance.
-Robustesse
-Masques
This thesis dissertation proposes, as a first step, a detailed introduction to the automatic speech recognition with missing data supported by many bibliographic references. It is shown that the estimation of masks is a crucial step. Indeed, the quality of the estimated masks determines the performance of the recognition system. Improving the reliability of masks is thus an important issue. In a second step, new investigations in the field of Bayesian missing data mask estimation are presented. I propose first new mask models to model dependencies between the masks of different coefficients of a signal. These models are evaluated and compared to a reference model. The results are presented in terms of error of masks, as well as recognition rate. The results show that these dependencies contribute to improving the recognition rate and stress the importance of the temporal context of a mask. Second, I introduce a new missing data mask definition: the masks of contribution. These new masks are evaluated compared to masks commonly used, based on the SNR thresholding. I show how the decoding algorithm can be improved with such a mask definition by refining the likelihood marginalization intervals. The assessment, in the context of data marginalization and in the presence of a stationary noise, shows that the intervals are considerably reduced resulting in a significant improvement of the recognition rate.
Source: http://www.theses.fr/2007NAN10117/document

Sujets

• Robustesse (homonymie)
• Masque (homonymie)

Informations

• Publié par: Thesee
• Nombre de lectures: 38
• Langue: Français
• Poids de l'ouvrage: 1 Mo

Extrait

AVERTISSEMENT

Ce document est le fruit d'un long travail approuvé par le
jury de soutenance et mis à disposition de l'ensemble de la
communauté universitaire élargie.

Il est soumis à la propriété intellectuelle de l'auteur. Ceci
implique une obligation de citation et de référencement lors
de l’utilisation de ce document.

Toute contrefaçon, plagiat, reproduction illicite encourt une
poursuite pénale.


➢ Contact SCD Nancy 1 : [e-mail]




LIENS


Code de la Propriété Intellectuelle. articles L 122. 4
Code de la Propriété Intellectuelle. articles L 335.2- L 335.10
http://www.cfcopies.com/V2/leg/leg_droi.php
http://www.culture.gouv.fr/culture/infos-pratiques/droits/protection.htm ´D´epartement de formation doctorale en informatique Ecole doctorale IAEM Lorraine
UFR STMIA
Contributions `a la reconnaissance
automatique de la parole avec donn´ees
manquantes
`THESE
pr´esent´ee et soutenue publiquement le 8 novembre 2007
pour l’obtention du
Doctorat de l’universit´e Henri Poincar´e – Nancy 1
(sp´ecialit´e informatique)
par
S´ebastien Demange
Composition du jury
Rapporteurs :
Examinateurs :
Laboratoire Lorrain de Recherche en Informatique et ses Applications — UMR 7503
euven
one
r
MCF
e
(HDR)
-
-
-
Universit?
T
de
ar
Nancy
aul
2
L
-
Comp
Nancy
-
-
Pr
F
-
r
Henri

Pr
e
Belgique
Christophe
-
Cerisara
Catholique
Char
Pr
g?
V
de
r
r
L
e
-

t

F
abb
T
CNRS
?
-

Nancy
Universit?
-
ofesseur
F
Haton
r
Jean-P

-
e
L
atore
ouvain
Salv
de
unisie
Universit?
T
ofesseur
-
ernolle
unis
an
T
Dirk
-

ENIT
F
-
anion
ofesseur
-
Pr
ENSSA
Ellouze
ofesseur
Noureddine

e
Lauren

Nancy
-la
Mis
thloria.
en

page
avecsuivi
Remerciemen
mon
ts
t
Une
et
th?se
autres
est
e
une
ec
?tap
m'a
e
grande
inp
Salv
ortan

te
famille
dans
Amandine.
la
Caroline,
vie
Christophe
de
le
toute
que
p
gen
ersonne
mon
attir?e
one,
par
V
le
mem
monde

de
t
la


mes
herc
plus
he.
Joseph,
Cette
Haton
histoire
p
est
oir

?
he

de
our
nouv
onibilit?
elles

exp
bres
?riences,
de
d'?c
T
hanges
Ellouze,
et
et
de
Comp
rencon
tous
tres.
de
A
AR

toute
titre,
plus
j'aimerais
paren
remercier
ainsi
de
Gene
nom
?
breuses
a
p
p
ersonnes
p
p
uel,
our
Gilles,
a
d'autres
v
et
oir
Cerisara

our
tribu?,
v

mis

pied
?
l'?trier,
leur
et
mani?re,
ainsi
?
p
la
leur

disp
de
et

tillesse.
m?moire.
aux
J'adresse
mem
donc
de
mes
jury
remerciemen
th?se,
ts
atore
les
abb
plus
Nourredine

Lauren
haleureux

et
Dirk
les
an
plus
ernolle.
sinc?res
?
:
les

bres
?
l'?quip
Violaine,
P
qui
OLE.
partage
?
ma
ma
vie
et
depuis
particuli?remen
plus
mes
de
ts,
10
fr?re
ans
que
et
hel,
qui
et
m'a

toujours
tous

amis
et
v
souten
une
u
ens?e

particuli?re
trois
our
ann?es
Emman
duran
Slim,
t.
Romain,

Lo?c,
?
bien
Jean-P
i
auliila
A
our
Violaine.
magie
Des
d'?tre
pa
m?me
roles
b
de
La
douceur
Main
Des
Suivre
moments
Juste
de
l'amour
b
vie
onheur
iii
Des
joie
rega
deux
rds
dans
?chang?s
main
Un
le
zeste

de
la

de
Des
Une
?toiles
elle
dans
p
les
toujours
y
euxiv.
T
.
able
.
des
.
mati?res
2.3.2
T
ec
able
de
des
.
gures
.
ix
34
Liste
.
des
.
tableaux
.
xi
Masquage
In
.
tro
.

parole
g?n?rale
.
xiii
.
Chapitre
.
1
.
La
2

de
automatique
.
de

la
Le
parole
.
robuste
.
au
Masque
bruit
.
1.1
oracle

.
automatique
.
de
.
la
donn?es
parole
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
la
.
2.1
.
.
.
.
.
.
.
Th?orie
.
monde
.
.
.
p
.
.
.
.
.
de
.
.
.
.
.
tes
.
.
2
.
1.1.1
.
Le
.
signal
.
de
.
la
.
parole
2.3
.
ations
.
.
.
2.3.1
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
23
.
automatique
.
a
.
manquan
.
en
.
parole
.
.
.
.
.
.
.
.
.
.
2
27
1.1.2
:
P

aram?trisation
.
du
.
signal
27
.
dans
.
h
.
parole
.
.
.
.
.
28
.

.
parole
.
.
.
.
.
.
.
29
.
donn?es
.
.
.
.
.
.
.
.
.
.
.
.
.
2.2.2
.
.
.
.
.
.
.
.
.
.
.
.
.
.
3
.
1.1.3
.

de
e
des
de
.
la
.

.
.
.
.
probl?me
.
tes
.
.
.
.
.
.
.
.
.
.
.
des
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
5
.
1.1.4
.
Le
.
mo
.
d?le
.
de
.
Mark
.
o
.
v
.

.
h?
Chapitre
.

.
de
.
parole
.
v
.
donn?es
.
tes
.
Masquage
.

.
la
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2.1.1
.
gestaltiste
.
p
.
et
.
du
9
.
1.2
.
Robustesse
.
au
.
bruit
.
.
2.1.2
.
masquage
.
la
.

.
umaine
.
la
.
.
.
.
.
.
.
.
.
.
.
.
.
2.2
.
en
.
automatique
.
la
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
2.2.1
.
de
.
manquan
.
.
.
.
.
.
.
.
.
.
.
.
.
.
16
.
1.2.1
.
Le
.
bruit
.
.
.
.
30
.
Masque
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
33
.

.
la
.
sur
.
observ
.
partielles
.
.
.
.
.
.
.
.
.
.
.
.
.
33
.
Le
.
des
.
manquan
.
.
16
.
1.2.2
.
Strat?gies
.
p
.
our
.
la
.

.
robuste
.
de
.
la
33
parole
Imputation
.
donn?es
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
.
18
.
1.3
.
Conclusion
.