Comment étudie-t-on la voix et la parole ?

Des débuts de la phonétique à l'évaluation moderne

des troubles de la voix et de la parole

Alain Ghio
Laboratoire Parole et Langage
CNRS & Université d’Aix-Marseille
LA PAROLE…
France Comment ça marche ?

La communication parlée Complexité de la communication parlée

Complexité linguistique
Connaissances communes et partagées

ACTE MOTEUR ACTE SENSORIEL

Émetteur Récepteur
Codage Canal Décodage

Signal
Perception
Psycholinguistique

Bruit
Production
Phonétique Signal
articulatoire Phonétique
acoustique
Analyse
3 4

Bases cérébrales La production de la parole

Aire de Broca  3 étages CERVEAU

Aire motrice
 La respiration
Aire somato-
sensorielle  La phonation Cavité nasale

Palais Dur

 L’articulation
Voile du palais
Narines Langue

Encodage phonético-acoustique Lèvres

Pharynx
ARTICULATEURS
Dents
Fabrication du message
Programmation pré-motrice Cordes Vocales
Oesophage

Programmation motrice LARYNX

Larynx
Réalisation du geste Trachée

Contrôle POUMONS

5 6

1
 Complexité de la production de parole

 plus de 100 muscles Mouvements du voile

Mouvements de la langue

 organes « non-spécialisés » Mouvements des lèvres

pour la parole: Mouvements de la mandibule
 Respiration Mouvements du larynx
 Nutrition
 Voir film de la déglutition

 Acte moteur le plus complexe ? Quelques éléments de…

PERCEPTION DE LA PAROLE

7 8

Que percevons nous ? Surdités phonologiques liés à la langue

 /ebzo/ perçu /ebuzo/ par des japonais (Dupoux et al., 1999)

 Pour Espagnols, difficultés d’identifier perceptivement /y/ (Magnen et al.,

1999)

 Européens sourds aux nuances de tons dans langues telles que le

Chinois cantonais

http://www.phonetics.ucla.edu/vowels/chapter2/cantonese

Perception
Perception
Physique
 « La perception de la réalité sonore n’est pas un enregistrement direct de la
réalité. C’est une construction mentale opérée à la suite d’un traitement de Physique
l’information disponible, contrainte par nos sens ainsi que nos habitudes
sélectives. » (Gaillard et al., 2007)
9 10

Double flux Importance des processus top-down

Connaissances Contexte  Effet de la lexicalité (Ganong, 1980)

 Intégration
www.idea.gov.uk
 [t/d ambigu] devant « ache » => tache
 Flux montant
 idem devant « isk » => disque
 Flux descendant

Top-down  Effets de fréquence

 Perception facilité des séquences fréquentes
Perception

 Restauration phonémique
Bottom-up  Un énoncé dégradé acoustiquement est restauré par l’auditeur
(Warren et Warren, 1970)
 « Girasse » perçu comme un mot (Girafe)
(Norris, MC Queen, Cutler, 2003)

 Surdité phonologique interlangues

11 12

2
 Perception et cognition Effets de contextes

 Experience Daniel J. Simons, Visual Cognition Lab, Univ. Illinois  Perception visuelle
 (Simons, 1999)
 2 équipes de 3 joueurs de basket.
Une équipe joue en blanc,  Perception olfactive
l’autre en noir.  Perception différente de l’odeur présentée selon qu’on lui donne
un label à connotation positive ou négative (Herz, 2001).

 Perception auditive de la dysphonie ?

 Objectif : compter le nombre de passes faites  sensible aussi aux phénomènes de capture attentionnelle ou de
par l’équipe en BLANC suggestion verbale ?
 informations détenues par le thérapeute sur le parcours médical
 Le film démarre rapidement et le rythme des passes augmente du patient orientent-t-elles son jugement ?
 Comptez en silence pour ne pas déranger les autres participants
 Différence significative sur les résultats entre hommes et femmes.
 Résultat correct pour seulement 50 % des participants

13 14

Une alternative à la perception ?

PRODUCTION PERCEPTION

Un peu d’histoire des…

MÉTHODES INSTRUMENTALES
EN PHONÉTIQUE
dB

70

60

50

40

30

20

10

00 500 1000 1500 2000 2500 3000 Hz

Fréquen
ce

INSTRUMENTS 16

Etienne-Jules Marey (1875) Rosapelly & Havet

• Physiologiste français : étude des

mouvements animaux et humains

• Développe les techniques graphiques

 La Société de Linguistique de Paris

consulte Etienne-Jules Marey dans le but…
« d’appliquer la méthode graphique à l’étude des
mouvements si complexes et si variés qui se produisent dans
la parole […] pour obtenir une trace objective des
mouvements des organes articulateurs, cage thoracique,
larynx, langue, lèvres, voile du palais, au cours de
l’articulation des différentes unités phonétiques »  Premier instrument et document de phonétique
expérimentale : Rosapelly and &(1875)
 Car  Première classification avec des données
« L’oreille, la vue et la palpation ne sont pas suffisants pour
appréhender les mouvements successifs et simultanés experimentales:
nécessaires à la réalisation d’un phonème »  Dynamique identique des lèvres sur p, b, m
 Dynamique identique de l’activité laryngée
sur b, v, m
 Activité nasale sur m
17 18

3
 Tradition au LPL, Aix-en-Provence :
Abbé Rousselot & Charles Verdin Bernard Teston & Denis Autesserre
« Polyphonomètre »,1975

Aérophonomètre (1982)

EVA 1 (1993)
Aérophon. Numérique (1988)

19 20 Physiologia (1990)

Evaluation instrumentale Les capteurs EVA2

Débit d’air
 Dispositif E.V.A. 2 oral
 Laboratoire Parole et Langage & CHU
Timone (CNRS, Université Aix- Microphone
Marseille)
Débit d’air
 SQLab nasal

Dessin :
A. Michaud Pressions

Pneumotachographe
(débimètre oral)

Masque

Débit oral
Son
Cathéter

Tube au nez
Capteur de pression

21 22 Débit nasal

Sauvegarde du patrimoine

MÉTHODES INSTRUMENTALES
EN PHONÉTIQUE
EXPERIMENTALE ET CLINIQUE
23 24

4
 L’évaluation instrumentale Mesures acoustiques liées à la source laryngée

 Utilisation d’instruments de mesure  Pertubations acoustiques de la

source glottique

25 26

Mesures acoustiques liées à la source laryngée Exemples de variations de F0

 Mesure de la F0 instantanée  Voix normale :

patiente STK0002
0.6

0.4

0.2

0.0

-0.2

 Tremblement vocal:
patiente STJF0000
-0.4

-0.6

ms
4000 4010 4020 4030 4040 4050 4060 4070 4080

27 28

Analyse acoustique de la parole Signature spectrale des phonèmes

Oscillogramme : « il les perdait toutes de la même façon »

Zone

0.6

0.4

0.2

0.0

-0.2

-0.4

-0.6 i l e p E r d e t u t @ d @ l a m E m @ f a s o~
ms
3200 3400 3600 3800 4000 4200 4400 4600 4800

Hz Occlusion Bruit de friction

12000
silence
10000

8000

6000

4000

http://www.loria.fr/~laprie
2000
• Formants des voyelles
0 ms
• Explosion des occlusives
3200 3400 3600 3800 4000 4200 4400 4600 4800
• Bruit de friction des fricatives
29 Voisement 30

5
 La prosodie La dysprosodie

 Sujet normal : « Monsieur Seguin n’avait jamais eu de bonheur….et  patient atteint de PSP (on-dopa, 779).
la haut, le loup les mangeait »
0.3
Zone 0.2
0.5 0.1
0.4 0.0
0.3 -0.1
0.2 -0.2
0.1 ms
5000 10000 15000 20000
0.0 Hz
-0.1 350

-0.2 300

-0.3 250

-0.4 200
ms
5000 10000 15000 150
Hz Zone 100
50
250
0 ms
5000 10000 15000 20000
200
dB
150
75
100 70
65
50
60
0 ms 55
5000 10000 15000
50
dB Zone
80 45
ms
5000 10000 15000 20000
70
2.0
60 1.8

DUEZ, D. (2005). Organisation temporelle de la parole et dysarthrie parkinsonienne. Les troubles de la

1.6
1.4
50
parole et de la déglutition dans la maladie de Parkinson (2005 mai 25-27 : Lillle, FRANCE). In
1.2
1.0
0.8
40
Ozsancak; Auzou, Les troubles de la parole et de la déglutition et dysarthrie parkinsonienne. marseille:
0.6
0.4
30
ms
Solal. 2005, p. 195-213.
0.2
0.0
5000 10000 15000 20000
ms
5000 10000 15000
31 32

Pourquoi mesurer les phénomènes aéro ?

 La parole est un phénomène acoustique…

 Mais la plupart des mécanismes de production de la parole sont
aérodynamiques

L’intérêt de…

L’AEROPHONOMETRIE

33 34

Intérêt de l’aérophonométrie Exploration de dystrophies musculaires : Amelot et Roubeau

pour l’étude de l’articulation (HEPG, Tenon, Paris)

0.3

0.2
Loc1 :dystrophie musculaire oculopharyngée
0.1

0.0

-0.1

-0.2

-0.3

-0.4 Normal TNBM3

-0.5
1000 1500 2000 2500 3000 ms

s e t y na f E r ~E t ere s ~a t (e) k ~a p ~a s e v u
d
0 m
.4 3/s

0.3

0.2 Débit d’air oral

0.1

0.0

-0.1 1000 1500 2000 2500 3000 ms

dm3/s

Débit d’air nasal

0.0

35 36
1000 1500 2000 2500 3000 ms

6
 Exploration de dystrophies musculaires : Amelot et Roubeau
(HEPG, Tenon, Paris) L’importance des pressions en phonation

Loc5 :maladie de Steinert

 Importance des (dés)équilibres de pression durant la phonation
CERVEAU

Pression
Intra-orale Cavité nasale

Palais Dur

Pression Narines
Voile du palais
Langue

Sus-Glottique Lèvres
Pharynx
ARTICULATEURS
Dents
Pression
Trans- Cordes Vocales
Oesophage

Glottique Larynx
LARYNX

Trachée
POUMONS

Pression
Sous-Glottique

37 38

Estimation de la pression sous-glottique Validation 1997 : Belgique

 La pression sous-glottique peut être estimée par la pression intra-
orale via la méthode du flux d’air interrompu (« airway
interrupted method »)
 Bonne corrélation entre PIO etPSG
Demolin D., Giovanni A., Hassid S., Heim C., Lecuit V.,
Socquet A. (1997), "Direct and indirect measurements
of subglottic pressure", Proc. Larynx 97, Marseille,
p.69-72

39 40

Validation 2007 : Timone, Marseille Exemple de pression sous-glottique estimée

Oscillogramme : « Papa ne m’a pas parlé de beau papa »

0.5

0.4

0.3

0.2

0.1

0.0

-0.1

-0.2

-0.3

-0.4
p a p
1500
a n @ m a2000
p a p a r l2500
e d e b o p 3000
a p a ms
3500
hPa

-1 ms
1500 2000 2500 3000 3500

Pression sous-glottique estimée par mesure de pression intra-orale :

les mesures n’ont du sens que sur les occlusions

41 42

7
 Pressions, styles de parole et forçage Pertinence des mesures aérodynamiques
Yu P., Garrel R., Nicollas R., Ouaknine M., Giovanni A., "Objective voice analysis in dysphonic patients.
New data including non linear measurements", Folia Phoniatrica et Logopaedica, 59:20-30, 2007

l’hyperfonctionnement laryngé Débit d’air oral

700
 
600

Débit Oral (en cm3/s)

500

Fuite d’air avec niveau

400

300
dysphonie 200

100

0
G0 G1 G2 G3
M 153 191 322 446
F 136 168 210 305

 l’hypofonctionnement laryngé 18

 Pression sous-glottique

Pres. Sous-Glottique (en hPa)

16

estimée
14
12
10
8

Tension plus forte avec

6
4

niveau dysphonie 2
0
G0 G1 G2 G3
M 6,7 9,7 10,8 14,2
F 6,7 7,7 9,9 11,2

43 44

Effet de thérapeutiques sur la coordination

Pneumophonique

SARR, M.; PINTO, S.; JANKOWSKI, L.; PURSON, A.; GHIO, A.; ESPESSER, R.; TESTON, B.;
VIALLET, F. (2009). L-dopa and STN stimulation effects on pneumophonic coordination in
Parkinsonian dysarthria: intra-oral pressure measurements. International Congress of Parkinson's
Disease and Movement, vol. 24, no. S1. 2009, p. S342.

 Parkinson et effet de la stimulation cérébrale profonde

 Mesure de la pression sous-glottique sur des locuteurs

parkinsoniens avec/sans stimulation (ON/OFF)
8

6
Techniques…
5

4
OFF STIM

ON STIM
ELECTROPHYSIOLOGIQUES
3 CTRL

0 Pa pa ne m’a pas parlé de beau pa pa »

P1 P2 P3 P4 P5 P6
45 46

Techniques Electrophysiologiques L’Electroglottographie (EGG)

 Mesure d’impédance électrique entre deux électrodes placées de

part et d'autre du larynx

Electromyographie Electropalatographie
ElectroGlottographie EMG EPG
EGG

 L’EGG
 ne mesure pas exactement
la surface d'ouverture de la glotte
 permet une très bonne représentation
du cycle d'oscillation des cordes vocales
 permet une bonne mesure de sa fréquence car il est dénué de
Electromagnetic articulograph bruits aérodynamiques.
EMA
47 48

8
 Exploitation des mesures EGG Mesure du quotient de fermeture glottique
Oscillogramme : « qu’en pensez vous ? »
0.3  L’analyse de la forme EGG permet de
0.2
mesurer un quotient de fermeture
 CQ important hyperadduction
0.1

0.0

 CQ faible hypoadduction
-0.1

-0.2 s e t y na f Ere~ te re s a~ t @ # k a~ p a~ s e v u
-0.3 a~ p a~ s e v
-0.4
ms
2500 2550 2600 2650 2700 2750 2800 2850 2900

EGG

Phase fermée

0.5

Quotient de
fermeture
0.4

0.3

0.2

0.1
Measuring voice in the clinic - Laryngograph® Speech Studio analyses
Adrian Fourcin, Julian McGlashan and Richard Blowes
0.0
2500 2550 2600 2650 2700 2750 2800 2850 2900
ms
(Presented at the 6th Voice Symposium of Australia. Adelaide, Oct. 2002)

Mise en évidence de la vibration des cordes vocales

Insensibilité du signal EGG au conduit vocal et aux sources de bruit
49 50

Application à l’exploration du forçage Principe de l’électromyographie

 Placement d’électrodes sur les muscles à étudier:

Voix normale Voix forcée 1. Détection 2. Amplification 3. Conditionnement 4. Enregistrement

Muscle

Ecoute

 Enregistre l’activité électrique du/des muscle(s)

 Difficile à manipuler
 Artefacts
 Mauvaise sélectivité si EMG de surface
 Faible signal/bruit
Moyenne CQ=0.455 Moyenne CQ=0.549
PICF0002 PICF0021
51 52

QUIZZ QUIZZ
Exploitation des mesures EMG A quoi correspondent
les pics EMG? Exploitation des mesures EMG A quoi correspondent
les pics EMG?

Oscillogramme : «Tu es sûr ? Tu l’as vu ? » Oscillogramme : «Tu es sûr ? Tu l’as vu ? »

s e t y na f Ere~ te re s a~ t @ # k a~ p a~ s e v u s e t y na f Ere~ te re s a~ t @ # k a~ p a~ s e v u

F0 F0

Signal EMG sur muscle crico-thyroïdien (larynx) Signal EMG sur muscle orbicularis oris (lèvres)

Intégration (50 ms) et lissage

Intégration (50 ms) et lissage
du signal EMG sur muscle orbicularis oris
du signal EMG sur muscle crico-thyroïdien

53 Mise en évidence du rôle du muscle crico-thyroïdien dans le contrôle de la F0 54 Mise en évidence de l’activité labiale

9
 Principe de kynésiographie

 Etude des mouvements

KYNESIO
Articulographie
Electro-Magnetique

Electro-
PalatoGraphie

Techniques…

KYNESIOGRAPHIQUES

55 56

La palatographie Electropalatographie (EPG)

 Permet d’observer l’articulation entre la langue et le palais  L'electropalatographie permet d'enregistrer dynamiquement les
points de contact entre la langue et le palais pendant la phonation
 La palatographie directe consiste à badigeonner la langue du sujet
avec une pâte composée d'un mélange de noir végétal, de cacao et
de glycérine et à lui faire articuler le son à étudier avant d'en
photographier la trace sur le palais a l'aide d'un jeu de miroirs.

Palais 64 contacts

Dispositif portable de rééducation

(Clefnet UK)

• Intérêt : simplicité d’instrumentation Animation 3D

• Inconvénient : une seule articulation (UCLA, USA)

QUIZZ
A quoi correspondent
ces palatographes ?
Palais 96 contacts
57 58

Cartographie des articulations Applications cliniques

Palais artificiel et représentation

graphique à droite.  Le réseau de santé Clefnet à partir des travaux du QMC (F. Gibbon,
En noir,électrodes contactées pour A. Wrench et al.)
la constriction maximale de /t/,
d’après Meynadier (2003)  Prise en charge des enfants atteints de divisions palatines…

Consonnes du français prises au

moment de la constriction maximale,
en contexte aCa, d’après Meynadier
(2003).

59 60

10
 Principes du capteur de mouvements

 Un ensemble de (3 à 5) bobines émettrices

créent un champ magnétique modulé
autour de la tête du sujet

 Des bobines réceptrices sont placés sur des

organes mobiles (dents, langues, machoire,
lèvres…)

 L’emplacement des capteurs peut être

localisé dans le champ magnétique artificiel Etude expérimentale entre
par mesure de la puissance (inversement
proportionnelle à la distance) POSTURE ET VOIX
 Travaux de
Ackermann, Hertrich…
Jaeger M, Hertrich I, Stattrop U, Schönle PW, Ackermann H, (2000), Speech
Disorders following Severe Traumatic Brain Injury: Kinematic Analysis of
Syllable Repetitions Using Electromagnetic Articulography, Folia Phoniatrica
et Logopaedica, Vol. 52, No. 4
61 62

Effort vocal: un comportement complexe Analyse instrumentale de la posture

 Prototype 2
 Hyperadduction laryngée (1) et augmentation de la
pression sous-glottique Laboratoire CNRS
3 Elite 3D Capture Motion system
 Modifications respiratoires avec augmentation des
mouvements thoraciques
3D camera
 Perte de verticalité (2), Projection de la tête (3) et
augmentation globale des tensions musculaires
réflecteurs

Hergé: le trésor de Rackham le Rouge, Casterman

63 64

Ajustements de l’expérimentation Design expérimental

 Situation de communication
réelle

 20 locuteurs féminins devaient

transmettre une série de
nombres à un auditeur situé à
10m
 Voix d’expression simple
 Voix projetée
 Nécessité de synchonisation  Voix forcée
des plateformes techniques
 Mouvements
 Egg
 Audio…

65 66

11
 Posture Analyse de la voix

 Son, intensité SPL

 19 marqueurs
 Electroglottographie
 5 cameras infra-rouge
 Fo
 System 3D SMART®  Quotient de fermeture
 Système EVA®

67 68

Temporalité des gestes Voix forcée

Voix forcée

69 70

Voix projetée Voix conversationnelle

Voix projetée
Voix conversationnelle
71 72

12
 Résultats Utilisation clinique de la posture

 Détection de comportements à risque

 Posture comme marqueur

 Rééducation posturale

Hergé: le trésor de Rackham le Rouge, Casterman

73 74

En résumé pour conclure

 La production de parole est un acte

 très complexe
 fragile

 Un dysfonctionnement est vécu comme un handicap traumatisant

(importance vitale de la communication parlée en société)

POUR CONCLURE…  L’évaluation du trouble est difficile (car la parole est complexe)

 L’utilisation de méthodes et techniques issues de la recherche

fondamentale est une nécessité

 Beaucoup de chemin à parcourir

75 76

Déglutition

 Les organes de la déglutition sont ceux de la production de parole

 Peut renseigner sur la dynamique des organes
 Peut expliquer certains phénomènes liés à la production de parole
 Troubles de la déglutition souvent associés à troubles de la parole

MERCI…

77 78

13
 Respiration et parole La production vocale

 « Proper breathing is the sine qua none of proper speech »  La voix est produite par des mécanismes
(Proctor, 1980) aérodynamiques
 Le locuteur doit contrôler très précisément le flux d’air expiratoire

Cordes vocales durant un

cycle de vibration
79 80 Cordes vocales vues de dessus

Coupes sagittales des voyelles Articulation des consonnes orales

 Occlusives : flux d’air interrompu

 Fricatives (constrictives) : flux d’air ininterrompu

Coupes sagittales du conduit vocal d’un locuteur standard

dans la réalisation des voyelles du français (10 orales et 4 nasales)
Labiale Dento-alvéolaire Palatale
81 82

Articulation des consonnes nasales

 Occlusives orales

 Occlusives nasales

83

14