Steffann, François
(2025).
« Le rôle des indices visuels dans la perception de la parole en condition bruitée : une étude phonétique » Mémoire.
Montréal (Québec), Université du Québec à Montréal, Maîtrise en linguistique.
Fichier(s) associé(s) à ce document :
Résumé
L’étude de la perception et de l’intégration audiovisuelle de la parole est un domaine en plein essor. L’intégration audiovisuelle de la parole (IAVP) implique une utilisation concomitante par le cerveau de plusieurs flux sensoriels (p. ex. audio et visuel) pour la perception d’un stimulus langagier. L’objectif de ce mémoire est de décrire la contribution de l’information visuelle dans la perception de la parole lorsque le signal auditif est dégradé. Nous avons demandé à 22 participants·es francophones québécois·es d’identifier des vidéos de 9 syllabes ouvertes composées d’une consonne et d’une voyelle (/a/, /i/ et /u/ et /p/, /t/ et /k/) articulées par une locutrice native du français québécois. L’information visuelle des visages a été manipulée en filtrant les fréquences spatiales. Les stimuli ont été présentés en conditions audiovisuelles dans 3 conditions de filtrage visuel en présence de signal audio bruité. Lors de l’expérience, nous avons procédé à la mesure des scores de reconnaissance des syllabes comme indicateur de performance de l’IAVP. Nos données montrent que dans un contexte audio perturbé, plus la perturbation visuelle est importante et plus la reconnaissance des stimuli est difficile. De plus, la visibilité du lieu d’articulation et le contexte vocalique peuvent faciliter ou nuire à la perception des stimuli. Le contrôle des caractéristiques phonétiques et linguistiques des stimuli nous a permis de mettre en évidence les informations visuelles afférentes aux phonèmes et influençant l’IAVP. Ce travail de recherche apporte de nouvelles données sur le rôle de la vision dans la perception de la parole et caractérise phonétiquement l’information visuelle utilisée dans la perception et la représentation des unités de parole par le cerveau.
_____________________________________________________________________________
MOTS-CLÉS DE L’AUTEUR : phonétique, intégration, audiovisuelle, perception, perturbation