Le son de tes lèvres : corrélats électrophysiologiques de la perception audio-haptique de la parole. (The sound of your lips: electrophysiological correlates of audio-haptic speech perception) [in French]

Actes de la conférence conjointe JEP-TALN-RECITAL 2012, volume 1: JEP, pages 803–810, Grenoble, 4 au 8 juin 2012. c ⃝2012 ATALA & AFCP Le son de tes lèvres Le son de tes lèvres Le son de tes lèvres Le son de tes lèvres : : : : ccccorrélats électrophysiologiques de la orrélats électrophysiologiques de la orrélats électrophysiologiques de la orrélats électrophysiologiques de la perception audio perception audio perception audio perception audio----haptique de la parole. haptique de la parole. haptique de la parole. haptique de la parole. Camille Cordeboeuf1, Avril Treille1, Coriandre Vilain1, Marc Sato1 (1) Département Parole & Cognition, GIPSA-Lab, CNRS & Grenoble Université, France. Correspondance : marc.sato@gipsa-lab.grenoble-inp.fr RESUME _________________________________________________________________________________________________ Face à la nature multimodale de la perception de la parole, une question fondamentale est celle d’une possible intégration précoce des informations issues des différentes modalités sensorielles et l’existence de mécanismes anticipatoires prédictifs. L’objectif de cette étude pilote était de tester par électroencéphalographie (EEG) une possible modulation du potentiel évoqué auditif précoce N1 lors de la perception audio-haptique de la parole par rapport à une perception auditive seule. Dans ce but, nous avons comparé les réponses électroencéphalographiques de cinq participants obtenues lors de la perception de syllabes selon différentes modalités : auditive, audio-visuelle et audio-haptique. En accord avec de précédentes études, la comparaison des modalités auditive et audio-visuelle montrent une baisse d’amplitude de l’onde N1 lors de la perception audio-visuelle, un résultat suggérant une intégration précoce de ces deux modalités. Des résultats similaires sont observés lors de la comparaison des modalités auditive et audio-haptique pour les électrodes pariétales. De plus, une plus faible latence de l’onde N1 est observée pour la modalité audio-haptique. Pris ensemble, ces résultats suggèrent une intégration précoce des modalités auditive, visuelle et haptique lors de la perception de la parole et soulignent le possible rôle prédictif des informations haptiques dans le décodage et traitement des informations auditives. ABSTRACT _______________________________________________________________________________________________ The sound of you The sound of you The sound of you The sound of yourrrr lips lips lips lips: electrophysiological correl : electrophysiological correl : electrophysiological correl : electrophysiological correlates of audio ates of audio ates of audio ates of audio----haptic haptic haptic haptic speech perce speech perce speech perce speech perception ption ption ption Given the multisensory nature of speech perception, one fundamental question is whether sensory signals are integrated early in the speech processing hierarchy and may reflect predictive, anticipatory, mechanisms. The present pilot EEG study aimed at investigating a possible modulation of auditory-evoked N1 component during audio-haptic compared to purely auditory speech perception. To this aim, we compared auditory-evoked N1 responses from five participants during auditory, audio-visual and audio-haptic perception of syllables. In line with previous studies, auditory-evoked N1 amplitude was attenuated during audio- visual compared to auditory speech perception. Crucially, similar results were observed for audio-haptic compared to auditory speech perception for parietal electrodes, with shortened latency. Altogether, these results suggest some early integrative mechanisms between auditory, visual and haptic modalities in speech perception as well as a predictive role of haptic …

Content truncated to 500 words