Audiovisual integration of speech and second language perception

  1. Jordi Navarra Ordoño
Supervised by:
  1. Salvador Soto-Faraco Director

Defence university: Universitat de Barcelona

Year of defence: 2005

Committee:
  1. Manuel Francisco Carreiras Valiña Chair
  2. Núria Sebastián Gallés Secretary
  3. Richard Reilly Committee member
  4. Charles Spence Committee member
  5. Joan López Moliner Committee member

Type: Thesis

Teseo: 129544 DIALNET

Abstract

Se trata de un trabajo experimental sobre cómo el cerebro humano integra información auditivo y visusal (los movimientos articulatorios de la labios) durante la percepción del habla. En primer lugar, se analiza cómo el cerebro puede integrar (a través de un proceso de recalibración)señales visuales y auditivas del habla que se presentan en distintos momentos, es decir, de forma desncronizada. Se ha visto que este proceso afecta el procesamiento temporal de las modalidades visual y auditiva en general. También se ha analizado si la integración audiovisual del habla es un proceso automático o no. Nuestros datos sugieren que se trata de un proceso automático, aunque depende de la saliencia lingüística del estímulo visual. Por ejemplo, se ha visto que, durante la exposición a una película doblada, la información que continen los movimientos de los labios interfiere más cuando nos es familiar (movimientos labiales en español) que cuando no lo es. Por último, se ha visto que el uso e integración visual y auditiva del habla facilitan la percepción de segundas lenguas.