Traduction: G.M.
Neuropsychologia. 2014 Oct 1. pii: S0028-3932(14)00336-4. doi: 10.1016/j.neuropsychologia.2014.09.031. [Epub ahead of print]
Visual abilities are important for auditory-only speech recognition: Evidence from autism spectrum disorder
Author information
- 1Max Planck Institute for Human Cognitive and Brain Sciences, Stephanstraße 1a, 04103 Leipzig, Germany. Electronic address: schelinski@cbs.mpg.de
- 2Max Planck Institute for Human Cognitive and Brain Sciences, Stephanstraße 1a, 04103 Leipzig, Germany; Faculty of Medicine Carl Gustav Carus at the Technische Universität Dresden, Fetscherstraße 74, 01307 Dresden, Germany. Electronic address: philipp.riedel@uniklinikum-dresden.de
- 3Max Planck Institute for Human Cognitive and Brain Sciences, Stephanstraße 1a, 04103 Leipzig, Germany; Humboldt University of Berlin, Rudower Chaussee 18, 12489 Berlin, Germany. Electronic address: kriegstein@cbs.mpg.de
Abstract
In
auditory-only conditions, for example when we listen to someone on the
phone, it is essential to fast and accurately recognize what is said
(speech recognition). Previous studies have shown that speech
recognition performance in auditory-only conditions is better if the
speaker is known not only by voice, but also by face.
Here, we tested the hypothesis that such an improvement in auditory-only speech recognition depends on the ability to lip-read.
Dans des conditions auditives seule, par exemple lorsque nous écoutons quelqu'un au téléphone, il est essentiel de reconnaître rapidement et avec précision ce qui est dit (reconnaissance vocale). Des études antérieures ont montré que les performances de reconnaissance de la parole dans des conditions auditives seule est meilleure si l'orateur est connu non seulement par la voix, mais aussi par le visage. Ici, nous avons testé l'hypothèse qu'une telle amélioration auditive reconnaissance de la seule parole dépend de la capacité à lire sur les lèvres.
To test this we recruited a group of adults with autism spectrum disorder (ASD), a condition associated with difficulties in lip-reading, and typically-developed controls. All participants were trained to identify six speakers by name and voice. Three speakers were learned by a video showing their face and three others were learned in a matched control condition without face. After training, participants performed an auditory-only speech recognition test that consisted of sentences spoken by the trained speakers. As a control condition, the test also included speaker identity recognition on the same auditory material.
The results showed that, in the control group, performance in speech recognition was improved for speakers known by face in comparison to speakers learned in the matched control condition without face. The ASD group lacked such a performance benefit. For the ASD group auditory-only speech recognition was even worse for speakers known by face compared to speakers not known by face.
Les résultats ont montré que, dans le groupe de contrôle, la performance dans la reconnaissance vocale a été améliorée pour les intervenants connus par leur visage par rapport aux orateurs apprises dans la condition de contrôle apparié ans visage. Le groupe TSA ne profitait d'un tel avantage de performance. Pour le groupe TSA la reconnaissance de la parole auditive seule était encore pire pour orateurs connus par rapport aux orateurs au visage connu comparé aux orateurs au visage inconnu.
In speaker identity recognition, the ASD group performed worse than the control group independent of whether the speakers were learned with or without face. Two additional visual experiments showed that the ASD group performed worse in lip-reading whereas face identity recognition was within the normal range. The findings support the view that auditory-only communication involves specific visual mechanisms. Further, they indicate that in ASD, speaker-specific dynamic visual information is not available to optimize auditory-only speech recognition.
Dans la reconnaissance de l'identité du locuteur, le groupe TSA a été moins performant que le groupe de contrôle indépendant du fait que les orateurs ont été découvert avec ou sans visage. Deux expériences visuelles supplémentaires ont montré que le groupe TSA était moins performant en lecture sur les lèvres alors que la reconnaissance de l'identité de visage était dans la fourchette normale.
Les résultats soutiennent l'idée que la communication auditive seule implique des mécanismes visuels spécifiques. En outre, ils indiquent que dans les TSA, l'information visuelle dynamique spécifique au locuteur n'est pas disponible pour optimiser la reconnaissance du langage auditif seul.
Copyright © 2014. Published by Elsevier Ltd.
Here, we tested the hypothesis that such an improvement in auditory-only speech recognition depends on the ability to lip-read.
Dans des conditions auditives seule, par exemple lorsque nous écoutons quelqu'un au téléphone, il est essentiel de reconnaître rapidement et avec précision ce qui est dit (reconnaissance vocale). Des études antérieures ont montré que les performances de reconnaissance de la parole dans des conditions auditives seule est meilleure si l'orateur est connu non seulement par la voix, mais aussi par le visage. Ici, nous avons testé l'hypothèse qu'une telle amélioration auditive reconnaissance de la seule parole dépend de la capacité à lire sur les lèvres.
To test this we recruited a group of adults with autism spectrum disorder (ASD), a condition associated with difficulties in lip-reading, and typically-developed controls. All participants were trained to identify six speakers by name and voice. Three speakers were learned by a video showing their face and three others were learned in a matched control condition without face. After training, participants performed an auditory-only speech recognition test that consisted of sentences spoken by the trained speakers. As a control condition, the test also included speaker identity recognition on the same auditory material.
The results showed that, in the control group, performance in speech recognition was improved for speakers known by face in comparison to speakers learned in the matched control condition without face. The ASD group lacked such a performance benefit. For the ASD group auditory-only speech recognition was even worse for speakers known by face compared to speakers not known by face.
Les résultats ont montré que, dans le groupe de contrôle, la performance dans la reconnaissance vocale a été améliorée pour les intervenants connus par leur visage par rapport aux orateurs apprises dans la condition de contrôle apparié ans visage. Le groupe TSA ne profitait d'un tel avantage de performance. Pour le groupe TSA la reconnaissance de la parole auditive seule était encore pire pour orateurs connus par rapport aux orateurs au visage connu comparé aux orateurs au visage inconnu.
In speaker identity recognition, the ASD group performed worse than the control group independent of whether the speakers were learned with or without face. Two additional visual experiments showed that the ASD group performed worse in lip-reading whereas face identity recognition was within the normal range. The findings support the view that auditory-only communication involves specific visual mechanisms. Further, they indicate that in ASD, speaker-specific dynamic visual information is not available to optimize auditory-only speech recognition.
Dans la reconnaissance de l'identité du locuteur, le groupe TSA a été moins performant que le groupe de contrôle indépendant du fait que les orateurs ont été découvert avec ou sans visage. Deux expériences visuelles supplémentaires ont montré que le groupe TSA était moins performant en lecture sur les lèvres alors que la reconnaissance de l'identité de visage était dans la fourchette normale.
Les résultats soutiennent l'idée que la communication auditive seule implique des mécanismes visuels spécifiques. En outre, ils indiquent que dans les TSA, l'information visuelle dynamique spécifique au locuteur n'est pas disponible pour optimiser la reconnaissance du langage auditif seul.
Copyright © 2014. Published by Elsevier Ltd.
- PMID: 25283605
