HOW WELL CAN ASR TECHNOLOGY UNDERSTAND FOREIGN-ACCENTED SPEECH?
Following the Covid-19 pandemic, digital technology is more present in classrooms than ever. Automatic Speech Recognition (ASR) offers interesting possibilities for language learners to produce more output in a foreign language (FL). ASR is especially suited for autonomous pronunciation learning whe...
| Publicado en: | Trabalhos em Lingüística Aplicada Vol. 61; no. 3; pp. 764 - 782 |
|---|---|
| Autores principales: | , |
| Formato: | Artículo |
| Publicado: |
Universidade Estadual de Campinas - Portal de Periodicos Eletronicos Cientificos
set-dez2022
|
| Materias: | |
| Acceso en línea: | Ver este registro en EBSCOhost |
| fields | @attributes: recordID: 1 pdfLink: plink: https://search.ebscohost.com/login.aspx?direct=true&db=hlh&AN=160991661&site=ehost-live header: @attributes: shortDbName: hlh uiTerm: 160991661 longDbName: Humanities International Complete uiTag: AN controlInfo: bkinfo: jinfo: jid: 01031813 B3IM jtl: Trabalhos em Lingüística Aplicada issn: 01031813 maglogo: N pubinfo: dt: set-dez2022 vid: 61 iid: 3 pid: 15145 pub: Universidade Estadual de Campinas - Portal de Periodicos Eletronicos Cientificos artinfo: ui: 160991661 10.1590/010318138668782v61n32022 ppf: 764 ppct: 18 formats: fmt: @attributes: type: P size: 1.3MB tig: atl: HOW WELL CAN ASR TECHNOLOGY UNDERSTAND FOREIGN-ACCENTED SPEECH? aug: au: de Souza, Hanna Kivistö Gottardi, William affil: Universidade Federal de Santa Catarina (UFSC), Florianópolis, SC, Brasil University of Turku, Turku, Finland This study was financed in part by the Coordenação de Aperfeiçoamento de Pessoal de Nível Superior -- Brasil (CAPES) -- Finance Code 001 su: Automatic speech recognition Intelligibility of speech Speech Native language Language & languages COVID-19 pandemic sug: subj: Automatic speech recognition Intelligibility of speech Speech Native language Language & languages COVID-19 pandemic keyword: automatic speech recognition autonomous learning intelligibility L2 pronunciation development aprendizagem autônoma desenvolvimento de pronúncia em LE inteligibilidade reconhecimento automático da fala ab: Following the Covid-19 pandemic, digital technology is more present in classrooms than ever. Automatic Speech Recognition (ASR) offers interesting possibilities for language learners to produce more output in a foreign language (FL). ASR is especially suited for autonomous pronunciation learning when used as a dictation tool that transcribes the learner's speech (McCROCKLIN, 2016). However, ASR tools are trained with monolingual native speakers in mind, not reflecting the global reality of English speakers. Consequently, the present study examined how well two ASR-based dictation tools understand foreign-accented speech, and which FL speech features cause intelligibility breakdowns. English speech samples of 15 Brazilian Portuguese and 15 Spanish speakers were obtained from an online database (WEINBERGER, 2015) and submitted to two ASR dictation tools: Microsoft Word and VoiceNotebook. The resulting transcriptions were manually inspected, coded and categorized. The results show that overall intelligibility was high for both tools. However, many features of normal FL speech, such as vowel and consonant substitution, caused the ASR dictation tools to misinterpret the message leading to communication breakdowns. The results are discussed from a pedagogical viewpoint. Após a pandemia de Covid-19, as tecnologias digitais estão mais presente nas salas de aula do que nunca. O Reconhecimento Automático da Fala (RAF) oferece possibilidades interessantes para os aprendizes de uma língua estrangeira (LE) aumentarem sua produção oral. O RAF é especialmente adequado para a aprendizagem autônoma de pronúncia quando usado como uma ferramenta de ditado que transcreve a fala do estudante (McCROCKLIN, 2016). No entanto, as ferramentas de RAF são treinadas com falantes nativos monolíngues em mente, não refletindo a realidade dos falantes de inglês em uma escala global. Consequentemente, o presente estudo examinou quão bem duas ferramentas de ditado que utilizam ASR entendem a fala com sotaque estrangeiro e quais características causam falhas de inteligibilidade. Amostras de fala em inglês de 15 falantes de português brasileiro e 15 falantes de espanhol foram obtidas de um banco de dados online (WEINBERGER, 2015) e submetidas a duas ferramentas de ASR: Microsoft Word e VoiceNotebook. As transcrições foram manualmente inspecionadas, codificadas e categorizadas. Os resultados mostram que a inteligibilidade geral dos falantes foi alta para ambas as ferramentas. No entanto, muitas características normais, como modificações vocálicas e consonantais, da fala em LE fizeram com que as ferramentas de ditado ASR interpretassem mal a mensagem, levando a falhas de comunicação. Os resultados são discutidos do ponto de vista pedagógico. pubtype: Academic Journal doctype: Article src: R language: English refInfo: copyright: @attributes: flag: Y custom: Copyright of Trabalhos em Lingüística Aplicada is the property of Universidade Estadual de Campinas - Portal de Periodicos Eletronicos Cientificos and its content may not be copied or emailed to multiple sites without the copyright holder's express written permission. Additionally, content may not be used with any artificial intelligence tools or machine learning technologies. However, users may print, download, or email articles for individual use. item: Trabalhos em Lingüística Aplicada holder: Universidade Estadual de Campinas - Portal de Periodicos Eletronicos Cientificos dt: @attributes: year: 2022 holdings: @attributes: islocal: N |
|---|