Correct pronunciation is crucial to grasp an adequate communication ability in a foreign language. Nevertheless, traditional foreign language learning systems usually focus on the development of linguistic competencies related to grammar or lexicon. The quality of spoken language technologies (speech synthesis and recognition) has noticeably improved and, as a consequence, an increasing number of second language learning tools have included it. Serious games show great potential as educational resources. Their social versions encourage competitive and colaborative learning scenarios for individuals and groups. The proposal of this thesis project focuses on developing a system for improving foreign language pronunciation. A serious game to be run on a mobile platform is proposed, and a learning method which makes use of speech technology and is designed to guide and motivate users to a continuous practice over time, in a controlled way.
El debate sobre la contribuci´on de las TIC al
aprendizaje de lengua extranjera (L2)
frente a los m´etodos tradicionales (Thomson y
Derwing, 2014) ha aumentado a lo largo de
la u´ltima d´ecada. Esto ha motivado la
aparicio´n de nuevas propuestas basadas en el uso
de aplicaciones para dispositivos m´oviles
inteligentes
En comparacio´n con la atenci´on prestada
al aprendizaje asistido por ordenador de los
aspectos l´exicos (Yoon, 2008) y gramaticales
El ´exito de las tecnolog´ıas del habla en
el aprendizaje de L2 est´a directamente
relacionado con la elecci´on de la metodolog´ıa de
entrenamiento correcta, que deber´a atender
adecuadamente los aspectos de
realimentacio´n autom´atica instant´anea y de un
adecuado disen˜o de las actividades, para optimizar
el tiempo de uso de las herramientas CAPT
Un par m´ınimo
La ((gamificaci´on)) es el uso de
estrategias (pensamientos y mec´anicas) de juego en
entornos ajenos al juego
Si bien la inclusi´on de los elementos
competitivos en cualquier sistema pedag´ogico
debe realizarse con precauci´on, son varios los
estudios que indican que la competitividad en
el contexto del aprendizaje basado en juegos
facilita la consecuci´on de objetivos de
aprendizaje
En la revisi´on del estado de la cuesti´on acerca
de la ensen˜anza de pronunciacio´n de lengua
extranjera de
Los sistemas CAPT iniciales se limitaban
a ejercicios de escucha, repetici´on y elecci´on
de sonidos mediante un ordenador (Wang,
2002). Progresivamente, se van
incorporando sistemas de reconocimiento autom´atico de
voz (ASR) y de s´ıntesis de habla (TTS) como
consecuencia de las potenciales ventajas que
puede aportar el uso de esta tecnolog´ıa:
evaluacio´n din´amica, realimentaci´on
individualizada autom´atica e inmediata, pr´actica m´as
intensiva, contexto libre de ansiedad y
oportunidades para la correcci´on de errores
Para evaluar la posible mejora de la
pronunciaci´on utilizando CAPT se pueden seguir
dos m´etodos: asignar valores subjetivos de
evaluadores humanos
Existen experimentos CAPT con
realimentaci´on muy simple (y en muchos casos
insuficiente) como por ejemplo, reducir el
resultado a correcto, incorrecto o puntuaciones
de la pronunciaci´on
En el ´ambito de la ((gamificaci´on)), apenas
se encuentran au´n experimentos en el aula de
sobre la importancia de la interacci´on social
en el aprendizaje de segundas lenguas,
aunque aparecen ya estrategias y consejos para
llevarlos a cabo
El objetivo central de la tesis es analizar, comparar y proponer un sistema de gu´ıa y evaluaci´on autom´atica de la pronunciacio´n orientada a estudiantes de lengua extranjera, utilizando s´ıntesis y reconocimiento autom´atico del habla para la consecuci´on y mejora de los ejercicios de pronunciaci´on, facilitando as´ı el aprendizaje aut´onomo del estudiante en un entorno privado, sin situaciones de ansiedad, a su propio ritmo y con la posibilidad de recibir realimentaci´on instant´anea en cualquier momento y lugar. Este objetivo general conlleva la consecuci´on de los siguientes objetivos particulares:
metodolog´ıas para la mejora de pronunciaci´on de lengua extranjera.
para´metros de caracterizaci´on del habla m´as adecuados para la clasificaci´on de nivel de pronunciaci´on de las personas.
un m´etodo de obtenci´on de un conjunto de pares m´ınimos espec´ıficos de problemas de pronunciaci´on extranjera segu´n la L1, supervisado por experto.
pec´ıficos de reconocimiento de voz para la identificaci´on de errores de pronunciaci´on asociados a par´ametros clave de caracterizaci´on de nivel.
un sistema que proporcione realimentaci´on individualizada al usuario para su mejora de la pronunciaci´on extranjera.
Tras la revisi´on pormenorizada del estado de la cuesti´on, se ha concluido que la selecci´on de la metodolog´ıa de entrenamiento de la pronunciaci´on es un elemento clave. En este sentido, la decisi´on de comenzar por una estrategia basada en el uso de pares m´ınimos est´a demostrando ser fruct´ıfera. No obstante, desde los primeros pasos ha resultado evidente que la elecci´on de los pares que el participante debe reconocer y pronunciar es un aspecto clave y que dicha selecci´on de pares debe estar adaptada, necesariamente, a las caracter´ısticas de su L1. Habida cuenta de que se est´an desarrollando aplicaciones y experimentos para diversos pares L1-L2, se ha hecho necesario tambi´en el disen˜o de un algoritmo para la preparaci´on de candidatos de pares m´ınimos en el idioma L2 objetivo, que luego puedan ser revisados por un experto (Tejedor-Garc´ıa y Escudero-Mancebo, 2018).
Como experimento inicial, se ha disen˜ado
una versi´on de aplicaci´on para uso
individual, de cara a valorar la utilidad de la
tecnolog´ıa del habla (ASR y TTS) para clasificar
a los usuarios segu´n su nivel de competencia
en pronunciacio´n
En una segunda etapa, se han
incorporado elementos de ((gamificaci´on)) a la
aplicaci´on m´ovil para poder valorar tanto aspectos
de facilidad de uso como, sobre todo, el nivel
de mejora de la pronunciaci´on alcanzable por
medio de esta aproximaci´on y usando pares
m´ınimos como metodolog´ıa de aprendizaje
En una tercera etapa, se est´an incorporando aspectos competitivos en el juego, para estudiar su influencia sobre la motivacio´n del usuario y la mejora de la pronunciaci´on. En esta versi´on, la aplicaci´on se plantea como un juego de cara´cter competitivo en el que los usuarios pueden obtener logros y puntuaciones y lanzar retos de competici´on a otros usuarios como parte de la din´amica de uso de la aplicaci´on de mejora de la pronunciaci´on. Un an´alisis preliminar de estos resultados est´an pendientes de revisi´on.
En paralelo con las dos etapas anteriores, se han desarrollado tambi´en variantes de la aplicaci´on orientadas a un uso pautado de la misma, definido por expertos en ensen˜anza de la lengua extranjera L2 en cada caso. El objetivo de estos experimentos es proporcionar datos y conclusiones sobre la forma de mejorar la realimentaci´on a los usuarios en caso de fallo. Los resultados de estos experimentos en configuraci´on guiada y controlada esta´n tambi´en en proceso de revisi´on.
Como u´ltima etapa, se plantea un estudio sistema´tico de las caracter´ısticas del habla adquirido durante los experimentos realizados para poder determinar el conjunto de rasgos clave a la hora de poner en correlacio´n los fallos de pronunciaci´on con las valoraciones de expertos y, por otro lado, para facilitar la extracci´on a partir de ello de sistemas de clasificacio´n autom´atica que puedan guiar la formulaci´on de recomendaciones personalizadas sobre modo y punto de articulaci´on. 5
Adema´s de la discusi´on sobre metodolog´ıa y resultados obtenidos, son varias las cuestiones de investigaci´on que se plantean, entre las que destacan las siguientes: 1. ¿Qu´e impacto puede tener el uso de un reconocedor de voz comercial frente a sistemas personalizados, disen˜ados expl´ıcitamente para la mejora de pronunciaci´on, y a qu´e nivel debe abordarse la adaptaci´on (usuario, lengua L2)? 2. ¿Qu´e nivel de mejora de pronunciacio´n puede lograrse en un plazo de exposici´on m´as largo y qu´e impacto tiene la metodolog´ıa empleada? 3. ¿Qu´e influencia tienen los elementos de juego y la configuraci´on competitiva sobre la motivaci´on, el nivel de aprendizaje, la auto-conciencia de nivel, o el grado de ansiedad o frustraci´on del usuario?
Este trabajo ha sido parcialmente financiado por Ministerio de Econom´ıa y Competitividad y Fondos FEDER – clave de proyecto: TIN2014-59852-R Videojuegos Sociales para la Asistencia y Mejora de la Pronunciaci´on de la Lengua Espan˜ola, por la Universidad de Valladolid (Convocatoria 2015 de Contratos Predoctorales) y por la Consejer´ıa de Educaci´on de Junta de Castilla y Le´on en el proyecto (VA050G18).
Wiggins, B. E. 2018. An Overview and Study on the Use of Games, Simulations, and Gamification in Higher Education. En Gamification in Education: Breakthroughs in Research and Practice. IGI Global, pa´ginas 191–204.