by Lucy Portnoff and Xiangying Jiang
Duolingo strives to deliver world-class education for free. We combine engaging game mechanics with efficient, proven teaching strategies to get our learners closer to their language goals. Last year, we demonstrated that learners who complete five units of beginner material achieve reading and listening proficiency comparable to students who took four semesters of university language courses, and new research shows we’re effective at teaching beginner-level speaking skills, too.
But we didn’t stop there — Duolingo also teaches intermediate content! Our latest research found that Duolingo learners who reached the end of Unit 7, just halfway through their course’s intermediate material, had reading and listening skills comparable to students who took five university semesters.
Measuring reading and listening abilities
Our new study assesses learners’ reading and listening skills after they’ve completed seven units of the Duolingo French and Spanish courses, which brings them to the halfway point of the intermediate-level material. The proficiency level of each unit is based on international standards set in the Common European Framework of Reference for Languages (CEFR); at the end of Unit 7, learners have completed all of A1 and A2 and half of B1.
In order to measure language ability, we formally tested Duolingo learners soon after they completed Unit 7. Our learners come from all over the world, so our study participants did, too! We included only learners who reported having little to no prior knowledge of the language and who didn’t use additional apps, classes, or study materials; this helped us measure how much learners can achieve when studying on Duolingo alone. A sample of 340 eligible Duolingo learners took reading and listening tests from the American Council on the Teaching of Foreign Languages (ACTFL) — the same tests that U.S. university students took in a previous research study by Tschirner (2016). Having those results meant we could compare reading and listening scores between Duolingo learners and university students. This allowed us to gauge Duolingo learners’ progress, using a more familiar and traditional learning environment as a point of reference.
Our previous work found that five units of Duolingo teach the same language proficiency as four semesters of university study. This new study focused on Duolingo’s intermediate content, and the results were clear: after seven units, Duolingo learners had reading and listening scores meeting ACTFL’s standard for intermediate proficiency and comparable to university students in their fifth semester of language study! In fact, Duolingo learners outperformed the university students in Spanish reading and listening and in French listening.
We’re always working to improve our courses, and we’re thrilled to know that intermediate learners on Duolingo are getting a high-quality education.
Taking you further in your language journey
Duolingo’s mission is to develop the best education in the world and make it universally available. We’ve shared our progress in how well we teach beginner-level reading, listening, and speaking, and our latest study shows our intermediate material is effective, too. Next, we’re excited to apply our efficient, effective teaching strategies to all of our courses, at more advanced levels, and in every language skill. We invite you to keep up with the latest efficacy research and testing at duolingo.com/efficacy!
References
Tschirner, E. (2016). Listening and reading proficiency levels of college students. Foreign Language Annals, 49, 201-223.
Español: ¿Puedes alcanzar un nivel intermedio de comprensión escrita y oral con Duolingo?
En Duolingo nos esforzamos por ofrecer una educación de primer nivel de forma gratuita. Combinamos atractivas mecánicas de juegos con estrategias educativas eficientes y comprobadas para acercar a nuestros usuarios a sus metas de idiomas. El año pasado demostramos que los usuarios que completan cinco secciones de contenido para principiante logran un desempeño en comprensión oral y escrita comparable con el de estudiantes que cursaron cuatro semestres de clases de idiomas en la universidad, y los nuevos estudios demuestran que también enseñamos de forma efectiva la habilidad de hablar al nivel principiante.
Pero no nos detuvimos ahí: ¡Duolingo también enseña contenido de nivel intermedio! Nuestro estudio más reciente demostró que los usuarios que alcanzaron el final de la sección 7, justo a la mitad del contenido intermedio del curso, desarrollaron habilidades de comprensión oral y escrita comparables con las de estudiantes que cursaron cinco semestres en la universidad.
Cómo medir tus habilidades
Nuestro último estudio evaluó las habilidades de comprensión escrita y oral de nuestros usuarios luego de que completaran siete secciones de los cursos de español y francés de Duolingo, que los coloca en el punto medio del contenido de nivel intermedio. El nivel de dominio de cada sección está basado en los estándares internacionales establecidos en el Marco Común Europeo de Referecia para Idiomas (MCER, o CEFR en inglés). Al completar la sección 7, los usuarios completaron los niveles A1 y A2, y la mitad del nivel B1.
Para poder medir las habilidades de idiomas, evaluamos de manera formal a los usuarios en cuanto completaron la sección 7. Los participantes de este estudio vinieron de todas partes del mundo, ¡tal como nuestros usuarios! Incluimos únicamente usuarios que señalaron no tener conocimientos previos del idioma y que no usaron apps, clases o materiales de estudio adicionales. Esto nos permitió medir cuánto pueden aprender los usuarios cuando aprenden solamente en Duolingo. Los 340 usuarios que cumplieron los requisitos y fueron seleccionados hicieron un examen de comprensión escrita y oral del ACTFL (Consejo Americano para la Enseñanza de Lenguas Extranjeras), el mismo examen que hicieron los estudiantes universitarios en Estados Unidos en un estudio realizado por Tschirner (2016). Tener estos resultados nos permitió comparar los puntajes de comprensión escrita y oral de los usuarios de Duolingo y los estudiantes universitarios. Además, nos permitió medir el progreso de los usuarios en un entorno más tradicional y familiar como punto de referencia.
Resultados emocionantes para los usuarios de nivel intermedio
Nuestros estudios anteriores demostraron que cinco secciones de Duolingo enseñan el mismo nivel de dominio de idiomas que cuatro semestres de clases en una universidad. Este nuevo estudio se enfocó en el contenido intermedio de Duolingo y los resultados fueron claros: después de siete secciones, los usuarios de Duolingo obtuvieron puntajes de comprensión escrita y oral que alcanzaban los estándares del ACTFL para el dominio de nivel intermedio y que son comparables con los de estudiantes universitarios en su quinto semestre de clases de idiomas. De hecho, ¡los usuarios de Duolingo superaron a los estudiantes universitarios en comprensión escrita y oral del español y en comprensión oral del francés!
Los resultados en comprensión escrita y oral de los usuarios de Duolingo son comparables con los de estudiantes universitarios que completaron cinco semestres de clases de idiomas y alcanzaron el estándar del ACTFL para el nivel de dominio intermedio (calificación de 4-6).
Trabajamos constantemente para mejorar nuestros cursos y estamos muy emocionados por saber que los usuarios de nivel intermedio en Duolingo están recibiendo una educación de alta calidad.
Avanza en tu aventura de aprendizaje de idiomas
La misión de Duolingo es desarrollar el mejor método educativo en el mundo y hacerlo disponible a todos por igual. Hemos compartido cuánto progresamos para desarrollar las habilidades de comprensión oral, escrita y conversación a nivel principiante. Nuestros estudios más recientes demuestran que nuestro contenido de nivel intermedio también es efectivo. Estamos emocionados por aplicar nuestras efectivas y eficientes estrategias educativas a cada uno de nuestros cursos, en los niveles más avanzados y para cada habilidad del idioma. Queremos invitar a cada uno de ustedes a seguir de cerca nuestras más recientes investigaciones y estudios en duolingo.com/efficacy. ¡Siempre hay más por descubrir!
Referencias
Tschirner, E. (2016). Listening and reading proficiency levels of college students. Foreign Language Annals, 49, 201-223.
