La misión de Duolingo es desarrollar la mejor educación del mundo y hacerla disponible universalmente. Pero, ¿cómo sabemos si quienes aprenden en nuestros cursos están alcanzando sus objetivos? ¡Ahí es donde entra en juego nuestro equipo de investigación! 

Llevamos adelante estudios de eficacia para saber qué tan bien funciona Duolingo. Cuando una persona usa Duolingo para aprender un nuevo idioma, ¡queremos asegurarnos de que está adquiriendo las habilidades que necesita para comunicarse en ese idioma!

Para guiar nuestro programa de investigación de eficacia, desarrollamos un marco de trabajo que nos ayuda a evaluar los aspectos más importantes de la experiencia de aprendizaje en la app. Este marco también nos ayuda a entender cómo nuestros usuarios usan el idioma fuera de la app. Después de todo, la mayoría de las personas no solo aprenden para ganar EXP, ¡sino que tienen propósitos muy importantes en la vida real! 

Estás cuatro preguntas son los pilares de nuestro marco de eficacia para ayudar a guiar nuestro programa de investigación.

1. ¿Los usuarios creen que Duolingo es divertido, atractivo y útil?

Esta pregunta se enfoca en qué tan atractivo resulta Duolingo y si a los usuarios les gusta aprender en nuestra app. Después de todo, no importa qué tan elaboradas sean nuestras lecciones si no quieres volver a ellas.

Para responder a esta pregunta recopilamos comentarios directamente de los usuarios. Una forma de hacerlo es a través de entrevistas de experiencia de usuario, donde nos reunimos con usuarios reales individualmente para escuchar sus experiencias, objetivos y desafíos. También realizamos encuestas con miles de usuarios sobre sus actitudes frente a sus lecciones y qué tan útiles sienten que son sus cursos. Y, por supuesto, también analizamos los datos que obtenemos de los usuarios directamente en la app. Por ejemplo, ¿los usuarios regresan todos los días? ¿Cuánto tiempo dedican a aprender? ¿Qué tipo de lecciones les gusta hacer cada día? ¡Cada una de estas preguntas nos dice cuánto les encanta usar la app de Duolingo a los usuarios!

2. ¿Están adquiriendo los usuarios los saberes y las habilidades que estamos enseñando?

¡El hecho de que creamos que estamos enseñando algo, no significa que nuestros usuarios lo estén aprendiendo! Es por eso que nos enfocamos en si nuestros usuarios dominan las habilidades y la información que enseñamos en nuestros cursos. Evaluar el dominio de los usuarios del contenido del curso nos ayuda a entender qué estamos enseñando bien y en qué podemos mejorar.

Para responder a esta pregunta, evaluamos qué tan bien conocen los usuarios el vocabulario y la gramática que se enseñan en sus lecciones y si desarrollan sus habilidades de lectura, comprensión oral, conversación y escritura al usar la app de Duolingo. También planificamos y desarrollamos los cursos para que tengan el máximo impacto en los resultados del aprendizaje. Por ejemplo, evaluamos si nuestros métodos de enseñanza siguen los lineamientos científicos y se basan en las últimas investigaciones, si el contenido de nuestro curso es de alta calidad y si nuestros modelos de IA son lo suficientemente potentes como para garantizar un aprendizaje personalizado que adapta las lecciones al nivel actual de cada usuario y que continúe adaptándose a medida que mejoran. 

3. ¿Pueden los usuarios usar lo que aprenden en sus cursos para comunicarse en la vida real? 

Para la mayoría de los usuarios, responder todos los ejercicios correctamente en la app no es el objetivo final de su aprendizaje. ¡Los usuarios quieren usar su nuevo idioma en el mundo real, en actividades de la vida cotidiana! Este aspecto del marco de trabajo se centra en la aplicación y se enfoca en cuánto pueden transferir los usuarios de lo que aprenden en Duolingo a otros contextos de aprendizaje o escenarios de la vida real. 

Para responder a esta pregunta, realizamos estudios de investigación a través de evaluaciones y tareas simuladas que se centran en el desempeño de un usuario o en cómo usa el idioma en situaciones realistas. Por ejemplo, si la motivación de un usuario es viajar, ¿puede realizar tareas relacionadas con el viaje (por ejemplo, reservar boletos de avión, registrarse en un hotel) con el idioma que aprende en Duolingo? 

4. ¿Alcanzan los usuarios el nivel de competencia previsto como resultado del aprendizaje? 

Todas esas preguntas nos ayudan a evaluar el proceso de aprendizaje, pero los objetivos de los usuarios con el idioma también importan. En última instancia, queremos que nuestros usuarios alcancen un nivel previsto de dominio. Los cursos de Duolingo están alineados con el Marco Común Europeo de Referencia (CEFR), un estándar internacional de competencia de idiomas que define objetivos de aprendizaje para hablantes de nivel básico (A1 y A2), intermedio (B1 y B2) y avanzado (C1 y C2), por lo que cada sección de nuestros cursos tiene un objetivo de competencia establecido. Por ejemplo, cuando los usuarios completan el contenido A2 en Duolingo, esperamos que alcancen el nivel de competencia A2. 

Ilustración de los 6 niveles de competencia en el idioma del MCER: los niveles son A1, A2, B1, B2, C1 y C2. Cada nivel está representado con una barra de colores. A1 es la barra más corta y C2 es la más alta. A1 y A2 están etiquetados como "Básico", B1 y B2 como "Intermedio" y C1 y C2 como "Avanzado".

Para responder a esta pregunta, evaluamos las habilidades de idiomas de los usuarios con evaluaciones de dominio estandarizadas e interpretamos sus puntajes a partir de escalas de competencia preestablecidas. Hacemos esto a través de estudios de investigación con usuarios en diferentes puntos del curso y haciéndoles tomar pruebas independientes de idiomas para evaluar sus destrezas. Una vez que los usuarios alcanzan los niveles de competencia deseados, pueden lograr sus propios objetivos de aprendizaje, que pueden incluir aprobar un examen de inmigración, ver películas extranjeras en su idioma original, cumplir con los requisitos de idioma para programas académicos, viajar al extranjero, encontrar trabajo y mucho más.

Impulsado por la eficacia

Este marco de eficacia de cuatro partes representa la misión de Duolingo de brindar la mejor educación del mundo. En Duolingo, nuestra investigación de eficacia responde preguntas como qué tan efectivos son nuestros cursos, en qué áreas y niveles enseñamos mejor y dónde podemos continuar mejorando para ayudar a nuestros usuarios a tener éxito.