Las plataformas de aprendizaje de idiomas suelen utilizar la 'cobertura de palabras' como una métrica principal de progreso, calculando qué porcentaje del total de palabras habladas en un programa conoce un estudiante. Sin embargo, esta métrica puede ser engañosa porque pondera muy fuertemente las partículas gramaticales de alta frecuencia (como 'no' o 'wa'). En el anime 'Frieren', las 100 palabras más comunes por sí solas representan el 68.3% de la cobertura total de palabras. Aunque estas palabras aparecen constantemente, conocerlas no garantiza que un espectador pueda seguir una frase completa si incluso una sola palabra menos común permanece desconocida.
Este gráfico visualiza el hallazgo principal del estudio sobre la brecha entre conocer palabras individuales y comprender frases completas.
La discrepancia entre la cobertura y la comprensión está impulsada principalmente por la longitud promedio de las frases. En 'Frieren', una frase típica contiene unas siete palabras. Para comprender una frase por completo, un espectador debe conocer las siete palabras; si falta solo una, la frase permanece como 'no comprendida' en esta métrica específica. Matemáticamente, con una cobertura de palabras del 85.9%, la probabilidad de conocer las siete palabras de una frase es aproximadamente del 35% (0.859 elevado a la séptima potencia), lo que se alinea estrechamente con la tasa de comprensión medida del 38.4%. Esta brecha persiste en varios títulos, como 'Death Note' y 'Jujutsu Kaisen', donde las cifras de alta cobertura a menudo ocultan un porcentaje mucho menor de frases totalmente comprendidas.
El análisis de los datos sugiere que ampliar un vocabulario de 500 a 1,000 palabras proporciona un impulso mucho mayor a la comprensión de las frases que a la cobertura de palabras. Mientras que la cobertura solo aumenta unos 6.5 puntos en 'Frieren', el porcentaje de frases comprendidas salta 22.1 puntos. Esto ocurre porque muchas frases están a solo una palabra de ser comprendidas por completo. Sin embargo, estas 'brechas de una palabra' a menudo se llenan con una amplia variedad de palabras diferentes, lo que significa que, si bien una sola palabra nueva podría desbloquear varias frases a la vez, un estudiante no puede confiar en un pequeño puñado de palabras para cerrar la brecha hacia la fluidez total. Además, el estudio señala que la polisemia —palabras con múltiples significados— puede hacer que estas cifras parezcan más altas de lo que son en la práctica, ya que un estudiante podría conocer el significado más común de una palabra pero no el significado específico utilizado en el contexto de una frase compleja.
En última instancia, la investigación destaca que, si bien la cobertura de palabras es un punto de partida útil, es un indicador incompleto de la comprensión en el mundo real. La eficacia de una lista de vocabulario depende en gran medida del léxico específico del programa; por ejemplo, las 2,000 palabras más comunes en el japonés general proporcionaron tasas de comprensión significativamente más bajas (23.4% a 37.6%) en comparación con las 2,000 palabras principales específicas de los programas analizados (74.3% a 93.3%). Esto sugiere que la adquisición de vocabulario dirigida, centrada en las palabras específicas utilizadas en una serie preferida, es un camino más eficiente hacia la comprensión que las listas de frecuencia general por sí solas.