Seguimiento del progreso de los tutores japoneses con IA: métricas, registros y autoevaluaciones mensuales

Por qué las sesiones de IA necesitan sus propias medidas

Las pruebas y los niveles miden lo que sabes. La práctica de la conversación con IA trata sobre lo que puedes hacer en el momento, y los dos se distancian más de lo que los alumnos esperan. Un alumno que aprueba un examen escrito aún puede realizar una corrección cada diez segundos en un juego de roles, y un alumno con un vocabulario modesto puede recorrer una tienda, una clínica y una llamada telefónica sin apenas tropezar. Si el objetivo es hablar, las medidas deben surgir del hablar.

La buena noticia es que una IA Sensei abarata las mediciones. Cada sesión termina con una lista de correcciones, cada misión tiene un punto final claro y la misma tarea se puede repetir exactamente un mes después. Esa repetibilidad es algo que ninguna conversación humana ofrece y es la base de todas las métricas siguientes.

UnihongoAprendizaje japonés con IA

先月せんげつより間違いまちがいが減りへりました。Mis errores han disminuido en comparación con el mes pasado.

Correcciones por minuto en una tarea repetida

El número más útil es cuántas correcciones recibes por minuto de tu propia conversación, en una tarea que has realizado antes. La repetición importa. Una tarea nueva siempre produce más correcciones porque encuentras vocabulario nuevo y situaciones nuevas, por lo que comparar una misión nueva con una antigua te informa sobre las misiones, no sobre ti. Elija tres tareas principales en su primera semana, anote las correcciones y aproximadamente cuánto tiempo habló, y vuelva a ejecutarlas una vez al mes.

Clasifique las correcciones en tipos aproximados cuando las registre: partículas, formas verbales, cortesía, elección de palabras, pronunciación. La caída total es buena; el cambio de mezcla es más interesante. Los errores de partículas suelen desaparecer primero, los errores de cortesía después y los errores de elección de palabras al final, porque necesitan una exposición más amplia. Si un tipo no cae después de dos meses, ahí es donde deberían apuntar las sesiones del próximo mes.

No persigas el cero. Un ancla sin correcciones ha dejado de enseñaros; reemplácelo por uno más duro.

Temas y situaciones completadas.

La segunda medida es la cobertura: cuántas situaciones puedes afrontar ahora desde el primer saludo hasta el final sin pedir ayuda ni cambiar de idioma. Esto se acerca más a lo que realmente quieres del japonés que cualquier partitura. Mantenga una lista de situaciones, marque cada una la primera vez que la termine sin ayuda y agregue una segunda marca cuando pueda terminarla en condiciones más difíciles, como un compañero más rápido o menos cooperativo.

Las situaciones vienen en familias. Una vez que pueda registrarse en un hotel, la mayor parte del camino será registrarse en una clínica o en un gimnasio, porque la forma del intercambio es la misma. Registra las situaciones por familia para que puedas ver cuáles están cubiertas y cuáles no, y deja que los huecos elijan las misiones del próximo mes. Un alumno que ha analizado todas las situaciones del taller y de ningún lugar de trabajo sabe exactamente qué hacer a continuación.

Frases retenidas después de un mes.

El tercer compás capta lo que esconden las sesiones: el olvido. Una frase que usaste correctamente en un juego de roles se siente aprendida, pero la verdadera prueba es si aún puedes reproducirla un mes después sin el contexto que la impulsó. Después de cada sesión, añade al registro dos o tres frases que quieras conservar, con la situación en inglés. Un mes después, dale al Sensei las situaciones inglesas e intenta producir las japonesas.

Califique simplemente: producido correctamente, producido con una corrección o no producido. Diez frases probadas mensualmente dan una cifra de retención que es fácil de comparar. La baja retención no es un fracaso; le indica que las frases no se reutilizan y que la solución es incluirlas en chats telefónicos y misiones repetidas en lugar de agregar más.

El autotest mensual

Junte las tres medidas en una sesión en una fecha fija cada mes. Tarda aproximadamente media hora y produce una línea en el registro. Mantenga el formato idéntico siempre, porque el valor está en la comparación, no en un solo resultado.

• Vuelva a ejecutar las tres tareas de anclaje y registre las correcciones por minuto para cada una.
• Pídale al Sensei que clasifique las correcciones por tipo y observe la combinación.
• Marque cualquier situación completada sin ayuda por primera vez este mes.
• Vuelva a probar diez frases del registro del mes pasado y puntúelas
• Mantenga una charla gratuita de cinco minutos sobre un tema nuevo y cuente las solicitudes de ayuda.
• Escriba una línea: fecha, tres puntuaciones ancla, situaciones marcadas, retención sobre diez
• Elija las anclas y misiones del próximo mes de la columna más débil

El chat gratuito sobre un tema nuevo es lo más parecido a una conversación real en la prueba. Su número, la frecuencia con la que necesitó una palabra, es el que debe vigilar durante seis meses.

Mantener un registro que sobreviva

Los troncos mueren de ambición. Una página por sesión con reflexiones, nuevas palabras y objetivos se abandona al cabo de quince días. El registro que dura es de una línea por sesión, escrita en el minuto posterior a la aparición de las correcciones, más una línea más larga por mes. Guárdalo en cualquier lugar que abras a diario, una aplicación de notas o una hoja de cálculo, y nunca lo rediseñes.

Una línea de sesión contiene la fecha, la tarea, la cantidad de correcciones, los minutos que habló y la corrección que más desea conservar. Ese último elemento cumple una doble función: es la semilla para la repetición del teléfono mañana y el grupo del que se extrae la prueba de retención del próximo mes. La línea mensual contiene los números de autoevaluación. Así es todo el sistema, y ​​basta con ver tres meses de cambios de un vistazo.

Que no medir

Algunas cifras son fáciles de recopilar y no dicen casi nada sobre el habla. Las rachas miden la asistencia, y una racha de charlas fáciles vale menos que tres sesiones intensas a la semana con días de descanso. Los minutos totales miden el tiempo, no lo que pasó en él. El conteo de palabras de una aplicación de vocabulario mide el reconocimiento, que es la habilidad que la conversación con IA debe ir más allá. El número de sesiones premia la práctica breve y superficial.

Los sentimientos son los más complicados. Una sesión que fue terrible, llena de correcciones, suele ser la más productiva, y una sesión que fue fluida puede que simplemente haya sido demasiado fácil. Registre los números antes de registrar el sentimiento, y si los dos no están de acuerdo durante varias semanas, crea en los números. La excepción es la motivación: si el registro muestra progreso y todavía temes las sesiones, cambia el formato, porque un método que no seguirás utilizando no tiene una métrica que valga la pena seguir.

Cuando los números dejan de moverse

Cada alumno llega a un mes en el que las anclas no mejoran. Antes de cambiar algo, comprueba las condiciones: ¿las sesiones fueron más cortas, más ruidosas o con una configuración más dura que la última vez? Si las condiciones coinciden y los números son planos, la causa habitual es que la práctica se ha vuelto cómoda. Sube la dificultad de las anclas, añade una familia de situaciones que hayas evitado o pídele al Sensei que sea un socio menos cooperativo.

Si la retención es el número plano, las frases no se reutilizan; muévalos a charlas cortas diarias. Si el número de conversaciones libres es estable mientras los presentadores mejoran, ha estado practicando guiones en lugar de conversación, y la solución son más temas sin guión. Una meseta en el registro no es un veredicto; es el registro haciendo su trabajo y diciéndole qué cambiar a continuación.