Отслеживание прогресса репетитора японского языка с помощью искусственного интеллекта: метрики, журналы и ежемесячные самопроверки

Почему сеансам ИИ нужны собственные меры

Тесты и уровни измеряют то, что вы знаете. Практика разговоров с искусственным интеллектом связана с тем, что вы можете сделать в данный момент, и эти две вещи расходятся больше, чем ожидают учащиеся. Учащийся, сдавший письменный тест, все равно может вносить исправления каждые десять секунд в ролевой игре, а учащийся со скромным словарным запасом может пройти магазин, клинику и телефонный звонок, едва споткнувшись. Если цель — говорить, то меры должны исходить из разговоров.

Хорошая новость заключается в том, что ИИ-сенсей делает измерения дешевыми. Каждая сессия заканчивается списком исправлений, каждая миссия имеет четкую конечную точку, и ту же задачу можно повторить ровно через месяц. Эту повторяемость не предлагает ни один человеческий разговор, и она лежит в основе всех приведенных ниже показателей.

UnihongoИИ изучает японский язык

先月せんげつより間違いまちがいが減りへりました。Моих ошибок стало меньше по сравнению с прошлым месяцем.

Исправлений в минуту при повторяющейся задаче

Самое полезное число — это количество исправлений, которые вы получаете за минуту своего выступления по уже выполненной задаче. Повторение имеет значение. Новая задача всегда приводит к большему количеству исправлений, потому что вы встречаете новый словарный запас и новые ситуации, поэтому сравнение свежей миссии со старой говорит вам о миссиях, а не о вас. Выберите три опорных задания в первую неделю, запишите исправления и примерно продолжительность разговора, а затем повторяйте их раз в месяц.

Распределите исправления по приблизительным типам при их регистрации: частицы, формы глаголов, вежливость, выбор слов, произношение. Общее падение — это хорошо; смена микса более интересна. Ошибки с частицами обычно исчезают первыми, ошибки вежливости — позже, а ошибки выбора слов — последними, потому что они требуют максимально широкого освещения. Если один тип не падает через два месяца, именно на это должны указывать сессии следующего месяца.

Не гонитесь за нулем. Якорь без исправлений перестал вас учить; замените его на более жесткий.

Темы и ситуации пройдены

Второй показатель — охват: сколько ситуаций вы теперь можете справиться от первого приветствия до конца, не обращаясь за помощью и не переключая язык. Это ближе к тому, чего вы на самом деле хотите от японского языка, чем любой результат. Составьте список ситуаций, отмечайте каждую из них, когда вы в первый раз завершаете ее без посторонней помощи, и добавляйте вторую галочку, когда вы можете завершить ее в более сложных условиях, например, с более быстрым или менее сговорчивым партнером.

Ситуации возникают в семьях. Как только вы сможете зарегистрироваться в отеле, вы, скорее всего, пройдете регистрацию в клинике или спортзале, потому что форма обмена та же самая. Зарегистрируйте ситуации по семьям, чтобы вы могли видеть, какие из них охвачены, а какие нет, и позвольте пробелам выбирать миссии на следующий месяц. Учащийся, который отметил каждую ситуацию в магазине и ни на одном рабочем месте, точно знает, что делать дальше.

Фразы сохраняются через месяц

Третья мера позволяет выявить то, что скрывают сеансы: забывание. Фраза, которую вы правильно использовали в ролевой игре, кажется заученной, но настоящая проверка заключается в том, сможете ли вы произнести ее месяц спустя без контекста, который ее подсказал. После каждого занятия добавляйте в журнал две-три фразы, которые хотите сохранить, с описанием ситуации на английском языке. Через месяц дайте сэнсэю английские ситуации и попробуйте воспроизвести японские.

Оценивайте просто: произведено правильно, произведено с поправкой или не произведено. Десять фраз, тестируемых ежемесячно, дают показатель удержания, который легко сравнивать. Низкое удержание не является провалом; он сообщает вам, что фразы не используются повторно, и исправление состоит в том, чтобы перенести их в телефонные чаты и повторяющиеся миссии, а не добавлять больше.

Ежемесячное самотестирование

Объедините три меры в одну сессию в фиксированную дату каждого месяца. Это занимает около получаса и выдает в журнале одну строку. Всегда сохраняйте одинаковый формат, поскольку значение находится в сравнении, а не в каком-либо отдельном результате.

• Повторно запустите три задачи привязки и запишите исправления каждую минуту для каждой.
• Попросите сэнсэя отсортировать исправления по типу и отметить сочетание.
• Отметьте любую ситуацию, завершенную без посторонней помощи впервые в этом месяце.
• Повторно протестируйте десять фраз из журнала прошлого месяца и оцените их.
• Проведите пятиминутный бесплатный чат на новую тему и посчитайте просьбы о помощи.
• Напишите одну строку: дату, три опорных балла, отмеченные ситуации, удержание из десяти.
• Выберите якоря и миссии следующего месяца из самой слабой колонки.

Бесплатный чат на новую тему максимально приближен к реальному разговору в тесте. Его номер, как часто вам требовалось слово, — это тот, за которым нужно следить в течение полугода.

Ведение журнала, который выживет

Бревна умирают от амбиций. В течение двух недель забрасывается страница за сеанс с размышлениями, новыми словами и целями. Длительность журнала составляет одну строку за сеанс, записываемую через минуту после появления исправлений, плюс одну более длинную строку в месяц. Сохраняйте его во всем, что вы уже открываете ежедневно, в приложении для заметок или в электронной таблице, и никогда не меняйте его дизайн.

Строка сеанса содержит дату, задачу, количество исправлений, количество минут, в течение которых вы говорили, и одно исправление, которое вы больше всего хотите сохранить. Этот последний элемент выполняет двойную функцию: это начальное значение для завтрашнего повторного запуска телефона и пул, из которого будет взят тест удержания в следующем месяце. Ежемесячная строка содержит данные самопроверки. Вот и вся система, и этого достаточно, чтобы увидеть три месяца перемен как на ладони.

Что не следует измерять

Некоторые цифры легко собрать и они почти ничего не говорят о разговоре. Серии измеряют посещаемость, а серия легких бесед стоит меньше, чем три тяжелых занятия в неделю с выходными. Сумма минут измеряет время, а не то, что за него произошло. Подсчет слов осуществляется на основе распознавания показателей словарного приложения, а это навык, который ИИ-разговор должен выйти за рамки. Количество занятий вознаграждает за короткую и поверхностную практику.

Чувства – самое сложное. Сеанс, который казался ужасным и полным исправлений, часто оказывается самым продуктивным, а сеанс, который казался гладким, возможно, просто был слишком легким. Запишите цифры, прежде чем записывать чувство, и если в течение нескольких недель они не согласятся, поверьте цифрам. Исключением является мотивация: если журнал показывает прогресс, а вы все еще опасаетесь сессий, измените формат, потому что метод, который вы не будете продолжать выполнять, не имеет метрики, которую стоит отслеживать.

Когда цифры перестанут двигаться

У каждого ученика бывает месяц, когда якоря не улучшаются. Прежде чем что-либо менять, проверьте условия: были ли занятия короче, шумнее или на более жестких настройках, чем в прошлый раз? Если условия совпадают и цифры не изменились, то обычная причина в том, что практика стала комфортной. Увеличьте сложность якорей, добавьте семейство ситуаций, которых вы избежали, или попросите сэнсэя быть менее сговорчивым партнером.

Если удержание — это фиксированное число, фразы не используются повторно; переместите их в ежедневные короткие чаты. Если количество бесплатных разговоров остается неизменным, а якоря улучшаются, вы практиковали сценарии, а не разговоры, и исправлением является увеличение количества незаписанных тем. Плато в журнале не является приговором; это журнал, выполняющий свою работу и сообщающий вам, что нужно изменить дальше.