Новости и аналитика

Патент Socra AI на персонализацию обучения: разные ошибки — разные следующие задания

Как US11238749B2 связывает метки неверных вариантов, группы анализа и обновление оценки освоения с подбором практических заданий.

Неверный вариант связан через дерево учебных понятий с рекомендуемыми заданиями
Схема связи выбранного неверного варианта с учебными понятиями и дальнейшей практикой.

Два учащихся могут ошибиться в одном задании по разным причинам. В US11238749B2, заявленном Riiid, неверным вариантам присваиваются метки учебных понятий, а по истории ответов обновляется оценка освоения и выбираются следующие вопросы. Условное упражнение по английскому объясняет механизм; опубликованные функции Santa от Socra AI рассматриваются отдельно.

Одинаковый балл не означает одинаковую трудность

Представим двух учащихся: один использовал настоящее время для вчерашнего события, другой выбрал прошедшее время, но поставил глагол в единственном числе при подлежащем во множественном. У обоих одна ошибка, однако практика может требоваться разная.

Если сохранять только номер задания или раздел, оба могут снова получить одинаковый материал. Сведения о выбранном неверном варианте помогают решить, следует ли проверить время глагола или согласование с подлежащим.

Патент Riiid US11238749B2 выдан в США 1 февраля 2022 года. Он описывает метки вариантов, обновление оценки освоения понятий и персонализацию заданий. Позднее Riiid сменила название на Socra AI.

Понятия, метки и неверные варианты

Описанный процесс строит дерево учебных элементов: грамматика, глаголы, затем время и согласование. Метки обозначают отдельные элементы, а группы анализа объединяют их в подходящие для оценки единицы.

База хранит не только вопросы и ответы, но и метки каждого неверного варианта, то есть дистрактора. Вариант может иметь несколько меток; основная метка отражает понятие, которое автор намерен проверить.

Подробные метки помогают различать возможные затруднения, но небольшой истории может не хватить для надёжной оценки каждой метки. Группировка позволяет использовать сведения из нескольких заданий.

Как ответы меняют оценку освоения

Учащийся отправляет ответ с терминала. Сервер анализа сопоставляет его с базой заданий и поддерживает показатель для каждой группы. В патенте он назван conquest rate; здесь он объясняется как оценка освоения материала.

В примере обработки ошибки учитываются основной дистрактор, связанный с проверяемым понятием, и фактически выбранный вариант. Если у варианта несколько меток, вес распределяется между ними, а вклады одинаковых меток складываются. Выбор, связанный и со временем, и с согласованием, может повлиять на оба показателя.

При добавлении новых результатов влияние прежнего значения можно уменьшать. Иначе давняя ошибка и недавний ответ сохраняли бы одинаковое значение даже после усвоения темы. Обновление учитывает структуру вариантов и изменение истории, а не только число правильных ответов.

Это оценка по наблюдаемым ответам. Учащийся мог угадать или неверно прочитать вопрос. Поэтому важны повторяющиеся признаки внутри группы и дальнейшие обновления; показатель не даёт прямого доступа к пониманию человека.

Условное упражнение по английскому

Возьмём «The reports ___ ready yesterday.». Правильный вариант — were. Are соответствует множественному числу, но не времени yesterday; was выражает прошедшее время, но не согласуется с множественным подлежащим. Автор может обозначить первый дистрактор меткой времени, второй — согласования.

При повторении таких ошибок первому учащемуся можно предложить упражнения на связь временных выражений с формой глагола, второму — на множественное подлежащее. Это вымышленный пример связи меток и рекомендаций.

Два условных пути ошибок ведут к разным учебным целям и следующим вопросам
Условное сравнение: разные ошибки ведут к упражнениям на время или согласование подлежащего и глагола.

Описание включает выбор вопросов с основной меткой из слабых групп либо кандидатов с набором меток, похожим на прежние ошибки. Терминал передаёт ответ, сервер обновляет состояние по меткам, выбирает кандидатов из базы и возвращает следующее задание.

Какие функции заявлены для Santa

Socra AI представляет Santa как AI-сервис подготовки к TOEIC и TOEFL. Компания описывает прогнозирование баллов с учётом экзамена, анализ слабых сторон и рекомендации по обучению, обновляемые по мере занятий. Эти сведения не подтверждают реализацию конкретных признаков формулы данного патента и не гарантируют результат учащегося.

Как объяснить выбор следующего задания

Сначала нужны согласованные правила присвоения меток. Если один специалист относит вариант к ошибке времени, а другой — к лексике, рекомендации могут различаться. Запись критериев и исключений, а также оценка согласованности специалистов помогают понять качество разметки.

Сравнивайте учащихся с похожей долей правильных ответов, но разными ошибками. Сохраняйте исходные метки, выбранные варианты, обновлённые группы, кандидатов и итоговое задание. Включайте варианты с несколькими метками и новых пользователей с короткой историей.

Для технического описания в связи с патентованием укажите входы и правила сужения кандидатов. Сравнение подсчёта правильных ответов, использования меток и взвешивания истории при одинаковых условиях показывает вклад отдельных шагов. IPLEX консультирует по оформлению этих процессов и наблюдений.

Сохранены исходные обозначения и формы; содержание раскрыто в тексте.

Упражнение вымышлено. Объясняются отдельные технические положения патента; сведения о Santa отделены от оценки реализации формулы.

Документ USPTO по US11238749B2

Текст патента и сведения о публикации

Официальное описание Santa

Сообщение о переименовании Riiid в Socra AI

Патент Google на понимание документов: совместный анализ заголовков, текста, изображений и их расположения

Патент Nota на сжатие модели: дообучение группы слоёв по сохранённым входам и выходам

Материалы об AI-проектах IPLEX помогут подготовить обсуждение персонализированного обучения и рекомендательных технологий.

Опыт патентного поверенного Ким Ёндока в области ИИ

Исходная публикация в Tistory

Прочитать корейский оригинал

Материал отражает ситуацию на дату публикации. Обратитесь в IPLEX, чтобы обсудить обстоятельства вашего дела.
Обсудить этот вопрос ↗Все статьи

Обсудим следующий шаг в защите ваших технологий и интеллектуальной собственности.