新闻与洞见

Socra AI个性化学习专利:同一道错题为何推荐不同的下一题

通过虚构英语题解读US11238749B2的错误选项标签、分析组、掌握度更新及个性化练习推荐。

所选错误答案通过学习概念树连接到推荐题目的示意图
概念图:将错误选项的信息关联到学习概念,再选择后续练习。

两名学习者答错同一道题,原因可能不同。Riiid申请的美国专利US11238749B2为错误选项标注学习概念,根据作答记录更新概念掌握度,并据此推荐下一道题。本文以虚构英语练习解释其机制,再单独介绍Socra AI公开的Santa功能。

相同分数可能对应不同学习需求

假设两人答错同一道英语题:一人用现在时描述昨天的事,另一人用了过去时,却为复数主语选择了单数动词。两人都只记一处错误,但可能需要不同练习。

如果仅保存题号或章节,两人很容易被再次分配相同材料。记录所选干扰项的信息,则可以进一步分析应练习时态还是主谓一致。

Riiid的US11238749B2于2022年2月1日在美国授权,描述选项标签、概念掌握度更新及个性化出题。Riiid后来将公司名称改为Socra AI。

如何表示概念与错误选项

所述方法先把学习要素组织成树,例如由语法分到动词,再分到时态和主谓一致。标签标识各要素,分析组则把若干标签组合为适合分析的单位。

题库除题目与答案外,还保存每个错误选项,也就是干扰项的标签。一个选项可有多个标签,核心标签表示该题主要考查的概念或出题意图。

细粒度标签有助于区分可能的误解,但作答记录稀少时,未必能为每个标签形成可靠估计。按分析组归并标签,可以跨多道题汇总证据。

从作答记录更新掌握度

学习者通过终端提交答案,分析服务器将其与题库信息比对,并维护各分析组的指标。专利称之为conquest rate,本文将其解释为估计掌握度。

错误作答示例同时使用对应出题意图的核心干扰项和实际选择的干扰项。若所选选项有多个标签,就把权重分配到这些标签,再合并同一标签的贡献。因此同时涉及时态与一致关系的选择,可以对两项都提供信息。

加入新结果时,可以降低既有指标的影响。否则,陈旧错误与刚发生的作答可能一直同样影响推荐,即使相关概念已经掌握。这种更新考虑选项结构与变化中的作答历史,而不只统计答对数量。

该数值仍是基于作答模式的估计。学习者可能猜测或误读题目,因此需要观察同组多题是否出现一致模式,并随新回答更新,不能把它当作对理解状态的直接测量。

用一道虚构英语题说明

设题干为“The reports ___ ready yesterday.”,正确选项是were。are符合复数,但时态与yesterday不符;was是过去时,却不符合复数主语。出题者可分别标注时态与主谓一致标签。

若多题持续出现相似错误,可向第一位学习者推荐时间表达与时态的练习,向第二位推荐复数主语与动词配合的练习。这是说明错误标签与推荐关系的虚构案例。

两个不同错误选项分别导向不同学习目标与下一题的虚构路径
虚构对照:不同错误选项分别引出时态或主谓一致的练习。

说明书包含寻找弱项分析组对应核心标签的题目,以及选择与既往错题具有相似错误标签结构的候选题等例子。终端发送答案,服务器汇总标签证据并更新状态,从题库选择候选,再向终端返回下一题。

Santa公开介绍的功能

Socra AI将Santa介绍为面向TOEIC和TOEFL的AI学习服务,公开说明包括考试领域的分数预测、弱项分析,以及随进一步学习而更新的策略推荐。这些属于公司产品介绍,并不能证明Santa实施了该专利的特定权利要求,也不保证任何学习者的成绩。

让推荐理由能够被说明

开发团队首先需要统一标签规则。如果一位审核者把选项归为时态错误,另一位归为词汇错误,推荐就可能不同。记录标准和例外,并观察不同审核者的一致性,有助于评估标注质量。

可比较正确率相近、错误模式不同的学习者,依次保存原始标签、实际选择、更新后的分析组、候选题和最终推荐。也应覆盖多标签选项及作答历史很少的新用户。

从专利角度说明技术时,应明确输入以及缩小候选范围的规则。在相同条件下比较仅统计正误、加入选项标签、再调整历史权重的设计,可以体现每个步骤的作用。IPLEX可就如何把处理阶段与观察结果整理为技术说明提供咨询。

图中保留原始标注与形态,相关内容在正文中说明。

英语题为虚构示例。本文解释部分专利技术记载,并将Santa产品说明与权利要求实施判断分开。

US11238749B2的USPTO公报

专利正文与公开记录

Santa官方功能说明

Riiid更名Socra AI的公告

谷歌文档理解专利:结合标题、正文与图像的布局读取文档

Nota的AI模型压缩专利:保存中间输入输出,再训练缩小后的层组

如需整理个性化学习与推荐技术,可查看IPLEX的AI项目经验和咨询准备资料。

了解金容德专利代理师的AI专业经验

Tistory原文

查看韩文原文

本文基于发表时的情况撰写。如需就具体事项咨询,请联系IPLEX。
咨询相关业务 ↗全部文章

与IPLEX探讨技术保护与知识产权布局的下一步。