网易首页 > 网易号 > 正文 申请入驻

微软开源StudentSim算法登顶Hugging Face,让大模型学会模拟真实学生!

0
分享至

智猩猩AI整理

编辑:知知

AI教师的训练需要学生反馈。教师给出一段指导后,学生有没有改正错误,是否沿着提示完成推理,下一次遇到相似问题时表现有没有变化,这些信号决定了教学策略是否有效。

真实学生反馈很难高频获取。每调整一次tutor policy,都需要组织学生实验、收集交互、进行human study。对于快速迭代的AI tutor系统,这会限制训练和评估速度。

这项工作来自伊利诺伊大学香槟分校(UIUC)的教育创新研究团队与微软研究院深度学习组。UIUC计算机科学领域著名教授翟成祥担任相关教育创新项目联合负责人,微软研究院副总裁高剑锋带队参与研究。团队成员长期活跃于机器学习与人机交互领域,曾在ACL、ICML、CHI等顶级会议获得Best Paper等荣誉。

论文发布后迅速受到社区关注,并登上Hugging Face Daily Papers Weekly榜首,成为近期AI教育Agent方向受到关注的研究之一。


微软和UIUC近期合作开源StudentSim,用真实学习记录训练个性化学生模拟器,为AI教师提供可扩展反馈信号。论文同时构建StudentSimEval,在国际象棋、第二语言英语写作和基础数学三个领域评估学生模拟质量。


01

StudentSim打造大模型学生模拟器

这项工作可以放在user simulator和学生数字孪生的背景下理解。很多AI agent上线前,会先和模拟用户交互,用于测试策略和生成训练反馈。教育场景也需要模拟用户,只是学生模拟更难。学生包含知识状态、能力边界、错误习惯和接受指导后的变化,不能只用单轮偏好刻画。

LLM角色扮演在这里会遇到明显限制。给模型写一句“你是一个基础薄弱的小学生”,它可以换成小学生口吻,也能表现出犹豫。能力边界却不容易控制。模型仍可能在复杂题上给出超出目标学生水平的推理。对AI tutor训练来说,这类反馈会偏离真实学生。

传统知识追踪模型基于学习轨迹,能记录学生掌握状态,适合预测题目序列中的表现。然而,AI tutor给出的解释、提示和追问是自然语言输入,这类方法通常难以直接处理。

StudentSim把学生模拟器定义为两类能力的组合。教育学中,学生独立作答和接受帮助后的表现需要分开观察。Vygotsky提出的“最近发展区”这个概念,强调学生在教师支持下可以到达的位置。论文据此提出behavioral fidelity和guidance responsiveness。

Behavioral fidelity衡量模拟器是否像目标学生一样回答。Guidance responsiveness衡量模拟器读到教师指导后是否产生相应修正。前者对应学生行为模式的起点,后者对应教学干预后的变化

训练流程分两阶段。Stage 1使用同一领域中多名学生记录,训练领域级base simulator,学习常见错误、回答格式和指导后的修正路径。Stage 2使用单个学生自己的记录继续训练,得到个性化模拟器。这个设计针对单个学生记录稀疏的问题,用群体数据建立基础,再用个人记录校准差异


图:先用跨学生数据学习通用学生行为,再用单个学生记录训练个性化模拟器。

02

StudentSim训练AI教师强化学习

StudentSimEval覆盖60名真实学生。国际象棋任务要求模拟器预测玩家下一步棋,并在自然语言教练指导后更新走法。二语写作任务要求生成符合学习者错误分布的作文,并根据教师批改建议改写片段。数学任务要求预测学生答案选项,并在讲解后修正。

所有方法使用相同per-student training records,在相同held-out records上评估。实验比较了GPT-4o、GPT-5.4、未经过领域训练的Qwen3-4B-Instruct,以及国际象棋中的Maia2。

结果显示,StudentSim在三个领域的两项指标上均超过对应基线。国际象棋中,StudentSim的behavioral fidelity为0.5150,Maia2为0.4535,GPT-5.4为0.2316。Guidance responsiveness中,StudentSim为0.9067,GPT-5.4为0.7186,Maia2为0.2721。



在二语写作中,StudentSim的F为0.5624,R为0.6417,均高于GPT-5.4。在数学中,StudentSim的F为0.6384,R为0.9181,也超过GPT-5.4。

不同基线呈现不同短板。Maia2能预测人类棋手走法,但没有自然语言指导输入。GPT-5.4能阅读指导,对具体学生错误模式的保持不稳定。StudentSim通过真实学生记录训练,并进行per-student specialization,在两类能力上同时提升。


论文还把StudentSim用于AI tutor强化学习。国际象棋场景中,tutor读取真实学生犯过的错误走法并生成指导;冻结的StudentSim读入指导后输出修正走法;Stockfish计算修正走法相对原错误走法的质量提升,作为reward回传给tutor。

对照组包括无RL的SFT tutor,以及使用GPT-5.4作为学生模拟器reward的RL tutor。三组共享同一tutor policy、SFT起点和GRPO设置。

专家盲评结果显示,StudentSim reward训练出的tutor在accuracy、guidance quality和personalization三项上排名第一。Accuracy为90.5%,No RL为75.7%,GPT-5.4 reward为71.6%;guidance quality为3.31,personalization为3.93。


图:使用StudentSim reward训练的tutor在人类专家评估中取得更高accuracy、guidance quality和personalization。

论文将这部分定位为proof of concept,用于验证学生模拟器能否作为AI tutor优化中的反馈源。结果表明,当模拟器同时具备学生行为保真和指导响应能力时,可以为tutor RL提供有效训练信号。

这一结果更长远的意义,在于它为AI tutor的优化方式提供了另一种可能:当学生模拟器能够较真实地复现学生的错误模式,并对不同教学干预产生合理响应时,tutor就有机会在部署到真实学生之前,通过大量模拟交互学习“什么样的指导对什么样的学生更有效”。

这意味着学生模拟器未来可能不只是评测工具,也可以成为连接学生建模、个性化教学与强化学习的训练环境,使AI tutor从依赖静态示例和通用偏好的系统,逐步走向能够针对不同学习者持续试验、获得反馈并优化教学策略的闭环系统。

本文的实验指向了AI教育的一个更值得关注的问题:随着学生模拟器的行为保真度和教学响应建模能力继续提升,我们或许能够把AI tutor的训练对象,从“生成一条好的回答”进一步推进到“学习如何长期帮助一个学生学得更好”。

关注+星标,获取AI前沿进展与开源一线动态

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
江苏一空姐与男友接触后,紧急服用阻断药,1个月后阻断失败入院

江苏一空姐与男友接触后,紧急服用阻断药,1个月后阻断失败入院

王二哥老搞笑
2026-09-07 10:25:40
11投16分!亚运会发威!北京队的顶薪核心后卫

11投16分!亚运会发威!北京队的顶薪核心后卫

篮球实战宝典
2026-09-10 19:47:16
原来还有这么多小众的工作,网友:每天盈利2万

原来还有这么多小众的工作,网友:每天盈利2万

夜深爱杂谈
2026-09-09 20:43:13
普京:远东交给中国开发!

普京:远东交给中国开发!

小彻
2026-09-10 10:07:53
全球格局已定:未来几十年,再没任何国家能挤上中美双极的牌桌

全球格局已定:未来几十年,再没任何国家能挤上中美双极的牌桌

怪味历史连连看
2026-09-10 01:41:30
嫁78岁法国老头水落石出,42岁李宇春私生活曝光,丝毫不感到意外

嫁78岁法国老头水落石出,42岁李宇春私生活曝光,丝毫不感到意外

观察鉴娱
2026-09-09 09:30:04
苹果折叠屏一出来,全世界突然变了一个模样

苹果折叠屏一出来,全世界突然变了一个模样

大白聊IT
2026-09-11 00:50:56
苹果最“值得捡漏”的一款手机,苹果A19+256GB+120Hz,仅5399元

苹果最“值得捡漏”的一款手机,苹果A19+256GB+120Hz,仅5399元

小愚测评
2026-09-10 22:19:48
全球涨幅之最:印度市场旧款苹果iPhone最高涨价41%

全球涨幅之最:印度市场旧款苹果iPhone最高涨价41%

IT之家
2026-09-10 20:08:14
腐乳再次被关注!研究发现:高血压患者常吃腐乳,或出现4种变化

腐乳再次被关注!研究发现:高血压患者常吃腐乳,或出现4种变化

芹姐说生活
2026-08-21 22:31:17
星宇股份又出错,外包报酬总额标注2.44万亿元,全年营收才132.5亿元;前日刚就“董事长与儿子年龄差7岁”致歉

星宇股份又出错,外包报酬总额标注2.44万亿元,全年营收才132.5亿元;前日刚就“董事长与儿子年龄差7岁”致歉

鲁中晨报
2026-09-10 19:39:03
哈兰德:破纪录的感觉很好,但我只有26岁,还想进更多球

哈兰德:破纪录的感觉很好,但我只有26岁,还想进更多球

懂球帝
2026-09-10 20:08:05
联合国降半旗,53国跟着降,那天地球都停了!伟人千古!

联合国降半旗,53国跟着降,那天地球都停了!伟人千古!

戎评
2026-09-09 15:48:58
窦唯沉默一周,用一首没有歌词的曲子,把整个摇滚圈听哭了

窦唯沉默一周,用一首没有歌词的曲子,把整个摇滚圈听哭了

阿废冷眼观察所
2026-09-10 07:11:20
助攻破僵局,多古当选曼联vs沙巴巴库全场最佳

助攻破僵局,多古当选曼联vs沙巴巴库全场最佳

懂球帝
2026-09-11 05:19:11
44岁王凯突传最新近况,无儿无女父亲已离世,老母亲如今不敢再催婚

44岁王凯突传最新近况,无儿无女父亲已离世,老母亲如今不敢再催婚

喜欢历史的阿繁
2026-09-11 02:55:44
39岁陈晓深圳亮相帅回25岁!和陈妍希离婚一年半,眼里的光回来了

39岁陈晓深圳亮相帅回25岁!和陈妍希离婚一年半,眼里的光回来了

动物奇奇怪怪
2026-09-11 00:35:16
梅西可能拒绝阿根廷足协给他安排告别赛!也不会复出!

梅西可能拒绝阿根廷足协给他安排告别赛!也不会复出!

历史第一人梅西
2026-09-10 10:52:40
《伪装者2》为什么不用原班人马?想凑齐胡歌、靳东、王凯太难了

《伪装者2》为什么不用原班人马?想凑齐胡歌、靳东、王凯太难了

情感大头说说
2026-09-11 00:30:35
女人见面的最高礼仪,就是穿裙子,这是对你的重视,对约会的重视

女人见面的最高礼仪,就是穿裙子,这是对你的重视,对约会的重视

加油丁小文
2026-09-01 07:09:58
2026-09-11 05:40:50
智猩猩
智猩猩
AI 技术内容与服务平台
91文章数 4关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

特朗普:如果伊朗拥核 我会对最高领袖说"能为您效劳吗"

头条要闻

特朗普:如果伊朗拥核 我会对最高领袖说"能为您效劳吗"

体育要闻

16岁的国产小库里,还有多少功课要做

娱乐要闻

参加晚宴,刘亦菲因合照深陷争议

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

标配全线控底盘 全新一代智己LS6预售20.99万起

态度原创

艺术
旅游
健康
本地
公开课

艺术要闻

他偷走70箱清宫文物:却在逃亡路上将国宝赠人、丢弃...

旅游要闻

大理旅游便民卡“橙意”上线,全年不限次出游!

牙疼,也可能跟心梗有关?!

本地新闻

拼假 13 天国内长线路线合集

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版