搜狗9
关闭广告

厦门大学等突破AI自学限制:让计算机为自己量身定制学习计划

科技行者870人阅读


这项由厦门大学、华盛顿大学圣路易斯分校和中国人民大学联合开展的研究发表于2026年1月的arXiv预印本平台,论文编号为arXiv:2601.22628v1。有兴趣深入了解的读者可以通过该编号查询完整论文。

当我们学习新知识时,一个好老师会根据我们的能力水平调整教学难度,从简单的概念开始,逐步增加挑战性。然而,现在的人工智能系统在面对考试时,就像一个没有经验的学生,只能硬着头皮去解那些远超自己能力范围的难题。更糟糕的是,当它们试图通过自己的答案来学习时,往往会被错误的答案误导,就像一个人在黑暗中摸索,很容易走向错误的方向。

研究团队发现了这个问题的核心所在。当前的AI系统在面临困难数学题时,就像让一个刚学会加法的孩子去解微积分题一样,几乎注定会失败。更关键的是,这些系统缺乏一个像人类导师那样的引导者,能够为它们提供适合当前水平的练习题目。

为了解决这个问题,研究团队开发了一个名为TTCS(Test-Time Curriculum Synthesis for Self-Evolving)的创新框架。这个系统的巧妙之处在于,它就像为AI配备了两个角色:一个是出题老师,另一个是解题学生。这两个角色会相互配合,共同进化。

出题老师的任务是根据解题学生的当前能力水平,生成既有挑战性又不会太困难的练习题。就像一个经验丰富的数学老师,他会观察学生的解题表现,然后调整题目的难度。如果学生总是答对,老师会增加难度;如果学生总是答错,老师会降低难度,找到那个刚好让学生需要努力思考才能解决的甜蜜点。

解题学生则负责在这些精心设计的练习题上进行训练,不断提升自己的解题能力。关键在于,这些练习题都是根据它的实际能力量身定制的,既不会太简单让它无法进步,也不会太困难让它完全摸不着头脑。

这种相互促进的学习机制带来了令人瞩目的效果。在具有挑战性的数学竞赛题目测试中,使用TTCS框架的AI系统表现出了显著的进步。以AIME24(美国数学邀请赛2024年题目)为例,原本只能达到7.1分的AI系统,在经过TTCS训练后能够达到19.79分,提升幅度超过了12分。这相当于一个原本只能解决基础题目的学生,经过针对性训练后能够挑战中等难度的竞赛题目。

更让人惊喜的是,这种在数学领域获得的能力提升还能够迁移到其他领域。当研究团队测试这些经过TTCS训练的AI系统在常识推理、科学问答等任务上的表现时,发现它们同样表现出了明显的进步。这说明通过精心设计的课程学习,AI系统不仅能在特定领域变得更强,还能培养出更通用的推理和问题解决能力。

研究团队还进行了深入的分析实验,探索了TTCS框架各个组件的重要性。他们发现,如果缺少了出题老师的动态调整机制,仅仅使用固定的练习题,AI系统的进步幅度会显著降低。这进一步证实了自适应课程设计的重要性。

另一个有趣的发现是,即使使用能力更强的AI模型作为固定的出题老师,其效果也不如能够动态调整的出题老师。这就像即使请来了世界上最优秀的数学家来出题,如果他不了解学生的具体情况,无法根据学生的进步调整教学内容,效果反而不如一个能够密切关注学生学习状态的普通老师。

在数据效率方面,TTCS框架也展现出了优秀的表现。即使只有很少的练习题目,比如只有原本数量的10%,经过TTCS训练的AI系统仍然能够取得显著进步。这对于实际应用具有重要意义,因为在很多情况下,获得大量高质量的训练数据是困难且昂贵的。

研究团队还通过案例分析展示了TTCS框架如何逐步提升出题质量。在训练初期,出题老师生成的练习题往往比较简单,甚至可能只是原题的简单变形。但随着训练的进行,出题老师学会了创造更有挑战性、更具创新性的题目,这些题目在保持与原题相同推理结构的同时,采用了不同的数学背景和问题设置。

这项研究的意义不仅限于数学问题解决。它提出的自适应课程学习思想可以应用到各种AI训练场景中。无论是语言理解、图像识别,还是机器人控制,都可以从这种根据当前能力水平动态调整学习内容的方法中受益。

从技术实现角度来看,TTCS框架采用了一种叫做Group Relative Policy Optimization(GRPO)的优化算法。这个算法就像一个精密的反馈调节器,能够根据AI系统在不同题目上的表现,精确调整其学习方向和强度。出题老师会根据解题学生的成功率来评估题目难度,优先生成那些学生大约有50%把握能够解决的题目,因为这个难度水平最能促进学习进步。

在奖励机制设计上,研究团队采用了多重考量。除了确保题目难度适中外,还要求生成的题目具有足够的多样性,避免简单重复。这就像一个负责任的老师,不仅要确保题目难度合适,还要保证题目类型丰富,能够从不同角度锻炼学生的思维能力。

实验结果显示,TTCS框架在多个不同规模的AI模型上都取得了一致的性能提升。从15亿参数的小模型到70亿参数的大模型,都能从这种自适应学习方法中获益。这表明该方法具有良好的通用性和可扩展性。

值得注意的是,这种自学习能力的提升并非通过增加模型规模或使用更多计算资源实现的,而是通过更智能的学习策略获得的。这为AI系统的高效训练提供了新的思路,特别是在计算资源有限的情况下,如何最大化学习效果。

研究团队还探索了跨领域迁移的可能性。他们发现,在一个数学子领域(如代数)上训练的AI系统,能够将学到的推理能力迁移到其他数学子领域(如几何),甚至迁移到完全不同的领域如常识推理。这种迁移能力的存在,证明了TTCS框架培养的不仅是解决特定问题的技巧,更是通用的推理和问题解决能力。

从更广阔的视角来看,这项研究为AI系统的自主学习和持续改进提供了新的可能性。传统的AI训练往往需要大量人工标注的数据和专家设计的课程,而TTCS框架展示了AI系统如何通过自我反思和自适应调整实现持续进步。这种能力对于开发更加智能和自主的AI系统具有重要意义。

说到底,这项研究的核心贡献在于证明了AI系统也可以像人类学习者一样,通过接受适合自己水平的挑战来实现稳步进步。它不再是盲目地面对超出能力范围的难题,而是在一个精心设计的学习环境中,通过不断练习和调整来提升自己。这种学习方式不仅更加高效,而且更加可持续,为AI系统的长期发展和应用开辟了新的道路。这项研究还表明,AI系统的发展不一定需要依赖更大的模型或更多的数据,有时候更聪明的学习策略能够带来同样甚至更好的效果。随着这类技术的进一步发展和完善,我们可能会看到更多能够自主学习和持续进步的AI系统出现在我们的日常生活中,为教育、科研、工程等各个领域带来革命性的变化。

Q&A

Q1:TTCS框架是如何工作的?

A:TTCS就像给AI配备了一个出题老师和一个解题学生。出题老师根据学生的能力水平生成合适难度的练习题,学生在这些题目上训练后能力提升,然后老师再调整题目难度。两者相互促进,实现共同进化,最终让AI在数学推理等任务上取得显著进步。

Q2:为什么TTCS比传统的AI训练方法更有效?

A:传统方法让AI直接面对超出能力的难题,就像让小学生做高考题一样注定失败。TTCS则根据AI的实际能力提供合适的挑战,避免了因题目太难导致的错误学习,也避免了因题目太简单导致的停滞不前,确保AI始终在最佳的学习区间内进步。

Q3:TTCS框架的应用前景如何?

A:除了数学问题,TTCS的自适应学习思想可以应用到语言理解、图像识别、机器人控制等各种AI任务中。它为AI系统的高效训练提供了新思路,特别适合计算资源有限但需要持续改进的场景,未来可能在教育、科研、工程等领域带来革命性变化。

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

王思聪卷入“陪酒”风波,鞠婧祎被牵连

秋姐居 浏览 1329

郝蕾澄清亲口澄清:压根不是说她

ETtoday星光云 浏览 1517

朱一龙梁家辉一出手,若不出意外,这部国产大片估计得“封神”

娱乐圈笔娱君 浏览 1409

众泰汽车重组出现变数?

车业杂谈 浏览 828

马杜罗:愿在相互尊重基础上同美国进行对话

澎湃新闻 浏览 1246

兰州临街商铺突发爆炸致一死 事发路段已封锁仍在排查

大风新闻 浏览 8747

别管怎么质疑《寻秦记》,只要古天乐、林峯在,再烂我都会买单

最爱酷影视 浏览 1401

邵佳一:云南取胜实至名归,这场比赛给了我们很好的经验教训

懂球帝 浏览 1751

这样的“恶女”人设,真太爽了!

伊周潮流 浏览 1693

西安突降暴雪航班大面积延误 旅客:被迫在机场跨年

封面新闻 浏览 4243

上汽大众2025全年终端销售106万辆 12月单月终端销售9.6万辆

网易汽车 浏览 1233

美拉德失宠了?今年冬天最流行的3个颜色,谁穿谁好看!

LinkFashion 浏览 1671

蜜雪冰城开卖啤酒:价格5.9元至14.9元不等 只能外带

极目新闻 浏览 8889

新能源车双税新政发布,郑州消费者该“下手”还是“等等”?

大象新闻 浏览 1983

美军:已打击伊朗50艘船和5000个目标

财联社 浏览 408

每体:门德斯在巴塞罗那分别与亚马尔、德科进行了会谈

懂球帝 浏览 1932

2025年“演技最好女演员”排名,第1实至名归海

皮皮电影 浏览 1402

胡歌现身为电影宣传,现场人山人海全场欢呼,胡歌照顾后辈好暖心

扒虾侃娱 浏览 1637

日企天空推出UMPC新品TENKU Pocket 8,搭载N305处理器

IT之家 浏览 618

两会对话|商汤徐立:建议推动AI工具的公共职业化培训,促进就业形态多元化发展

澎湃新闻 浏览 839

联想 moto razr 60 系列手机获中国线上市场安卓小折叠销量第一

IT之家 浏览 1830
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
Copyright © 2020-2022,版权所有 qukanredian.com
沪ICP备20002587号-1