AI Agent 的下一步是什么斯坦福的答案是让 AI 学会自己改进自己。这门课是 CS329A《Self-Improving AI Agents自改进 AI 智能体》于 2025 年秋季学期开设。课程不再只讨论如何把 Agent 做出来而是追问一个更难的问题模型训完以后能不能通过搜索、验证和环境反馈继续变强现在课程主页、论文阅读清单和官方录像都已经在线公开课程主页https://cs329a.stanford.edu/官方视频列表https://www.youtube.com/playlist?listPLangBM27OtEA课程由 Aakanksha Chowdhery 和 Azalia Mirhoseini 共同讲授。Aakanksha Chowdhery 是斯坦福大学兼职教授。在谷歌期间她曾任 540B 参数 PaLM 模型的技术负责人并参与 Gemini、PaLM-E、Med-PaLM 和 Pathways 等项目。她的研究横跨大模型训练、扩展律与分布式系统。Azalia Mirhoseini 是斯坦福大学计算机科学助理教授负责 Scaling Intelligence Lab。她曾在 Google Brain、Google DeepMind 和 Anthropic 工作参与过 Gemini 和 Claude 的开发。课程还邀请了多位学界和产业界讲者主题落在 LLM 推理、编码 Agent、数学证明、自主系统和机器人等方向。公开课表中包括 Google DeepMind 的 Melvin Johnson、Denny Zhou 和 Thang LuongReflection AI 的 Misha Laskin以及 Physical Intelligence 的 Danny Driess 等一众行业大佬从大模型讲起首个教「自改进 Agent」的课过去几年大模型的进步主要靠更多数据、更大参数和更多训练算力。CS329A 关心的是另一个问题模型已经训完之后能不能通过搜索、验证、工具调用、环境反馈和强化学习在任务中继续变强这里的「自改进」不是让 Agent 随意改自己的代码。CS329A课程更关心一个可操作的闭环模型先生成多个候选答案用验证器或环境反馈找出更好的结果再把这些结果变成新的训练信号。它既可以发生在推理时也可以发生在训练时。课程从 LLM 自改进方法讲起包括 Constitutional AI、验证器、测试时算力扩展、搜索与 LLM 的结合以及通过强化学习扩展训练。后半程转向工具、代码、记忆、多模态交互、多步规划和 Agent 评估。课程内容CS329A 持续约 10 周课程表共有 20 次课。前半程从测试时算力扩展开始。模型一次生成的答案不够好那就多采样几次再用验证器筛选。数学题可以检查答案代码可以运行测试开放式任务却很少有现成标准。所以课程会专门讲结果验证、过程验证和弱验证器。接下来Agent 开始调用搜索、运行代码、读取环境状态并利用执行结果修正下一步。课程会讲到 ReAct、树搜索、多步规划和基于代码反馈的强化学习。后半程进入训练时扩展。模型在搜索和验证过程中产生的高质量轨迹可以被用来继续训练模型。这部分会读 STaR、DeepSeekMath 和 DAPO也会讨论 AI Scientist、AlphaEvolve 与深度研究 Agent。最后课程把这套方法放到更长、更真实的任务中编码 Agent 如何在代码库里工作长时间任务如何管理记忆怎样评估数小时甚至数天的 Agent 任务以及这些方法如何用到多模态机器人上。课程地址课程主页https://cs329a.stanford.edu/从阅读材料、作业目标和研究项目看CS329A 但这不是一门面向零基础读者的 Agent 产品课。至少需要熟悉 Python 和 PyTorch理解 Transformer、监督微调和基本的强化学习概念并且能够阅读机器学习论文。如果还想完整复现课中方法最好再补一些搜索、规划、分布式训练和模型评估的知识。「自改进」这个词很大CS329A 做的却是很具体的拆解。所以它适合当成 Agent 进阶课程。这里给大家精心整理了一份全面的AI大模型学习资源包括AI大模型全套学习路线图从入门到实战、精品AI大模型学习书籍手册、视频教程、实战学习、面试题等资料免费分享扫码免费领取全部内容1. 成长路线图学习规划要学习一门新的技术作为新手一定要先学习成长路线图方向不对努力白费。这里我们为新手和想要进一步提升的专业人士准备了一份详细的学习成长路线图和规划。可以说是最科学最系统的学习成长路线。2. 大模型经典PDF书籍书籍和学习文档资料是学习大模型过程中必不可少的我们精选了一系列深入探讨大模型技术的书籍和学习文档它们由领域内的顶尖专家撰写内容全面、深入、详尽为你学习大模型提供坚实的理论基础。书籍含电子版PDF3. 大模型视频教程对于很多自学或者没有基础的同学来说书籍这些纯文字类的学习教材会觉得比较晦涩难以理解因此我们提供了丰富的大模型视频教程以动态、形象的方式展示技术概念帮助你更快、更轻松地掌握核心知识。4. 2026行业报告行业分析主要包括对不同行业的现状、趋势、问题、机会等进行系统地调研和评估以了解哪些行业更适合引入大模型的技术和应用以及在哪些方面可以发挥大模型的优势。5. 大模型项目实战学以致用当你的理论知识积累到一定程度就需要通过项目实战在实际操作中检验和巩固你所学到的知识同时为你找工作和职业发展打下坚实的基础。6. 大模型面试题面试不仅是技术的较量更需要充分的准备。在你已经掌握了大模型技术之后就需要开始准备面试我们将提供精心整理的大模型面试题库涵盖当前面试中可能遇到的各种技术问题让你在面试中游刃有余。7. 资料领取全套内容免费抱走学 AI 不用再找第二份不管你是 0 基础想入门 AI 大模型还是有基础想冲刺大厂、了解行业趋势这份资料都能满足你现在只需按照提示操作就能免费领取扫码免费领取全部内容