LECTURE 06 / 09 · WEEK 6 · 2026-05-08
Yash Patil:智能——解锁企业内部知识
从企业知识进一步进入“经验”问题:Agent 如何在真实环境中行动、观察结果并形成学习闭环,以及数据优势、专用模型和持续学习的边界在哪里。
企业拥有大量文件和数据,为什么这些资产并没有自动变成更强的 AI?第六课把“知识”推进到“经验”:真正有价值的不只是系统看过什么,而是它在什么状态下采取了什么行动、结果如何、为什么成功或失败,以及这些反馈能否进入下一轮改进。
Yash Patil 是 Applied Compute 联合创始人兼 CEO,曾参与 OpenAI 的后训练、Evals 和 Agentic Coding 研究,相关工作后来发展为 Codex。Applied Compute 由多位前 OpenAI 研究人员创立,当前为企业训练和部署围绕内部工作、评价标准与数据持续改进的专用 Agent;公司在 2026 年披露累计融资 8000 万美元。12
Yash 从企业内部知识与 Agent 产品出发,Andrej Karpathy 的年度回顾提供当前模型能力的技术背景,David Silver 与 Richard Sutton 的《经验时代》则提出更长期的学习方向。三者共同指向一个判断:静态语料让模型获得广泛先验,真实环境中的行动—结果闭环,才可能形成持续差异。34
模型能力为什么呈现锯齿状
Karpathy 用“锯齿状智能”描述当前大模型:它可以在某些复杂任务上表现惊人,却可能在看似简单的任务上失败。能力不是沿着人类难度直线均匀增加,而是受训练数据、任务表达、验证信号和推理结构影响。
图 1:Karpathy 对大模型“锯齿状智能”的示意。
这意味着企业不能只用一张通用排行榜决定部署。某个模型在公开考试中领先,不代表它能正确处理公司的例外、工具和责任边界。更可靠的做法是围绕真实任务建立评价集:
任务分布
↓
代表性案例与边缘案例
↓
可观察结果
↓
错误类型与业务损失
↓
模型、上下文、技能和流程的针对性改进
“模型平均更强”与“系统在本公司稳定可用”是两个不同问题。
预训练把世界压进模型,后训练把能力组织成行为
预训练让模型从海量文本、代码和图像中学习一般规律;后训练则用人类偏好、可验证奖励和任务反馈塑造行为。Karpathy 认为,行业重心正在从单纯扩大预训练,转向更复杂的后训练和 Agent 系统。
图 2:课堂对预训练与后训练关系的整理。
可以把两者简化为:
| 阶段 | 主要输入 | 主要作用 | 典型限制 |
|---|---|---|---|
| 预训练 | 人类已产生的大规模语料 | 建立广泛世界先验和基础能力 | 高质量公开数据有限,更新慢 |
| 后训练 | 偏好、任务、可验证奖励、轨迹 | 塑造行为、推理方式和专用能力 | 反馈质量、任务覆盖与过拟合 |
“基于可验证奖励的强化学习”尤其重要:数学题、代码测试和游戏结果可以自动判断对错,模型因而能够产生大量尝试并从结果学习。企业任务更难,因为很多结果延迟出现、评价标准含糊,或者需要人承担责任。
这使企业 AI 的核心资产从“拥有多少文档”转向“能否把真实工作变成高质量反馈”。
数据边界正在从人类语料移向机器经验
公开互联网是上一阶段模型的主要数据来源,但高质量人类数据增长速度有限。模型开始通过合成数据、推理轨迹、工具使用和环境互动产生新数据。
图 3:课堂用于说明数据边界扩展的示意。
这些数据不是同一种东西:
人类生成数据:论文、代码、文档、对话和历史记录;
模型合成数据:模型生成问题、答案、推理步骤或训练样本;
Agent 经验数据:系统在真实或模拟环境中行动后形成的状态、动作、结果与反馈。
合成数据可以快速扩大规模,但若缺少真实锚点,模型可能重复自己的错误。经验数据更接近真实任务,却只有在结果可观察、奖励可信时才有训练价值。
什么是“经验时代”
Silver 与 Sutton 提出的核心结构是:智能体不只模仿人类过去留下的数据,而是在持续环境中行动,通过真实结果学习。
最小闭环是:
观察当前状态
↓
选择行动
↓
环境发生变化
↓
获得新的观察和奖励
↓
调整后续行为
这与一次性问答不同。长期 Agent 需要处理连续时间、延迟结果、部分可观察状态和不断变化的环境。企业世界尤其复杂:竞争者会反应,政策会改变,同一动作在不同客户和时间产生不同结果。
AlphaZero 的环境相对封闭:规则固定、状态清晰、胜负可判断。企业 Agent 面对的是开放世界:
| 维度 | 封闭游戏 | 企业与现实环境 |
|---|---|---|
| 状态 | 规则内状态完整可见 | 信息分散、缺失且有噪声 |
| 奖励 | 胜负明确 | 多目标、延迟、常有争议 |
| 环境 | 基本稳定 | 人、组织和市场会变化 |
| 行动成本 | 可大量模拟 | 真实行动可能昂贵或不可逆 |
| 探索 | 失败代价低 | 失败可能造成财务、合规和声誉损失 |
因此,经验学习不能简单等同于“让 Agent 自己多试”。它需要沙盒、权限限制、分级风险和可信评价。
状态、上下文、记忆和权重不是同一层
企业谈“记忆”时常把几种不同机制混在一起。可以按更新速度区分:
现实业务状态
↓ 被读取
当前观察与工作上下文
↓ 被整理
外部长时记忆、文件与系统记录
↓ 被反复使用
技能、规则、评价器和工作流
↓ 更慢更新
模型权重
业务状态回答“世界现在怎样”;
工作上下文回答“这次任务需要知道什么”;
长时记忆保存跨任务历史;
技能与工作流保存可复用做法;
模型权重沉淀更广泛、更稳定的行为。
当前系统更接近“快速外部记忆、较慢权重更新”。这不是智能的终极结构,而是现有训练和安全条件下的工程选择。持续学习仍面临灾难性遗忘、错误累积、审计和权限问题。
企业知识的真正价值来自完整闭环
Yash 用 DoorDash 的菜单录入解释企业数据怎样变成模型能力。商家上传的菜单照片格式混乱,通用模型和提示词无法稳定按照 DoorDash 的商品、加料和选项规则生成正确页面。
DoorDash 已经拥有一套真实反馈:模型先生成菜单,人再修正错误,系统可以比较修改前后差异,并用最终错误率评价结果。Applied Compute 据此训练模型,而不是只把更多内部文档塞进提示词。
在 Yash 的框架中,企业数据最有价值的部分不是“只有这家公司看过”,而是它能否连接具体任务、模型行动、人类修正和最终结果。持续学习同样依赖这条链:系统必须看到产品怎样被使用,以及一次行动在下游造成了什么后果。1
Agent 数据为什么可能产生新的网络效应
今天多数训练数据是存量知识。不同模型公司获取的数据不完全相同,但互联网文本、代码和论文高度重叠,合成与蒸馏又能重建部分分布。仅仅声称“我们有很多用户日志”,通常不足以证明数据壁垒。
Agent 真正进入工作后,会产生过去不存在的经验轨迹:
真实目标
→ 当时环境状态
→ Agent 尝试多个动作
→ 工具返回结果
→ 人类修正或批准
→ 最终是否成功
→ 是否产生后续错误
这些数据不是“世界已经说过什么”,而是“在这个环境里怎样做才有效”。
谁拥有经验:模型公司、应用公司还是企业
经验数据的价值不代表平台可以自由使用。企业 API 和商业产品通常对训练用途有明确限制;OpenAI 与 Anthropic 的公开政策都区分消费者产品、企业产品和用户选择。56
所有权问题可以拆成五层:
| 层级 | 可能的拥有者 | 关键权利 |
|---|---|---|
| 原始业务状态 | 企业客户 | 读取、保存与删除 |
| 任务与行动轨迹 | Agent/应用平台与企业共同生成 | 记录、分析与迁移 |
| 评价与结果 | 接近业务结果的一方 | 定义成功、归因价值 |
| 抽象技能与评价方法 | 平台或企业 | 跨任务复用 |
| 权重更新 | 模型公司或自建团队 | 训练、发布与部署 |
因此,“拥有客户”不自动等于拥有训练数据,“托管模型”也不自动等于看到最终业务结果。产业中的数据优势取决于合同、产品架构和工作流位置。
“苦涩的教训”不是拒绝所有结构
Sutton 的“苦涩的教训”指出,长期来看,依靠通用计算和学习的方法往往超过大量手工编码知识。这并不要求产品取消所有工作流、规则和工具。
通用学习方法负责从规模中获得能力;结构化工具则缩小行动空间、降低错误和验证成本。比如代码 Agent 使用编译器和测试,不是因为模型不够通用,而是因为确定性反馈让学习和执行更可靠。
通用模型:提出计划、处理模糊信息、适应新情况
结构工具:限定动作、保存状态、提供可靠反馈
最有效的系统往往不是“完全手写”或“完全自由探索”,而是让模型在一个可观察、可验证的环境中行动。
瓶颈从数据规模迁移到反馈与行动
课堂用一张图概括 AI 发展中的瓶颈迁移。
图 4:课堂对不同阶段主要瓶颈的整理。
可以把过去几次变化写成:
| 阶段 | 被解决的主要约束 | 新瓶颈 |
|---|---|---|
| 深度学习早期 | 手工特征 | 数据与算力 |
| Transformer 与规模化 | 架构和训练可扩展性 | 高质量数据、成本 |
| 偏好对齐 | 通用行为可用性 | 复杂推理与可靠性 |
| 可验证强化学习 | 数学、代码等可自动评价任务 | 开放世界反馈 |
| Agent | 长任务与工具使用 | 状态、权限、持续学习和责任 |
规模规律的经济价值在于让研发和资本规划更可预测:投入更多计算通常能带来可预期的损失下降。但它没有回答模型应怎样与现实互动。进入经验时代后,最稀缺的资源可能从静态数据转向高质量环境、真实结果和安全行动空间。
计算机成为通用执行器
大模型过去主要在语言空间中输出;Agent 通过 API、浏览器、代码环境和操作系统获得行动能力。计算机因此成为一种通用执行器:只要任务已经数字化,Agent 就可能通过软件接口影响现实业务。
这也是企业软件的重要变化。图形界面原本是给人设计的;Agent 更适合 API、命令行、结构化工具和机器可读反馈。它甚至可以绕过部分界面,直接与系统记录交互。
但行动能力使安全问题升级。只读错误可能产生一段错误回答;具有付款、删除、部署或签约权限的 Agent,错误会直接改变企业状态。经验学习必须和最小权限、审批、日志、回滚共同设计。
专用模型会不会被通用模型吞掉
企业常希望把内部知识训练进一个专用模型。但专用模型同时面临两类折旧:
前沿能力折旧:下一代通用模型可能覆盖它原有的能力优势;
定制位置折旧:越来越多定制需求可以由上下文、技能、工具、记忆和验证器完成,不必改权重。
专用模型仍有明确价值,但适用条件要更严格:
任务分布长期稳定且规模巨大;
通用模型在该领域仍有显著能力缺口;
延迟、能耗、隐私或单位成本差异足够大;
企业拥有高质量可验证数据;
定制收益能覆盖持续训练和运维。
本课留下的判断
企业数据的价值不由私有性或数量决定,而由它能否组成行动—结果—评价—改进的闭环决定。静态文档提供知识,真实任务状态、动作轨迹和可归因结果提供经验。Agent 从回答问题走向执行工作后,可能第一次持续生产原本不存在的高价值数据。
这条经验飞轮不会自动成立。平台必须接近真实工作、看见结果、获得可信反馈,并拥有抽象和再利用经验的权利。专用模型也不是企业知识的唯一归宿;上下文、技能、工具、记忆和验证器会共同吸收定制需求。长期竞争的核心,是谁能以更高频率完成可信闭环,并把经验转成下一次更好的行动。
来源
本页来源
- [1] ↩ 回正文
Stanford Online, Stanford MS&E435 Economics of the AI Supercycle | Spring 2026 | Yash Patil — Intelligence, Unlocking Enterprise Internal Knowledge , 2026-05-08。本文使用 Yash Patil 对企业内部知识、Agent、数据边界与专用模型的讲解,以及课堂关于隐性知识、持续学习和企业数据的问答。 https://www.youtube.com/watch?v=LRGX-gTegVA
- [2] ↩ 回正文
Applied Compute, The Advantage You Own 。本文使用其创始团队、企业专用 Agent 产品方向和融资信息。 https://www.appliedcompute.com/company/fundraise
- [3] ↩ 回正文
Andrej Karpathy, 2025 LLM Year in Review 。本文使用锯齿状智能、预训练与后训练、可验证强化学习、Agent 和数据边界的分析。 https://karpathy.bearblog.dev/year-in-review-2025/
- [4] ↩ 回正文
David Silver and Richard S. Sutton, Welcome to the Era of Experience 。本文使用持续环境、经验流、行动与结果反馈,以及从人类数据向 Agent 经验学习迁移的框架。 https://storage.googleapis.com/deepmind-media/Era-of-Experience%20/The%20Era%20of%20Experience%20Paper.pdf
- [5] ↩ 回正文
OpenAI, How Your Data Is Used to Improve Model Performance 。本文用于区分消费者与企业产品的数据使用和用户控制。 https://openai.com/policies/how-your-data-is-used-to-improve-model-performance/
- [6] ↩ 回正文
Anthropic Privacy Center, Is My Data Used for Model Training? 。本文用于说明商业产品数据、用户选择和模型训练之间的边界。 https://privacy.anthropic.com/en/articles/7996868-is-my-data-used-for-model-training