LECTURE 06 / 09 · WEEK 6 · 2026-05-08

Yash Patil:智能——解锁企业内部知识

Yash Patil (Applied Compute), Intelligence, Unlocking Enterprise Internal Knowledge

从企业知识进一步进入“经验”问题:Agent 如何在真实环境中行动、观察结果并形成学习闭环,以及数据优势、专用模型和持续学习的边界在哪里。

Yash Patil Applied Compute 讲者 Apoorv Agrawal 的照片 Apoorv Agrawal 约 10 分钟

企业拥有大量文件和数据,为什么这些资产并没有自动变成更强的 AI?第六课把“知识”推进到“经验”:真正有价值的不只是系统看过什么,而是它在什么状态下采取了什么行动、结果如何、为什么成功或失败,以及这些反馈能否进入下一轮改进。

Yash Patil 是 Applied Compute 联合创始人兼 CEO,曾参与 OpenAI 的后训练、Evals 和 Agentic Coding 研究,相关工作后来发展为 Codex。Applied Compute 由多位前 OpenAI 研究人员创立,当前为企业训练和部署围绕内部工作、评价标准与数据持续改进的专用 Agent;公司在 2026 年披露累计融资 8000 万美元。12

Yash 从企业内部知识与 Agent 产品出发,Andrej Karpathy 的年度回顾提供当前模型能力的技术背景,David Silver 与 Richard Sutton 的《经验时代》则提出更长期的学习方向。三者共同指向一个判断:静态语料让模型获得广泛先验,真实环境中的行动—结果闭环,才可能形成持续差异。34

模型能力为什么呈现锯齿状

Karpathy 用“锯齿状智能”描述当前大模型:它可以在某些复杂任务上表现惊人,却可能在看似简单的任务上失败。能力不是沿着人类难度直线均匀增加,而是受训练数据、任务表达、验证信号和推理结构影响。

Karpathy 用锯齿状边界描述当前大模型能力

图 1:Karpathy 对大模型“锯齿状智能”的示意。

这意味着企业不能只用一张通用排行榜决定部署。某个模型在公开考试中领先,不代表它能正确处理公司的例外、工具和责任边界。更可靠的做法是围绕真实任务建立评价集:

任务分布
  ↓
代表性案例与边缘案例
  ↓
可观察结果
  ↓
错误类型与业务损失
  ↓
模型、上下文、技能和流程的针对性改进

“模型平均更强”与“系统在本公司稳定可用”是两个不同问题。

预训练把世界压进模型,后训练把能力组织成行为

预训练让模型从海量文本、代码和图像中学习一般规律;后训练则用人类偏好、可验证奖励和任务反馈塑造行为。Karpathy 认为,行业重心正在从单纯扩大预训练,转向更复杂的后训练和 Agent 系统。

预训练与后训练承担不同作用

图 2:课堂对预训练与后训练关系的整理。

可以把两者简化为:

阶段主要输入主要作用典型限制
预训练人类已产生的大规模语料建立广泛世界先验和基础能力高质量公开数据有限,更新慢
后训练偏好、任务、可验证奖励、轨迹塑造行为、推理方式和专用能力反馈质量、任务覆盖与过拟合

“基于可验证奖励的强化学习”尤其重要:数学题、代码测试和游戏结果可以自动判断对错,模型因而能够产生大量尝试并从结果学习。企业任务更难,因为很多结果延迟出现、评价标准含糊,或者需要人承担责任。

这使企业 AI 的核心资产从“拥有多少文档”转向“能否把真实工作变成高质量反馈”。

数据边界正在从人类语料移向机器经验

公开互联网是上一阶段模型的主要数据来源,但高质量人类数据增长速度有限。模型开始通过合成数据、推理轨迹、工具使用和环境互动产生新数据。

模型数据从静态人类语料向合成与经验数据扩展

图 3:课堂用于说明数据边界扩展的示意。

这些数据不是同一种东西:

  1. 人类生成数据:论文、代码、文档、对话和历史记录;

  2. 模型合成数据:模型生成问题、答案、推理步骤或训练样本;

  3. Agent 经验数据:系统在真实或模拟环境中行动后形成的状态、动作、结果与反馈。

合成数据可以快速扩大规模,但若缺少真实锚点,模型可能重复自己的错误。经验数据更接近真实任务,却只有在结果可观察、奖励可信时才有训练价值。

什么是“经验时代”

Silver 与 Sutton 提出的核心结构是:智能体不只模仿人类过去留下的数据,而是在持续环境中行动,通过真实结果学习。

最小闭环是:

观察当前状态
    ↓
选择行动
    ↓
环境发生变化
    ↓
获得新的观察和奖励
    ↓
调整后续行为

这与一次性问答不同。长期 Agent 需要处理连续时间、延迟结果、部分可观察状态和不断变化的环境。企业世界尤其复杂:竞争者会反应,政策会改变,同一动作在不同客户和时间产生不同结果。

AlphaZero 的环境相对封闭:规则固定、状态清晰、胜负可判断。企业 Agent 面对的是开放世界:

维度封闭游戏企业与现实环境
状态规则内状态完整可见信息分散、缺失且有噪声
奖励胜负明确多目标、延迟、常有争议
环境基本稳定人、组织和市场会变化
行动成本可大量模拟真实行动可能昂贵或不可逆
探索失败代价低失败可能造成财务、合规和声誉损失

因此,经验学习不能简单等同于“让 Agent 自己多试”。它需要沙盒、权限限制、分级风险和可信评价。

状态、上下文、记忆和权重不是同一层

企业谈“记忆”时常把几种不同机制混在一起。可以按更新速度区分:

现实业务状态
    ↓ 被读取
当前观察与工作上下文
    ↓ 被整理
外部长时记忆、文件与系统记录
    ↓ 被反复使用
技能、规则、评价器和工作流
    ↓ 更慢更新
模型权重
  • 业务状态回答“世界现在怎样”;

  • 工作上下文回答“这次任务需要知道什么”;

  • 长时记忆保存跨任务历史;

  • 技能与工作流保存可复用做法;

  • 模型权重沉淀更广泛、更稳定的行为。

当前系统更接近“快速外部记忆、较慢权重更新”。这不是智能的终极结构,而是现有训练和安全条件下的工程选择。持续学习仍面临灾难性遗忘、错误累积、审计和权限问题。

企业知识的真正价值来自完整闭环

Yash 用 DoorDash 的菜单录入解释企业数据怎样变成模型能力。商家上传的菜单照片格式混乱,通用模型和提示词无法稳定按照 DoorDash 的商品、加料和选项规则生成正确页面。

DoorDash 已经拥有一套真实反馈:模型先生成菜单,人再修正错误,系统可以比较修改前后差异,并用最终错误率评价结果。Applied Compute 据此训练模型,而不是只把更多内部文档塞进提示词。

在 Yash 的框架中,企业数据最有价值的部分不是“只有这家公司看过”,而是它能否连接具体任务、模型行动、人类修正和最终结果。持续学习同样依赖这条链:系统必须看到产品怎样被使用,以及一次行动在下游造成了什么后果。1

Agent 数据为什么可能产生新的网络效应

今天多数训练数据是存量知识。不同模型公司获取的数据不完全相同,但互联网文本、代码和论文高度重叠,合成与蒸馏又能重建部分分布。仅仅声称“我们有很多用户日志”,通常不足以证明数据壁垒。

Agent 真正进入工作后,会产生过去不存在的经验轨迹:

真实目标
→ 当时环境状态
→ Agent 尝试多个动作
→ 工具返回结果
→ 人类修正或批准
→ 最终是否成功
→ 是否产生后续错误

这些数据不是“世界已经说过什么”,而是“在这个环境里怎样做才有效”。

谁拥有经验:模型公司、应用公司还是企业

经验数据的价值不代表平台可以自由使用。企业 API 和商业产品通常对训练用途有明确限制;OpenAI 与 Anthropic 的公开政策都区分消费者产品、企业产品和用户选择。56

所有权问题可以拆成五层:

层级可能的拥有者关键权利
原始业务状态企业客户读取、保存与删除
任务与行动轨迹Agent/应用平台与企业共同生成记录、分析与迁移
评价与结果接近业务结果的一方定义成功、归因价值
抽象技能与评价方法平台或企业跨任务复用
权重更新模型公司或自建团队训练、发布与部署

因此,“拥有客户”不自动等于拥有训练数据,“托管模型”也不自动等于看到最终业务结果。产业中的数据优势取决于合同、产品架构和工作流位置。

“苦涩的教训”不是拒绝所有结构

Sutton 的“苦涩的教训”指出,长期来看,依靠通用计算和学习的方法往往超过大量手工编码知识。这并不要求产品取消所有工作流、规则和工具。

通用学习方法负责从规模中获得能力;结构化工具则缩小行动空间、降低错误和验证成本。比如代码 Agent 使用编译器和测试,不是因为模型不够通用,而是因为确定性反馈让学习和执行更可靠。

通用模型:提出计划、处理模糊信息、适应新情况
结构工具:限定动作、保存状态、提供可靠反馈

最有效的系统往往不是“完全手写”或“完全自由探索”,而是让模型在一个可观察、可验证的环境中行动。

瓶颈从数据规模迁移到反馈与行动

课堂用一张图概括 AI 发展中的瓶颈迁移。

AI 发展瓶颈从数据和规模向反馈、推理与 Agent 迁移

图 4:课堂对不同阶段主要瓶颈的整理。

可以把过去几次变化写成:

阶段被解决的主要约束新瓶颈
深度学习早期手工特征数据与算力
Transformer 与规模化架构和训练可扩展性高质量数据、成本
偏好对齐通用行为可用性复杂推理与可靠性
可验证强化学习数学、代码等可自动评价任务开放世界反馈
Agent长任务与工具使用状态、权限、持续学习和责任

规模规律的经济价值在于让研发和资本规划更可预测:投入更多计算通常能带来可预期的损失下降。但它没有回答模型应怎样与现实互动。进入经验时代后,最稀缺的资源可能从静态数据转向高质量环境、真实结果和安全行动空间。

计算机成为通用执行器

大模型过去主要在语言空间中输出;Agent 通过 API、浏览器、代码环境和操作系统获得行动能力。计算机因此成为一种通用执行器:只要任务已经数字化,Agent 就可能通过软件接口影响现实业务。

这也是企业软件的重要变化。图形界面原本是给人设计的;Agent 更适合 API、命令行、结构化工具和机器可读反馈。它甚至可以绕过部分界面,直接与系统记录交互。

但行动能力使安全问题升级。只读错误可能产生一段错误回答;具有付款、删除、部署或签约权限的 Agent,错误会直接改变企业状态。经验学习必须和最小权限、审批、日志、回滚共同设计。

专用模型会不会被通用模型吞掉

企业常希望把内部知识训练进一个专用模型。但专用模型同时面临两类折旧:

  1. 前沿能力折旧:下一代通用模型可能覆盖它原有的能力优势;

  2. 定制位置折旧:越来越多定制需求可以由上下文、技能、工具、记忆和验证器完成,不必改权重。

专用模型仍有明确价值,但适用条件要更严格:

  • 任务分布长期稳定且规模巨大;

  • 通用模型在该领域仍有显著能力缺口;

  • 延迟、能耗、隐私或单位成本差异足够大;

  • 企业拥有高质量可验证数据;

  • 定制收益能覆盖持续训练和运维。

本课留下的判断

企业数据的价值不由私有性或数量决定,而由它能否组成行动—结果—评价—改进的闭环决定。静态文档提供知识,真实任务状态、动作轨迹和可归因结果提供经验。Agent 从回答问题走向执行工作后,可能第一次持续生产原本不存在的高价值数据。

这条经验飞轮不会自动成立。平台必须接近真实工作、看见结果、获得可信反馈,并拥有抽象和再利用经验的权利。专用模型也不是企业知识的唯一归宿;上下文、技能、工具、记忆和验证器会共同吸收定制需求。长期竞争的核心,是谁能以更高频率完成可信闭环,并把经验转成下一次更好的行动。

来源

本页来源

  1. [1]

    Stanford Online, Stanford MS&E435 Economics of the AI Supercycle | Spring 2026 | Yash Patil — Intelligence, Unlocking Enterprise Internal Knowledge , 2026-05-08。本文使用 Yash Patil 对企业内部知识、Agent、数据边界与专用模型的讲解,以及课堂关于隐性知识、持续学习和企业数据的问答。 https://www.youtube.com/watch?v=LRGX-gTegVA

    ↩ 回正文
  2. [2]

    Applied Compute, The Advantage You Own 。本文使用其创始团队、企业专用 Agent 产品方向和融资信息。 https://www.appliedcompute.com/company/fundraise

    ↩ 回正文
  3. [3]

    Andrej Karpathy, 2025 LLM Year in Review 。本文使用锯齿状智能、预训练与后训练、可验证强化学习、Agent 和数据边界的分析。 https://karpathy.bearblog.dev/year-in-review-2025/

    ↩ 回正文
  4. [4]

    David Silver and Richard S. Sutton, Welcome to the Era of Experience 。本文使用持续环境、经验流、行动与结果反馈,以及从人类数据向 Agent 经验学习迁移的框架。 https://storage.googleapis.com/deepmind-media/Era-of-Experience%20/The%20Era%20of%20Experience%20Paper.pdf

    ↩ 回正文
  5. [5]

    OpenAI, How Your Data Is Used to Improve Model Performance 。本文用于区分消费者与企业产品的数据使用和用户控制。 https://openai.com/policies/how-your-data-is-used-to-improve-model-performance/

    ↩ 回正文
  6. [6]

    Anthropic Privacy Center, Is My Data Used for Model Training? 。本文用于说明商业产品数据、用户选择和模型训练之间的边界。 https://privacy.anthropic.com/en/articles/7996868-is-my-data-used-for-model-training

    ↩ 回正文