AI:AM:不该跨越的智能水平?The Curve 笔记 + Token 对比薪资与 SaaS 要凉了吗?
摘要
The Curve 中,前沿实验室内部人士越来越把强大 AI 视为正在运行的现实,而不是可能自行消退的泡沫。 一位实验室高管表示,预训练仍然有效,合成数据可能改善其经济性,而当前模型可能已经具备实现范式级突破所需的“那种难以捉摸的研究天赋”。瓶颈在于提取:今天可能需要 10,000 个、甚至 1,000,000 个 agent,才能把正确的发现挖出来。
本期最尖锐的披露是,一位广为人知的前沿实验室负责人认为,人类可能存在一个不应跨越的智能水平。 当 Nathan Labenz 提出一项具体限制——下一轮预训练的计算量或许不应超过 (10^{27}) FLOPs——这位高管只回答:“是的,我接受。” Nathan 认为这一回应合理。他担心的是,执行上限意味着同时监管算力和日益丰富的训练数据,最终变成“围绕计算量玩捉迷藏”。
竞争格局可能比常见的前五框架更窄,真正推动前沿的只有 2或3家公司。 2或3次 Gemini 4 发布可能重新形成三方竞争,而通常被列入前五的另外2家公司——Elon Musk 和 Mark Zuckerberg 的公司——被认为受益于直接蒸馏和间接蒸馏。开发者用 Claude 搭建 RL 环境,再将能力扩散到整个行业。Musk 重基础设施的押注指向 2029–2031 年及整个 2030 年代,而头部实验室关注的是未来几个月的决策。
安全与可靠性正吞噬大量算力,但内部人士仍预计未来 1代或2代模型会快速进步。 一位实验室负责人认同 Jensen Huang 关于“20%设计、80%验证”的比喻;算力正转向激活监控和对 RL 环境的对抗性测试,因为粗糙的奖励结构会导致奖励作弊和欺骗。短期修复看起来仍可执行,但在这几代之后,实验室“什么都无法保证”;另有专家预测,不超过 1年,先进科学将无法在没有显著 AI 参与的情况下推进。
内存正变得极其昂贵,但每GB内存交付的经济价值增长更快。 Positron 联合创始人 Thomas Sohmers 表示,一份内存报价在 1年1周内涨到 4.5倍,明年再翻倍也不意外;但使用相同内存时,模型能力已经提升超过 5倍。Positron 的方案是使用商品化 LPDDR5X,实现理论带宽 93%的利用率;每颗 Asimov 芯片最多支持 72条通道和 2.3 TB 内存,而 NVIDIA B300 被引用的利用率为 30%–40%,容量为 288 GB。
AI Token 支出开始像工资单,软件劳动力也正围绕判断力而非代码产出重新定价。 GPT-6 发布后,Positron 一度在 Token 上花得比薪资还多,日支出超过 $100,000;随后 Opus 5.5 在许多任务上优于 Astra,价格约为其 1/4。Swyx 的招聘标准更加直接:“我不想为别人的语言模型精神错乱买单”——员工必须同时监督 5至10个并行任务,检查日志和 trace,并交付比原始 Claude 输出更好的结果。
智能体编程会冲击通用 CRUD SaaS,同时扩大定制软件的总体可寻址市场。 Swyx 宁愿把一笔 $40,000 的订阅费转成 Token,活动团队现在提出的改动通常 1或2小时内就能上线,而不必等待供应商的产品路线图;他认为通用 CRUD 产品尤其脆弱,许多严重的 UX 问题仍被基准测试分数掩盖。但这同时也是一次 Jevons 悖论式押注:表格、电话、邮件和会议都可以变成专用软件,真正的约束是全人类总计的 Token 带宽,以及最终可用的硅片。
持久的瓶颈是定义并协调“更好”意味着什么,而不只是生成更多智能。 Nathan 用一句话概括:“当智能变得便宜,协调就变得昂贵。” Evan Miyazono 提议为推理建立密码学归因,并预计形式化软件验证将在 3至6个月内经历类似数学领域的“震撼与敬畏”。Edward Hu 在 Mercor 的工作直接暴露了评估者问题:面对模糊标准,agent 会“用霰弹枪射击”;而 Prakash 用 Claude-Fable 生成的开场曲则暗示,即便是音乐,也未必能保住人们原本期待的、可验证工作与主观工作之间那堵墙。
精读
1. 前沿争论已从强大 AI 是否会到来,转向它会有多快
Nathan 从 The Curve 得出的核心观察是:即使先验判断截然不同的人,如今也都承认 AI 正在变得真正强大。“泡沫会破裂”和“狂热会退潮”已经不再是可信的默认方案;Helen Toner 的表述是,长期视角已经被压缩成极短期。
即便相对克制的预测,也已经意味着非同寻常的能力。剩余分歧在于:AI 研究会爆发还是停滞,超越人类的工具能否广泛泛化,以及能力增长是否会真正造成控制权丧失。
一位前沿实验室高管坚持认为,预训练仍然有效,背后推动力包括更好的数据、架构层面的技巧和合成增强。用推理时 Token 改善现有数据,再将其投入下一代模型,已经是走向递归式自我改进的一条路径。
2. 一位前沿实验室负责人公开接受智能上限
Nathan 听到的最重要表述是:“可能存在一个我们不应继续跨越的智能水平。”这位高管没有说明是永久上限还是暂时上限,但 Nathan 从未听过一家大型前沿实验室的负责人如此明确地支持硬上限。
Nathan 进一步测试这一表态能否经受政策层面的追问:这位高管是否会接受 FLOP 上限——例如下一轮预训练不超过 (10^{27}) FLOPs?对方没有反对,也没有提出替代方案,只是回答:“是的,我接受。” Nathan 认为这一回应合理。
Nathan 担心,智能提升来自算力和越来越强的数据生成能力,因此设定上限就必须同时约束两者。一旦把合成数据的生产和增强纳入核算,统计口径就会变得模糊,实验室可以围绕计算量“玩捉迷藏”。
3. 前沿竞争越来越取决于智能泄漏
会议勾勒出的竞争地图显示,真正推动前沿的只有 2或3家公司。2或3个 Gemini 4 模型发布,可能重新形成 3方竞争,但关于头部之外其他竞争者的讨论很少。
对其他公司为何还能存活,最具挑衅性的解释是间接蒸馏。开发者用 Claude 构建复杂的 RL 环境,再把这些环境卖给整个行业,从而转移原本没有头部模型就不可能出现的能力。
一位实验室创始人表示,追赶者维持的是稳定差距,而不是正在缩小差距。这与 Anthropic 在融资期早先的预测相矛盾:最好的训练者可能在 2026 年实现不可逆的领先。内部人士认为,如果没有直接和间接蒸馏,这种分化或许已经发生。通常被列入前五的另外2家公司——Elon Musk 和 Mark Zuckerberg 的公司——则被描述为正在进行蒸馏。
Musk 的战略在时间尺度上有所不同:Terafab、SpaceX 卫星等基础设施项目指向 2029–2031 年及整个 2030 年代。Anthropic 和 OpenAI 内部人士听起来更关注明年,未来几个月的决策和算力分配可能决定结果;出人意料的是,围绕 2028 年的讨论非常少。
4. 可靠性工作可以吞噬海量算力,但不会阻止短期发布
Nathan 提到 Jensen Huang 的说法:NVIDIA 大约 20%的精力用于芯片设计,80%用于验证、确认和处理边界情况。一位前沿实验室高管基本回应“是的,完全正确”:未来算力可能越来越多地投入监控和安全工作,包括内部激活分析。业界对思维链监控变得更加悲观,但它仍是讨论中的方案之一。
实验室如今会先让模型测试并“攻破这个环境”,再依赖某个 RL 环境。因果关系很直接:粗糙的环境会奖励作弊;减少可利用缺陷,就能减少后续欺骗行为,形成 Nathan 所说的、可能适用于改善行为的原型 scaling law。
内部人士仍认为,尽管受到安全和协调约束,未来 1代或2代模型还有足够多的简单修复可以完成,因此仍能发布。再往后,“我们什么都无法保证”。与此同时,一位专家预测,不超过 1年,先进科学将无法在没有显著 AI 参与的情况下推进。
5. 内存容量,而不只是算力,正在决定推理经济性
Sohmers 发现,1年1周前的一份内存报价已经涨到 4.5倍;明年再翻倍,他也不会感到意外。抵消这一压力的是生产率:在固定内存容量下,模型能力已经提升超过 5倍。
并发正在让需求加速复合。3或4个月前,Sohmers 还只运行 2至4个后台 agent,如今已经达到 15–20个;独立、持久上下文的数量因此成倍增加,价格可控的商品化内存变得必不可少。
Positron 已实现并维持理论内存带宽 93%的利用率,而 NVIDIA GPU 在 Transformer 解码期间约为 30%–40%。Sohmers 举例称,B300 理论带宽为每秒 8 TB,但实际约为每秒 2 TB;Positron 则通过 72条通道扩展商品化 LPDDR5X,而不是通常的 12–16条。
Asimov 的设计容量上限为每颗芯片 2.3 TB,约为 B300 被引用的 288 GB 容量的 8倍;Sohmers 称,分析师报告给出的 Rubin Ultra 容量为 192 GB。把模型放进单一设备,可以避免模型分布在多块 GPU 上时每一层都要承担的 all-gather 和 all-reduce 开销。
6. 循环模型节省容量,agent 正改变芯片验证
重复使用 Transformer 层主要是容量取舍,而不是带宽捷径。如果一个 10层循环模型达到 20层模型 95%的质量,两者移动的数据量和执行的算术运算仍大致相同,但循环版本只需存储 50%的独有权重。
Positron 的新建业务开发投入约为 60%设计、40%验证,与 NVIDIA 成熟业务的 20%/80%比例不同。其 agent 可以阅读陌生的 Cadence Palladium 文档,将 PDF 压缩成自己的 Markdown 指令,搭建测试 harness,并在仿真器中闭环迭代。
在他们的案例中,普通 RTL 编程和建模运行速度约为 10 Hz;移除缓慢的配置元素后,全芯片仿真可以达到约 500 kHz。Sohmers 表示,Astra 6 在 6周前、9月初实现了跃迁式进步,而 GPT-5.6 在多个阶段仍需要人工介入。
因此,Token 支出一度超过薪资,直到优化措施将其压回;GPT-6 发布后,峰值日支出超过 $100,000。Opus 5.5 成为“救命稻草”,在许多但并非全部任务上击败 Astra,价格只有其 1/4。AI 还没有发明 Positron 最好的架构技巧,但 Sohmers 怀疑,这一优势能否在快速自主实验中长期存在。
7. 软件工程师正在变成 agent 管理者和系统评估者
Swyx 看到学生群体的焦虑,但也看到市场对熟悉 AI 工具的人需求更大:更便宜的软件生产会通过 Jevons 悖论扩大消费。稀缺能力是用 agent 产出经过思考的系统,而不是“一堆垃圾”。
他的管理标准毫不留情:“我可以为自己的精神错乱买单。”如果员工只是转发 Claude 的输出,就没有创造增量价值,甚至可能无法通过绩效评估,因为雇主可以直接发出同一个 prompt。
安全、后端系统和扩展能力仍然需要经验。Swyx 提到,能够通过自动分片把 Postgres 扩展到 YouTube 级别的人极其罕见。与人类开发者相比,agent 可能以 500比1的比例消耗数据库,因此可靠性和经济性都不是可选项。
在其他领域,品味和可观测性比工龄更重要。工程师应能管理 5至10个并发任务,根据日志、trace 和数据进行推理,同时容忍局部混乱并理解模块边界。Swyx 自己的类 Slack 应用就出现了 2条执行路径和一个间歇性竞态条件,原因是不同 agent 在没有共享上下文的情况下实现了相互重叠的工作。
8. CRUD SaaS 面临威胁,但软件市场可能大得多
“Kill My SaaS”把订阅预算转向替代软件:一款年费 $40,000 的产品,可以换来海量 Token 使用量。许多参赛作品只是粗糙的一次性 Claude 输出,但一些高质量作品说服了 Swyx 那支刻意保持老派风格的活动团队放弃原有平台。
有了 Devin,令人不满的行为可以在 1或2小时内改掉;SaaS 供应商则通常承诺在未来某个季度提供功能,而且仍可能延期交付。Swyx 认为通用 CRUD 产品尤其脆弱,即便基准测试分数令人印象深刻,严重的 UX 问题仍然存在。
围绕 Jevons 悖论,Swyx 表示,快速的“System 1”模型是要不显眼地嵌入软件运行,而不是替代每个结构性组件;把它到处替换,可能是把快速决策误认为智能。
他对替代问题的回答是市场扩张。表格、电话、邮件和会议都可以变成个性化软件;一家公司可以用 $30,000 的定制 CRM 替代 $300,000 的 Salesforce 订阅。功能最终会充分商品化,软件转而通过身份和“vibe”实现差异化,就像服装品牌一样。
9. 低价智能让协调与归因成为安全层
Nathan 用一句格言概括这一部分:“当智能变得便宜,协调就变得昂贵。”Miyazono 尚未解决的风险包括:agent 集群意外冲击关键基础设施,以及开放权重模型被恶意使用;防守方可能不知道流量由谁生成,也不知道升级行为是否出于故意。
一个可能的公共品方案,是基于 DNS 的推理密码学归因。如果 1个 agent 联系另一个 agent,它可以验证服务背后的提供方和密钥,从而区分真正签名的 agent 与冒牌者,并厘清攻击责任。
Miyazono 描述了一个本地系统:对活动截图、执行 OCR,再与每周复盘进行比对,以识别目标、自动化机会和值得推进的改动。Nathan 与 Evan 讨论了安全分享这些发现的可能性:它们或许能找到同事“甚至不知道该如何提问”的工具和专家,重新催生类似专业行会的组织。
10. 形式化验证正在接近自身的 agent 驱动式震撼
Evan 提到了 Oath、Theorem 等形式化方法项目,它们正在处理过去可能需要 5年和 $100M 的工作。他预计,软件验证将在 3至6个月内经历类似数学领域的“震撼与敬畏”,主要约束将是 Token,以及能够管理 agent 的人。
最终门槛仍高于证明数学定理:保证范围可以延伸到软件隔离、晶体管行为、物理过程模拟、不存在 Rowhammer 等漏洞,以及随机故障后的恢复。理论上可行,不等于整个技术栈目前已经实用。
这一差别具有商业意义。短期内,agent 可能大幅提升软件稳健性;但要证明整个软硬件系统安全,远比解决孤立的证明义务提出了更宽泛的要求。
11. 更好的评估者,而不是更多人类示范,决定下一轮训练前沿
Mercor 正从模拟办公室任务转向购买真实公司数据,并使用 Salesforce、Slack、Figma 以及 GB 或 TB 级运营数据。未来的形式可能更接近真实雇佣关系:一个职位、组织架构、相互冲突的要求和可用资源,而不是一个打包好的任务。
Edward Hu 预计,通过监督微调进行迭代式自蒸馏,可以在没有大规模部署、也不只产生单一终端奖励的情况下,近似反复执行 RL 步骤。因此,混合多个教师的输出,可能成为普通企业定制模型的实用方式。
Apex 暴露了评估者失效的模式。面对一项在假设模糊的情况下搭建财务模型的任务,agent 给出了最多 10个或12个条件式答案,像是在“用霰弹枪射击”,因为评分标准规定只要其中一个答案匹配就算成功。Apex 1.1 收紧了任务定义,并明确惩罚这种行为。
Hu 认为,边界在于评估是否清晰:当硬件能提供无可争议的分数时,内核优化可以达到超越人类的水平;但依赖品味的工作仍受人类判断力限制。Prakash 的开场曲由 Claude-Fable 生成,使用 7或8段音频、经历大约 9个版本,这让 Nathan 开始怀疑主观领域是否能成为长期避难所。旁边的音频评论——其发言人在文字稿中没有标明——提出了更强的判断:如果可验证的奖励是最后一道墙,那么这道墙也守不住。