OpenAI高管谈AI底层逻辑:AI是注意力短暂的实习生,警惕泡沫
OpenAI高管仅用9分钟便剖析了AI的核心逻辑:
AI本质上就是一群注意力极其短暂的实习生
这位高管在不到10分钟的时间里,将其对AI的核心见解剖析得淋漓尽致。
这并非关于“AI将改变世界”的空谈,而是涵盖了从神经网络原理到商业落地的完整链条。
听完这段话,我认为这是我今年听到的对AI最透彻的解释。
以下是我从整个讲解中梳理出的五个核心要点。
他用了一个极为精准的比喻:AI就像你拥有了一群注意力极其短暂的实习生。
在GPT-3时代,这些实习生相当于高中生——能协助处理简单事务,但需要你时刻盯着,否则容易走神。
到了GPT-4,大概是大三学生——能处理更复杂的任务,偶尔还能带来惊喜,但关键决策你仍不敢完全交给他。
而GPT-5呢?则是“完全不同的存在”。
这个类比直接揭示了如何思考AI的商业价值:如果你突然拥有了无限量且免费的实习生,你会如何利用他们?
不是去替代你的核心团队,而是将那些需要大量人力、重复性高且对判断力要求不高的任务全部接管。
客服、数据整理、初稿撰写、代码审查、信息摘要——这些正是实习生负责的工作。
AI的应用层价值就在于此。
这段对话中最有价值的是,他将Transformer架构讲解得十分直观。
在Transformer出现之前,神经网络处理语言的方式依赖于“记忆”。
——你给它一段文本,它只能记住前十个词左右。就像一个人读书,每读一句就忘了前面说了什么。
2017年Google提出Transformer,其核心突破在于“注意力”。
这是什么意思?以前的模型必须依靠记忆,记不住就无法处理。
Transformer的做法是——我不记了,我直接“看”。它可以同时关注文档中的所有词汇,从而理解上下文关系。
他打了个比方:以前的架构连理解前十个词都很吃力,而Transformer出现后,模型能真正理解前三四页的内容。
这个跨越有多大?就像从800度近视突然变成正常视力。你能获取的信息量完全不在一个量级。
这也是为什么ChatGPT能做到“读完一篇论文然后与你讨论”——因为它真的能“看到”全文。
另一段值得分享的是他对模型训练的解释。
GPT-4这类模型的训练方式其实极其简单:抓取网上所有能找到的文本,然后让模型逐字猜测下一个字。
“西班牙的雨主要下在……”——模型猜“平原”。猜对了,给予奖励;猜错了,进行调整。
就这么一个动作,重复数万亿次。
你听起来觉得这可行?一个只会“猜下一个字”的系统,怎么可能理解物理学、写诗或进行数学推理?
但它确实行得通。
这里面有一个深刻的启示:当数据量和计算量达到某个临界点之后,“预测下一个字”这样简单的任务,竟然能涌现出类似“理解”的能力。
这也是为什么OpenAI早期的核心论点是——神经网络作为架构就足够了,关键在于规模。
给它足够的数据和算力,它自己就会变聪明。
现在回过头看,这个判断是正确的。
对话中有一段关于投资的讨论非常值得听听。
主持人说,许多人现在正投入数十亿美元用于AI基础设施——新芯片、新数据中心、新训练框架。
但OpenAI高管的态度很谨慎。
他的大意是:许多人尝试过制造新芯片,但NVIDIA拥有巨大的市场规模和资本投入,初创公司成功的几率极低。
相反,他真正兴奋的是应用层。
用他的逻辑来理解:基础设施赌的是“我能比NVIDIA做得更好”,这个赌注太大了。
应用层赌的是“有了这些免费实习生,我能解决什么新问题”,这个赌注的赔率好得多。
我自己做产品也有同样的感受。
你不需要比OpenAI更懂AI,你需要比他们更懂某个行业的痛点,然后利用他们的模型去解决。
这也是为什么最近AI领域最赚钱的公司反而是做垂直应用的——法律AI、医疗AI、教育AI。
他们的护城河不在于技术,而在于对行业的理解。
对话的开头谈到了AI投资泡沫。一家法律科技公司的估值突然涨到了上一轮的八倍。
SaaS公司拿着上亿融资到处路演,仿佛2021年又回来了。
主持人说他对这种炒作“有点担心”。
但听完整个对话,我觉得这里面有一个关键的区分:泡沫存在于“把AI当标签贴”的公司——那些本质没变、只是加了个AI噱头的企业。
而真正的价值正在应用层积累——那些用AI去解决以前无法解决的问题的团队。
区分方法其实很简单:问一句“如果没有AI,这个问题能不能解决?”
如果答案是“能,只是慢一点”,大概率是伪需求。
如果答案是“完全不行”,那才是真机会。
这期对话让我印象最深的是一种思维框架的转变。
不要从“AI能做什么”出发去找应用。要从“我有什么问题”出发,然后问——现在有一群免费的实习生了,这个问题能不能解?
GPT-3是高中生,GPT-4是大三生,GPT-5是另一个物种。
模型在快速进化,但你对自己行业痛点的理解,才是真正稀缺的东西。
更多精彩文章:
AI创业进入深水区:真正的护城河藏在不起眼的笨活里
在MIT上AI课,发现世界真的是草台班子...
2026红杉资本AI闭门会,真正会发生的只有这三件事:1、编程是第一个被吃透的垂类,紧随其后是法律、医疗;2、基础设施是下一个隐形护城河
接下来5-10年的AI时代,精干型公司会跑赢一切。