强化学习烂透了,我们离AGI还要十年?|带你解读AI大神Karpathy重磅访谈

我们现在谈论的 AI Agent,90%是在假勤奋? 为什么 Andrej Karpathy最近那两个多小时、信息密度高到撑爆上下文窗口的访谈 如此重要?因为它给整个行业泼了一盆冷水:AGI 至少还要十年 。 这个判断不是空穴来风,而是基于他最熟悉的自动驾驶领域 。十年前,Waymo 看起来“再有两三年就行了” ;十年后的今天,我们发现它离真正的无人驾驶还差得远 。 AI 行业最大的幻觉,就是把 Demo 的成功错当成产品的胜利 。 99.9%的绝望:你永远看不了那部电影 Karpathy提出了一个“9 的难题” (The problem of nines) 。一个产品能用(Demo),和这个

强化学习烂透了,我们离AGI还要十年?|带你解读AI大神Karpathy重磅访谈

我们现在谈论的 AI Agent,90%是在假勤奋?

为什么 Andrej Karpathy最近那两个多小时、信息密度高到撑爆上下文窗口的访谈 如此重要?因为它给整个行业泼了一盆冷水:AGI 至少还要十年 。

这个判断不是空穴来风,而是基于他最熟悉的自动驾驶领域 。十年前,Waymo 看起来“再有两三年就行了” ;十年后的今天,我们发现它离真正的无人驾驶还差得远 。

AI 行业最大的幻觉,就是把 Demo 的成功错当成产品的胜利 。

99.9%的绝望:你永远看不了那部电影

Karpathy提出了一个“9 的难题” (The problem of nines) 。一个产品能用(Demo),和这个产品可靠(Product),是两个世界。99% 的可靠性,和 99.99999% 的可靠性,差异是天壤之别 。要真正替代人类,比如自动驾驶,你需要的是“九个 9”的稳定性 。

这个差距就像我们下载一部电影,进度条卡在 99.9% 。你觉得马上就能看了,但没有最后那 0.01%,这部电影你就永远看不了 。

他宁愿现在的模型“不联网” 。因为大模型的核心机制是给你一个“最高概率的答案” ,它很难“知道自己不知道什么” 。当一个“高概率”的垃圾信源进来时,灾难就发生了。

吃垃圾:AI 现在的实现方式很“傻”

我们对 AI 技术的认知也有两个巨大的反常识误区。

第一个是“垃圾”。我们总觉得模型越大越好,动辄万亿参数。但Karpathy认为,现在的大模型都“太大了” 。它们之所以这么臃肿,是因为被迫吃进去了海量的“互联网垃圾数据” 。他甚至判断,一个真正足够智能的模型,可能只需要 100 亿(10B)参数就够了 。

第二个是“吸管”。我们都以为强化学习是 AI 的灵丹妙药。Karpathy的观点是:“强化学习其实很糟” (Reinforcement Learning is actually terrible) 。那为什么大家都在用?因为“其他东西更糟” 。他用了一个绝妙的比喻:现在的强化学习,就像“用一根吸管去吸取监督信号” (using a straw to suck a supervision signal) 。你试图用一种极其低效、带宽极窄的方式,去获取一个极其庞大、复杂的世界模型。

所以,别看现在的 AI 编码工具很热闹,Karpathy直言,这些工具对他这种大神来说“根本不可用” 。因为他的代码“过度抽象简洁”,而 AI 只会用网上学来的“生产规范”和“垃圾代码”来污染它 。

智能的本质是“遗忘”,不是记忆

这就引出了最核心的观点:我们对“智能”的定义可能从一开始就错了。我们总以为,智能是“记得多”。AI 把所有数据都记住了,就是智能。错了!

当前 AI 的实现方式是“傻”的,是“力大砖飞”。真正的智能,是“遗忘” 。

现在的模型“记忆力”太好了,能一字不差地背诵文章。这种对海量知识的“模糊回忆”(hazy recollection)反而成为一种负担。人类的遗忘反而是一种“特性优势”(feature not a bug),它逼迫我们去泛化。就像我们的大脑处理信息,靠的是“压缩”和“遗忘” 。你不会记得小学每天发生的琐事 ;几十年后,你记住的只是“一个美好的小学阶段”,或者“初恋的味道” 。大脑把细节全部遗忘,只留下了高度压缩的“经验”和“感觉” 。

这才是智能。

举个不恰当的例子。很多小孩背书快,靠的不是逐字记忆,而是“图片记忆法” 。我把整页课文当成一张“快照” (snapshot) 拍下来,记住的是它的结构、段落分布 ,而不是文字本身。

这恰好引出了Karpathy盛赞 DeepSeek OCR 的原因 。DeepSeek OCR 做的不是简单的文字识别,它做的是“压缩” 。它用处理图像的方式,把 1000 个文字 Token 压缩成了极少数的图像 Token,同时保留了 97% 的信息准确度 。这才是“一图胜千言” 。这也让Karpathy得出一个推论:也许我们未来的模型,应该彻底转向“用纯图像来训练”,而不是现在的纯文本 。

召唤“幽灵”,而非制造“智能”

所以,Karpathy的“幽灵论”到底是什么意思?

他说,我们不是在“制造一只动物”(Animal),而是在“召唤一个幽灵”(Ghost)。我理解“Animal”是某种硅基生物,是能独立演化的物种 。而“幽灵”,是对人类已有知识和智能的一种“映射”和“复制” 。我们现在做的所有事——用垃圾数据喂它、用吸管训练它、用蛮力堆参数——都是在试图复刻这个幽灵。

但这也许不是终点。我更倾向于认为,这个“幽灵”真正的价值,在于它在映射人类智能的过程中,能够“涌现”出我们人类自己都不具备的智能 。

讽刺的是,大模型被训练出来寻找“最高概率的答案” ,但它自己却很难“知道自己不知道什么” 。或许Karpathy是对的,我们早就该把模型的网线拔了 。

真正的智能,是压缩和遗忘。

【订阅JustSayAI早晚报】

🌈新朋友!订阅「JustSayAI早晚报」· 每日两封 · 一键听报 

🌟老朋友!加入会员获取JustSayAI早晚报+深度研报+文字专栏

【主播小红书】:

📕叫我小苏就好啊

【关注频道】:

▶️Youtube|📺B站|📕小红书|📻Podcast

📱商务合作/听友群:justsayai666

Read more

用什么Fable 5?都给我去用国产模型!

用什么Fable 5?都给我去用国产模型!

我先把话撂这儿:普通人跟顶级闭源模型,已经基本无缘了。Fable 5 这次最吓人的地方,不是它有多强,而是它终于把牌摊开了:你花了钱,也未必配用真货。 你兴冲冲进去,以为自己摸到的是顶级大脑,结果门口先站着一个明保镖,需求不顺眼,直接拒;后面还藏着一个暗保镖,觉得你这个问题太傻,偷偷把你转给更笨的模型。日志里甚至能看到一句近乎羞辱的话:too dumb to use Fable。翻译成人话是什么?你太菜,不配。 顶级模型,花钱还不让摸! Fable 5 不是第一个干这事的。GPT-5.6 官宣得很热闹,20 个合作伙伴、三个等级,什么超牛逼、一般牛逼、普通牛逼,名字我都懒得记,因为反正哪个也轮不到我。Claude Code 呢?限额、降质、切脑,一套连招下来,

By justsayai
UI时代终结了!GLM 5.2+Codex实现Token自由!下一代人真的不用电脑了?

UI时代终结了!GLM 5.2+Codex实现Token自由!下一代人真的不用电脑了?

聊聊最近在硅谷和国内全网杀疯了的智谱 GLM 5.2。 我一点也不夸张,它简直就是我们国产生态的 DeepSeek R1 时刻!自从我去年底疯狂囤了这个 coding plan 套餐,什么 OpenAI 的神坛,什么 Claude 的信仰,瞬间从小甜甜变成了牛夫人。为什么?因为我算是彻底实现了 Token 自由! 这到底是个什么概念?就是你终于不用像个穷逼一样,每敲一行代码都要算计口袋里那几个可怜的铜板了。你想想,以前每次调用大模型,看着屏幕上跳跃的字符,你心里想的不是代码有多牛,而是“卧槽,这得花多少钱”!现在呢?你完全可以对它说,去,给我把活儿全干了,别跟我废话! 先说 Token 自由这件事 你肯定要问,这玩意儿到底有多爽? 这么说吧,以前我用 Codex 调一个极其刁钻的 bug,这哥们儿一言不合就给我开个浏览器,

By justsayai
Claude被封智谱暴涨,Google 诺奖骨干跑路,DeepSeek融资阿里出局与Codex 的翻盘!

Claude被封智谱暴涨,Google 诺奖骨干跑路,DeepSeek融资阿里出局与Codex 的翻盘!

最近 AI 圈爆发的数据,是真的把我吓惨了。智谱的市值竟然在一夜之间直接飙破了一万亿港元,这个数字刺眼得让人倒吸一口冷气。老美前脚刚傲慢地把 Claude 5 的网线给无情拔了,智谱后脚就发公告说 GLM 5.2 免费开源。这简直就是一记完美的连环绝杀,直接把还没反应过来的硅谷大厂按在泥地里疯狂摩擦。这波血汗红利吃得,真的是把所有人都看傻了。 万亿暴涨的遮羞布,到底盖住了谁的无能? 你以为Claude这只是一次普通的封号事件?错!这把无情的利刃,直接扯下了整个 AI 圈虚伪的遮羞布。想想看,我前一天晚上还在用 Claude 5 搓代码,跑得那叫一个丝滑,第二天早晨醒来,号没了!全网瞬间哀嚎遍野,连 AI 界的大神卡帕西,也因为不是美国公民被无情踢下线。 结果智谱直接顶上来接盘。原来我们总觉得智谱的大模型质量差口气。可一旦它掏出逆天的百万窗口上下文,像大海捞针一样精准地帮你改 bug,而且 token 用量极其耐烧的时候,那种感觉就像是:你本来在一家高攀不起的米其林排队,

By justsayai
毕业季|Vibe Coding时代,选专业不如这3个人生开挂Skill|3个老登告诉你邪修也能走上人生巅峰

毕业季|Vibe Coding时代,选专业不如这3个人生开挂Skill|3个老登告诉你邪修也能走上人生巅峰

如果把人生比作一场Vibe Coding,那我们绝大多数人在0.1版本就他妈装错了Skill。 你以为人生是一本写好大纲的剧本,只要按部就班就能通关?扯淡!人生根本就是一场经常报错、随时需要重写、大模型动不动就给你抽风一下的Vibe Coding。别跟我扯什么选错专业毁一生,老子告诉你,就算你当年选了宇宙第一的计算机专业,今天照样被AI按在地上疯狂摩擦。选专业?选个屁的专业!在Vibe Coding的时代,你选什么专业都不如选个好城市,选好城市不如装上这3个能让你人生直接开挂的“邪修”Skill。 最大的Bug,是上了时代的贼船又自己跳船了 聊到这儿,闲哥就得扒开自己的伤口给你们看看。你知道闲哥迄今为止人生最大的Bug是什么吗? 是出国之后没早点回国,错过了北京最狂飙突进的财富红利期。 闲哥是2001年大学毕业的。当年闲哥那帮本科一毕业就留在北京直接上班的哥们,拿着每个月那点破工资和公积金,贷款买房。那时候北京多少钱?四五千块钱一平米啊!闲哥当时还在伦敦读研,收到哥们的越洋信,说他买了房,背了30多万的贷款,估计得还到60岁退休。闲哥当时还在心里

By justsayai