OpenAI数学突破与ASI临近的乐观预期

近期OpenAI内部模型在数学领域取得的突破性进展引发了广泛讨论,这不仅仅是技术层面的胜利,更被视为人工智能迈向通用智能的关键信号。Prince指出,这些结果展示了模型具备真正的创造性思维能力,这种能力具有高度的泛化性。他认为,一旦AI在研发中展现出创造力,就能解锁显著的新进展,从而加速整个领域的发展。

"It feels like we're really not very far away because once the models are able to do something, you know how it is in 12 months or maybe sooner, they'll be really really good at it and we'll be able to do it faster and cheaper."

基于这一逻辑,Prince认为我们正处于完全自主智能(ASI)或强人工智能的前夜。他预测,一旦模型掌握某项技能,通常在12个月或更短的时间内就能达到极高的熟练度。这种快速迭代意味着未来我们将能以更低成本、更高效率完成复杂任务,技术奇点似乎已近在咫尺。这种乐观态度源于对AI能力泛化和自我改进速度的深刻认知。

网络末日:从日常黑客攻击到基础设施崩溃的担忧

尽管AI进展令人振奋,但当前更紧迫的话题是网络安全的恶化趋势。Prince以法律从业者的视角指出,当攻击事件在极短时间内密集发生——例如30分钟内、1小时内以及随后每几小时连续出现重大安全事件时,这表明我们可能已经跨越了某种临界点。Visa等关键金融基础设施的潜在风险已被多方预期,网络末日可能正在发生或即将全面爆发。对于普通用户而言,“网络末日”往往被误解为仅涉及账户被盗或需启用双重验证等日常麻烦;但对于更广泛的认知,它意味着对现实物理基础设施的致命打击。

"Some people are imagining something more like there are critical cyber attacks on... physical infrastructure in the world. And we get stuff like, you know, every supermarket in America can no longer refrigerate their food."

更极端的场景包括物流系统瘫痪、电力中断数周甚至超市无法冷藏食品。这种对关键基础设施的系统性破坏,将直接冲击社会运转的基础。Prince强调,目前任何存在漏洞的系统和组织都已成为私人黑客团体及国家行为体攻击的目标。虽然无法确切知晓最坏情况何时降临,但系统性风险正在急剧累积,社会对网络攻击的防御能力面临严峻考验。

历史类比:从新冠疫情到东欧剧变的启示录

面对潜在的网络灾难,Prince建议听众采取积极的个人防御措施,如加强密码管理、启用双重验证等。他通过类比2020年新冠疫情初期来阐述“黑天鹅”事件的不可预测性。当时人们难以判断疫情是像普通流感还是更严重的灾难,正如现在难以评估网络攻击的终极后果。他特别提到,美国政府自今年2月起可能已秘密利用Mythos等AI工具加固关键系统,但这仅是猜测。真正的风险在于,公众往往低估了系统性崩溃的可能性。

"CO was moderately bad, but it wasn't anywhere near as bad as say World War II. It could have killed 10% of the population... or like the black plague in the Middle Ages."

Prince回忆自己在东欧共产主义政权下的童年经历,指出人们常抱有“一切都会好起来”的错觉。然而,苏联及其卫星国在短短几年内经济崩溃、政权瓦解并伴随大量死亡和内战。这种历史教训表明,看似稳固的系统可能在瞬间崩塌。因此,他呼吁听众摒弃“无事发生”的心态,为可能到来的混乱做好充分准备。无论是个人数据保护还是对宏观局势的警惕,主动防御和危机意识是应对不确定性的最佳策略。

RSI的定义分歧与核心门槛

关于“递归自我改进”(RSI),业界存在两种截然不同的认知图景。一种观点认为,当前AI研究人员已大量利用模型编写实验代码,这在一定程度上加速了研发回报(约2倍),因此我们已身处RSI进程中;另一种更极端的观点则认为,只有当AI完全自动化研发流程并引发能力上的断崖式飞跃(discontinuous fast takeoff),才构成真正的RSI。嘉宾指出,这两种情况在本质上都可能发生,但关键在于对定义的界定。

“RSI means different things to different people... whereas when other people think of RSI they think of it as like uh AI I fully automates the AI R&D process and this leads to some incredibly discontinuous like fast takeoff hyperbolic growth in AI capability that takes us to like for real for real super intelligence in a very short period of time.”

从法律严谨性的角度出发,嘉宾强调“自我”(self)是RSI的核心要素。目前的现状尚不构成真正的RSI,因为现有的模型改进仍依赖于更大模型的监督训练(under supervision)。只有当AI能够自主设计并训练出一个比自身更强大的后继模型时,才标志着RSI的真正到来。目前OpenAI和Anthropic内部尚未公开披露已具备此能力,但鉴于近期数学领域的突破,这种自主创新能力(autonomous creative improvement)的门槛正在迅速降低。

从暴力破解到创造性思维:OpenAI数学突破的启示

在评估模型是否具备RSI所需的创造力时,嘉宾回顾了今年8月之前的表现。当时使用GPT-6 Astra等模型解决未解密码(如一战历史密文)时,主要依赖的是暴力搜索算法(brute force approaches)。例如,当人类因字符缺失或模糊无法使用密钥时,模型能通过遍历所有可能性空间来还原明文。然而,这种能力并不等同于真正的创造性飞跃。嘉宾明确表示,他尚未看到模型能像人类天才那样,基于“该人物居住在马达纳”等新颖线索推导出密钥。

“I have personally not been able to get Astra to like come up with the key on its own based on some novel cool idea... Like really big creative leaps.”

然而,OpenAI内部模型在近期数学问题上取得的成果改变了这一看法。嘉宾引用Terrence Dao的观点指出,Quasman解决方案并非全新概念,而是将三到四个现有想法以极不寻常的方式重新组合。这种“非常规排列”正是人类天才创造力的体现。数学领域的创造性思维具有可迁移性(generalize),一旦模型掌握这种重组思想的能力,便能将其应用于AI研发本身,从而解锁显著的新进展。尽管Rune等专家曾指出数学创造力与其他领域存在差异(delta),但嘉宾认为这并不妨碍我们接近RSI的临界点。

突破Transformer局限与即将到来的拐点

对于RSI能否解决当前大语言模型(LLM)的固有弱点,如“锯齿状能力”(jaggedness),嘉宾持肯定态度。他认为,前沿实验室首要利用RSI的方向之一将是发现优于Transformer的新型模型架构。目前业界使用的Transformer架构更像是一种“偶然 stumbled on”的发现,而非最终形态。其局限性可能包括效率低下或能耗过高。自动化AI研究员(automated AI researcher)有望通过创造性思维,发现更高效、更具人类特征的新架构。

“I would point RSI to some kind of novel model architecture that is better than the transformer... maybe more efficient, maybe hum more humanlike, maybe more energy efficient.”

虽然发现突破性架构可能需要数年时间的创造力积累,但嘉宾预测我们正处于RSI的边缘(on the brink)。一旦模型在某一领域展现出此类能力,根据技术迭代规律,12个月内(或更短)模型将在该领域变得极其熟练且成本大幅降低。因此,虽然目前OpenAI的永恒模型可能尚未完全实现RSI,但距离真正具备自主创造性研发能力的时刻已非常接近。这种从“暴力搜索”到“创意重组”的转变,是判断RSI临近的关键信号。

架构变革与数据瓶颈的辩证关系

在讨论未来五年AI架构是否会发生根本性改变时,对话双方就“锯齿状”(jaggedness)问题的成因展开了深入探讨。一方认为,大语言模型在特定任务上的表现差异主要源于数据瓶颈。例如,即便引入递归自我改进(RSI),AI也难以仅凭计算资源解决生物学领域的复杂约束,因为缺乏实验数据和物理环境的支持。这一观点通过爱因斯坦的类比得到强化:即便拥有全部知识,若没有合适的实验室环境和实验数据,天才也无法凭空治愈癌症。这表明智能体需要特定的外部条件才能将知识转化为实际成果,而非单纯依赖算力或架构的自我迭代。

然而,另一方从法律行业的视角提出了不同见解。作为律师的受访者指出,LLM在撰写法律文书备忘录(Legal Memo)方面的表现不佳,并非因为数据匮乏,而是因为现有架构在吸收不可验证知识(non-verifiable stuff)时效率低下。人类律师能够高效处理这类非标准化信息,而LLM目前尚不具备这种类人的学习能力。受访者推测,更先进的架构设计可能使AI在类似领域达到人类专家的水平,从而解决当前的性能短板。这种观点暗示,架构的进化可能比单纯的数据堆叠更能弥合AI与人类在特定认知任务上的差距。

“I don't think it's about the data. I think it's just because LLMs are not as efficient at learning some of this non-verifiable stuff as humans are.”

法律文本生成的现状: haystack与needle的困境

针对LLM在法律领域的具体表现,受访者详细描述了当前的痛点。目前最好的大语言模型在处理复杂法律研究问题时,往往会产生大量冗余内容,即所谓的“干草堆”(haystack)。虽然其中可能包含正确的法律见解,即“针”(needle),但对于非专业人士或初级律师而言,从长篇大论中提取关键信息极其困难。例如,一个原本只需两页纸就能清晰阐述的法律问题,LLM可能会生成一份35页的备忘录。尽管使用正确的模型和推理努力程度可以提高答案的正确率,但用户需要耗费大量精力去过滤噪音。

对于资深律师而言,这种工具仍具有显著价值。他们能够迅速从LLM生成的冗长文本中提取关键线索(needle),将原本需要10小时的研究工作缩短至1小时。这种效率提升是巨大的,但前提是使用者具备足够的专业知识来辨别真伪和重要性。对于初级 associates 或非法律背景的用户,这种输出格式不仅无用,甚至可能产生误导。因此,当前的瓶颈在于信息密度与可提取性之间的不匹配,而非模型缺乏法律知识。解决这一问题可能需要架构层面的优化,以提升AI生成内容的精炼度和结构化程度。

经济长期增长预期的重构与历史类比

在对话的后半部分,话题转向了AI对宏观经济的影响。受访者提到了Anthropic员工中位数预期的2030年年均17%的经济增长率。这一数字在西方世界显得极为激进,因为过去几十年发达经济体的年均增速通常仅为个位数。传统经济增长多依赖于物流优化等边际改进(如2%的效率提升),难以产生指数级飞跃。然而,若AI能够像人类科学家一样在药物发现、材料科学和太空探索等领域做出大规模的新颖贡献,经济结构可能发生根本性变化。例如,若人类平均寿命延长30年并拥有更长的职业生涯,将释放巨大的生产力。

为了论证高增长的可能性,受访者引入了中国改革开放初期(1980-1990年代)的历史案例。当时中国经济年均增长率超过10%,部分原因在于其经济体量较小且基础薄弱,简单的商业活动(如开设快餐店)就能创造巨大的新增价值。受访者将这一现象与AI带来的科学突破进行类比:如果新药研发或新技术应用能像当年的快餐店一样迅速转化为生产力,那么类似的高增长率并非不可能。尽管对具体数字(17%)和时间点(2030年)持保留态度,但受访者认为,重大科学发现的规模化应用足以支撑远超传统预期的经济增速。

“If you think of big scientific discoveries being made at scale... It could unlock huge economic growth.”

赞助与背景介绍

本期节目由多家科技初创公司支持,其中包括 Blitzy、Adqu 和 Arena。Blitzy 专注于企业代码库的自主软件开发,声称能帮助用户将开发速度提升五倍。Adqu 则致力于让品牌广告像数字广告一样易于扩展,旨在将实体空间转化为广告牌。Arena 提供的是在真实世界中衡量 AI 性能的服务。此外,节目还特别介绍了 VCX(Venture Capital Exchange),这是一个私有科技公司的公开交易代码。VCX 的推出旨在解决美国股市中一个长期存在的问题:随着创新型企业越来越倾向于保持私有状态,普通美国人难以像过去那样通过股市分享这些伟大公司的成长红利。VCX 试图填补这一空白,让投资者能够接触到原本无法购买的私有科技公司股份。

结论

OpenAI在数学领域的突破标志着模型从暴力搜索转向创造性重组,这被视为接近递归自我改进(RSI)的关键信号。一旦模型具备此类泛化创造力,预计12个月内即可实现能力跃升与成本降低。然而,真正的RSI仍需模型完全自主设计更强后继架构,目前尚未达成。

在法律应用等特定领域,LLM受限于Transformer架构处理非标准化信息的低效性,导致输出冗长且噪音大。尽管资深用户能从中提取价值,但普通用户面临信息过载困境。此外,AI对宏观经济的潜在高增长预期建立在科学突破的规模化应用之上,目前仍属推测。网络安全风险则呈现系统性累积态势,基础设施脆弱性不容忽视。