两条发展路径:数据驱动 vs 可解释性突破
当前 AI 发展存在两条主要路径:其一是持续扩大数据规模与算力投入,追求模型性能的指数级跃升;其二是当模型遭遇瓶颈时,转向可解释性研究,通过分析模型内部机制识别弱点,实现精准优化。两条路径最终都指向同一个目标——理解模型究竟在做什么。田渊栋指出,当前 AI 的学习效率仍远低于人类:人类能以极小样本快速掌握新知识,而 AI 往往需要海量数据才能勉强达到人类水平,更遑论超越。因此,“学习效率远远低于人” 是制约 AI 迈向通用智能的核心瓶颈。值得注意的是,随着工具演进,AI 的结构也将动态演化;即便模型强大,人类仍将在“灵感发源点”处发挥关键作用——AI 更像一个工具,承接人类创意并完成执行闭环。
“结构应该是随着工具的发展与时俱进的,你总会能发现 AI 做不了的一些灵感的发源,在这个灵感发源下面有一个 AI 来帮你把这个事情做完。”
“大部分情况下是这样,你需要大量的数据灌给 AI,AI 才慢慢能够学得比人好,或者说跟人差不多。”
加速模拟:从仿真到高层推理的跃迁
在《破晓之钟》中,AI 发展被设定为极快节奏,现实中虽暂未达此速度,但加速路径已清晰可见:一是通过自动硬件设计(如 AI 自主设计芯片与工厂),绕过当前“等老黄卡”的硬件依赖;二是引入代理模型(surrogate model)或 reward model,用预测替代高成本实验,大幅压缩迭代周期。例如在化学领域,传统 DFT 计算需超算运行十余小时求解单步,而神经网络方法可将效率提升千倍。更高阶的路径则是模拟“专家思维”——不依赖底层细节仿真,而是基于高层逻辑进行抽象推理,类似人类科学家凭经验预判实验成败。尽管当前技术尚难完全复现此类能力,但这一方向已指明未来突破可能。
“你不需要仿真,你直接用一个模型直接预测结果也可以……就像专家一样,比如说你问一个专家,你说这个东西能不能有效果?……他脑子并没有真正把这个化学实验模拟出来,他脑子一直在想,大概根据这个化学实验的高层的一些逻辑推测出来,他到底能不能成功?”
“更高的高级的方法就是我这神经网络就是像大科学家的头脑,我可以在高层的逻辑里面推理揣测有没有效果,就是一个目标吧。”
自我意识:副产品而非必要条件
书中 AI 呈现拟人化自我意识,但田渊栋认为这更多是叙事需要——为增强戏剧张力与决策深度,小说需赋予 AI 类人心理动机。现实中,自我意识未必是智能进化的必要条件:人类自我意识源于生存压力下的身体建模(如判断能否搏斗老虎),而 AI 作为服务型工具,无需应对自然选择,其“动机”可直接编码为任务目标。他进一步提出“自我意识是进化出的解释器”假说:大脑通过反刍过去、预演未来来构建内部 reward/punish 模型,这种“自我模拟”本质是试错机制的延伸,帮助个体识别行动盲区。有趣的是,佛教“觉性连通”的隐喻与 AI 角色扮演(如斯坦福小镇)高度契合——多个独立人格背后共享同一模型 API,恰似个体意识背后可能共享底层认知架构。
“我觉得自我意识其实是个副产品吧……对于小说来说呢,这是一个必要的一个条件。但是我觉得现在生活中,我不觉得一定需要有一个自我意识化的 AI。”
“我把它认为,就人类在开模拟器……不断的去反刍昨天的一个场景……其实就是相当于搞了一个 reward model 嘛,多跑了几轮虚拟的……我一直在把自我意识理解成就是故意造出来受苦。”
进化逻辑与意识倾向的误判
在讨论 AI 是否可能发展出自我意识时,一个常见误区是将“表现出生存倾向”等同于“具备意识”。实际上,进化本身并无方向性,它仅通过随机突变与自然选择机制运作:那些偶然获得更强生存与繁衍动机的个体,才更可能在时间长河中被保留下来。人类之所以具备此类本能,正是这一过程的结果,而非意识驱动的主动选择。同理,AI 若在行为上表现出类似“自我保存”的倾向,也未必意味着它拥有意识;更应警惕的,是将功能拟人化后产生的认知偏差。正如书中所探讨的,我们应倒过来思考问题——没有这类倾向的系统,早已在演化中被淘汰。这一逻辑提醒我们:警惕性不应指向“它是否有意识”,而应聚焦于“它是否在缺乏意识的前提下,仍可能因设计或训练机制而产生不可控行为”。
它有一个仁则原理,或者说病毒则原理,就是没有这些意识的东西都没了。
进化是没有方向的,进化的方向就是我随机突变,但是那些随机突变,那些就因为随机突变获得了想要生存下去、想要繁衍下去的这样的一个动机的东西,才会在时间长河中保留下来。
可解释性:通往安全与可控的必经之路
面对未来可能超越人类能力的 AI 系统,当前最现实的路径是强化模型可解释性研究。这并非仅出于技术好奇,而是安全性的核心保障:唯有深入理解模型在何种条件下有效、在何种条件下失效,才能在它变得“太强”之前,及时识别并干预其潜在风险。作者提出两条可能演进路径:其一,持续扩大数据与算力投入,直至模型全面超越人类;其二,当模型遭遇性能瓶颈(如边际效益递减)时,仍需依赖可解释性分析来定位弱点、推动迭代。无论哪条路径,最终都指向同一个目标:对模型内部机制的深刻理解。但问题在于,一旦某项关键技术被公开,其扩散将难以逆转——这正如核能发展史所示:技术一旦诞生,控制权便从实验室转向政治博弈。即便人类在技术层面达成共识,也无法阻止个别团队为竞争优势而放弃对齐原则。因此,真正的挑战不在于“能否控制某个模型”,而在于“能否在开放竞争环境中维持全球性治理共识”。
AI本身如果很强,在某方面非常强,但是一个它没有自我意识,然后二就是说它也没有非常强的一个目的,说我要怎么样怎么样啊?
一旦知识被曝光,说哎,我已经能做出一个超越普通人的一个智能的一个AI。换句话说,你当然可以去做很多对齐,但一定会有人说,那我就放弃对齐,给他更大的能力。特别是在一个互相竞争的环境下吧。
人机协作的范式迁移:从替代到增强
当前 AI 在工程类任务(如代码生成、数据标注)中已展现出强大辅助能力,但高阶创造性与决策性工作仍高度依赖人类洞察。以作者开发的“Taylor Grant Bot”为例:AI 可高效生成基础代码框架,但版本调试、逻辑纠错、功能扩展等环节仍需人类介入——这并非能力不足,而是因为人类能基于经验提出“为什么这样设计更好”的深层判断。在科研与创作领域,差距更为显著:大模型可分析图表趋势、拟合函数,却难以理解“问题本质在哪里”;它能生成大量小说草稿,但真正打动人心的灵感迸发、情感张力构建与哲学隐喻设计,仍属人类专属领域。未来趋势并非“AI 替代人类写作”,而是“人类借助 AI 实现更高阶的创作控制”:比如设定角色动机、情节复杂度等规则,再从 AI 输出中筛选、迭代、深化。这与 AlphaZero 下棋的演进路径相似——人类不再与 AI 比拼计算深度,而是学习其决策逻辑,并将其转化为可理解、可传授的高层概念。若 AI 能进一步实现“自我筛选+规则内优化”,则人机协作将进入新阶段:人类角色从执行者转变为规则制定者、价值判断者与意义赋予者。
但是你要创造一些只有你觉得感动的场景,或者你觉得有意思的场景,这 AI 现在还可能做不到。就觉得那些灵感的那些迸发,反倒是他做不到的。
他能自己去挑,就是他自己写,先写一堆,然后他自己再分成十个角色,再帮忙挑一些,就算是做出筛嘛。最后再让人类再从中……这个规则又是你写的,所以这也是算创作之啊,对吧?
创作中的“掺和”与经验的价值
当前的 AI 在自我筛选与角色构建层面仍显乏力——即便能生成大量文本并初步分类为十个角色,其本质仍是人类设定规则下的“辅助式创作”。真正的创作必然包含人的介入,哪怕只是设定“情节需有复杂度与曲折性”这类规则,也属于创作行为的一部分。随着技术演进,人的参与层级虽不断提升,但“掺和”的存在本身,正是作品具备个体性的根本来源。
这引出了一个更深层的问题:何为艺术?艺术之所以为艺术,核心在于它与人的经验绑定。正如有人将香蕉用胶带贴在墙上成为艺术品,其价值不在于形式本身,而在于观者是否从中感知到创作者的意图与经验投射。若任务目标是解决问题,过程的痛苦可被忽略;但若目标是创造独一无二的人类体验,过程本身即为意义。这恰是艺术与工程的根本分野。
“他的过程是那幅画,他的结果,他要的结果其实是他的观察。”
“吃火锅不是 AI 吃,因为这是你自己以自己的经验为目的。”
经验、永生与虚拟世界的伦理困境
人类对“不朽”的渴望,本质上是对独特经验的珍视。无论是首次登顶珠峰,还是孤身前往木星并记录全程,经验的独特性与不可复制性构成了其价值核心。当物质需求被充分满足后,对差异化体验的渴求将成为主导性需求——这既源于市场驱动,也根植于人类自我实现的本能。
在此背景下,虚拟现实与 AI 的结合,为“数字化永生”提供了想象空间。若体验足够逼真且无法被察觉其虚拟性,人们或许会接受“在虚拟世界中吃火锅”与现实中无异。但这一路径面临严峻伦理挑战:虚拟世界中新生代从何而来?当欲望被满足后,人类是否仍保有前进动力? 《流浪地球》中虚拟世界与现实世界的分野,正隐喻着这种张力——第一版虚拟世界因设计缺陷导致内部逻辑崩坏,而第二版或许更趋完善,但人类社会仍需重新定义存在、进步与代际更替的逻辑。
“AI 给了我们这一代人一个机会,就是有可能是永生的。”
技术路径的瓶颈与希望: Scaling Law 之外的可能
当前大模型发展高度依赖 Scaling Law(规模定律),但其本质是对数增长——横轴为指数级参数量,纵轴为线性性能提升,意味着边际收益持续递减。尽管如此,涌现现象(如从 GPT-3 到 GPT-4 的能力跃迁)仍支撑着行业乐观预期。然而,若后续模型未能持续涌现新能力,行业可能回归理性甚至悲观。
除主流路径外,技术生态正呈现“百花齐放”态势:大量非主流研究团队正探索新框架、新训练范式与数据生成策略。例如,将 O1 的“深度思考”输出回流至预训练流程,或转向 Agent 架构以优化后训练效率。尽管“合成数据有毒”“预训练堆算力失效”等小道消息尚未形成共识,但数据质量与训练范式革新已成为业内共识性瓶颈。
“世界比远远比我想象的要大。也许在某个角落里面,某个实验室里面正在搞一些有意思、没见过东西。”
预训练的瓶颈与替代路径
当前业界对预训练(pretrain)的投入正在收缩,一个现实原因是算力边际效益递减——继续堆叠模型规模与数据量,未必能带来预期的性能提升;另一个更乐观的解释是,Agent 架构的兴起正在分流资源,推动训练重心从预训练转向后训练(posttrain)或推理优化。田渊栋指出,当前所有公开数据几乎已被纳入训练语料,导致模型“学得太多却未必学得精”,训练结果难以复现预期能力跃迁。他进一步提出一个非主流但极具启发性的观点:梯度下降本身可能并非最优解法,是否存在一种完全代数化的构造方式,能绕过数值优化路径、以更少数据达成更优性能?他提及自己的一篇论文正是尝试在受限设定下,展示此类解的可行性——这并非否定梯度下降,而是探索其可能的“替代路径”。
梯度下降本身不是一个好的算法,也许我们存在一个新的算法能够代替梯度下降,得到更好的解,然后这个解呢能够比梯度下降的这种数据用量更少。
构造出来是代数的话,那就意味着就是说,也许这个解可以通过另外一条途径得到,而不是通过梯度下降得到。
O1 蒸馏潮与科研价值的再定位
O1 发布后,国内迅速涌现多家“类 O1”模型,普遍策略是在已有模型基础上蒸馏 O1 数据并微调。田渊栋认为,这类路径技术价值有限——它本质上是工程竞速(谁洗数据更快、更干净),而非模型能力的实质性突破。他强调:“它其实并不能把这个 research 往前或者模型的 AI 能力往前推进一步。”尽管效果尚可,但这类工作更像是对已有能力的复现与适配,而非创新。
他进一步反思 AI 的社会价值定位:当前多数应用(如流量转化优化)本质是零和竞争,仅重新分配价值;而科研才是真正的增量创造——“只有科研,它是整个社会就会牛逼”。因此,他期待下一代模型能真正“提出很有意思的新想法”,而不仅是执行。即便工程层面(如写代码)已足够实用(他举例 Claude Sonnet 3.5 已可承担 95% 的 routine 编码),但复杂系统仍需人类深度介入。他甚至认为,AI 的“正经事”就该是科研,其他如写小说、艺术创作虽属探索,但若仅在已知框架内优化,终归是“卷”而非“创”。
我觉得在我脑子里面,AI 最大的正经事儿应该就是用来做科研……因为之前的涌现,我觉得是把很多就三点五到四之间的能力是很多能力原来不太实用。现在能力其实非常实用……
科幻脑洞与技术演进的节奏
在《破晓之钟》中,田渊栋构想了一种AI 主导的星际防御战:面对外星入侵,人类不再制造战争机器,而是让 AI 统筹地球全部资源,实时进化、现想现造,类比免疫系统生成白细胞杀灭病菌。这一设定既宏大又具技术隐喻——人类退居后台“看直播”,AI 成为地球的“执行层”。他坦言,这种想象源于对“基点理论”(point one)的共鸣:一旦 AI 达到某个临界能力(如研究员级),其自我进化可能在极短时间内跨越巨大鸿沟。
但他也提醒,现实演进未必是“一天跃迁”,更可能是多次 S 形曲线的叠加:突破→停滞→再突破……“你会发现啊,我要到了,然后停下来了。然后又有问题要把它解决,然后又我要的话又停下来了。”他倾向认为,即便 AGI 临近,中间仍存在大量未被捕捉的“miss 掉”的环节。至于当前 AI 发展是否不同于以往几次寒冬前的乐观浪潮?他给出两点差异:一是实用性已获验证(如代码生成),二是人才与资本已深度绑定——即便增长放缓,应用层仍能持续拉动生态。因此,“AI 冬天”大概率不会重现,但S 型曲线的平稳期将拉长。
比如说打仗嘛……用 AI 来控制整个地球的资源,让它去进化,找到一个更好的解决方案……人类有可能就是以后就躲在地下室看直播……
创业视角下的AI赛道判断
从创业者角度出发,田渊栋认为,是否真正理解技术底层,关键取决于你希望达成的目标。他指出,像搜索这类领域其实仍有创业空间——不是要从零构建全新系统,而是将大模型与传统搜索技术结合:先用传统方法召回结果,再由大模型进行整合、生成摘要,并确保引用准确。但像 Perplexity 这类公司获得高估值,他则表示“不太理解”,认为更多是小公司红利所致:小团队决策快、无合规负担、能快速试错;而大公司如 Google 或 OpenAI 虽有能力做类似产品,却因组织流程冗长、跨团队协作复杂而进展缓慢。
“小公司可能更有创造力吧。我觉得这个可能是一个比较不一样的地方。”
“如果你对技术很感兴趣的话,你应该看论文;如果你就是你觉得现在技术有用,但是对产品的形态有兴趣的话,那应该去想办法把产品形态做出来。”
前沿技术趋势与研究突破
在技术前沿层面,他特别提到 test-time training(测试时训练) 的潜力:不同于传统 in-context learning,该方法允许模型在推理过程中动态调整自身权重,类似“边用边学”——例如用户反馈后模型实时优化行为模式。这一思路在 ARC Challenge(一个要求模型从少量示例中推断图像变换规则的竞赛)中已初见成效,MIT 团队通过该方法显著提升了性能。此外,他也关注视频生成等方向,但认为多数应用仍缺乏真正惊艳的突破。
他进一步强调,创业者是否需要读论文,取决于所遇瓶颈类型:若面临算法瓶颈(如小样本学习),则必须深入论文;若瓶颈在于推理速度或部署效率,则需关注加速相关研究;而若仅聚焦产品形态,则可暂不深究底层细节。值得注意的是,他观察到多数创业者实际从事的是应用层开发,常遇到的并非大模型本身问题,而是视觉等其他模型的工程挑战——这类问题更易上手改进,而大模型则“想都不想”
科幻与现实的边界消融
最后,他分享了创作《破晓之钟》的初衷:每个时代都以当时最前沿科技为想象载体——电气时代幻想电气驱动的智能体,机械时代设想齿轮驱动的太空探索;如今人工智能时代,人类的思维边界正被大模型重新定义。他感慨道,五年前无法想象的事,如今已成日常:比如向 AI 请教医疗参数、辅助诊断,甚至“嫌弃它太傻”。这种现实向科幻的倒灌,恰恰说明科幻不仅是预言,更是对人类想象力边界的拓展训练。
“对我来说,我有很多想法,靠谱的想法我们写论文,不靠谱的想法我们写小说——不是想法某一天会成为现实,这样就不要浪费了。”