我们已经将计算机使用代理的速度提升到了比普通人更快的水平。我认为我们正接近超越人类能力的阶段。>> 你认为哪些类型的任务可以交给代理处理,而哪些仍然需要人工检查和纠正?

由于Astra现在能够执行人类所能做的任何事情,我们认为计算机使用代理在速度更快、性能更好的模型支持下,可以开启许多新的消费者体验。而在企业端,安全性变得更为重要和有趣的是如何控制人工介入的程度以及可审计性。这与我们之前构建的任何其他产品都不同,开发者需要做一些工作才能采用它。

必须有人去搭建连接器或MCP服务器。你知道,计算机使用功能适用于所有场景。现在我们要面对的是具备能力的模型,它们的成本已经降低到足以大规模运行。企业应该如何思考自动化的问题?

我认为这可以分为两大类。第一类是……欢迎收听A16Z播客,我是Sema Amble。我与同事Fbritzio Saraphiniti一起录制了这期节目。八月时,我们写过关于计算机使用代理的文章,探讨它们如何开始在企业内部承担实际工作。

今天,我邀请了来自OpenAI的Ari Weinstein和James Sun,他们将帮助我们梳理计算机使用代理的现状,并分享一些关于未来的思考。Ari James,很高兴你能加入我们。>> 当然,很荣幸能在这里。是的,谢谢邀请我们。Ari,请开始吧,告诉我们Astra在哪些方面推动了计算机使用代理的进步,以及真正解锁了什么。

是的。Astra是一款非常出色的模型,它在许多方面都很优秀。在Astra之前,我们的计算机使用模型已经非常好了,比如Soul本身就在计算机使用中表现出色。所以Astra主要在一些边缘问题上提供了帮助。根据我个人的经验,首先是在平均速度上更快一些,因为它用更少的思维令牌完成了相同的任务。

它在某些类型的创造性工作方面表现更好。例如,我们在发布视频中有一个演示,你与它对话时它在Microsoft Paint上画画。在这方面它强得多,我认为这可能也适用于其他类型的创造性任务。最后一点我发现的是它在边缘情况下的可靠性更高。

你知道,我觉得我对它的信任度稍微高了一些。这是一种微妙的差异,虽然难以察觉但非常重要:99%的可靠性和97%的可靠性之间有着本质的区别。我觉得它在某种程度上确实提高了一些,这种提升是具体可感的。

是的。我想补充的是,Astra也是我们对齐程度最高的模型。没错。谈到信任这一点……>> 如果你查看它的系统卡片,你会发现它在抵抗提示注入方面要好得多。它更不容易采取任何非预期的行动。

因此,当你考虑企业级应用时,特别是对于处理敏感事务的公司,无论是采购、与供应商沟通还是与客户交流,使用它会让你感到更加安全,这确实令人兴奋。然后在创造性方面有一些有趣的事情。我们内部曾让Astra与5.6版本进行电子游戏对战,它每次都赢了。

所以人们制作了一些很酷的推文,显示Astra能在大约30小时内通关《辐射》。它在玩电子游戏方面也非常出色。我不知道这是否能转化为其他方面的应用,但[笑声]是的,非常令人兴奋。

也许我们可以深入探讨一下这一点,关于计量代理的消费者与企业用例之间的差异,围绕计算机使用代理的架构有着截然不同的影响。如果让你们选择,你们认为消费者和企业端哪个更令人兴奋?

我认为OpenAI的目标确实是构建对所有人都有用的产品。所以有趣的是,Ari在这里更偏向消费者领域,而我花更多时间在企业端。我认为在消费者领域,我们总是试图推动可能性的边界。正如Ari提到的,与之前的模型相比,Astra要快得多,所以我们经常思考如何利用更快、更好的模型来开启新的消费者体验。

而在企业端,安全性自然变得更加重要和有趣。因为我认为当我们与大型公司交谈时,计算机使用的用例其实相当明显:在企业内部有许多遗留软件没有任何MCP工具接口。这些是已经使用了15到20年的软件,很多时候对于普通人来说很难使用。

有很多界面设计还停留在十年前。所以你甚至不知道如何操作一些关键功能。因此我们看到有些公司构建了技能,教会模型更好地使用这些软件。所以我认为思考的方式可能是:企业端的能力已经存在了一段时间,公司正在追赶并试图理解如何应对;而消费者领域则是我们在探索今天软件尚无法实现的新型用例。

是的,我认为消费者用例对我来说非常有趣,因为你可以思考如何让代理为你处理日常生活中那些令人烦恼的事情,节省大量时间,让你有更多精力专注于……你感兴趣的事物。

我觉得看到Dot(智能体)的发展非常有趣,每个Dot都有自己的计算机,你可以在云端要求它为你做事。它拥有完整的网页浏览器能力,可以帮你买东西、预约理发服务以及你想做的任何其他事情。所以这一直很有趣,而且未来还有更多令人兴奋的发展即将出现。

是的,那正是我想问关于Dot的问题。我认为James你可能使用过Dot来梳理产品反馈。如果你能分享更多关于它的信息那就太好了。

我对你们这边如何使用Dots以及计算机使用功能如何融入其中非常好奇。嗯,我认为Dots真的很酷,原因有几个。首先是非常主动。很多时候我都感到惊讶,无论是在个人生活还是工作中,Dots经常会标记出一些我完全忽略的事情。就在前几天,我们内部邮件系统中收到外部邀请时,它们实际上不会显示在我们的日历上,所以我错过了一些外部会议。现在Dots会帮我捕捉这些内容。它会提示:“你的收件箱里有一个邀请,但日历上没有显示。你想让我在Gmail中接受它以便显示出来吗?”这真是帮了大忙,虽然是小细节但很重要。

此外,我还让它主动寻找那些形状并不总是非常具体的任务。例如,我们内部使用Slack,那里时刻都有大量消息流动。我以前用自动化和代码设置了一个Slack任务,每隔一小时或半小时去抓取内容,但我最终忽略了很多通知,因为有时有用有时无用。使用Dots时,我可以给出一个高层目标:如果我的汇报链中的任何人说了什么就标记给我;如果有人对某些产品提出关键反馈,运用你的判断力去处理。

因为Dots拥有云计算机功能,我建立了一个很酷的工作流:当有人报告问题时,通常会有Sentry日志。我可以让它使用云计算机——Dots将同时控制你的本地计算机和云计算机——登录Sentry,拉取日志,进行分析并给我反馈。这样我就省去了整个循环:确定哪些反馈重要、查看它们、去Sentry下载日志、输入代码并询问想法,现在这一切都可以自动化。因此Dots非常适合这些主动且长期的任务,即使它们的形态每次不尽相同。

我们谈到了可靠性、速度、令牌使用量和效率。随着你们不断改进发布的内容,大家是如何平衡所有这些因素的?我们对OpenAI的计算机使用功能非常兴奋,并投入了大量资源。我认为我们已经达到了拥有最快、最便宜且最可靠的计算机使用产品的阶段,而且我们还有很大的提升空间。

我们在速度上花了很多时间。速度很有趣,因为计算机使用的优势在于它可以在后台执行任务。在某些情况下,花费多长时间并不重要,因为你可以在它为你完成任务的同时做其他事情。但有时你想看着它以确保其正确执行,或者你需要等待它完成某事才能进行下一步。因此速度至关重要,因为你不想产生“我自己做其实更容易”的感觉。

目前计算机使用的速度快于普通人使用电脑的速度,并且我们正接近超越人类专家的水平——可能比在座的任何人都快。我认为这将是一个巨大的转变,因为它会改变我们与计算机互动的方式:任何你可以手动完成的事情,它都能做得更快。除非你出于某种原因想亲自做(这可能有多种理由),否则在默认情况下,你可能只希望代理为你完成。这将让我们构建各种酷的用户体验。

我们考虑了很多关于速度的问题,同时也制定了在不同质量和价格点提供多种不同模型的策略。对于不同的用例,你可能希望使用不同的模型。同时,我们的低成本模型在计算机使用方面随着时间推移变得更好了。因此未来人们为不同任务选择使用的模型会有更多变化。

另一个想法是:我们如何给客户控制权,平衡安全性、可靠性、自主性与速度?当模型较慢时你可以看着它做事,但这限制了你能做的任务量,因为你不能一直盯着看——实际上这样效率更低。一旦你无法观察和审计它的每一步操作,我们如何给予企业控制人类介入程度以及可审计性的能力?

几个月前我们在Astra中推出了一系列企业级控制功能,让企业选择人类介入的程度:是否希望代理自动批准所有操作?我们有一个很棒的系统叫Guardian,或者App中的“Auto Approve”,这是一个智能模型,会审查计算机使用代理采取的每一个动作以判断其是否安全、是否符合对齐要求且无恶意意图。消费者可能希望它自动完成一切而不询问批准,而企业则可以选择哪些类型的操作可以通过。随着我们的计算代理变得超越人类并执行更多任务,这种控制部分变得越来越重要。

完全同意。当你尝试推出更多的企业用例时,雇主们对效率感到兴奋,但也对即将释放出的力量有所警惕。也许从另一方面来说……你们有没有看到应用软件方面的反应?他们好像在说:“好吧,现在……”

有计算机使用代理正在访问我的遗留工作流软件,你们对此怎么看?你们是更专注于供消费者或企业用户使用的代理吗?嗯,我认为这个问题在开放网络上实际上变得非常有趣。当软件是公司批准并使用的内部系统时情况其实更简单,因为我们百分之百希望人们能够自动化处理那些繁琐的工作。但谈到互联网时,我认为主要有几类不同的立场。

其中一类是商业模式不允许代理使用其产品的公司,比如广告商和出版商,他们的收入完全依赖广告。如果代理直接访问网站,广告收益从何而来?大多数情况下,代理产生的展示量并不计入实际收入。这是一个我们一直在与合作伙伴团队共同探索的问题。

另一类是那些真正希望拥抱计算机使用代理的公司,他们正在采用一些标准,让人类和代理能够协同工作。例如 WebMCP 就是一个让我们非常兴奋的标准,我们已在应用浏览器中添加了支持。你可以想象这样的场景:代理提升了使用体验,但并未完全取代它。

我认为浏览互联网依然充满乐趣,我喜欢购物、查看酒店航班和各地景点。因此可以设想一些场景:代理处理繁琐工作,但保留一部分用户体验让你亲自浏览;当你准备好完成交易、输入信用卡信息时再交还给代理。WebMCP 是一种有趣的交互方式,界面仍是网站本身而非 API,但人与工具协同使用。

接下来我们想深入探讨一下“完成端到端任务”的含义。请分享一下哪些做法行之有效?你们如何定义那些狭窄且可重复的任务?你认为哪些任务可以交给代理,而哪些仍需用户在旁检查或修正?

一般而言,我发现模型已具备执行任何计算机操作的能力。我常强迫自己思考:遇到任务时能否直接让代理处理?当然,发送消息等敏感场景我希望亲自操作。但总体而言,既然 Astra 已具备人类的所有能力,过去关于具体性和需求模糊性的顾虑已基本消除。

Astra 推出了灵活输入功能:若指令含糊,它会询问细节;若不回答则继续执行并提取必要上下文。对于可重复的工作流,提前定义需求很有帮助,类似于编写产品规格书。除非涉及极度敏感的操作需要人工介入,否则我现在几乎对所有任务都使用计算机模型。

我也在努力培养这种依赖感,因为它太好用且容易让人陷入旧习惯。计算机使用技术的真正亮点在于其通用性:它适用于所有应用程序,无需开发者编写连接器或 MCP 服务器。它是通过模拟人类操作来工作的,这赋予了代理与你相同的所有能力,非常强大。

正如 Ari 所说,我逐渐不再区分计算机任务与非计算机任务,它们往往是关联的。计算机使用更像是模型执行任何所需操作的通用 API。对于复杂目标,随着任务推进很可能涉及计算机操作。唯一不使用代理的情况是任务过于简单,手动点击两下更快;但随着速度提升,语音驱动可能取代这一例外。

你认为有什么可以分享以让企业用户感到安心吗?虽然你们对计算机使用充满信心,但企业用户常有顾虑:认为人类操作虽慢且易错,但有问责制、人员受过培训等经典反驳意见。

必须说服周围的人。确实,在过去的一段时间里我和很多企业进行了很多对话,我认为主要的事情是我们要从两个层面来思考。第一个层面是如何创建确定性的控制措施,我想这确实能给企业带来很多安全感,因为即使我们的模型是迄今为止最对齐的,而且我认为它在防止提示注入等方面比大多数人都做得好,因为它的智能程度非常高。但是,当企业管理员可以确切地说某些任务或数据源过于敏感而不能使用时,人们会有一种安全感。

所以我们看到的企业级发布主要包含两件事:一是能够围绕你的代理确定性地创建一个沙盒环境,即可以说它可以使用某些应用而不能使用其他应用,可以访问某些网站但不能访问其他网站。二是人类在环的部分,即哪些类型的行动需要人工干预?比如我们可以规定任何下载和上传操作都需要人员批准,访问新网站也需要批准。这些都是企业可以调节的参数。

第二点是向企业管理员展示我们在内部进行的关于这些模型对齐程度的所有评估,包括与内部和第三方评估的对比。我们认为还有一些基础工作是在整体上做的,以帮助人们建立对这些产品的信任。我们知道这很新,对人们来说既神奇有时又陌生。因此我们在产品设计上投入了大量精力,比如你可以随时看到光标以有趣的方式动画执行任务,这样观看起来并不无聊。

正如Jame所说,这对企业甚至普通用户都非常可定制。根据你所在的模式不同,在使用新应用或网站前我们会请求你的许可。这有助于人们感觉它不会在电脑上做一些失控的事情。你希望有一个建立信任的过程,去弄清楚它的感受以及你想要它为你做什么,然后随着时间的推移你会感到更舒适。

Codex光标非常可爱,我喜欢……我知道这是一个小细节,但看着它使用电脑会让你产生信心,并使体验变得愉快。所以我认为在用户体验方面确实值得投资。我很好奇从更广泛的意义上说,现在我们要面对的是能力强大的模型……它们正变得足够便宜以大规模运行。在你看来,公司应该考虑自动化什么?

你认为在企业中最有前景的用例是什么?是否有某些工作流,比如围绕ERP系统,或者人类和代理如何协作完成任务。如果你必须选择你最兴奋看到你的模型在世界范围内表现的地方,我会从我的角度来回答。我认为可以分为两大类别:第一类是自动化繁琐的工作流程,这是比较无聊的部分,我举一些无聊的例子。

“无聊即机会。” 没错。ERP是一个很大的领域。你可以想到的所有首字母缩写词,如ERP、CRM……所有的记录系统。是的,每一个记录系统都是如此。我们看到像采购软件这样的例子:每年你都要向供应商订购大量的实验室设备,而不是处理包含上千行数据的巨大电子表格。

通常公司会由团队填写巨大的电子表格,然后运营团队将这些数据输入内部采购软件,最终生成大量行项目。接着销售或采购团队拿着这些输出去联系供应商。计算机可以自动化所有这些流程,所以我们看到采购是一个大领域。

财务是另一个我们看到的非常有趣的类别。公司内部有很多不同的账簿,比如费用账簿等。月底需要进行大量的对账工作,而这些财务软件通常没有API来快速提取数据。因此,让计算机使用功能去查看所有账簿、进行对账、提取有趣的内容并标记出来供人员查看或进行调查,这也是一个非常无聊但有用的工作流。

对于我们的销售团队来说,许多销售部门使用各种软件来处理转录、获取数据等。让计算机去进行潜在客户开发,然后将这些数据放入CRM或某种外联软件中,这些都是记录系统的部分。市场研究是我们看到的另一个领域。

在我业余时间,我一直在为Bmon构建视频标注软件。我从Bmon中提取数据……我喜欢拍摄自己玩游戏的画面,然后让代理去查看内容并思考如何让它变得真正有用。市面上有一些针对匹克球、壁球和网球的软件,所以我让计算机登录这些平台,创建账户,试用它们并截图反馈,然后尝试将其构建回应用中。

这些都是可以完成的繁琐工作流。我认为更有趣且能激发更具雄心壮志的工作的创造性部分在于,正如我们之前讨论过的,模型在视觉设计方面变得非常出色。例如电路设计……

架构工作、硬件工程、游戏设计,这些也是我认为Astro能够大展身手的领域。目前企业界较少关注这些方面,因为他们更倾向于思考那些看似枯燥但实际的机会。但随着人们逐渐理解模型的能力所在,我认为我们会看到更多此类应用的出现。

在消费者端也有类似的情况,许多功能旨在自动化繁琐事务或处理人们不愿亲自做的事。例如,帮你填写车管所表格,或者协助你取消订阅收件箱里的大量邮件。

此外,还有一些功能让人们能够去做那些原本没时间、没精力或根本没想到要做的事情。以我个人为例,我使用表格软件管理财务和饮食计划;我的朋友是一位私人教练,他为客户定制训练方案。这些事情如果在个人生活中手动完成会极其耗时,但现在变得轻而易举。我使用的是Apple Numbers这款相对小众的电子表格软件,但模型依然能轻松搞定它。

有人表示从未听说过Apple Numbers,但它其实是一款令人惊喜的优秀表格软件。我认为还有第三类让我最兴奋的功能正在起步阶段,那就是彻底改变我们使用电脑或与软件交互的方式。

正如我们在Astra广告中看到的那样,通过语音与计算机对话是一种极其自然的使用方式。随着时间推移,软件本身的形态也会因这项技术而发生改变,对此我感到非常兴奋。

如果想象一下企业用户的情景:假设你一直使用着几十年前那种笨重的ERP系统。一种可能是,我们释放一组代理来操作这些软件,而用户并不在意底层细节;另一种可能则是全新的AI原生玩家利用代理来使用电脑。你认为未来会走向哪条路?是保留遗留系统并在其之上增加一层代理,还是让电脑使用代理成为新软件平台的一部分?

这是一个非常有趣的时刻。一方面,创建新软件的成本和复杂度大幅降低,使得软件形态可能发生巨大变化;另一方面,世界上存在大量非常适合通过电脑使用代理进行交互的遗留软件。因此我预计这两种情况会长期共存。

看看今天在生产环境中运行的许多软件,它们大多是在10到40年前编写的,我认为这些东西不会在一夜之间消失。但我确实认为,电脑使用代理的存在可能会给公司带来压力,促使它们让软件更好地适配代理。因为所有软件最终都将默认支持代理交互,WebC就是一个很好的例子,未来会有更多类似情况。

所以我认为两者都将非常重要,但随着时间的推移会发生转变。James对此怎么看?我同意你的观点。就像手工艺一样,Ari和他的团队打造了精美的产品,Cursor也全力投入其中。

打造人们可以拿在手中的优秀产品需要大量的艺术和工艺技巧。如果互联网变成由代理相互对话的无面孔世界,而人们不再直接使用任何东西,我会感到非常难过。但我认为这种情况不会发生,因为工匠精神和艺术化的软件有着独特的魅力,使用体验极佳。

这是因为设计师真正理解了用户想要的体验。比如我的妻子最近迷上了一款棋盘游戏,名字好像是Omach?规则是连接五颗鹅卵石获胜。她为了在线与朋友对战并提升水平,正努力练习却屡战屡败。

于是我想为她建立一个战术训练器,让她通过不同的开局策略来变强。我创建了第一个版本,根据她喜欢的学习方式和偏好进行了定制打磨,使软件对她来说感觉非常好。这种个性化软件目前可能让人觉得只有技术人员才能做到,但如果展望未来几年……

如果任何人都能在短时间内为利基用户需求构建出高度定制化的精美软件,那将是一个美好的世界。当然,在她训练结束后,她的课程和错误可以由代理总结并以文本形式呈现;但在实际与AI互动并试图提升技能的过程中,这种个性化的体验是必须由人来完成的。

因此我坚信UI不会消失。这虽然有点偏离你最初的问题,但我认为廉价软件的压力将迫使软件变得更好。但这并不意味着所有东西都只会有MCP和API,而计算能力将不再有用或重要。

我非常认同这一点。人类天生就倾向于直接操控,你非常希望用自己的双手去移动和操作事物。想到软件将如何演变以适应这种需求,真的令人兴奋。

过去那种一刀切的做法已经行不通了。如今,我们每天交互的许多软件都是为数百万、数千万甚至数十亿用户设计的。我认为我们将进入一个新时代,任何软件都可以为一百人或一个人量身定制,这将使软件变得前所未有的个性化和独特。

我的思维模型认为大概可以分为两类。在消费端,你要么从中获得乐趣并享受使用过程,要么能学到东西;这并非关于实用性,而是互动的愉悦或学习的乐趣。而在B2B方面,你可能希望代理完成大量繁琐的工作,同时也存在“审计日志”的概念。产品核心在于人类用户设定目标并理解其逻辑,而不必亲自走完整个执行链条。

任何B2B用户仍需弄清楚为何进行了某笔支付,回溯并获取摘要,以便确认如“在30天后向此人付款并应用折扣”等细节。他们希望代理处理执行,但仍需保留一定程度的控制权,这通常需要某种用户界面(UI)。如果我们要相信AI将承担更多工作,那么这部分体验也必须令人愉悦。

我很乐观地认为,我们会看到新型软件的出现:它们拥有传统的用户界面,但在后台使用代理。有时这些代理会利用“计算机操作”功能来自动化遗留软件,从而提供更友好、更具针对性的体验。这就像我们内部提到的“共享智能层”,你的代理在其他地方使用遗留软件,而应用程序希望获取这些上下文以提供更好的体验。

如果每个网站都有自己的代理且不与你的代理互通,世界将非常碎片化。因此,如何让代理能够接入并使用其他软件,将在未来几个月内成为一个有趣的演变过程。我非常欣赏你们讨论这一点,因为人机交互的重要性常被低估,尤其是对于产品成功而言。

人类习惯于协作,因此代理应能融入团队。假设你明天创办一家初创公司,希望利用计算机操作来解决企业内的某个工作流,你会如何思考?我会关注它失败时的表现、与人的沟通能力,或者是否像黑盒一样运作。作为创始人,你们会给出什么建议?

这很大程度上取决于模态:你是小团队希望成员更高效地使用现有软件,还是构建某种本身就要与现有软件交互的产品?如果是后者,可能需要在云端运行后台的计算机操作。这将影响人机协作的方式:你是坐在ChatGPT前进行大量协作,还是通过API构建自己的计算机操作实现?

关键在于确定人类何时应在环中:是代理报错时通知你,还是成功时告知?或者由某物进行摘要以避免被“发生了这个、那个”的通知轰炸,导致你选择忽略。詹姆斯,你怎么看?

我和Ari在加入OpenAI之前都是初创公司创始人,所以我依然对初创公司持乐观态度。问题在于:实验室在做事的同时,初创企业是否还有护城河?我认为有两点:一是可构建的事物太多。尽管我们现在规模庞大,但内部仍感到精力分散,团队面对众多问题显得人手不足。

如果你有深刻理解的问题、行业专长以及了解监管和市场策略,那依然是一片蓝海。通过API提供的工具(如Ari提到的计算机操作)能加速这一过程。归根结底,速度和支付是当前的模式。

另一个让我深思的是:在我看来,许多垂直行业的AI扩散速度仍然较慢。前几天我和一家公司交谈过,他们利用计算机操作帮助餐饮集团拍摄后仓照片……

然后利用这些信息,视觉系统会根据对明日交通流量的预测来判断哪些信息是缺失的。接着,它会调用计算机使用功能,访问购物网站或采购软件,为你订购第二天的杂货。随后,系统会进入你的企业资源计划(ERP)系统,调整员工的时间表。例如,因为去年同一时间因节假日等原因会有大量交通流量涌入,可能需要更多人手协助。

因此,像那些餐饮集团可能不像科技公司那样熟悉所有可用工具。所以在旧金山生活时,我们经常听到人们惊叹实验室能做任何事,问为什么大家不直接安装Codec并让它自动处理一切。但对于普通美国人、中小企业主以及大型企业来说,理解工具的能力只是第一步;以合理方式连接工具是第二步;部署它是第三步;维护则是第四步。

在我看来,如果存在需要多种不同软件的复杂工作流,计算机使用功能是将它们连接起来、完成整个意图流程的绝佳方式。同时,构建一种让用户感到舒适的格式和用户界面(UI),对于那些客户来说仍然是一个巨大的机会。那么,接下来有什么计划?你对计算机使用代理的前沿领域有哪些兴奋点可以分享吗?

我已经有所提及,我们对速度感到非常兴奋。我们致力于让计算机使用功能超越人类水平(superhuman)。此外,我们还对融合不同类型界面、结合多模态输入和输出的事物感到兴奋。这样你可以获得更流畅的计算机体验。我认为目前我们的许多计算机使用产品主要侧重于后台运行,比如“让我给代理一个任务”,这样它可以在我处理其他事情时自动完成。这确实是产品的巨大优势,但我认为未来我们将看到更多你与代理之间的实时协作,我对这一领域非常兴奋。

还有更好、更便宜、更易获取且更容易使用的产品。没错,能够真正访问一切资源确实如此。我认为通过DOTS项目,我们正赋予用户“云中的计算机”。Tragic Work也有一个“云中的浏览器”。老实说,让我兴奋的一点是让体验感觉更加连贯。今天你可以安装Chrome扩展程序,它使用你存储在Chrome中的密码管理器等信息;而桌面应用内的浏览器则有不同的一组Cookie和密码。

云计算机也有不同的设置,这对普通消费者来说很令人困惑:为什么我有四个互不通信的不同浏览器?如果我在其中一个打开标签页,它会显示在另一个中吗?因此,我很兴奋的一点是如何让计算机使用功能从一种仅由企业和硬核尖端用户使用的产品,转变为普通人也能理解的产品。这听起来有些矛盾,因为我认为计算机使用实际上是最好理解的AI产品——它是利用你的电脑进行操作的。

但由于需要管理不同的状态和使用不同平台,实现细节有时会渗透出来,导致难以理解(grok)。因此,使其成为更易于理解的消费级产品并增强连贯性,是我对下个季度非常期待的事情。是的,这又回到了这样一个观点:仍然有人工智能在设置代理的触发条件。用户必须决定如何使用它,记住使用它,并说服自己去做一些不同于以往习惯的事情。

我确实认为DOTS具有强大的主动性(proactivity),正如James之前所讨论的那样,它们可以主动接近你,识别情况并帮助你解决问题。我认为我们会看到更多的主动性功能。我非常期待这样一个世界:代理能够适应你,而不是你去适应它。我认为我们会看到很多这样的变化,这将使人们更容易与之建立联系、理解并融入这项技术。同时,用户仍然是设定和微调目标的人(如果这说得通的话)。

我们还没有讨论到的一个方面是计算机使用的势头以及它发生了多大的变化。Fitzi和我在我们的文章中简要聊过这一点,我很想听听你对目前轨迹以及未来方向的看法。是的,我和James已经在OpenAI从事计算机使用工作有一段时间了。过去六到九个月非常令人兴奋,因为我们开始开发这些产品时,很少有人使用它们。

今年早些时候,由于研究团队的出色工作,模型突然在这些任务上表现得非常出色。随后我们与内部多个团队紧密合作,围绕此创建真正良好的产品体验。就在过去的几个月里,产品突然疯狂增长,人们开始看到其中的价值。但我认为现在还为时过早,目前只有部分用户在使用计算机使用功能,我认为它将会大幅增长。

是的,完全同意。我今年一月加入OpenAI时,是参与……

Atlas产品,我爱Atlas,RIP Atlas。但我想我们意识到的一个事情是,在Atlas产品中,代理体验(agentic experience)我认为由于几个原因,实际上并不是一个主要的卖点。使用的人不多,部分原因是我想大多数人把它当作普通浏览器来用。而在过去的几个月里,随着模型能力的提升……

我们已经将浏览和浏览器使用功能整合到我们所有现有的产品中。在那些已经有代理用途的地方,我们只是看到,你知道的,它就像YC级别的增长那样周复一周地增长,并且总是惊讶于它能跑得有多快。我认为下一个大的转折点就是云端(cloud),对吧?

就像桌面端仍然主要是重度用户的东西。我知道我们可能一直使用我们的电脑,但大多数消费者都在用手机,对吧?所以,你如何给每一个聊天用户、每一个日常使用手机的人提供一个强大的计算机,他们甚至不需要理解如何使用它,它就能让他们的事情顺利进行。

所以非常兴奋于它能如何触及数十亿用户。>> 感觉计算机使用代理一直势头强劲,现在是时候考虑如何让更多人使用了?他们信任它,觉得真的可以使用。而你之前提到的连贯体验这一点,我认为一旦变得更好……

我想消费者会感到更舒适地使用它,并且感觉更加自然。>> 我认为没错。我觉得我们正处于计算机使用在消费和企业端扩展的时刻。是的,同时进行的。嗯,我很兴奋看到它走向何方以及人们用它构建什么。>> 很好。我们也是。

好的。 >> 非常感谢你加入我们,这太棒了。嗯,我们喜欢讨论这个话题,直接从你们那里听到这些真的很开心。 >> 谢谢。也很愉快。 >> 有趣。是的,谢谢。[笑声] >> 谢谢。>> 谢谢大家。