打开网易新闻 查看精彩图片

新智元报道

打开网易新闻 查看精彩图片

AI圈现在卷得最凶的地方,是你的电脑桌面。

OpenAI不断强化桌面端应用,试图用Codex和ChatGPT for Work接管打工人的工作流。

Anthropic更是火力全开,相继推出Claude Code和Claude Cowork。

看得出来,大家都很急。

字节这边也没闲着。就在这周,豆包工作又上了一波新:

  • 浏览器录制与回放

你在浏览器里把活干一遍,它在旁边看着,看完直接存成一个能反复调用的Skill,Prompt都不用重复写了。

  • 本地Office编辑

你硬盘上的PPT和Excel,它直接改,改完保存还是原来那个文件,上传下载那一套没了。

  • 任务执行环境自由切换

任务跑到一半,你可以把它从这台电脑扔到云电脑,或者扔到家里那台电脑上接着跑,对话不用重开,上下文一点不丢。

打开网易新闻 查看精彩图片

AI办公,卡在说不清、够不着、走不开

用过一圈AI办公工具的人,多少都有同一种体感:AI会的越来越多,自己却没轻松多少。

究其原因在于,AI虽然已经坐进了你的桌面,但它还是不知道你每天都在干什么。

第一个难题,是说不清。

每天上午登录后台,点「数据导出」,选日期,再到二级菜单里勾五个参数,这套流程你闭着眼都能做。

但要用文字描述出来,交给一个没见过你后台的AI,这个翻译的活是你在干。

而且描述得越细,指令就越脆弱,网页上一个按钮挪了位置,整条指令可能就作废了。

第二个难题,是够不着。

文件在你硬盘上,AI在对话框里,中间隔着一次上传和一次下载。

每来回一次,桌面上就多一个版本,「年度汇报_v3_最终版_打死不改」就是这么长出来的。

第三个难题,是走不开。

任务一旦在某台电脑上开跑,你就被拴在那台电脑上了。中途想换到云电脑跑个重活,或者人出门了想让家里那台接着干,只能新开一个对话,前面聊的全部作废。

说起来都简单,但实际用起来又如何呢?

与其用Prompt告诉它,不如演示一遍给它看

录制回放的用法很简单,首先在对话框里写清任务目标,然后在内置浏览器演示一下就行了。

打开网易新闻 查看精彩图片

比如,「把这款新品上架到抖音电商,按我给的信息填好标题和价格,传图」,然后授权录屏。

接下来你在豆包浏览器里正常操作,它在旁边看。做完,说一句「我已完成」,或者在菜单栏停掉录制。

它会把刚才那一遍操作,写成一个Skill「技能」。

具体内容包括,这个技能什么时候该用、要你提供什么,每一步怎么做,做完怎么验证,以及录制时登录过的账号。

打开网易新闻 查看精彩图片

浏览器录制与回放本身就是一个skill

这里,我们刚好有个非常实际的需求:每周要统计自己写的文章,然后用这些数据写周报。

一般流程是这样的:

登录公众号后台,搜到这位编辑,点开当周每篇文章的数据分析,把阅读、分享、留言抄下来。

如果换成提示词,这段流程你该怎么写?

打开网易新闻 查看精彩图片

现在,我们只需加载「浏览器录制与回放」技能,然后按照原来的流程在内置浏览器中操作一番。

然后豆包就会根据目标,详细指导你打开哪些网页,哪里需要停留。

甚至,它还会多次和你对齐目标,直到满足你的要求、对齐相关目标。

打开网易新闻 查看精彩图片

打开网易新闻 查看精彩图片

等技能做好了,之后有需要的时候就可以直接调用,分分钟告别重复劳动。

打开网易新闻 查看精彩图片

如果你一直觉得RPA门槛高、Prompt写不明白,这个功能就是给你的。演一遍就能说清的事,没必要写三百字Prompt。

文件还在原来的文件夹里,名字没变

本地Office编辑,解决的是「够不着」这件事。

上线之前,改一份本地文件是这样的。

把文件拖进对话框,等它解析,等它生成,下载下来打开,发现一页排版乱了,自己手改,改完又想让AI加个总结,只好再传一次。

一圈下来,上传了两次,桌面上多出一个v2。

现在,所有关于Excel/PPT的对话、文件浏览和编辑可以在同一个工作流中完成了。

豆包会同步生成在线和本地PPT,不用下载PowePoint等办公软件,在豆包中就能编辑。

打开网易新闻 查看精彩图片

最后,看一下豆包优化之后的PPT效果吧。

打开网易新闻 查看精彩图片

目前本地Office编辑支持PPT和Excel,Word后续上线。

任务跑一半,还能切换另一台电脑接着跑?

「走不开」这件事,由任务执行环境自由切换来解决。

豆包工作一直有本地电脑和云电脑两种执行环境,但之前有个限制,任务一旦选定本地电脑开跑,环境就锁死了,想切到云端只能重开对话。

这次更新之后,任务跑到一半,你可以随时切到云电脑,也可以切到另一台已经登录的本地电脑,对话接着用,上下文原样保留。

用起来,主要是两个场景。

  • 重活中途上云。本地电脑跑不动了,任务扔到云端继续,你的电脑该关就关。

  • 多台电脑接力。人在公司,可以直接调家里那台电脑的算力和文件,相当于在一台电脑上远程指挥另一台。

举个例子,我们新智元官网上线了,其中第二部分是汇总的微信文章。既然能做周报,豆包能不能从官网上收集某个特定编辑的所有文章,然后汇总为月报呢?

打开网易新闻 查看精彩图片

https://aiera.com.cn/asi-articles.html

先在本地电脑上尝试了一下,但耗时实在太久了。

这类长程任务不知道何时结束,这时就特别适合用云电脑。

打开网易新闻 查看精彩图片

本机关掉后,1小时再打开豆包,月报终于出了:

打开网易新闻 查看精彩图片

这个功能已经在豆包工作全量上线。

更有用的一个场景是,如果你手边有个临时的任务,需要获取家里电脑本地存储的文件来完成,那豆包完全能帮到你了(前提是家里的电脑处于开机状态)。

AI长出手脚之后,剩下的才叫工作

过去一年,打工人被「大模型颠覆职场」的新闻轰炸了无数遍,真到自己电脑上,总差一口气。

差的那口气,就是这三件事。你说不清的活它接不了,硬盘上的文件它够不着,你人一走它就停在原地。

豆包走的路线很清楚,让AI来适应人。

从8月25日发布到现在,豆包工作使用了两周的时间,就从「能操作电脑」一路进化到了「知道你怎么干活」。

照这个速度,下周估计还得有一波更新等着我们。

编辑:大卫 摩西

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片