
新智元报道
新智元报道

AI圈现在卷得最凶的地方,是你的电脑桌面。
OpenAI不断强化桌面端应用,试图用Codex和ChatGPT for Work接管打工人的工作流。
Anthropic更是火力全开,相继推出Claude Code和Claude Cowork。
看得出来,大家都很急。
字节这边也没闲着。就在这周,豆包工作又上了一波新:
浏览器录制与回放
你在浏览器里把活干一遍,它在旁边看着,看完直接存成一个能反复调用的Skill,Prompt都不用重复写了。
本地Office编辑
你硬盘上的PPT和Excel,它直接改,改完保存还是原来那个文件,上传下载那一套没了。
任务执行环境自由切换
任务跑到一半,你可以把它从这台电脑扔到云电脑,或者扔到家里那台电脑上接着跑,对话不用重开,上下文一点不丢。


用过一圈AI办公工具的人,多少都有同一种体感:AI会的越来越多,自己却没轻松多少。
究其原因在于,AI虽然已经坐进了你的桌面,但它还是不知道你每天都在干什么。
第一个难题,是说不清。
每天上午登录后台,点「数据导出」,选日期,再到二级菜单里勾五个参数,这套流程你闭着眼都能做。
但要用文字描述出来,交给一个没见过你后台的AI,这个翻译的活是你在干。
而且描述得越细,指令就越脆弱,网页上一个按钮挪了位置,整条指令可能就作废了。
第二个难题,是够不着。
文件在你硬盘上,AI在对话框里,中间隔着一次上传和一次下载。
每来回一次,桌面上就多一个版本,「年度汇报_v3_最终版_打死不改」就是这么长出来的。
第三个难题,是走不开。
任务一旦在某台电脑上开跑,你就被拴在那台电脑上了。中途想换到云电脑跑个重活,或者人出门了想让家里那台接着干,只能新开一个对话,前面聊的全部作废。
说起来都简单,但实际用起来又如何呢?

录制回放的用法很简单,首先在对话框里写清任务目标,然后在内置浏览器演示一下就行了。
比如,「把这款新品上架到抖音电商,按我给的信息填好标题和价格,传图」,然后授权录屏。
接下来你在豆包浏览器里正常操作,它在旁边看。做完,说一句「我已完成」,或者在菜单栏停掉录制。
它会把刚才那一遍操作,写成一个Skill「技能」。
具体内容包括,这个技能什么时候该用、要你提供什么,每一步怎么做,做完怎么验证,以及录制时登录过的账号。

浏览器录制与回放本身就是一个skill
这里,我们刚好有个非常实际的需求:每周要统计自己写的文章,然后用这些数据写周报。
一般流程是这样的:
登录公众号后台,搜到这位编辑,点开当周每篇文章的数据分析,把阅读、分享、留言抄下来。
如果换成提示词,这段流程你该怎么写?
现在,我们只需加载「浏览器录制与回放」技能,然后按照原来的流程在内置浏览器中操作一番。
然后豆包就会根据目标,详细指导你打开哪些网页,哪里需要停留。
甚至,它还会多次和你对齐目标,直到满足你的要求、对齐相关目标。

等技能做好了,之后有需要的时候就可以直接调用,分分钟告别重复劳动。

如果你一直觉得RPA门槛高、Prompt写不明白,这个功能就是给你的。演一遍就能说清的事,没必要写三百字Prompt。

本地Office编辑,解决的是「够不着」这件事。
上线之前,改一份本地文件是这样的。
把文件拖进对话框,等它解析,等它生成,下载下来打开,发现一页排版乱了,自己手改,改完又想让AI加个总结,只好再传一次。
一圈下来,上传了两次,桌面上多出一个v2。
现在,所有关于Excel/PPT的对话、文件浏览和编辑可以在同一个工作流中完成了。
豆包会同步生成在线和本地PPT,不用下载PowePoint等办公软件,在豆包中就能编辑。

最后,看一下豆包优化之后的PPT效果吧。
目前本地Office编辑支持PPT和Excel,Word后续上线。

「走不开」这件事,由任务执行环境自由切换来解决。
豆包工作一直有本地电脑和云电脑两种执行环境,但之前有个限制,任务一旦选定本地电脑开跑,环境就锁死了,想切到云端只能重开对话。
这次更新之后,任务跑到一半,你可以随时切到云电脑,也可以切到另一台已经登录的本地电脑,对话接着用,上下文原样保留。
用起来,主要是两个场景。
重活中途上云。本地电脑跑不动了,任务扔到云端继续,你的电脑该关就关。
多台电脑接力。人在公司,可以直接调家里那台电脑的算力和文件,相当于在一台电脑上远程指挥另一台。
举个例子,我们新智元官网上线了,其中第二部分是汇总的微信文章。既然能做周报,豆包能不能从官网上收集某个特定编辑的所有文章,然后汇总为月报呢?

https://aiera.com.cn/asi-articles.html
先在本地电脑上尝试了一下,但耗时实在太久了。
这类长程任务不知道何时结束,这时就特别适合用云电脑。
本机关掉后,1小时再打开豆包,月报终于出了:
这个功能已经在豆包工作全量上线。
更有用的一个场景是,如果你手边有个临时的任务,需要获取家里电脑本地存储的文件来完成,那豆包完全能帮到你了(前提是家里的电脑处于开机状态)。

过去一年,打工人被「大模型颠覆职场」的新闻轰炸了无数遍,真到自己电脑上,总差一口气。
差的那口气,就是这三件事。你说不清的活它接不了,硬盘上的文件它够不着,你人一走它就停在原地。
豆包走的路线很清楚,让AI来适应人。
从8月25日发布到现在,豆包工作使用了两周的时间,就从「能操作电脑」一路进化到了「知道你怎么干活」。
照这个速度,下周估计还得有一波更新等着我们。


VIP复盘网