豆包工作上线录制回放:不写代码,操作一遍就能复刻

资讯 腾讯网 作者:腾讯网 全文 1962 字 · 约 5 分钟读完 配图 2 张 分类豆包字节跳动Codex产品更新AI 编程机器人

豆包工作还在卷,我今天发现它居然偷偷上线了codex同款的录制操作生成技能,record & replay。简单回顾一下,这个技能有点像超级简单版的RPA(机器人流程自动化),不需要会编程,不需要调组件搭工作流,就是把你操作电脑的过程录制下来交给AI,AI自己去写步骤说明,自己在下一次复刻同款操作。更骚的是,比起cod

所属频道 大厂动态产品更新机器人与具身智能国产大模型AI 编程与开发
豆包工作还在往前推,

我这两天注意到,它悄悄上线了一个和 codex 同款的录制操作生成技能,record & replay。



这个技能大概可以理解成极简版的 RPA(机器人流程自动化)。不用懂编程,也不用拖组件搭工作流。你只要把在电脑上的操作过程录下来交给 AI,它会自己写出步骤说明,下次再照着复刻一遍同样的操作。

比 codex 更进一步的是,豆包工作加了个讲解功能,最长能录 30 分钟。操作的时候可以边做边说,告诉它这一步为什么这么选。这样就不用死记鼠标轨迹,也不必一次录到完美,压力小了不少。


我先拿控制 Grok Bot 自动收集 Github 项目更新来试了试水,

录好的 Skill 在执行时,和 Codex 的 Computer Use 不一样:中途我要是想用对应的那个窗口,它会主动断开。


按我在 Codex 上的经验,经常是我开了一个对话,那个对话要用我的浏览器,同时我又想开另一个对话,两边就撞上了。操作软件的时候尤其明显,浏览器还好,能靠其他 Skill 绕过去。

说具体点。

比如我要用 Codex 操控 Grok,在同样的环境里出一份日报。可我同时在录视频,或者在跟另一个 Agent 对话,它弹出来的页面就会打断我。我只能一遍遍把弹窗最小化再重试,结果操作就失败了。

所以暂停和重试这两套机制,各有各的好处和毛病。让我选的话,本机也就是我自己用的电脑,我希望它能自动暂停,这样不打断我手头的主要工作。换成远程的 Mac mini 上跑,重试更合适,反正挡不到我。


上次那篇文章里,我没提到这个录制回放技能会和已有的 Computer Use、Browser Use(浏览器自动化)搭配着用。

像豆包,它其实会先回一句当前状态是什么,再给出接下来的行动。那下一步最合适的做法,就是让它去做巡检。

我特意说「巡检」这两个字,是因为以前我可能会讲每隔 5 分钟、10 分钟去查一遍。可很多时候你并不确定时间间隔,那不如直接让模型自己去巡检,它们会自行判断合适的时间间隔,一直观察到任务完成为止。


总的看,录制回放技能是个互补的东西。

你想做的自动化没有 API,也不只是在浏览器里跑,操作的软件要跨好几个步骤,或者工作流要横跨多个软件,那我很推荐把它录成 skill。能配上解说就更好了。

拿一个很经典的 case 来说明有解说到底多重要,就用我自己的一个录屏 skill 举例,

之前图省事,我直接把当前操作的页面最大化就开始录屏,它每次都照着我这套操作复刻。问题是,这样只能录出跟我电脑屏幕尺寸一样大的视频,可我很多素材其实要 4:3 的。

这就牵扯到一个用文字不太好描述的操作,

我得把屏幕里除当前窗口之外的其他窗口都缩小。这个动作就从「把一个窗口扩大到全屏」变成了「把除了当前屏幕焦点之外的其他窗口都最小化」,从「某一个动作」变成「某一类动作」。因为我每次打开的软件并不一样。


这也是为什么,今天已经有那么多 Agent 具备 Computer Use 能力,也有了浏览器自动化的能力,我仍然觉得需要录制回放能力,原因就在这儿。

同时开多个录屏软件会互相冲突,所以后半段我是用 iphone 录的。能看到豆包工作碰上录屏软件这种透明条每次都在屏幕不同位置出现的情况,也能靠全屏截图放大确认去按键。


还有一个更离谱的操作,

我猜很多 Skill 不会专门去做,但它特别贴合我们的使用习惯。

做 Computer Use 或者浏览器自动化,大家最常见、一直想解决的,就是去我们日常用的那些平台上拿热门帖子、低粉爆款的内容等等。这里面绕不开的一道坎,就是怎么避免被限。

这套录制回放的skill,正好能把每个人身上那套独有的ADHD习惯用起来。

比方说今天要挖小红书的低粉爆款。你在网页上刷就行,不用卡死某个页面,也不用规定节奏,只要30分钟内做完就成。中途跑去刷某抖、刷X,甚至溜到某站看个视频,都没关系,越像你平时的样子越好。录完往豆包那儿一打包,一个几乎测不出来的信息获取skill就到手了。

多数Agent之所以被识别,问题出在操作太死板:页面固定,点击间隔也固定。我早先试过把每次点击设成15秒到60秒的随机间隔,撑久了照样被抓。后来查出来还是操作时长不对——谁在网页上刷某书一连刷一个多小时,怎么看都不像人。

我最初的想法是让它干5分钟、再停6分钟,把节奏弄得随机一点。可既然采集本来就横跨多个平台,那干嘛不干脆多平台一起采?我的做法是串起5个平台,其中真正要收数据的其实只有2到3个,夹在中间的那些平台,动作本身没有意义。

一边操作,我一边就是这么解释的。

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. TRAE合并为全新开发平台:Agent与IDE双模式,字节编程线重新定位

    10月9日,字节宣布TraeWork与TraeCode合并为全新的TRAE。TRAE的定位从“AI Coding工具”升级为“AI Development平台”,一个入口承接所有任务,Agent模式和IDE模式无缝切换,从一句想法直接走到能打开、能点击、能交付的产品。恰好在合并官宣的同一天,TRAE原负责人石扬被曝离职

    来源 腾讯网
  2. 猫箱成字节最赚钱AI应用:iOS内购超2200万美元

    字节现在最赚钱的 AI 应用,你猜是哪个?豆包?即梦?都不对!是一个很多人大概率连名字都没听过的 APP—— 猫箱。根据 Sensor Tower 的报告,今年一季度中国 iOS 生成式 AI 应用榜单上,豆包拿下了下载量和活跃度的双料第一。但收入这块,冠军被一个叫猫箱的 App 拿走了。估计很多人第一反应是:猫箱?啥

    来源 腾讯网
  3. 豆包工作数据导入上线:ChatGPT等对话记忆一键迁移

    IT之家 10 月 14 日消息,今日豆包工作宣布上线数据导入与同步功能,支持用户将已有对话、技能和记忆迁移至豆包工作继续使用。 用户可一键导入任务偏好指令、技能、连接器、工作记忆、项目及历史会话,支持从 ChatGPT、Claude Code、Trae Work 等产品迁移。导入内容将自动归档至对应入口或列表,历史会

    来源 AI 行业观察
  4. 即梦上线短剧工作室:Seedance 加应用层,影视创作要变天?

    作者|黄小艺微信|H997Hbiu当视频模型暂时没有版本迭代时,应用层如何通过功能创新,让已有的模型能力在真实场景中走得更远?看看即梦就知道了。10 月 26 日,即梦上线了“短剧工作室”功能,围绕着一个统一的项目,将剧本创作、资产生成、分镜、视频生成、后期编辑等核心环节“串联”在了一起,把创作范围从镜头和片段扩...

    来源 腾讯网
  5. 即梦上线短剧工作室:剧本、导演、剪辑收进同一个项目

    对于短剧创作者来说,最不缺的可能就是新的故事灵感。在日常创作中,一个新的人物设定、一段有冲突的情节,甚至刷到的一条社会新闻,都可能成为下一部短剧的起点。但短剧行业的生产节奏越来越快。团队可能同时推进多个项目,既要保证已有剧集的更新,又要不断寻找新题材、开发新故事;好创意从提出到真正变成作品,中间还需...

    来源 腾讯网
  6. 豆包工作双线更新:画布功能上线,接入Seedream5.0Flash

    10月9日,豆包官方宣布「豆包工作」迎来双线更新:工作任务模式新增画布功能,并接入全新图片模型 Seedream5.0Flash;同时,豆包2.1Lite(0921新版)模型正式上线豆包工作,主打更省额度、更快交付。 画布功能面向复杂创作任务:用户可将素材、方案与创作成果铺在同一张无限画布上,随时查看、对比与整理;生成

    来源 AI 开发者社区
  7. TRAE升级后默认Agent:IDE用户为何要多切一步?

    国庆结束后,一名TRAE开发者发现,自己要多走一步,才能回到熟悉的编程界面。 他此前一直使用TRAE IDE。升级之后,客户端默认打开的是Agent工作,想继续写代码,需要手动切换到IDE,再重新选择之前的项目。更让他不满的是,软件没有提供明确的默认启动模式设置,关闭窗口后,还会留下一个常驻托盘图标。他在TRAE官方社

    来源 AI 行业观察
  8. 字节豆包工作上线:电脑操控加团队协作,月费68元起

    8 月 25 日,字节跳动正式上线 AI 办公产品“豆包工作”,面向个人与企业团队提供智能任务执行服务,推动豆包从传统对话助手进一步升级为能够处理实际工作的 AI 智能体。 豆包工作的核心是“工作任务”模式。用户通过自然语言描述需求后,AI 可自主理解目标、拆解任务,并调用本地电脑、浏览器、文档、表格和 PPT 等工具

    来源 AI 实验室动态
  9. 字节TRAE:TraeWork与TraeCode合并,Agent/IDE模式可切换

    IT之家 10 月 10 日消息,10 月 9 日,字节旗下 TRAE 宣布,即日起,TraeWork 和 TraeCode 将正式合并,融合为全新的 TRAE,升级为全链路开发平台。 官方表示,过去 TraeWork 更偏向办公、任务和内容生成,TraeCode 更专注专业开发者的编码需求。双端融合后,全新 TRAE

    来源 AI 行业观察
  10. 豆包上线出行服务:订票打车导航全流程一站完成

    快科技9月30日消息,豆包今日宣布,新增机票预订、火车票购买、打车出行和路线导航等多项服务,覆盖从长途交通到市内出行的全场景需求。 用户在豆包对话中以自然语言描述出行需求即可完成操作,

    来源 快科技
  11. 豆包工作上线数据迁移:ChatGPT等对话记忆一键搬入

    豆包工作2026年10月14日上线数据导入功能,支持从ChatGPT、Claude Code等产品一键迁移对话、技能、连接器和工作记忆。导入后历史会话保留上下文,可直接继续对话。同时新增“在新对话中继续”、消息注释和对话摘要侧栏,优化信息管理效率。

    来源 凤凰科技
向下滚动自动加载更多