最被低估的 AI 功能:你做一遍,AI 学一遍,以后 AI 替你干

Record & Replay 功能主题头图

目前最被低估的 AI 功能就是“Record & Replay”,也就是你操作一遍电脑,让 AI 生成一个 Skill。

别管你是做什么工作,都一定有很多重复性的操作,那么就都可以通过这种形式自动化。
不用写提示词,只需要像平时一样操作一遍,它就记成一个技能,然后重复调用。

已经有很多人这么干了:

  1. 剪一条视频给 AI 看,它转头就剪出了同款。
  2. 一个做过 SEO 代理的老板,以前每月给客户做报表要花掉一周,录了一遍以后,每个月自动出带品牌的 PDF,连发给客户的邮件都起草好了。
  3. 还有人干脆让 AI 看着自己干活,它反过来指出哪些活是重复的,应该做成技能。

我这里也会拿自动化剪辑的案例讲一讲:

剪映自动化剪辑案例示意

1. 它到底牛在哪

以前想让电脑上的重复活自动跑:

企业上 RPA,找人专门开发一个流程,几周时间、几万到几十万,页面一改版还得返工。

现在这件事被拆成了最简单的两个动作:你做一遍,你说一遍。

所以它牛在三个地方:

  1. 你不需要“说得清”:做给它看就行。
  2. 什么软件都能点:它是看着屏幕操作的,你能点,它就能点。
  3. 人可以走:录好的技能交给它,锁着屏也能跑,在外也能手机远程控制。

2. 我实测了几个场景

这次豆包工作上线了这个功能,而且做得相当扎实,就用这个国民级应用来举例:

  1. 录制从浏览器扩展到了整台电脑,桌面软件也能录。
  2. 录的时候可以边做边讲,嘴上说的规则会一起写进技能里。

边做边讲这一点,我觉得是最关键的。

2.1. 场景一:剪一条视频给它看,它学会我的剪法

做视频的人都懂,粗剪很磨人,我们很多时候会有很多重复的工作:声音小了要调,停顿要剪,视频加速,关键的地方还得加点特效。

每条视频都是这一套,每条都得从头来一遍。
而且剪映没有接口……

2.2. 第一步:开权限,找入口

第一次用,要先在系统设置里给“豆包工作”开录屏权限,它得看得到你的屏幕、听得到你说话。

然后在豆包工作左边点“插件 · 技能”,右上角“添加”,选“录制技能”。

插件 · 技能入口的位置

添加录制技能的菜单

2.3. 第二步:像平时一样剪,边剪边讲

开始录以后,屏幕上会多一个小工具条,一边是删除录制,一边是结束录制和计时。

录制时屏幕上的工具条

我打开剪映,拿一条 3 分钟的素材,就按平时的习惯剪:

  1. 分离音频,音量调大,套上人声增强。
  2. 停太久的、完全没用的片段剪掉。
  3. 整条提速。
  4. 讲到重点的地方加个“闪星”动画,讲到数据的地方贴一个“数据图表”贴纸。
  5. 导出,帧率选 30。

剪到一半我反应过来,“1.2 倍”这句说得不对。
我平时是看语速定的,说得快的那条根本不用提那么多。

直接在对话框补了一句:

补说倍速按语速判断的对话

整套剪完,一共录了 4 分 20 秒。

2.4. 第三步:停下来,看它学到了什么

点“结束录制”,对话框里就会出现“录制结束,生成技能”。

它干的第一件事,是把我刚才说话的那段录音拿去转成文字,再结合画面里的操作,一起整理成技能。

录音转文字并整理操作的过程

等了一会,一个叫“剪映视频后期处理”的技能就生成好了:

生成“剪映视频后期处理”技能

我剪的那几步一个不少,中途改口的那条也在:倍速按语速判断。

哪些东西每次会变,它也替我想好了:素材放在哪、导出到哪、这条要不要加动画和贴纸。

2.5. 第四步:一句话,它自己去剪

新开一个任务,选上这个技能,跟它说:打开我的剪映,直接开始操作,草稿我已经打开了。

选中技能后新建任务

剪映顶上马上冒出一行字:豆包工作正在操作剪映专业版。

豆包工作正在操作剪映专业版的提示

音频分离、音量、人声增强、倍速,四项确认完,它开始从头播一遍视频,去找长停顿和没用的片段。

自动播放视频查找长停顿与无用片段

最后,剪映顶上的提示变成了:豆包工作已完成操作。

操作完成后的提示

2.6. 场景二:盯对标博主,一键多平台分发

做内容的人,每天还有两件事特别磨人:刷对标博主看他们发了什么,还有一篇稿子挨个平台发一遍。
这两件我也都录了。

2.7. 盯对标博主

录的时候,我打开抖音网页版,搜一个想盯的博主(比如逸尘),点进他的主页看最新发的视频,嘴上说清楚:这是每天都要做的,几个博主挨个看,谁发了新内容就记下来。

录完它花了 7 分多钟,生成了一个“抖音博主动态监控”技能。
登录那一步它自己判断出来不用每次做,直接排除掉了。

生成“抖音博主动态监控”技能

以后只要说一句“监控博主 XX,每天早上看他有没有发新内容,有就记下来”就行。
博主能换、能一次加好几个,还能直接设成每天定时跑,想看对标最近在发什么。

2.8. 多平台分发

公众号的发布流程我也录了一遍:粘正文、放图、选封面,一直走到“发表”这个弹窗。

公众号发布流程的录制过程

小红书、知乎这些平台同样各录一个,以后稿子写完丢给它,每个平台的发布流程它挨个走一遍。

3. 这事其实更夸张

个人省的是自己的时间,企业里重复的量大得多。

很多岗位每天的工作,就是在几个系统之间来回复制粘贴:从这个后台导出来,填进那个系统,同一份数据还要在不同系统里各录一遍。

这些活以前也有人想自动化,但太贵了:要开发、要维护,页面一改就坏……

现在只需要自己录一遍,就是一个能用的流程。

开店上新:一个商品上架要填标题、主图、规格、价格,换个平台还得再来一遍。
录一次,说清“品牌词放标题最前面”“价格按进价乘 2.5,尾数改成 9”,以后丢一份新品资料,它照着填。

批量出封面:在 PS 或 Figma 里套一次封面模板,换图、换标题、导出,说清“标题超过 12 个字就换行”“人物放右边”。
以后给它一批标题和图,它一张张出。

4. Mac 锁屏了,它还在干

豆包工作这次还加了一个很实用的能力:Mac 锁屏以后,它照样能接着干活。

在设置的“工作任务模式设置”里,打开“允许豆包在锁屏时工作”。

锁屏走人就行。
手机和电脑登同一个账号,在外面也能拿手机给锁着屏的 Mac 发任务。