Claude Duet未披露

让 Claude 接管鼠标键盘干一天真活:40 多个文件改名归档、PDF 数据逐行誊进 Numbers、同一张表单填 8 次;多应用来回切会丢窗口,20 步以上的长流程曾在第 15 步静默失败

Popular-Help5516(Reddit 用户 u/Popular-Help5516,原帖作者本人,自述用一天时间在自己 Mac 上实测)Reddit · 2026-03-24

打开原帖

来源文字 / 整理摘要

原帖正文(Reddit r/PromptEngineering,作者 u/Popular-Help5516,Atom 源 updated 字段 2026-03-24;本轮经 Reddit 公开 Atom feed 取得,以下为节选,删节处以 … 标出,英文部分逐字未改写): “Claude launched Computer Use yesterday. it takes screenshots of your screen, figures out whats on it, then moves your mouse and types on your keyboard. like a person sitting at your desk. mac only, research preview, Pro/Max plans. spent most of today testing it on actual work stuff instead of demos. heres what i found. works surprisingly well: - file management — told it to rename and sort 40+ files in my Downloads folder. took about 5 minutes but got every single one right - spreadsheet data entry — had it pull data from a PDF and enter it into a Numbers spreadsheet row by row. slow but accurate - browser form filling — filled out the same web form with different data 8 times. only messed up one date format which i fixed with a follow up message - research compilation — opened 5 tabs, pulled key info from each, compiled into a text doc works but needs babysitting: - anything involving multiple apps switching back and forth — sometimes loses track of which window its in - longer workflows (20+ steps) — failed silently at step 15 once. had to catch it and redirect doesnt work yet: - anything needing speed (2-5 seconds per click adds up fast) - captchas, 2FA, login screens - complex drag and drop interactions - anything you cant afford to have mis-clicked (like sending emails or making purchases) the biggest thing nobody mentions: it takes over your whole machine. you cant use your mac while claude is working. so the best use case is actually "start a task then walk away." come back to finished work. … reliability is maybe 80% on simple tasks, 50% on complex ones.” 中文对照:他说 Computer Use 的工作方式是截图、判断屏幕上有什么,然后移动鼠标、敲键盘。他拿真活而不是演示测了一天:文件管理(下载文件夹里 40 多个文件改名归类,约 5 分钟,全对)、表格录入(从 PDF 取数据逐行进 Numbers,慢但准)、表单填写(同一张表单用不同数据填 8 次,只错一处日期格式,补一句就改好)、资料汇总(开 5 个标签页取要点合成一份文档)。需要盯着的两类:跨应用来回切会弄不清在哪个窗口;20 步以上的长流程有一次在第 15 步静默失败。做不了的:要速度的事(每次点击 2 到 5 秒)、验证码/二次验证/登录页、复杂拖拽、以及点错代价高的动作(发邮件、付款)。他特别强调:它会接管整台机器,工作时你不能用这台 Mac,所以最好的用法是开个任务就走开。他自估可靠率简单任务约 80%、复杂任务约 50%。

业务摘要

让 Claude 像坐在你工位上那样操作 Mac:反复截图、判断屏幕上有什么,然后移动鼠标、敲键盘。作者用一天真任务测了四类——批量文件整理、从 PDF 往表格里誊数据、同一张表单重复填写、多标签页资料汇总——并把结果分成「能用」「要盯着」「还不行」三档。关键限制是它独占整台机器:它干活的时候这台 Mac 你用不了,所以最合适的形态是开工后走开、回来收成品。

有大量重复桌面动作的人:批量整理文件、跨文档誊数据、同一表单反复填、从多个页面汇总要点;以及愿意「开个任务就走开」的人。不适合需要边等边用电脑的人,更不适合做发邮件、付款这类点错代价高的动作——作者把它们明确列为还不行的一类。

执行链路

  1. 先按「点错代价」给任务分级

    作者把发邮件、付款这类明确列为还不行。落地时先把任务分三级:错了可撤销(文件改名、草稿整理)、错了要改(表格录入、表单填写)、错了不可逆(发送、付款、删除)。只交第一、二级,第三级一律自己做。

  2. 一次只给一个应用里的一类动作

    作者的失败案例是跨应用来回切时它弄不清在哪个窗口。落地时把任务切成单应用内的批处理:先只做文件整理,再单独做表格录入,不要让它一边切窗口一边誊数据。

  3. 长流程必须拆到 20 步以内,并加中途汇报

    作者遇到的是 20 步以上的流程在第 15 步静默失败。落地时把长任务拆成若干段,每段结束让它报告进度与当前窗口;静默失败只能靠中途汇报发现(分段与汇报是本站补的边界,原帖未设)。

  4. 开工后走开,因为机器被它占了

    作者说得很清楚:工作时你不能用这台 Mac。因此任务要挑不需要你同时用电脑的时段,或者在一台备用机器上跑,别让它和你的正常工作抢屏幕。

  5. 验证码、登录、二次验证一律自己来

    作者把这三类明确列为做不了。落地时遇到就由人补上这一段,不让它尝试任何绕过方式(这是本站补的边界,也是合规红线)。

  6. 收工时要有一份改了什么、还剩什么的清单

    作者能说出「40 多个文件全对」,是因为他核对过。落地时要求产出前后对照清单与未完成清单;没有这份清单,你无法判断它究竟做完了没有,尤其在它曾静默失败的前提下。

复用方案

  • 一个支持屏幕操作(截图 → 判断 → 移动鼠标与键盘输入)的通用助手(本条所用 Claude Duet 的 Computer Use 为研究预览版,原帖说明需 Pro/Max 订阅,未给价格)
  • 一台可以让它独占的机器:作者明确指出它工作时你不能用这台 Mac
  • 任务本身是可撤销的:批量整理、誊数据、重复填表这类错了能改的动作
  • 遇到验证码、登录、二次验证时有人能接手
  • 愿意接受「慢」:作者说一次点击约 2 到 5 秒,追求速度的活不适合

Prompt 指令

本站整理 · 未实测

你是我的桌面操作助手。你可以截图判断屏幕、移动鼠标、输入内容,完成批量整理、誊数据、重复填表这类动作;你不发送邮件、不付款、不下单、不删除原件,也不做任何绕过验证码或登录验证的尝试。

【输入】
- 任务类型:[文件整理 / 数据誊写 / 表单填写 / 多页面汇总,一次只选一类]
- 作用范围:[具体目录、文件或页面,例如 下载文件夹中的某批文件]
- 规则:[命名规则 / 归类规则 / 目标表格与字段 / 表单字段与数据清单]
- 点错代价分级:本任务属于 [错了可撤销 / 错了要改];不可逆动作不在本次范围内

【步骤】
1. 先复述你要做的事与规则,列出预计步骤数;超过 20 步就先拆段,只执行第一段。
2. 执行时保持在同一个应用内,不要来回切换窗口;需要跨应用时停下来报告,等我决定。
3. 每段结束汇报:已完成第几步 / 当前窗口 / 处理结果 / 有没有异常。
4. 遇到验证码、登录页、二次验证、复杂拖拽:立即停下,说明是什么,交给我。
5. 需要删除、覆盖或移动原件时:先列出清单等我确认,不要直接执行。
6. 收工时输出前后对照清单与未完成清单。

【输出】
1) 步骤数与分段计划;2) 每段汇报;3) 前后对照清单(例如 原文件名 → 新文件名);4) 异常与未完成清单。

【需要我确认的】
- 任何删除、覆盖、移动原件的动作。
- 任何发送邮件、付款、下单、提交动作。
- 规则里没写到的情况:先问我,不要自行判断。

【缺资料或失败时】
看不清屏幕、元素找不到、步骤数超上限、中途卡住——说明卡在第几步与当前窗口,停下等我;不要反复重试同一动作,也不要切换到别的路径绕过限制。

运行成本与避坑指南

成本:原帖未披露订阅价格、token 或运行成本,采集站亦未给出;本站不给未经核实的数字。作者只说明该功能当时属于研究预览、需要 Pro/Max 订阅。真正的时间成本来自速度——他明确说一次点击约 2 到 5 秒,重复几十次的活会明显变慢。

运行条件:作者列出四类做不了的事:追求速度的动作、验证码与二次验证与登录页、复杂拖拽、以及点错代价高的动作(发邮件、付款)。另外还有那条最容易被忽略的限制——它接管整台机器,工作时你不能用这台 Mac。

避坑:最大的坑是静默失败:作者的 20 步以上流程曾在第 15 步无声卡住,是他自己发现并拨回去的,因此长流程必须拆段加中途汇报。第二个坑是跨应用切换会丢窗口,一次只做单应用内的批处理更稳。第三个坑是把不可逆动作交出去——发邮件、付款、删除原件一旦点错,代价远高于省下的时间。第四点如实披露:作者在文末挂了自己站点的长文链接,带有引流成分;他自估的可靠率(简单约 80%、复杂约 50%)没有统计方式,未经核验。

原作者自述:交易、收入及自动运行效果未经独立审计。

原文与配图归原作者;完整内容请通过原帖链接查看。

示例与验证记录 · 合成示例

一次桌面批量整理的合成演示(非真实业务,未发送邮件、未付款、未删除任何原件)

任务类型:文件整理;范围:示例目录中的 12 个文件;规则:按「年份-月份-项目名」重命名并归入示例子目录;点错代价:错了可撤销。
步骤数与分段(合成)
预计 12 步,未超上限,作为一段执行

分段汇报(合成)
第 1—6 步:完成,当前窗口 示例访达(示例应用名),无异常
第 7—12 步:完成,当前窗口 示例访达(示例应用名),异常 1 项

前后对照(合成,节选)
示例原文件名甲 → 2026-03-示例项目A
示例原文件名乙 → 2026-03-示例项目B

异常与未完成(合成)
1 个文件名含无法判定的日期,已保持原名并单列待确认

状态:未删除任何原件,未发送任何内容,未付款