Загрузка видео...

Не удалось загрузить видео

На главную

Claude上线Computer Use功能 能完全自动化操作你的电脑,这还只是第一个版本,效果就已经非常稳了。 有MCP的应用,优先通过MCP来操作;没有MCP的,直接截屏一步步通过GUI操作,理论上讲能操作任意应用。 单次执行任务可以长达几十分钟,而且是真的能完成。 牛,太牛了。 我下达的命令:打开微信,根据微信群“Gorden的AI交流群”里的最近30条消息,写一段话承接群里的消息,然后抛出新的可以讨论的话题,并把以上内容直接发送到群里。 跑了20分钟完成了,我拍了整个过程,视频无删减只有加速。 结合Dispatch,可以实现手机遥控电脑操作其他应用;结合定时任务,可以每天定时操作应用(这2个功能是之前就已经上线的) 目前还有几个明显的缺点: 1、通过截屏操作太慢了,一步步截屏和识别非常费时间;MCP会好很多,以后应用CLI化会更好; 2、费token,上面的任务,费了我Pro订阅的30%的5h额度,就只是发了这么一条消息; 3、权限机制目前比较保守,需要你反复授权;

49,090 просмотров • 3 месяцев назад •via X (Twitter)

Комментарии: 0

Нет доступных комментариев

Здесь появятся комментарии из оригинального поста

Похожие видео

Codex 操控电脑的三种方式。Codex 团队成员 Jason 今天写了一篇详细指南,把三者的区别和适用场景理清楚了,这里做个精简版。 【1】Computer Use:最广,也最慢 Computer Use 让 Codex 像人一样看屏幕、点鼠标、敲键盘,操作你电脑上的任何图形界面应用。Spotify、Xcode、系统设置、iOS 模拟器,甚至 iPhone Mirroring 都能控制。 代价是慢。结构化插件可以直接调 API,Computer Use 得一步步看界面、找按钮、等响应、再检查结果。但它能搞定没有 API 的应用,这是其他方式做不到的。 Mac 和 Windows 的体验差距很大:Mac 上 Codex 可以在后台静悄悄地操作,你继续用自己的电脑不受影响;Windows 上它必须占据前台,操作期间你没法用那台机器。 Jason 举了个例子:有次他的快递被偷了,Amazon 说要等 25 分钟才能接通客服。他让 Codex 每五分钟检查一次聊天窗口,客服出现后改为每分钟一次,自动完成退款流程。他去洗了个澡,回来退款已经办好了。 【2】Chrome 扩展:带着你的登录状态 Chrome 扩展让 Codex 使用你已登录的浏览器会话,包括 cookies、账号状态和已有标签页。Gmail、LinkedIn、Salesforce、公司内部后台,这些需要登录才能用的工具,Chrome 扩展是对的选择。 它还能同时控制多个标签页,在一个标签里读信息,到另一个标签里对比,再到第三个标签完成操作。Computer Use 也能操作浏览器,但它只认屏幕坐标,Chrome 扩展理解的是浏览器层面的上下文。 Jason 用它跑了一个长期任务:每天让 Codex 通过 Chrome 检查他的 Twitter 私信、浏览相关新闻、收集反馈,把有价值的内容存到本地文件,但不发任何消息。 要注意的是,网站会把 Codex 的点击和表单提交当作你本人的操作。研究、浏览、起草可以自动化,但发送、发布、付款这类操作最好留给自己确认。 【3】内置浏览器:给开发者的沙盒 内置浏览器住在 Codex 的对话线程里,你和 Codex 共享同一个渲染页面。它不带任何登录状态和 cookies,是个完全隔离的环境。 这反而成了开发场景的优势。它的主场是本地开发服务器、文件预览、公共网页、响应式布局检查和视觉 bug 复现。Codex 可以改代码、操作页面、截图、再跑一遍,形成紧密的反馈循环。 Jason 最喜欢的功能是标注:你可以直接在页面上点击某个元素留评论,比如"这个层级反了""这个按钮间距不够",Codex 会拿着截图和元素上下文去改代码,改完重新打开同一个页面等你下一轮标注。比来回传截图和文字描述高效得多。 【选哪个?】 简单记:任务需要登录状态用 Chrome,需要操作桌面应用用 Computer Use,在做前端开发用内置浏览器。如果有现成的插件或 MCP 能完成任务,优先用结构化工具,视觉控制是最后手段。

宝玉

178,788 просмотров • 1 месяц назад

腾讯新推出的Marvis,真的把AI焊进了操作系统! 我的电脑,终于能听懂人话了。 以前找文件得手动翻,改设置得点半天,定时任务还得自己盯着……现在一句话说完,AI直接帮我干完。 这就是腾讯最新发布的 Marvis(马维斯)— 一个真正叠加在操作系统层面的AI助手。 系统级AI能力,太硬核了 Marvis 不是漂浮在表面的聊天工具,它直接在操作系统层面叠加了一层AI中枢。 这意味着它能全局访问你电脑里的几乎所有资源: - 全部已安装的应用 - 图片文件(还能理解图片内容和文字) - 各种文档数据 一句话就能调动资源干活。 六人AI小队,背后自动协作 它预置了多个Agent协同工作:一个总指挥 + 五个专业特工(文件、系统、应用、浏览器、搜索)。 你说“把最近的发票全找出来做成表格”,它自动拆任务、分配执行,最后直接给你结果。用起来特别顺手。 真正实用的Skills + 一键定时任务 Marvis 内置了丰富实用的Skill,而且每个技能都配了清晰的操作图示,上手非常友好。 文件归类、图片批量处理、系统优化……点开就能用。 定时任务也特别方便: - “检索 GitHub 本周 Trending 中 AI/ML 领域的热门项目,生成中文可视化展示页面。” 说一次就安排好,它准时执行。 最强一点:Token消耗实时透明 这点我特别喜欢—每个任务运行时,都能实时看到Token消耗情况。 一目了然,心里有底。而且每天还有1000万Token免费额度,日常使用完全够用,几乎零成本。 Marvis 把AI真正带到了操作系统层面,让你的电脑从“被你操作的工具”,变成了“能主动帮你干活的智能助手”。 目前支持 Windows、Mac、Android,iOS版本也即将上线。

开发者Hailey

15,921 просмотров • 2 месяцев назад

哎哟卧槽,刚发现 Airtap Airtap Ai 又更新了一个硬核的新功能。 只要发一条 iMessage,就能让 AI 操作 App 去干活。 Airtap通过 iMessage 收到指令后后,就会操作远程手机,完成后再把结果发回来。 我用它来帮我查询 Gmail 里 Anthropic 发来的相关邮件。 只要第一次在 Airtap的远程手机里登录 Gmail 后,后续直接在 iMessage 里发句话就能查询邮件,本机不用再反复挂 VPN、切换网络。 而且在联网状态下,iMessage 走的是网络消息,不按普通运营商短信计费。 在 iMessage 把指令发出去后,就可以在 Airtap 官网看到远程手机开始自己操作。 打开 Gmail、搜索 Anthropic、查看相关邮件,最后把查询结果直接回复到 iMessage。 整个过程我都录成视频了,点开视频你可以看到, Airtap收到任务后如何思考,如何一步步操作并返回结果。 对我来说,这个功能最直接的价值,就是不用打开 Gmail,也能快速确认某家公司最近有没有发来重要邮件。 还有一个更实际的用途,就是排查那些已经不用、却还在自动扣费的 AI 工具。 AI 工具订阅多了以后,很容易忘记取消。有时候偶然翻到付款收据,才发现某个工具又自动续费了一个月。 这时可以直接让 Airtap 搜索 Gmail 里的续费提醒、付款收据和扣款邮件,看看还有哪些订阅没有关。 另外对于我们 AI 博主或者海外内容运营者来说,还可以让它操作 X、YouTube 等 App,查看订阅消息中是否有最近更新的内容,不用自己在挂VPN以及在多个 App 之间来回切换。 这种场景,以前我都是一个个 App 打开操作。 现在只需要发一条消息,让远程手机自己去干活,直接告诉我结果就行。 想体验的,可以直接给这个号码发送 iMessage:+1-650-213-7322 #justtextit #textyourapps #Airtap

李岳

31,975 просмотров • 6 дней назад

Boris Cherny(Anthropic 工程负责人)在最近的红杉 AI Ascent 大会上说,他现在大部分工作从手机完成。Claude App 里常驻 5 到 10 个 session、几百个 Agent,夜里有几千个在跑深度任务。他管这种做法叫 Loop,让 Claude 用 cron 起一个定时任务,可以每分钟、每五分钟、或者每天跑一次。 我本来还不太习惯用手机操作 Agent。这几天受邀测试最新版的 TRAE SOLO Mobile,刻意多在手机上试用,越用越能理解 Boris 说的那种变化。 This content is only supported in a Feishu Docs 这次 TRAE SOLO 首次实现了移动端、Web 端、桌面端(含 Windows 版)的全量开放,并真正做到三端同步联动,让 Agent 使用的场景大幅扩展。我在手机端体验了几天,结合官方新推出的功能,一些感受: 【1】Agent 已经不是程序员专属 打开 TRAE SOLO,首页让我先选模式:Code 还是 MTC(More Than Coding,意思是“不只是写代码”)。Code 模式好理解,写代码、跑 Git、看 Diff,而 MTC 模式则全面覆盖了写文档、数据分析、报表生成等日常办公场景。 从 Claude Cowork 发布开始就已经有了这个趋势,上周 Codex 的升级也是宣称:“用 Codex 做几乎一切工作(use Codex for (almost) everything)”。 TRAE SOLO 最新的升级同样顺应了这个趋势,从一个编程 Agent 泛化到了通用 Agent。 最新版本特别强化了飞书 CLI 接入功能。现在只要简单授权,就能在 TRAE SOLO 里直接操作飞书文档:例如,输入一句指令,“帮我整理一份本月 AI 编程工具市场动态”,Agent 会自动去网上检索,最后直接生成飞书文档或者动态网页,完全不需要人工再去排版或复制粘贴。 与过去“AI 给文字、用户再粘到飞书”的繁琐流程相比,这种一步到位的体验已经完全不是一回事了。 【2】三端连起来是什么体验 这次 TRAE SOLO 的一个大动作是三端(手机、Web、桌面端)全量开放,不再需要邀请码,所有用户都能用。 单独看 Mobile 端,它主要解决随时下发任务和确认任务的问题。但只有当 Mobile、Web 和 Desktop(包括最新上线的 Windows 版)真正打通之后,你才能真正做到随时随地让 Agent 持续执行任务。 过去云端执行环境总有局限,不能访问本地工具。而 TRAE SOLO Mobile 解决了这个痛点——只要完成简单的设备配对,你的手机就可以直接控制云端环境与本地多台设备。任务信息在所有设备之间实时同步,手机端下发的任务可以立即在 Web 和 Desktop 端查看执行进度,反过来也一样,真正实现跨设备的无缝接力。 比如上周末我在外面看孩子踢比赛,间歇刷手机,看到一篇不错的英文技术文章,顺手在 TRAE SOLO Mobile 上给 Agent 发了条指令:“把这篇文章翻译成中文,写一份推荐稿”,家里的 TRAE SOLO Desktop 就会启动我一套配置好工作流开始工作。等比赛结束回到家,打开电脑,稿子已经在那了。这种感觉有点像你出门前跟一个助手说了句话,回来活儿已经干完了。 【3】手机是用来指挥 Agent 的意图路由器,不是用来操作电脑的 这个区分挺关键。我之前不太爱用手机端办公,潜意识觉得是在用手机操作电脑。但是转换一下:“人操作 Agent,Agent 操作电脑”,那么用手机就很自然了。你不需要在小屏幕上精确点击什么按钮,你只需要说清楚你要什么。 用手机还有个障碍是输入速度,打字慢。TRAE SOLO 手机端有语音交互讨论功能,可以跟 AI 语音对话讨论一个问题,讨论结束后自动生成会议纪要,然后直接从手机把工作任务派发出去,电脑端同步接上后续操作。一部手机可以连接管理云端环境加多台 PC,在环境选择面板里挑一下设备和工作目录,剩下的全部交给 Agent。 这个功能在外面的时候特别好用。走路的时候、坐地铁的时候,想到一个点子,按住说话就行了,比打字快很多。过去这些碎片时间里冒出来的想法,要么记在备忘录里回头再处理,要么干脆就忘了。现在一句话就能让 Agent 开始干活。 【4】不着急的事,让定时任务自己跑 回到 Boris Cherny 跑几百个 Agent 的场景。做法很简单,让 Claude 用 CRON 给自己设一个重复执行的任务,一分钟跑一次、五分钟跑一次、每天跑一次,都行。 Boris 开着几十个定时任务,举三个例子。 一个 Loop 在照看他的 PR:CI 挂了就去修,需要 rebase 就自动 rebase。 一个 Loop 在维护整个项目的 CI 健康,发现 flaky test(不稳定的测试)就去定位修复。 还有一个 Loop 每 30 分钟从 Twitter 上抓他的反馈,自动聚类成几个主题汇报给他。 我自己也在用类似的方式。我有一个定时任务监控我 GitHub 上开源项目的 Issues,有人提了 Issue 就自动总结并给出处理意见,我看一眼觉得没问题,再指示 Agent 去操作。还有一个定时任务盯着我 X 的收藏夹,我平时刷到好文章随手收藏,它帮我自动抓取到本地,英文的还会翻译成中文,到时候集中看就行。 很多需求其实没那么紧急,但需要持续做。每天看一眼竞品动态、每周整理一次行业新闻、每月生成一次数据报表,这些活适合扔给定时任务。 现在 TRAE 的桌面端和网页端都已支持定时任务,无论是在云端还是本地环境,都能稳定地自动执行。比如你告诉 Agent:“每天早上 10 点发一份最新的 AI 新闻动态整理”,第二天早上工作台就会自动收到文档。你只需要专注于真正有创造性的判断,把那些重复且不着急的任务统统交给 Agent。 总结与体会 整体来说,这次对 TRAE SOLO Mobile 试用的感受就是: - Agent 使用门槛大大降低,不再只是程序员专属,很多日常办公、写作场景已经可以由 Agent 来做了。 - 三端真正打通后,无论何时何地,都能轻松管理并延续任务。 - 手机不再是远程桌面,而是随时随地的“意图路由器”。 - 通过 Loop 定时机制,真正把重复且耗时的任务自动化,让用户只做关键决策。 Boris 说他夜里有几千个 Agent 在跑,很多人大概觉得这是大厂工程师的特权。但我这几天的体感是,这件事的门槛已经比想象中低很多了。一部手机、一台电脑、一个 Agent 工具,你就可以开始把重复的事交出去。未来办公的趋势,或许就是这种“人随时随地指挥 Agent、Agent 做具体工作、人只负责验收成果”的模式吧。 推荐可以去用下 TRAE SOLO Mobile,体验随时随地指挥 Agent 干活的感受。 想试用的 Mac 可以去官网下载了——国内:

宝玉

216,711 просмотров • 2 месяцев назад