Video wird geladen...
Video konnte nicht geladen werden
最近 Muse 很火,我也在想:有没有可能,让我们已经在用的任意的AI,也拥有像 Muse 一样操作电脑的能力? 因此我周末捣鼓了开源一个skill。一句话来讲,使用它可以让任何AI 接到电脑上的 Computer Use,让它能看屏幕、点按钮、输入文字,直接操作 App 顺着这个方向,可以尝试的事情就很多了:找餐馆、查机票、购物比价,或者整理社交媒体素材。以前需要自己在几个 App 之间来回切换,现在可以试着用一句话把任务交给你已经订阅了的AI。(Kimi, 豆包 Gemini, Codex, Claude 等等) 开源链接 使用方式 把这个 GitHub 链接直接给到 AI,让它帮忙安装 在 demo 里,我演示了如何安装,并以 Claude Code 为例,操作我的浏览器,帮我给餐馆定位 我更感兴趣的是背后的成本空间。 这个 skill 复用了本机已安装的 ChatGPT/Codex Computer Use 组件,由你选择的模型理解任务、决定下一步怎么做。项目脚本本身不调用 OpenAI 推理 API,因此,不会消耗 OpenAI 的 Token,但前提是你要安装了 Codex 我自己也更愿意让操作发生在自己的电脑上,继续用自己的 App 和登录状态。此外所有的支付信息、付款记录全部留在本地,解决合规、隐私的顾虑 先开源出来,给大家玩玩。我很想看看,当更多... show more
16,262 Aufrufe • vor 5 Tagen •via X (Twitter)
12 Kommentare

这件事情对于我日常投资研究有两个重要意义 1. 研究一家公司的时候. 我的不同类的数据,例如研报、本地的 PDF、各种网页、数据源,终于可以 All in one 地让 AI 在我电脑上操作了 2. OpenAI Computer Use 好用,但就是太贵了。这个彻底解决了我 Token 不够,但是又需要操作电脑的问题

这skill有意思,等于给AI配了双手。Muse玩Computer Use是本行,邀请码6ODVRG,免费额度先白嫖再说

这思路太对了,把 Computer Use 从专属能力变成通用外挂。开源等于直接把成本打下来,Muse 那种烧法小团队真玩不起,蹲一个实测看看 token 烧多少

这不就把 Computer Use 从专属能力变成通用外挂了嘛

把任意AI接上电脑操作这条路,skill比换模型更容易让人上头,周末效率直接长脚了😋

想到一块去了,不过我是用浏览器插件来让Muse操作本地电脑。😎

我也做了类似的事情:我用自己长期开机的macbook挂pi,通过cua mcp来控制电脑,远程就用paseo来控制,也有差不多的体验,当然还是需要再整合一些自动化的功能才更好。

README 要求先在 ChatGPT/Codex 里打开 Computer Use,并实际用过一次把系统授权走完,再让 AI 读 SKILL.md 安装。文案还写着保留正常授权提示,限定 macOS,而且是非官方项目

这个想法挺有意思的,相当于给现有AI做了个操作层扩展,回头我去试试看效果怎么样。

最想先試的是比對兩版簡報:把改掉的數字、移走的段落連同頁碼列出來。這種工作看起來不炫,但如果能少掉來回切視窗、反覆確認同一頁的時間,會很想留下來用。

Follow you, and thanks you sharing your contrition

这个方向可以,但先别给 root,不然它第一件事就是帮你点 approve。
