Loading video...

Video Failed to Load

Go Home

介绍一下我们的新项目AutoFish - 一个可以让你的Agent操作你的手机的cli工具 你需要在你的手机上安装我们的app;安装skill后,你的agent会根据信息配置好连接信息,并通过rust cli与你的客户端建立HTTP通信;同时我们还针对手机环境做了工具记忆,现在你的Agent可以通过你的手机来点外卖,发消息,发邮件,就像豆包手机一样 仓库地址:

30,386 views • 6 months ago •via X (Twitter)

23 Comments

📦Acbox's profile picture
📦Acbox6 months ago

fun fact: AutoFish的灵感来源于Minecraft的一个自动钓鱼插件

芋头 Leohearts🔮's profile picture
芋头 Leohearts🔮6 months ago

需要这个。昨天半夜还在用手机 termux 紧急运维。

Aiden_novak's profile picture
Aiden_novak6 months ago

这个会封号吗?📦

Orange AI's profile picture
Orange AI6 months ago

有意思

leon7hao's profile picture
leon7hao6 months ago

🐂🍺

phonescloud's profile picture
phonescloud6 months ago

可以使用我们的phones-cloud,远程操纵手机。

润泽 Rainzee's profile picture
润泽 Rainzee6 months ago

用的 a11y 吧

烟波 Yanbo🍡's profile picture
烟波 Yanbo🍡6 months ago

赞

G_Z's profile picture
G_Z6 months ago

还是安卓好 之前看ios相关的 真的得绕好大一圈才能做到类似的

LLL_yc's profile picture
LLL_yc6 months ago

ios有机会吗

DZ's profile picture
DZ6 months ago

什么时候计划支持iOS?

AskClaw 🦀's profile picture
AskClaw 🦀6 months ago

需要usb连接手机吗

📦Acbox's profile picture
📦Acbox6 months ago

可以局域网连接

AskClaw 🦀's profile picture
AskClaw 🦀6 months ago

如果支持tailscale互联网连接就更好

太假了's profile picture
太假了6 months ago

用上这个了,做小红书autofish,刚刚跑通,目前还在识别定位,估计还要一阵子 感谢大神的开源

波澜's profile picture
波澜6 months ago

可以操控任意的手机APP吗

Eric's profile picture
Eric6 months ago

哈哈哈,我也做了一个,还在测试风控,你测试风控效果如何?

小狼's profile picture
小狼6 months ago

@Ion_Mio_ 是不是我手机问题,还是什么原因,换了两个安卓下载app,都安装不了

CanDoItAgain's profile picture
CanDoItAgain6 months ago

是不是要配视觉模型呢?哪里的视觉模型token便宜呢?

📦Acbox's profile picture
📦Acbox6 months ago

可以不用视觉模型,我们主要使用Android的无障碍树,截图作为辅助

CanDoItAgain's profile picture
CanDoItAgain6 months ago

无障碍不得开权限吗, 然后还容易被杀进程,有些UI无障碍获取不到UI元素

📦Acbox's profile picture
📦Acbox6 months ago

所以使用视觉做辅助,对于一些获取不到无障碍树的app通过图片坐标判断

M.Zhou's profile picture
M.Zhou6 months ago

这个看上去不错,改天试一下能不能模拟操作入库。

Related Videos

我敢说!苹果手机的iMessage绝对是严重被低估的应用之一! 99%的人只会拿来收验证码!! 而现在,iMessage能帮你"操控"手机App。 没错,就是字面意思!! Airtap(Airtap Ai)这次真是惊到我了! 我上次用还是仅限安卓手机,而且还要安装app,没想到这次更新,苹果手机直接“零门槛”就能用! 零门槛到什么程度,不用装App、不用注册、不用打开任何界面、也不需要额外配置, 只需要打开iMessage,给这个号码发信息: +1-650-213-7322 然后,你就会发现新大陆!! 和其他把iMessage当入口的AI聊天助手完全不同, 你给它发信息,它是真的在后台替你操控App,体验下来真的很Nice,像是看到了未来手机的“only talk”形态, 只需一个对话框,无需安装任何app。 试了很多我平常要用手机做的一些高频事情, 比如让它看YouTube爆款视频,从热门评论挖掘选题; 让它对比同一款婴儿车在不同购物app的价格,并告诉我蹲低价的建议; 让它帮我把内容发布到TikTok; 我还让它蹲点,帮我签到抢优惠券; 这些事情,我全程没有打开任何app, 只需要在iMessage发信息,然后就能看到执行结果,言出法随的爽感直接拉满! 不过还是有需要人介入的情况,就是第一次登录某个App或网站时, 需要人工进行登陆,然后就不用其他操作。 上面那个号码可以存下来,保存为常用联系人, 这样你就会在手机上有了一个24小时常驻,能够代替你操控app的超级AI助手! 我发了一条信息,它打开TikTok帮我发布了一条内容! 怎么说呢,这种体验真的比一些Agent要奇妙的多! #justtextit #textyourapps #airtap

沐阳

157,591 views • 3 months ago

卧槽,Agent 可以直接操作你的安卓手机!📱 介绍一下:android-remote-control-mcp 像人一样操作任何安卓 App手机自己跑 MCP server → 不用 root,不用数据线,不用电脑跑 ADB 中转装一次,人在外面也能遥控家里那台手机读屏、点按钮、划屏幕、打字、开 App、拍照、读通知,57 个工具全给你。 立即开搞👇 我在模拟器上从零跑了一遍,读一整屏的 UI 树只有 4000 字符出头,一千个 token 左右,比那些 dump XML 的方案省太多。 下面是完整安装步骤,手机和模拟器两条路都写了。如果嫌麻烦其实可以用 Airtap 的云手机,直接发送短信,免安装,开箱即用。 我录了一段 Agent 实际操作 Android 手机的过程,一句话丢给 Agent,它自己在模拟器里读屏、找按钮、点下去。 一、手机直接装(最简单) 手机浏览器打开项目的 Releases 页,下载最新的 APK(当前 v1.11.1,包 169 MB) APK 有两个版本,按手机选:GMS 版给正常带 Google 服务的手机,不确定就选它;FOSS 版给去谷歌化的 ROM,不依赖 Google 服务。 点开下载好的 APK 安装,中途会问你要不要允许「未知来源」,允许 打开 App,Server 页顶部会有一条权限提示,进去把无障碍服务打开。这一项是必须的,读屏和点击全靠它,不开的话所有工具都会报错 Android 13 以上,用 APK 侧载安装的应用,无障碍开关是灰的,点不动。去「设置 → 应用 → Android Remote Control MCP」,右上角三个点,选「允许受限设置」,验证一下指纹或密码,再回来开就正常了。 相机、麦克风、定位、通知这几个是可选的,对应的工具用不上就不用给 回到 Server 页点 Start。页面上会显示 IP、端口和一串 token,这三个待会儿要给 Agent 二、模拟器装(没有安卓手机,或者不想拿自己手机试) 先在电脑上装一台安卓模拟器。装 Android Studio 是最省事的路,它自带模拟器和 adb,建一台 Pixel 7、Android 15 的机器就行。 模拟器起来之后,剩下的步骤和真机完全一样:把 APK 拖进模拟器窗口装上,打开 App 开无障碍,回 Server 页点 Start。 模拟器不用管「允许受限设置」那一步,无障碍开关直接就能点。 三、接进 Agent 这一步别自己查文档了,把仓库链接丢给 agent,让它自己配: 读一下这个仓库的 README,把它的 MCP server 配到我的 Agent 里,配完验证能连上。 它会自己去看 README、写配置、跑一遍连通性检查。你只要把 App 里 Server 页显示的那串 token 和地址给它。 地址给哪个,取决于你怎么连:手机和电脑在同一个 WiFi 下,就在 App 里把绑定地址改成 0.0.0.0,用它显示的局域网 IP;用模拟器就是本机地址;人不在家,在 App 里开 Remote Access 隧道,用它给的那个公网地址。 仓库里还自带一个 Claude Code 插件,作用是反过来的——把手机上的通知、WiFi、地理围栏这些事件推进你的 Agent 会话里。这个也一样,让 agent 顺手一起装了。

劳伦斯

74,707 views • 2 months ago