开源版「豆包手机助手」来了:能在后台操作微信,不耽误你刷手机
contact@theblockbeats.org (律动BlockBeats)
动察 Beating AI 快讯,独立开发者王赞开源了一款名叫 Mika 的安卓 AI 助手,能直接操控手机上的微信、小红书等 App,帮用户整理聊天记录、发送消息。
作者演示了让 Mika 在后台翻阅微信群聊、总结聊天记录,还能给微信文件传输助手发消息。整个过程中,用户可以继续在主屏幕使用其他 App,不必把屏幕让给 AI。
豆包手机助手依靠手机厂商提供系统级权限,Mika 则通过安卓无线调试启动一个具有 Shell 权限的辅助进程,在普通手机上创建一块看不见的虚拟屏幕,让微信等 App 在上面运行。AI 通过无障碍服务读取按钮、文字和输入框,执行点击、滑动和输入;遇到控件无法识别的界面,就用本地 OCR 或视觉模型看图操作。
Mika 首次使用需要开启开发者选项、完成无线调试配对并授权无障碍服务。模型可以自行配置 API,也支持通过 ChatGPT 账号登录。运行时无需连接电脑,电脑上的 Codex 等工具还可以通过 MCP 向它派发任务。
Android 12 起即可使用跨 App 操作功能。到了 Android 14,Mika 可以利用虚拟屏幕的独立焦点能力,在后台操作时不抢占主屏幕的输入焦点。