借助开源技术,任何安卓手机都能变身AI终端,自动执行日常任务。本文实测了一款基于此技术的免费App,它能理解指令并操作手机,帮你处理购物、打卡等琐事。尽管存在速度与安全限制,但这项技术已展现出巨大的实用潜力,为解放双手提供了新的可能性。
智能速览
开源框架Open-AutoGLM能让安卓手机实现AI自动化操作。
App「Ruto」可配置实现后台、熄屏自动执行任务。
能处理打开App、购物、收能量等操作路径明确的任务。
游戏托管等高响应速度场景目前尚不适用。
出于安全考虑,多数主流App限制了后台自动化功能。
精华内容
那么,这款将普通安卓手机变为AI终端的工具实际表现究竟如何?它在多大程度上能解放双手,又面临哪些现实挑战?
开源方案登场
此前备受关注的“豆包手机”以其AI自动化操作能力惊艳市场,但作为实验性产品,其产量有限且价格不菲。去年12月,智谱开源了Open-AutoGLM框架,这项技术能让多模态大模型理解手机屏幕并实现自动化操控。这意味着,通过特定App,普通安卓手机也能具备类似“豆包手机”的核心功能,大大降低了体验门槛。
日常任务实测
通过名为「Ruto」的App进行实测,其自动化表现令人满意。下达“打开米家App,关掉智能插座3”的指令后,Ruto能精准识别屏幕、规划步骤并成功执行。在京东搜索商品并加入购物车、在支付宝收取蚂蚁森林能量等操作也均能顺利完成。不过,对于多邻国打卡这类稍复杂的任务,虽然能正确作答,但单次思考和执行耗时约15秒,响应速度偏慢。
能力的边界
测试发现,当前的开源方案并非万能。与“豆包手机”不同,它无法托管斗地主、下象棋等需要快速响应和实时决策的游戏。这表明,Open-AutoGLM框架目前更侧重于处理响应要求不高的“理解-规划-执行”类任务,对于游戏这类高时效性场景,能力尚有欠缺。将其定位为处理日常琐碎任务的智能助手更为贴切。
安全与阻碍
这项技术面临的最大挑战是安全性。由于自动化操作需要读取屏幕内容,许多App将其视为敏感行为。当App检测到操作在虚拟屏幕(后台)进行时,会触发“敏感隐私保护”机制,导致AI无法获取屏幕信息,任务执行失败。因此,目前Ruto虽支持后台运行,但绝大多数主流App的前台操作权限受限,无法实现真正的“全自动”体验,这也是厂商普遍的防御策略。