前两天，我体验了一款非常有趣的手机助手。
它究竟是如何实现这些功能的呢？
接下来，我将分享我的使用体验，希望能给各位读者一些参考。
在我的测试中，这款助手能像人类一样理解指令，并流畅地完成手机操作。
这个操作流畅到什么程度呢？我现在正在享用的一碗美味面条，就是这款助手帮我点的外卖，全程几乎无需我动手。
我只需要说：“我想吃次坞阿生手打面的红烧小排面了。”
然后，它就开始在我手机上自动操作了。它熟练地退出聊天界面，在众多应用图标中精准找到外卖软件，并调出点餐页面。
值得一提的是，我的指令并没有指定具体的商家，它找到几家后，会主动询问我是否确认商家信息。在得到我的回复后，它便顺利完成了加购流程。
当然，出于安全考虑，付款环节仍然需要我们手动完成。但其他步骤，基本上无需我们干预。
再比如，我说：“帮我给小发最新朋友圈点赞，并评论彩虹屁。”它不仅精确找到了小发的朋友圈，甚至使用了“xf”这样的缩写进行搜索，点赞后还留下了一段精彩绝伦的评论，远超我的语言表达能力。
看到这里，许多读者可能好奇我使用了什么手机。这款助手的智能程度，确实远超普通手机自带的语音助手。实际上，它并非Siri之类的系统自带助手，而是我前两天从智谱AI获得的AutoGLM，一款基于AI的手机助手。
感兴趣的朋友可以申请内测，目前仅支持安卓系统，iOS用户可能需要稍等。这款应用的操作模式与近期爆火的Claude 3.5新功能不谋而合。Claude 3.5可以控制电脑，甚至可以（虽然玩得很差）玩数独游戏。
而智谱的AutoGLM则可以控制手机。无需任何预设工作流或复杂设置，只需语音指令即可。是不是有点像钢铁侠的贾维斯？
然而，作为一款第三方应用，AutoGLM要实现这些操作，需要获取手机的无障碍权限。该权限允许应用模拟用户操作，从而控制手机。类似的权限也在一些面向老年人的应用中使用，例如平安通。
有了无障碍权限，配合AI强大的理解和对话能力，智谱助手可以完美复制许多日常操作。在微信上，它可以发送消息、转账、发红包、点赞朋友圈、关注公众号，甚至可以阅读公众号文章并进行总结等等。
例如，你可以让它帮你写一篇精美的节日祝福给妻子，或者写一段彩虹屁给老板。即使你的指令不够精确，它也能理解你的意图。比如，说一句“让火锅赶紧下楼”，它就知道你要催促外卖送餐员。
再比如，给朋友发个5块钱红包，也只需一句话即可完成。（演示素材，实际未发生转账）幸好付款需要手动操作，否则万一语音指令出错，后果不堪设想。
对于导航软件、打车、搜索攻略等基本功能，它都能精准完成。它还能理解不同应用中的内容，例如，你可以让它在小红书上搜索某个攻略，并进行总结。
许多以前不敢交给手机助手完成的任务，现在我都可以尝试让它帮忙。例如，我年纪渐长，经常忘事。家里的牙膏用完了，餐巾纸需要购买，或者某个东西坏了。
我刚想着：“哎，这个得记得买”，转眼就忘了。即使打开了淘宝，如果中途收到消息，也很难再找到之前的页面。
所以我的水壶已经坏了半个月了……这次路过看到坏掉的水壶，我只需要打开手机说：“给我买一个上次买过的浇水壶”，然后点击付款就完成了。
你还可以利用大模型的写作能力，它不仅能写朋友圈的彩虹屁，还能帮你写出几十甚至上百字的商品好评。
然而，在试用过程中，我也发现这种模拟点击方式存在一些问题：遇到弹窗时，助手会束手无策，要么误点广告，要么等待弹窗消失，如果弹窗需要手动关闭，则只能依靠人工干预。这种体验上的割裂感令人沮丧。
几天试用下来，类似的小问题不少。我常用饿了么点外卖，导致一开始让它帮我点餐时，它直接罢工，表示我没有安装对应的应用。
由于还在内测阶段，支持的应用数量较少，操作也存在不稳定性。目前可用的功能主要集中在以下几个方面：
许多系统级任务，例如更换壁纸，目前还无法实现。让它在支付宝里帮我偷能量、喂小鸡，它也会表示无法完成（这功能建议尽快上线）。
它甚至会反问你：“你确定要我这么做吗？”如果强行尝试，要么卡住不动，要么打开其他应用，进行一系列毫无目的的乱点。
当然，虽然存在不少瑕疵，但这与这款应用处于内测阶段有关。应用数量少、不稳定等问题，都可以在未来逐步改进。根据AI应用发展的速度，我预计下个月这款工具将会发生巨大的改变。
此外，让AI操作手机并非易事，尤其在大模型各种能力实际落地时，很容易出现冲突。这也是为什么大模型发展到如今水平，真正能够取代手机原生操作的应用依然很少见。相信许多读者会担心其安全性。
作为第三方应用，获取如此高的系统权限，确实存在一定的风险。如果贸然推出，必然会面临安全和隐私方面的质疑。一种解决方案是与手机厂商进行深度合作。
智谱AI在本周已正式宣布与高通合作，基于骁龙芯片优化端侧大模型，并与三星达成战略合作。目前看来一切都在按计划进行。总而言之，虽然AutoGLM还无法与贾维斯相提并论，但它确实让手机助手能力得到了显著提升。
