豆包重新开放“操作手机”:AI手机真正的下一步该怎么走?

AI手机真正的分水岭,不是模型参数更大,而是能否稳定、安全地替用户完成任务。

文章作者、来源:ME News



TL;DR

  • AI手机真正的分水岭,不是模型参数更大,而是能否稳定、安全地替用户完成任务。
  • 豆包同时保留MCP与GUI自动化,并引入SAEP,本质上是在寻找“结构化接口优先、屏幕操作兜底”的混合路线。
  • GUI自动化解决覆盖率,MCP解决可靠性,SAEP解决应用方的边界表达;三者不是互相替代,而是在构建新的移动端代理协议栈。
  • 未来AI手机的核心竞争力,不应是“能操作多少App”,而应是任务成功率、用户接管次数、权限透明度、可审计性和生态覆盖率。
  • 真正成熟的AI手机,需要形成三方规则:用户授权目标,App声明边界,操作系统负责执行、隔离与审计。

AI手机真正的分水岭,不是“有没有AI”

9月14日,豆包正式发布手机助手消费者版本。两天后,首款量产机努比亚NaviX Ultra将正式发布并开售。相比去年12月面向开发者和科技爱好者的M153工程样机,这次最值得关注的并不是大模型又升级了多少,而是此前争议最大的“操作手机”能力并没有消失,仍以Beta形式存在。

这件事的重要性,很容易被低估。过去两年,几乎所有主流手机厂商都在强调AI,但大部分能力仍停留在摘要、修图、翻译、搜索、写作和语音问答。它们改善了局部体验,却没有真正改变智能手机最基本的使用方式:用户依然需要自己找到App、打开App、理解界面、点击按钮,再在多个应用之间来回切换。

AI手机真正的分水岭,是从“回答问题”跨到“替你完成任务”。当用户说“帮我找今晚八点以后回上海的高铁,优先虹桥站,合适的话放进待支付订单”,AI需要理解意图、查询信息、调用服务、跨越多个步骤,并在最后涉及付款时把控制权交还给用户。到了这一步,AI不再只是一个功能,而开始成为手机上的“代理层”。

市场也正在逼着厂商走到这一步。Counterpoint预计,2026年具备生成式AI能力的智能手机将占全球出货量的45%,2027年进一步升至52%,但它同时指出,GenAI目前仍未形成足够强的消费者换机理由。换句话说,“手机里有AI”正在迅速变成标配,真正稀缺的是AI能否省掉用户原本必须亲手完成的一串操作。

豆包这次没有退回原点,而是在补“规则层”

豆包手机过去九个月的变化,恰好暴露了AI手机最现实的矛盾。第一代M153最吸引人的地方,是AI可以读屏、识别按钮、模拟点击,像人一样跨App完成任务。这条GUI路线最大的优势是通用:理论上,只要人能操作的界面,AI就有机会操作,不需要等待每一家App专门适配。

问题也由此出现。2025年12月,微信、银行、支付等应用陆续触发风控,豆包随后下线微信操作能力,并进一步限制金融、刷激励和部分游戏场景。到了今年7月,《晚点LatePost》报道新一代豆包手机调整了与阿里、腾讯等超级App的合作方式,头部应用不再依靠GUI“硬操作”,只有应用主动提供MCP服务、开放相应数据和能力,豆包才能调用。

如果只看到这里,外界很容易得出一个结论:GUI路线失败了,豆包开始退回API路线。但今天消费者版本继续保留“操作手机Beta”,同时推出SAEP屏幕自动化操作声明协议,说明事情并不是简单的二选一。

MCP解决的是“App愿意主动给AI什么能力”。它把搜索、下单、查询、创建日程之类的动作变成结构化工具,稳定、清晰,也更容易做权限控制,但前提是App愿意接入。SAEP解决的则是另一个问题:当AI仍然需要通过读屏和模拟点击操作界面时,App可以明确声明哪些页面允许读取、哪些动作允许执行、哪些区域必须禁止自动化。前者是主动开放能力,后者是在GUI自动化不可避免时建立边界。

这其实比“全面GUI”或者“全面MCP”都更接近现实。移动互联网有数百万个应用和无数长尾页面,不可能短时间全部改造成AI原生接口;但如果让AI无差别读取和点击所有界面,也很难获得金融、社交、电商等核心平台的长期信任。AI手机真正需要的不是一条万能技术路线,而是一套分层执行体系。

GUI不能消失,但必须从“默认通道”变成“兜底通道”

从产品体验看,GUI自动化仍然有不可替代的价值。它最大的意义不是技术先进,而是降低生态启动门槛。新的App、小众工具、尚未接入AI协议的服务,都可以先通过视觉理解和模拟操作被覆盖。如果完全等待标准接口,AI手机很可能重新陷入早年语音助手的困境:演示时能做十几件事,真正使用时一句“暂不支持”就结束。

但GUI也天然脆弱。界面改版、弹窗位置变化、网络延迟、广告插入、验证码、登录状态变化,都可能打断任务链。更重要的是,当AI可以看到整个屏幕并拥有系统级点击权限时,隐私、安全、误操作和提示注入风险都会被放大。对支付、转账、身份认证、删除数据、发送敏感信息等高风险动作而言,“模型判断用户大概想这么做”远远不够,必须有明确的人工确认。

所以更合理的技术栈应该是三层:系统原生能力优先,其次是MCP、App Intents一类结构化接口,最后才是GUI自动化兜底。越接近资金、身份和不可逆操作,越应该向结构化接口和人工确认倾斜;越偏向低风险、长尾、重复性操作,GUI的价值越高。

Google今年在Pixel 10和Galaxy S26上推出Gemini多步骤任务自动化时,采取的也是类似思路:AI在受限的本地虚拟窗口内运行指定App,用户可以实时查看、介入或终止任务,首批只开放外卖、杂货和打车等少数场景。苹果则继续强化App Intents,通过标准化的App动作和实体让Siri AI调用第三方能力,并在框架层面为破坏性或敏感操作提供确认机制。三家公司走的路径不同,但方向正在趋同:不是让模型获得无限权力,而是给Agent建立可执行、可限制、可回收的权限。

AI手机真正该重做的,是操作系统而不是聊天框

这也是为什么我认为,未来几年“AI手机”这个词最终会消失。不是因为AI不重要,而是因为它会像触控、摄像头和移动互联网一样,变成操作系统默认存在的一层。

真正的AI原生系统,不应该只是把一个聊天框放在系统最上面,而要重新组织手机里的意图、记忆、权限、通知、文件、应用和服务。过去的操作系统围绕“App”组织一切:用户先决定用哪个App,再进入App完成任务。Agent时代则更像是用户先说目标,系统再决定调用哪些工具、哪些数据和哪些应用。

这会直接改变手机厂商、模型公司和超级App之间的权力关系。手机厂商掌握系统权限、硬件安全能力和本地数据,天然更适合做执行与权限管理;模型公司拥有更强的理解、规划和推理能力;App则掌握真正的服务、交易和内容。任何一方试图单独吃掉整个链条,都会遭遇另外两方的抵抗。

因此,AI手机最终拼的不会只是模型排行榜,而是“调度能力”。一个真正好用的手机Agent,需要知道什么时候应该调用系统API,什么时候应该走MCP,什么时候可以读屏,什么时候必须停下来问用户;它还需要在失败后知道如何恢复,而不是卡在某个弹窗里,让用户从头再来。

从这个角度看,MCP、SAEP甚至未来可能出现的更多协议,都不是边角料,而可能逐渐变成AI手机时代的基础设施。今天移动互联网的规则建立在账号体系、应用商店、系统权限和支付接口之上,明天还需要增加一层“Agent如何代表用户行动”的规则。

最重要的不是AI能做多少,而是用户敢让它做多少

AI手机进入消费者市场后,安全问题的标准也会发生变化。聊天机器人答错一句话,用户最多重新问一次;手机Agent如果发错消息、删错文件、买错商品或者执行错误的身份操作,成本完全不同。Agent的价值越大,权限就越大,而权限越大,信任就越重要。

因此,行业需要建立一套比传统App权限更细的“代理权”制度。传统权限回答的是“这个App能不能访问相册、麦克风和位置”,未来还要回答“AI能不能替我使用这些数据完成某个动作”“能执行到哪一步”“结果能不能撤销”“谁对错误负责”。

SAEP真正值得关注的地方,就在这里。它至少开始承认一个事实:用户授权AI,并不意味着AI可以在任何第三方应用里无限行动;同样,App拥有自己的风控和业务规则,也不应该简单通过一刀切封禁来否定用户合理使用自动化工具的权利。更成熟的规则应该是三方共同定义边界:用户授权任务目标,App声明可自动化范围,操作系统负责隔离、执行和审计,Agent只是被授权的执行者。

这会比“谁抢到系统入口”更难,但也更重要。因为如果AI手机最后只是把今天的超级App入口争夺,升级成新的AI入口垄断,用户并没有真正得到更自由的数字生活,只是换了一个新的中间人。

还有一个经常被忽视的问题,是责任链条。传统App出现错误,责任主体相对明确;Agent时代一次任务可能同时经过模型、操作系统、MCP服务和第三方App。如果一张机票订错、一条商务信息发给错误联系人,究竟是意图理解出了问题、接口返回错误,还是自动化执行出了问题?没有完整日志、操作回放和责任边界,AI手机就很难真正进入金融、办公和企业通信等高价值场景。

所以,未来Agent的“操作记录”可能像今天的支付流水一样重要。一个成熟系统不仅要告诉用户任务完成了,还应该能够解释它调用了什么能力、访问了什么数据、在哪一步取得授权、哪些步骤由AI执行、哪些步骤由用户确认。这听起来不像一个炫酷的新功能,却恰恰决定了Agent能否从演示视频走进普通人的主力手机。

AI手机的终点,是让用户少操作,而不是让AI多操作

2026年的手机行业还有一个很现实的背景。IDC在8月把今年全球智能手机出货量预测下调至同比下降16.7%,预计市场规模仅略高于10亿部,但平均售价却因存储成本等因素上涨27.6%。在一个销量大幅收缩、价格明显上升的市场里,消费者不会因为发布会上多几个AI按钮,就更愿意换机。

AI真正可能重新定义手机价值的地方,是把过去十多年不断堆积的交互成本重新压缩。用户不需要关心AI到底点击了七次还是调用了三个接口,他只关心一件事:过去需要五分钟、跨三个App才能完成的事,现在能不能用一句话可靠完成,而且不会越权、不会出错、随时可以接管。

因此,评价下一代AI手机,我更愿意看几个朴素指标:任务一次完成率有多高,平均需要用户接管几次,失败后能否自动恢复,高风险动作是否清楚提示,第三方服务覆盖是否足够广,以及用户是否随时知道AI正在做什么。相比“模型有多少参数”“支持多少种AI功能”,这些指标更接近真实的消费价值。

豆包重新保留GUI,同时用MCP和SAEP给它加上边界,至少说明行业正在从“证明AI可以操作手机”,转向“研究AI应该如何操作手机”。这是一次更困难、也更有价值的转变。

AI手机的下一阶段,不应该追求让AI接管一切,而应该让AI成为一个真正代表用户利益的代理:它足够聪明,可以理解目标;足够克制,知道什么不能做;足够开放,可以调用不同公司的服务;也足够透明,让用户随时知道它为什么这么做。

如果这套代理机制最终成熟,智能手机才算真正完成从“人找功能”到“功能找人”、从“用户操作软件”到“系统替用户完成任务”的迁移。到那时,AI手机最大的创新或许不是屏幕里多了一个无所不能的助手,而是我们终于不需要再把每天大量时间浪费在那些本不值得由人亲手完成的点击、切换和确认上。

参考资料

  1. Techritual,《豆包手机助手消费者版正式发布:新增识屏办事功能及多项系统优化》,2026年9月14日。
  2. 第一财经,《定档9月16日,“豆包手机”即将上市》,2026年9月7日。
  3. IT之家,《消息称字节新一代豆包手机备货数十万台,AI不再直接操作头部应用》,2026年7月17日,据《晚点LatePost》报道。
  4. 第一财经,《豆包手机助手回应“侵犯用户隐私”:需用户主动授权,不会在云端存储用户屏幕内容》,2025年12月3日;IT之家,《豆包手机助手宣布将部分调整AI操作能力,计划与其他厂商共同制定准则》,2025年12月5日。
  5. Google,《Let Gemini handle your multi-step daily tasks on Android》,2026年2月25日。
  6. Apple Developer,《Apple Intelligence and Siri AI》《App Intents updates》,2026年。
  7. Counterpoint Research,《GenAI Smartphone Share to Rise to 45% of Global Shipments in 2026》,2026年6月22日。
  8. IDC,《Smartphone Shipments Set for Record 16.7% Drop in 2026, as the Memory Crisis Hits Full Force》,2026年8月26日。