发布概况
豆包手机助手消费者版本于 2026 年 9 月正式发布,从此前的技术预览版走向面向普通消费者开放。该版本以豆包 App 为基础,与手机厂商在系统层面展开合作,首个版本随合作机型一同发售,并已开启预约。
交互与唤醒方式
消费者版本支持语音、专属 AI 键等多种唤醒方式。专属 AI 键带有指纹鉴权能力,完成本人验证后无需二次解锁即可调用助手执行任务;此外还支持语音输入、三指上滑以及同时按住 AI 键与音量键等方式手动保存当前屏幕内容。
屏幕理解与本地记忆
助手支持屏幕上下文理解,用户无需截图或切换应用,即可让助手结合当前屏幕内容继续完成任务。例如打开相机对准室内环境后,可直接要求助手按装修风格、尺寸与价格条件寻找符合要求的商品。在本地记忆与检索方面,助手可在用户需要时检索相册、短信、便签等本地数据;消费者版本同时升级录音体验并接入飞书妙记能力,用户可针对会议或访谈内容直接追问。
任务执行与操作边界
任务执行方面,助手可根据用户指令调用手机应用完成具体操作,例如确认常用地址、选择车型并发起打车订单。此前技术预览版受到关注的“操作手机”能力,此次以 Beta 版形式开放,并保留一定能力限制。针对 GUI 智能体与第三方应用之间的操作边界,该版本同时推出屏幕自动化操作声明协议并启动为期 30 天的规则公示,第三方应用可自主声明允许或拒绝助手在应用内执行屏幕自动化操作;对明确拒绝的应用,助手不会进行自动化操作。
隐私与安全
在隐私安全方面,官方表示其数据收集与处理遵循合理必要与用户自主控制原则,并建立 Agent 防护体系,对可操作范围进行分层、分级管理;涉及支付、隐私与不可逆操作时会要求用户接管确认。
对用户的影响
对普通用户而言,系统级助手把原本需要跨应用手动完成的查找、比价、下单、信息检索等操作收敛到一句指令,且在执行长尾任务时保留了人工接管的入口。对开发者与第三方应用而言,屏幕自动化操作声明协议给出了可预期的接入与拒绝机制,有助于在开放自动化能力的同时明确安全边界。