豆包手机助手消费者版发布:AI键指纹直唤,跨应用Agent再升级

9月14日,字节跳动旗下豆包手机助手消费者版正式发布,距离去年12月技术预览版亮相仅过去9个月,这款系统级AI智能体正式从工程样机尝鲜走向消费级量产。本次升级围绕交互体验、记忆能力、Agent执行效率及安全机制四大维度展开,标志着手机端AI的实用化进程迈出关键一步。

豆包手机助手消费者版发布:AI键指纹直唤,跨应用Agent再升级

豆包手机助手消费者版正式上线 首发搭载努比亚NaviX Ultra

本次发布的豆包手机助手消费者版基于豆包App与手机厂商开展系统级合作,并非简单的桌面应用新增,而是深度融入手机系统底层,保障交互稳定性和日常使用流畅度。首个搭载该版本的机型为努比亚NaviX Ultra,已于9月14日开启预约,9月16日正式发售,后续适配机型以官方公告为准。此前字节跳动已与中兴、努比亚达成合作,持续推动系统级AI助手在终端设备的落地。

多模交互+本地记忆升级 打造“边看边办”体验

交互层面,新版本整合AI键、语音与识屏三大唤醒路径,覆盖全场景使用需求。专属AI键支持指纹鉴权能力,锁屏状态下按下即可完成本人验证并唤醒助手,无需额外解锁;长按AI键可触发实时问答,双击则能快速发起视频通话。语音唤醒功能针对远场、内噪、嘈杂环境做了专项优化,同时以Beta形式开放连续对话能力,除普通话外还支持闽南语、客家话、上海话、粤语等十余种方言,以及英语、日语等外语识别。
屏幕识别能力同样迎来升级,用户无需截图或切换应用,即可基于当前页面内容直接发起翻译、问答或添加日程等操作,实现“边看边办”。例如用户打开相机拍摄室内装修场景,说出“根据这个装修风格,帮我选一个一米二以内、价格不超过一千元的柜子”,助手即可结合画面内容在电商平台匹配符合要求的商品。
记忆能力是本次升级的亮点之一:用户授权后,助手可安全检索相册、短信、录音、便签等本地数据,支持通过自然语言精准召回信息,例如询问“港澳通行证的到期时间”即可从本地存储的资料中获取答案。同时用户可通过语音输入、三指上滑、同时按住AI键和音量键等方式手动保存当前屏幕内容,形成可本地检索的个人记忆。办公场景下还接入了飞书妙记能力,支持录音转写、实时翻译与自动总结,用户可直接追问“昨天用户访谈里提到的产品建议”等具体内容。

跨应用Agent能力迭代 推出SAEP协议规范操作边界

Agent执行层面,消费者版保留了“模拟点击+工具调用”的跨应用操作能力,覆盖电商比价、音乐添加、系统工具联动等多类场景,支持多任务排队与插队管理,锁屏状态下也可查看任务进度。用户还可通过快捷指令触发固定操作流程,不过支付等高风险操作仍需用户手动确认。生活服务场景同步上线豆包购物比价、曹操出行(首批覆盖北京、杭州)等实用功能。
为规范AI自动化操作边界,豆包手机助手本次同步推出屏幕自动化操作声明协议(SAEP),并启动为期30天的规则公示。根据协议,第三方应用可自主声明操作边界,明确允许或拒绝AI助手在本应用内进行屏幕自动化操作,豆包手机助手将充分尊重开发者意愿,对明确拒绝相关操作的第三方应用不会进行强制自动化操作。安全层面,产品采用端云结合的方式处理数据,遵循“最小必要”原则,建立了Agent防护体系,对可操作范围进行分层、分级管理,配备全链路审计机制,目前已获得ISO27001、27701、42001及等保三级认证。

业内看好系统级AI入口潜力 生态适配仍待完善

业内普遍认为,豆包手机助手消费者版将系统权限、个人记忆与自动执行能力进行串联,打通了多应用的操作壁垒,有望成为用户的日常AI核心入口,进一步推动手机AI从“被动应答”向“主动办事”转型。不过当前第三方应用的兼容稳定性、敏感操作的授权边界仍是行业需要共同解决的问题,后续豆包手机助手也将与更多终端厂商、应用开发者合作,完善开放生态。