手绘上色的豆包形象与手机及应用相连

豆包手机助手消费者版来了

18 min

手机行业的换机周期已经来到了 42 个月,产品也无聊到让人想打瞌睡,各家品牌的营销为了吸引用户换机,也陷入了一种怪圈,怎么把讲了无数遍的体验再讲出花来?就在这样一个如此糟糕的大背景下,AI 智能体就像手机厂商的救命稻草一样,从电脑跑到了手机。我不知道它能够带来多大的体验变革,但我知道,我们已经从智能手机时代,来到了全新的智能体手机时代,一字之差带来的改变,是天翻地覆的。

把课表加入日历,从短信里找出医院预约,或是根据房间照片挑一件尺寸合适的家具。豆包手机助手消费者版的发布视频,展示了这些日常用法。用户可以直接指着屏幕上的图片和文字交代任务,不必先把信息复制到对话框里。

9 月 14 日,豆包手机助手发布消费者版本。距离 2025 年 12 月 1 日的技术预览版已有九个多月,这次更新涉及交互、本地数据与记忆、任务执行,以及隐私和权限管理。新版本首发搭载于努比亚 NaviX Ultra,团队也宣布会向努比亚 M153 老用户推送更新。

官网将 NaviX Ultra 标为合作版本,硬件研发设计及生产制造主要由努比亚负责,豆包提供手机助手能力。

AI 键与屏幕问答的升级

AI 键加入了指纹验证。按照发布视频的介绍,用户按键时便能验证身份,减少再次解锁的步骤。官网还列出了两种按键操作:长按发起实时问答,双击开启视频通话。

AI 键在唤醒助手的同时验证用户指纹
按下 AI 键,同时完成指纹验证

语音唤醒也做了针对性优化。团队解释,用户使用大模型助手的频率有所提高,唤醒需要适应更多环境与说话方式。视频中的厨房场景里,用户先问韭黄要炒多久,得到回答后,再让助手设置倒计时。官网同时提供需要手动开启的连续对话 Beta 模式,开启后可以多轮交流,无须反复唤醒。

屏幕问答则增加了执行任务的能力。发布视频中,用户打开一张房间照片,要求寻找宽度不超过 1.2 米、价格在 1000 元以内的柜子;另一个场景里,用户让豆包把图片中的课表加入个人日历。照片里的装修风格、课表上的时间,都成为了请求的一部分。

团队在视频中这样解释这项变化:

屏幕中的信息不仅可以用于问答,还能够直接作为执行任务的输入。

从短信、相册和录音里查找信息

屏幕之外,豆包手机助手增加了本地搜索工具,可以在用户需要时检索相册、短信、便签等已有内容。

发布视频展示了两种查找:询问通行证的到期日期,以及从短信里找到医院预约。后一个例子还包含后续操作——用户明确要求把预约加入日历,并设置前一晚 8 点停止进食的提醒。助手随后显示了日程和提醒的处理结果。

豆包根据短信中的医院预约创建日程及用户指定的提醒
从短信查找预约,再按用户要求添加日程与提醒

录音是另一类可供查找的资料。消费者版接入飞书妙记能力,支持语音转录、实时翻译、区分说话人,并能总结重点、生成鱼骨图。团队给出的用法是,录完一次用户访谈后,直接询问昨天访谈中提到的产品建议,由助手定位相关内容并回答。

官方演示中的录音内容与鱼骨图生成
录音内容可以转成文字,并进一步整理重点、生成鱼骨图

已有资料可以搜索,用户也能主动保存新信息:通过语音输入、三指上滑,或同时按住 AI 键与音量键,记下当前屏幕内容,之后再按需要找回。

助手能够查阅哪些资料,用户可以自行设置。根据官网的隐私安全白皮书,用户可以按应用限定本地检索范围,关闭记忆、删除记录,并设置允许记忆的应用、时段和地理范围。全局记忆优先在端侧处理并加密保存;因技术限制需要上云时,相关数据用完即删除,记忆数据不用于训练。对于金融交易、权限管理等高敏感操作,白皮书要求用户二次确认。

调用工具与操作界面同时保留

技术预览版曾展示通过图形界面完成操作的能力,也就是 GUI Agent。到了消费者版,这条路线仍然保留。官网对「操作手机 Beta 版」的说明列出了两种明确方式:模拟点击和调用工具。

团队表示,这次拓展了第三方应用生态,也完善了自有工具接口。发布视频里,用户可以让助手把体检报告中的注意事项整理到便签,按照屏幕上的地址规划出行并增加途经点,或比较两个机场前往同一展会地点的路线。

用户要求在行程中增加途经点
规划出行时,可以继续要求增加途经点

据《21 世纪经济报道》报道,豆包此次同步推出屏幕自动化操作声明协议(SAEP),并启动为期 30 天的规则公示。第三方 App 可以声明允许或拒绝助手在应用内进行屏幕自动化操作;豆包表示,不会对明确拒绝的应用执行此类操作。

SAEP 管理的是模拟点击等界面操作的权限。飞书妙记这样的工具接入,则让助手直接调用应用提供的功能。消费者版同时保留了这两种方式。

任务管理也有了变化。团队加入排队和插队机制,用户可以在锁屏界面查看任务状态,并继续与助手交互。有任务尚未完成时,用户也能继续提出要求,并查看哪些正在执行、哪些还在等待。

豆包手机助手显示进行中和排队中的任务
进行中的任务与排队任务可以集中查看

把每天重复的事情设成指令

消费者版还加入了快捷指令与自动指令。前者让用户用一个短口令发起一组任务。在官方演示中,说出「晨间简报」,助手便开始播报天气、日程与新闻,不必每次分别交代要查什么。

自动指令则按预先设置的条件触发。视频里的用户要求每天上午 11 点整理 AI 行业新闻,再发到飞书群;另一个用户把到家设为条件,让助手打开空调。这两种安排分别用到了时间和地点,用户授权并设好指令后,便由助手在条件满足时执行。

秋芝与橙红的实际体验

秋芝 2046 表示,她已经使用 NaviX Ultra 近一个月。在她的上手视频里,有一个比单独查资料更复杂的要求:准备出门吃饭时,让豆包一起查路线、看车辆电量,再通知朋友。

刷到一家想去的店,以前要先查推荐,再看导航,最后把地址发给朋友。她这次直接对着当前页面提出一串要求:查开车过去需要多久,检查车辆电量是否够往返,如果足够,就打开导航,并通过飞书把地址发给朋友。

按照她展示的执行过程,助手先从屏幕截图中提取店铺信息,再打开地图查位置,进入特斯拉 App 查看电量,最后调用飞书的消息接口完成发送。她可以继续使用手机,等任务完成后再查看结果。

秋芝演示查找店铺、规划路线与检查车辆电量的任务过程
秋芝的出行任务包含店铺位置、驾车时间与车辆电量检查

秋芝 2046 将这种用法比作电脑上能够执行长任务的 Agent。她解释,模拟操作手机只是执行任务的一种方式,助手还可以调用系统工具、第三方应用接口,以及内置的 Skill。

另一次演示中,任务来自一场已经录下来的团建会议。她先问助手,小陈在昨天的团建会上是否确认参加;随后要求根据会议内容制作飞书文档,列出参加与不参加的人,查询机票和住宿费用,按一人一房计算总预算,完成后把文档发给小陈。

目的地等信息已经在会议记录中,不必在指令里重新交代。视频中,助手返回了任务完成和文档发送成功的结果,她随即说:

你看看,我连要去哪儿都没说,活儿都干完了。

她也演示了两种找回信息的方式。询问港澳通行证何时到期时,助手参考的是相册中已有的证件截图;查询此前收藏的糖水店时,用到的则是她通过三指上滑主动保存的屏幕内容,随后还查询了店铺营业时间。涉及个人资料的提问需要身份认证,她在视频中强调,查看这些资料需要由用户发起需求并确认。

谈到目前的不足,她也说:

它现在并没有到任何事情都能替你做的地步。

她提到,遇到小众 App,或者藏得比较深的按钮,助手第一次操作仍可能迷路。她还希望,后续能像部分电脑端 Agent 一样,让助手从做错的事情里积累经验,减少重复犯错。

她仍然认为,这种用法能给不太会操作手机的家人带来便利。

橙红 Iris 的演示关注了另一类日常操作:从相册里找照片,再准备微博内容。视频把任务列成三步——打开微博发文页面、检索相册指定照片、生成文案等待确认。画面中,助手在相册里浏览照片,橙红则用「黄色的、黑色条纹、有翅膀」这些外观特征描述要找的对象。

橙红演示根据颜色、条纹和翅膀等特征在相册中寻找照片
橙红用外观特征描述照片中的对象,助手在相册中查找

这段演示没有展示最终发布。任务列表将确认留给用户,助手先完成找图和文案准备。

为了豆包,你愿意花 5499 元吗?

9 月 16 日,搭载豆包手机助手消费者版的努比亚 NaviX Ultra 正式发布。

中兴商城列出的售价分别为:12GB+512GB 版 5999 元,国补后到手价 5499 元;16GB+512GB 版 6499 元,16GB+1TB 版 7499 元。其中,幻梦配色仅提供 16GB+512GB 版本。

努比亚 NaviX Ultra 搭载第五代骁龙 8 至尊版移动平台,配备 6.78 英寸 AMOLED 屏幕,分辨率为 2800 × 1260,支持 144Hz 刷新率。后置三摄由 2 亿像素主摄、5000 万像素超广角和 6400 万像素潜望长焦组成,前置摄像头为 3200 万像素。

机身厚 7.62 毫米,重约 208 克,内置 7100mAh 电池,支持 90W 有线快充、50W 无线快充和反向无线充电。它还支持 Wi-Fi 7、蓝牙 6.0、NFC 和红外遥控,出厂系统基于 Android 16,提供白色、黑色、蓝境和幻梦四种配色。

努比亚 NaviX Ultra 的正面屏幕及多款配色
NaviX Ultra 的机身配色与正面屏幕

秋芝用了近一个月,最打动她的,是少了那些原本需要自己反复操作的步骤。她在视频里说:

再用回我的老手机,我要解锁、打开 App 的那个过程,我都开始嫌累了。

秋芝的这句话,比一次成功的任务演示更让我感兴趣。查路线、找照片、整理会议记录,这些事情原本就能用手机完成。豆包带来的吸引力,在于她不用再亲手做完其中的每一步,甚至开始嫌原来的操作麻烦。

但喜欢豆包助手,和愿意为它换一部手机是两回事。过去,我们换手机,往往是为了更好的拍照、更流畅的屏幕,或更长的续航。现在,花 5499 元买一台努比亚 NaviX Ultra,豆包助手本身,能否成为你换机的首要理由?

或者我换个说法,同样的换机成本,你会选择更强更先进的配置,还是一个豆包手机助手?


作者:Astra
责任编辑:林十兄