豆包手机助手澄清技术误解:产品使用系统原生截屏接口,无法截屏银行键盘等受保护内容
最新 12 月 13 日消息,豆包手机助手今晚发布技术说明,称豆包手机助手使用系统原生截屏接口,无法截屏银行键盘等受保护内容。
最新从说明获悉,近期有网友发布视频称,“豆包手机助手通过 READ_FRAME_BUFFER 权限,从 GPU 渲染的图形缓冲区拿走图像数据,不需要走上层的截图 API。还用了 CAPTURE_SECURE_VIDEO_OUTPUT 权限,可以获取银行安全键盘等受保护的界面内容”。这是对豆包手机助手技术实现方式的错误解读。
豆包手机助手采用的是原生截屏接口(WindowManagerService.captureDisplay),严格遵循应用声明的 Secure 标记,无法截屏银行安全键盘等声明受保护的界面内容。任何持有豆包手机助手技术预览版的用户,都可以自己写一个带有受保护页面的 APK 进行测试,让 AI 讲解页面内容,可以验证 AI 是无法看到的。
豆包进一步说明,网友提到的 READ_FRAME_BUFFER 权限,是为了让 AI 可以在后台完成操作,豆包手机助手让三方应用运行在虚拟屏空间中。为了获取虚拟屏中运行的应用截图内容(对应方法 WindowManagerService.captureDisplay)提供给豆包大模型推理,所以需要 READ_FRAME_BUFFER 权限,但该方法以及权限无法读取到包括银行 App 在内的任何三方应用设置为 Secure 的内容。

CAPTURE_SECURE_VIDEO_OUTPUT 权限的使用,是因为受保护的页面在虚拟屏的投影(即点击灵动岛打开的粉色边缘的应用界面)中会显示为黑屏,用户无法查看和操作,所以需要此权限将受保护的内容正常展示给用户并能够被用户操作。但在投影后,受保护的页面仍会标记为 Secure,仅能被用户查看,无法被截屏。
豆包手机助手操作手机功能的实现原理是:用户下达指令 -> 截屏发送给云端豆包大模型 -> 模型理解后返回具体操作 -> 手机端执行操作指令,不断重复直到完成任务。因此每一步操作后都需要再截图上传给云端大模型分析,每步操作间隔约为 3 秒钟。
由于分析界面所需的大模型参数较大,受限于芯片性能暂时无法运行在手机端侧,需要截图上传云端处理。据了解,目前国内多家手机厂商具有 AI 操作能力的助手产品,也是同样的实现原理,也会使用 READ_FRAME_BUFFER 等系统权限。
豆包强调,豆包手机助手仅在有用户指令时才会开始截屏,且无法截屏三方应用 Secure 标记页面。上传至云端大模型的截屏仅用于视觉理解和推理,完成任务后不会存储在云端。
豆包手机助手表示高度重视用户隐私安全,欢迎社会各界提出宝贵意见。团队会以负责任的态度沟通产品技术问题,把安全和信任做好。
《豆包手机助手澄清技术误解:产品使用系统原生截屏接口,无法截屏银行键盘等受保护内容》转载自互联网,如有侵权,联系我们删除,QQ:369-8522。
相关图文
-
保时捷设计推 C-Seed 折叠电视,售价超三台 911
保时捷设计工作室联合研发的C-Seed折叠电视亮相,它更像一件科幻雕塑艺术品。闲置时如未来柜体,一键启动后屏幕自动旋转,五块Micro LED面板依次展开,支持室内外两用。但价格令人咋舌:约40万美元,超三台保时捷911 Carrera总价。#天价电视# #保时捷设计#... -
三星高管:不追噱头,专注打造“真正有用且不唐突”的 AI
三星欧洲区CEO Simon Sung表示,其AI战略核心是打造“真正有用且不唐突”的人工智能,聚焦日常实用价值而非新奇噱头。三星高斯大模型并未像ChatGPT那样独立推出,而是以Galaxy AI为核心深度集成于手机,并布局于家电等多条产品线。公司内部正推动AI能力渗透各部门,构建统一的智能环境。#三星AI# #GalaxyAI#... -
英伟达黄仁勋谈 AI 对职场影响:只替你干杂活,岗位核心还得靠人
英伟达CEO黄仁勋在播客中分享了对AI与就业的见解:AI自动化的是工作中的具体任务,而非岗位的核心价值。他以放射科为例,尽管AI已能读取影像,但放射科医生人数和收入却创下新高,因为其核心价值在于诊断与治疗决策。这一逻辑同样适用于律师、软件工程师等职业。#AI与就业# #黄仁勋谈AI#... -
谷歌重申暂无在 Gemini 中投放广告计划,聚焦搜索广告
谷歌全球广告副总裁丹·泰勒表示,目前没有在Gemini应用中投放广告的计划,广告团队正将重心放在AI搜索广告上。他指出,AI助手与搜索定位不同,商业化需谨慎,过早插入广告可能引发用户反感。目前谷歌AI概览月活已超20亿,广告点击率与传统搜索持平。#谷歌Gemini##AI广告商业化#... -
波士顿动力 CEO:Atlas 人形机器人从零件分拣起步,5-10 年或进入家庭
波士顿动力CEO透露,其全电动人形机器人阿特拉斯计划2028年投入工厂应用,将从汽车零部件分拣等简单任务起步。机器人面部设计灵感源自皮克斯小台灯,旨在传递友好信号。CEO认为机器人将创造新岗位,与人类形成共生关系,而非简单取代。#人形机器人##波士顿动力#...

















