DeepMind手语转文本技术落地Pixel手机 开启消费级AI无障碍新时代

2026-08-13 14:10:15未知 作者:徽声在线

北京时间8月13日消息,谷歌旗下人工智能实验室DeepMind正式推出革命性多语言手语转文本模型SL2T,该技术已率先集成至Pixel 11系列手机系统,标志着手语AI技术首次实现消费级产品落地。这项突破性进展有效填补了听障群体在智能终端交互领域的空白,为全球约7000万听障用户带来无障碍沟通新体验。

据技术文档披露,SL2T模型首批支持Pixel 11内置的Gboard智能键盘和Live Transcribe实时转写工具。通过前置摄像头捕捉的手语动作,用户可直接完成消息编辑、网页搜索及与Gemini大模型的对话交互。内测数据显示,使用美国手语(ASL)输入时,其效率较传统键盘输入提升37%,自然度评分达到4.2分(满分5分),显著优化了沟通流畅度。

该模型采用跨语种联合训练架构,基于超过50种手语语料库和10万小时训练数据开发,其中25%数据源自美国手语专业数据集。这种训练方式使模型能够捕捉不同手语间的共性动作模式,在FLEURS-ASL国际评测基准上取得92.3%的准确率,刷新现有手语转写模型纪录。值得关注的是,模型支持动态扩展训练集,随着新语种数据的加入,识别能力将持续增强。

行业数据显示,尽管语音转文字技术已覆盖98%的智能手机,但全球现存200余种手语仍缺乏成熟的移动端识别方案。传统手语识别系统多停留于实验室阶段,存在三大核心痛点:依赖固定词汇库导致语义丢失、非手部动作识别率不足30%、云端处理引发隐私担忧。这些技术瓶颈长期制约着手语AI的商业化进程。

SL2T创新采用三维动作解析架构,通过MediaPipe Holistic工具实时追踪130个身体关键点(包括32个手部、68个面部和30个躯干坐标),直接生成文本输出。这种端到端的设计摒弃了传统「手势-标签-文字」的转换流程,使面部表情、唇部动作等语法要素的识别准确率提升至89%。测试表明,在复杂语法结构的句子转写中,新模型错误率较标签式系统降低41%。

隐私保护方面,DeepMind构建了三级防护机制:设备端仅传输动作坐标数据、原始视频流采用AES-256加密、处理后自动清除缓存。经第三方安全机构验证,该方案使面部特征泄露风险降低至0.003%,远低于行业平均水平。此外,模型支持离线运行模式,进一步保障用户数据安全。

项目开发过程中,DeepMind组建了由听障工程师、语言学家和AI专家构成的跨学科团队。通过与美国国家手语协会合作,收集了超过2000小时的真实沟通场景数据。目前首批功能仅支持ASL转英文,但官方宣布将在2025年前扩展至英、法、西等10种手语,并逐步开放给其他安卓设备厂商。

追溯技术渊源,SL2T的算法基础可追溯至2025年5月发布的SignGemma开源项目。该模型基于轻量化Gemma架构,专门针对ASL语法特征优化,为消费级落地奠定了技术基石。此次突破也标志着DeepMind在无障碍AI领域的持续深耕,此前其WaveNet技术已帮助渐冻症患者保留原生嗓音,Euphonia项目则破解了中风患者的语音识别难题。

全球科技巨头正加速布局无障碍AI赛道:科大讯飞推出的讯飞听见为听障用户提供免费语音转写服务,单日处理量超500万分钟;华为鸿蒙系统搭载的「小艺看世界」功能,可实时识别300种路障信息;苹果在Vision Pro设备中集成眼动追踪技术,使渐冻症患者通过眼球运动即可操控轮椅。据市场研究机构预测,无障碍AI市场规模将在2027年突破200亿美元,年复合增长率达45%。

点击展开全文
你关注的
从“几年一遇”到“一年几遇”,AI时代网络攻防失衡加剧 奇安信齐向东:主战场转向制造业与服务业从“几年一遇”到“一年几遇”,AI时代网络攻防失衡加剧 奇安信齐向东:主战场转向制造业与服务业 活力中国调研行|中国商业航天迈入“快时代”:卫星流水线生产成新趋势活力中国调研行|中国商业航天迈入“快时代”:卫星流水线生产成新趋势 马斯克明确拒绝乌克兰利用“星链”打击俄境内目标请求马斯克明确拒绝乌克兰利用“星链”打击俄境内目标请求
相关文章
乌兰察布何以成AI算力新枢纽?徽声在线实探:阿里云超节点率先落地,算电协同前景可期乌兰察布何以成AI算力新枢纽?徽声在线实探:阿里云超节点率先落地,算电协同前景可期 ALO中国售价高仍热销,1分钟破千万刷新天猫纪录ALO中国售价高仍热销,1分钟破千万刷新天猫纪录 ALO中国售价高于美国20%却依然热销,创下销售新纪录ALO中国售价高于美国20%却依然热销,创下销售新纪录 大厂精打细算,数据中心租赁成AI时代新风口大厂精打细算,数据中心租赁成AI时代新风口 腾讯二季度资本开支激增176%至527亿,持续加码AI领域腾讯二季度资本开支激增176%至527亿,持续加码AI领域 谷歌AI战略剧变:布林亲征Gemini模型,DeepMind权力重构背后谷歌AI战略剧变:布林亲征Gemini模型,DeepMind权力重构背后