智能“屏保膜” 让盲人朋友更好地“玩手机”
拿出手机买东西、交水电费、定外卖……这些普通人看来随手可得的日常对于视障人士来说却遥不可及。不过为了他们不掉队，技术人员也没放弃努力。
最近阿里联合清华大学—阿里巴巴自然交互体验联合实验室公布了一项人机交互研究新成果：一枚AI盲键，首次打通了语音和触感两大感官系统，为盲人朋友更好“玩手机”提供了一种新可能。
据阿里巴巴人机自然交互实验室研究员赵晨介绍，这种新的盲人触感反馈技术叫Smart Touch。具体做法是给手机贴一个新的“屏幕保护膜”，上面有支持触觉交互的“盲键”，通过低成本的屏幕盲键按钮提供触觉。更重要的是根据页面的动态变化，盲键对应的功能也随之改变，提升交互效率和用户体验。
弥补语音交互的不足
目前，视障用户通常使用读屏软件操作手机，用手指触摸屏幕后由读屏软件提供语音反馈。“但这样的交互方式还存在很多问题，比如缺少触觉反馈，用户经常需要访问大量不需要的元素，容错率低、纠错成本高且频繁，所以视障用户使用起来的用户体验并不是很好。”清华大学计算机系教授喻纯表示。因此，他们希望增加听觉、触觉等其它交互手段，以弥补单纯语音交互的不足，从而增加视障用户人机交互的便利。
Smart Touch之所以可以实现盲键功能在不同页面的功能变化，离不开自动理解页面信息的智能算法。“该算法首先提取界面的语义和主要功能，然后以符合视障用户心理模型的方式映射到触觉盲键按钮上。因此，和现有的技术相比，Smart Touch不单提供语音交互，还提供基于界面内容理解的触觉盲键。”喻纯说。
对于界面的主要功能按钮，视障用户也不再需要通过遍历的方式去使用，通过盲键可以层次化地访问界面元素，这大大改变了视障用户现在使用手机的方式，从现在的语音交互拓展到语音加触觉交互，为视障用户提供更高效更方便的用户体验。
让智能交互代替明眼人讲解
“我们技术的核心主要有两部分：界面理解和界面交互。具体来说，界面理解指对界面语意的理解。”据喻纯介绍，界面的内容包括三层：第一层解决“未加标签”控件。目前手机界面上有很多不同的图标，大多数图标是一张图片加文字，目前的读屏软件读出来的是“未加标签”，Smart Touch 通过算法自动地将图标和文本进行关联，为图标提供标签。第二层对手机界面的逻辑区块做自动识别，形成界面元素的层级组织。第三层则对界面的交互语义做理解，将界面依据视障用户的心理模型读出来。
“我们的研究发现视障用户在使用手机的时候希望有个明眼人在旁边，把界面上的内容讲解给他/她。Smart Touch算法的长期目标是希望可以达到像用户旁边的明眼人一样转达页面内容。”喻纯说，“目前版本上不同界面的盲键是根据界面内容按规则变化的，随着我们算法的继续改进，以后界面的交互盲键也会自动生成，这样可以支持更多的手机应用。”
低成本惠及弱势人群
“视障用户去应用商店下载运行Smart Touch APP后，第一次需要先根据提示在手机界面相应位置贴上‘盲键’按钮，然后就可以使用Smart Touch 提供的功能了。”
落到实用性，赵晨表示盲键的成本非常低，“我们目前使用的是普通的硅胶膜，很便宜成本很低，这样才可以使大多数视障用户可以用得上用得起，更重要的创新是背后的AI算法。以后我们会对这个盲键进行更多的触感设计，让它有更清晰的触觉反馈，满足更多的应用程序的需要。未来可以免费发放给视障用户使用”。
触觉是人与环境、人与人交互的一个重要通道，也是视障用户主要的信息通道，赵晨表示：“希望我们的技术创新不但服务于大众用户，也可以帮助像视障用户这样的弱势或少数群体，让他们的生活更愉快些。从另外一个角度，电话发明的初衷是为了帮助聋哑人，今天成为人人不可或缺的一个设备。从长远看来，我们希望为视障用户提供的技术以后也能逐步惠及大众。”
（责任编辑：王蔚）
*免责声明： 凡本网注明“来源：XXX(非神州瞭望网)”的作品，均转载其它媒体，转载目的在于传递更多信息，并不代表本网赞同其观点和对其真实性负责。若内容涉及投资建议，仅供参考勿作为投资依据。本网站无法鉴别所上传图片或文字的知识版权，如果侵犯，请及时通知我们，本网站将在第一时间及时删除。
-
- AI应用场景多元化，落地与挑战中寻找产业AI化的最优解
-
10月26日,《2021-2022中国人工智能计算力发展评估报告》(以下简称:报告)在AICC2021人工智能计算大会上发布,旨在通过宏观经济、技术成熟度、AI劳动供给、行业及地域四大方面综合考量和评估我国
2021-11-01
-
- 用AI赋能智能制造转型升级
-
中业科技成立10余年来逐渐发展成为一家NLP（自然语言处理技术）及应用的人工智能公司，并在智能制造领域取得突破。未来是AI的天下，AI不仅能用于互联网社交，还能在物联网和制造业等领
2021-10-25
-
- 技术与场景深度融合 谱就AI大时代繁荣生态图谱
-
锁定重大产业方向，设立以头部企业为依托的开放创新平台，让他们在国家人工智能创新体系中发挥引领作用，是国家新一代人工智能开放创新平台设立的关键诉求。 随着国家新一代人工智能
2021-10-21
-
- 着力推动虚拟现实产业高质量发展
-
新华社南昌10月19日电 2021世界VR产业大会云峰会开幕式19日在江西南昌举行，国务委员王勇出席并致辞。他强调，要以习近平新时代中国特色社会主义思想为指导，全面贯彻党中央、国务院决策
2021-10-20
-
- 世界VR产业大会发布中国虚拟现实产业重要成果
-
10月19日，由工业和信息化部、江西省人民政府主办的2021世界VR产业大会云峰会在江西南昌开幕。本次大会以VR让世界更精彩融合发展创新应用为主题，设立奥地利和韩国两个海外分会场，吸引
2021-10-20
-
- 传统行业想获得AI加持，为何这么难
-
AI技术要实现应用，首先数据要达到一定的体量，此外算力也要能支持大规模的模型训练，而后算法方面需要达到一定的精度，端侧算力也要具备一定的推理能力。 之所以目前只有消费互联网
2021-10-18
-
- 山东移动九大模型助力精准“打猫”
-
近年来，山东移动将防范打击电信网络诈骗作为我为群众办实事的具体举措，持续深化开展春雷断卡行动，推动构建清朗的网络空间环境。 今年以来，依托九大模型精准识别，山东公司已累计
2021-09-29
-
- 敲黑板啦，关于5G网络的重要提示
-
敲黑板啦~~随着技术更新迭代，越来越多的人开始用5G手机，请注意：使用5G手机却没有打开5G开关，那用的仍旧是4G网络哦~ 这样的设置步骤，你一定要清楚明了 对绝大多数人来说，睡觉前做的
2021-09-29
-
- 2021国家机器人发展论坛在深圳召开
-
2021年9月24-25日,以创新湾区智造,跨界融合发展为主题的2021国家机器人发展论坛在深圳隆重召开。此次国家机器人发展论坛的举办是学会积极响应中国科协关于开展科创中国品牌工作号召的具体
2021-09-29
-
- 知道创宇入选第九届CNCERT国家级网络安全应急服务支撑单位
-
9月27日下午，第九届CNCERT网络安全应急服务支撑单位授牌仪式在世界互联网大会的互联网之光博览会举办，知道创宇创始人兼CEO赵伟等13家国家级支撑单位代表出席此次授牌仪式。 知道创宇在
2021-09-29