双11当大家忙着买买买的时候,在上海梅赛德斯奔驰文化中心同期举行的阿里巴巴技术展会上,一张小小的手机膜引起现场媒体的关注。
视障志愿者梦琪在现场熟练地通过手机屏幕上的6个盲键,分别以手指和耳朵交互的方式在淘宝app下了一笔双11订单:"以前,购买一件商品,大家往往需要5-10分钟的时间,而且规格还经常选不对,但有了这项技术,1-2分钟就可以完成一项准确的购买行为" 她说道。


当视障志愿者李梦琪在现场使用Smart Touch技术进行在线购物演示时,马老师说:"Cool"
这项新的盲人触感反馈技术Smart Touch,是由阿里巴巴人机自然交互实验室联合清华大学推出的一项人机交互研究新成果,载体就是一张"屏幕保护膜",上面有支持可以触觉交互的"盲键"。通过低成本的屏幕盲键按钮提供触觉,轻松完成购物、移动支付等功能。一枚低成本的AI盲键,首次打通了语音和触感两大感官系统,为盲人朋友更好地"玩转智能手机"提供了新的可能。
来看看志愿者梦琪使用Smart Touch的完整过程和感受吧。

弥补语音交互的不足
目前的智能手机界面上有大量的图标,且大多数图标是一张图片加文字,视障人士在使用一般的读屏软件时常常要访问大量不需要的元素。和现有的技术相比,Smart Touch不单提供语音交互,还提供基于界面内容理解的触觉盲键。通过自动理解页面信息的智能算法,提取界面的语义和主要功能,再以符合视障用户心理模型的方式映射到触觉盲键按钮上,最终实现盲键功能在不同页面的功能变化,为用户提供更高效更准确的体验。

耳朵也可以"发号施令"
Smart Touch不仅支持手指触摸的方式,还可以通过耳朵触摸来完成人机交互。尤其在公众场合,视障者可以在听取语音讲解之后,直接通过耳朵动作来完成接电话、在线购物和移动支付等场景,避免了语音*放播**带来的隐私问题,同时单手操作也更快捷更方便。"将耳朵贴上去就可以完成付款,付了多少,余额多少都清清楚楚。我们感受到隐私保护,心里非常有安全感",李梦琪谈到使用Smart Touch之后的感受时说道。

低成本惠及更多人群
为了让大多数视障用户可以用得上用得起,目前Smart Touch使用的是普通的硅胶膜,成本很低,大约0.25-1元左右。最有价值的创新其实就是背后的AI算法。
据阿里巴巴达摩院人机自然交互实验室研究员赵晨介绍,目前Smart Touch主要在淘宝和支付宝app上进行技术测试,我们还在对这个盲键进行更多的触感设计,让它有更清晰的触觉反馈,满足更多智能手机以及应用程序的使用场景,同时也邀请了包括李梦琪在内的100位视障者参与体验并提供反馈,并未来计划免费发放给更多视障用户使用。
"我们希望技术创新不但服务于大众用户,也可以帮助像视障用户这样的弱势或少数群体,让更多人可以不用高昂的费用体验到最先进的技术。"
同时对于这项新成果,背后的技术人员们其实有着更大的野心: "从另外一个角度,电话发明的初衷是为了帮助聋哑人,今天成为人人不可或缺的一个设备。从长远看来,我们希望为视障用户提供的技术以后也能逐步惠及大众。"
嗯,这就是一张"手机膜"里藏着的暖暖用心!!