当前位置: 首页 >动态要闻 >科技前沿

酷!教你用“眼神儿”玩手机

发布时间:2022-04-28 浏览次数:238

凡是你的眼神能触及到的地方,手机屏幕上都会呈现出对应的实时反馈。

是不是很酷很帅?但这并不是科幻。

以上场景实现来自来自卡内基梅隆大学(Carnegie Mellon University)人机交互学院的科研团队,他们开发了一种名为 EyeMU 的工具,该工具允许用户通过凝视控制(gaze control)和简单的手势操控智能手机。

相关研究论文以“EyeMU Interactions: Gaze + IMU Gestures on Mobile Devices”为题,发表在 ICMI 2021 会议上。

当前,随着智能手机功能的愈发强大,人们可以使用手机做越来越多、越来愈复杂的事情,而不仅仅是观看影视剧、编辑视频、阅读新闻、社交和打游戏等。

但是,长期不离手的手机,依然需要人们使用单/双手和语音命令来操作。在一定意义上,有时候会显得不是很方便。

那么,有没有一种更自然的人机交互方式呢?

Andy Kong 是卡内基梅隆大学计算机科学专业的一名大四学生,一直以来便对眼球追踪(eye-tracking)技术非常感兴趣,但由于商用版本过于昂贵,就自己动手编写了一个程序,利用笔记本电脑内置的摄像头跟踪用户的眼睛,进而在屏幕上移动光标。

在 Kong 看来,如今的手机只有在我们要求它们做事情时才会做出回应,无论是通过语音、轻敲,还是点击按钮等。如果手机可以通过分析用户的目光,或借助其他生物识别技术来预测用户想要做什么,将大有用处。

正是这一个“廉价”的程序,为 EyeMU 的最终实现打下了基础。

在随后的研究工作中,Kong 及其同事通过使用谷歌的 Face Mesh 工具来研究用户注视屏幕不同区域的注视模式,并绘制出了地图数据,从而改进了这个早期原型。

之后,他们开发了一个凝视预测器(gaze predictor),这一工具使用智能手机的前置摄像头锁定用户正在观看的内容,并将其标记。

例如,用户可以通过长时间查看某一内容,将其标记为目标,然后向左滑动手机来关闭它,或向右滑动手机来响应;同时,用户还可以通过把手机拉得更近来放大图片。

尽管 EyeMU 的功能很酷,但在面向消费者之前,依然还有一些关键限制因素需要克服,比如凝视模块的准确性不足(低于目前专用的眼睛追踪器),仍需在更多设备上进行测试,以及可能比较废电池等。

另外,学术君也不禁想,如此酷炫的操作,会不会更费眼睛呢?

但是,随着未来持续进行的优化设计,这一工具或许真的可以飞入寻常百姓家。

到那时,眼睛一动,就能玩转手机了。

友情链接:

 

主办单位:盘锦高新技术产业开发区管理委员会综合办公室 版权所有:盘锦市人民政府办公室

网站标识码:2111030025 ICP备案序号:辽ICP备2023000127号-1 辽公网安备21110302000162号

技术支持单位:0427.com 联系电话:0427-2875687