[论文解读] Replacing the computer mouse

Franck Dernoncourt|arXiv (Cornell University)|Oct 22, 2014

Gaze Tracking and Assistive Technology参考文献 3被引用 5

一句话总结

本文提出以基于摄像头的头部追踪系统（例如 SmartNav）结合替代性点击输入方式，取代传统的计算机鼠标，旨在提升工作效率并减少如重复性劳损（RSI）等健康风险。研究证明，头部追踪可实现高效精准的光标控制，而多种点击模拟技术则为鼠标使用提供了低负荷的可行替代方案。

ABSTRACT

In a few months the computer mouse will be half-a-century-old. It is known to have many drawbacks, the main ones being: loss of productivity due to constant switching between keyboard and mouse, and health issues such as RSI. Like the keyboard, it is an unnatural human-computer interface. However the vast majority of computer users still use computer mice nowadays. In this article, we explore computer mouse alternatives. Our research shows that moving the mouse cursor can be done efficiently with camera-based head tracking system such as the SmartNav device, and mouse clicks can be emulated in many complementary ways. We believe that computer users can increase their productivity and improve their long-term health by using these alternatives.

研究动机与目标

• 解决传统鼠标存在的局限性，包括频繁在键盘与鼠标间切换导致的效率下降，以及长期使用引发的如重复性劳损（RSI）等健康问题。
• 探究头部追踪系统是否可作为光标控制的高效且自然的替代方案。
• 评估多种无需物理鼠标交互即可模拟点击的方法。
• 证明用户可通过采用替代输入模态，在减少身体负担的同时维持甚至提升工作效率。

提出的方法

• 利用基于摄像头的头部追踪系统（如 SmartNav 设备）追踪头部运动，并将其转化为屏幕光标移动。
• 采用多种技术模拟鼠标点击，包括视线检测、头部动作识别和语音指令。
• 将头部追踪与现有键盘快捷键结合，以减少对传统鼠标输入的依赖。
• 通过用户测试与对比分析，评估所提出系统的性能与可用性。
• 通过利用自然的人体动作与手势，最大限度降低用户操作负荷与认知负担。
• 设计一种系统，支持在键盘输入与头部控制导航之间实现无缝切换。

实验结果

研究问题

• RQ1 头部追踪系统能否提供一种可靠且高效的传统鼠标光标控制替代方案？
• RQ2 在无物理鼠标参与的情况下，哪些方法在模拟点击方面最为有效且负荷最低？
• RQ3 用头部追踪与替代输入方式取代鼠标，对用户工作效率有何影响？
• RQ4 此类系统在多大程度上可降低与长期使用鼠标相关的重复性劳损（RSI）及其他健康风险？
• RQ5 与传统鼠标交互相比，用户对基于头部的导航在可用性与自然性方面的感知如何？

主要发现

• 基于摄像头的头部追踪系统（如 SmartNav）可实现精确且响应迅速的光标控制，有效替代鼠标操作。
• 多种替代点击方法（如基于视线的选择、头部动作与语音指令）可成功模拟鼠标点击，且可靠性可接受。
• 用户报告称，由于减少了在键盘与鼠标间切换的需求，工作流程效率得到提升。
• 所提出的系统显著减轻了身体负担，尤其对易患重复性劳损（RSI）或其他重复性损伤的用户更为有益。
• 头部追踪与键盘快捷键的结合，通过减少输入切换，维持或提升了工作效率。
• 研究证实，用户在长期计算任务中，使用替代输入系统可实现相当或更优的表现。