[论文解读] SWift -- A SignWriting improved fast transcriber

Claudia S. Bianchini, Fabrizio Borgia+2 more|arXiv (Cornell University)|May 21, 2012

Hearing Impairment and Communication参考文献 7被引用 10

一句话总结

SWift 是一款模块化、用户友好的 SignWriting 编辑器，旨在通过直观的字形组合方式加速手语表达的创建。通过用多条件、交互式的选择框系统取代线性的菜单导航，它减少了用户操作负担，提升了聋人用户和语言学家的可访问性，在聋人用户初步评估中表现出高可用性。

ABSTRACT

We present SWift (SignWriting improved fast transcriber), an advanced editor for computer-aided writing and transcribing using SignWriting (SW). SW is devised to allow deaf people and linguists alike to exploit an easy-to-grasp written form of (any) sign language. Similarly, SWift has been developed for everyone who masters SW, and is not exclusively deaf-oriented. Using SWift, it is possible to compose and save any sign, using elementary components called glyphs. A guided procedure facilitates the composition process. SWift is aimed at helping to break down the "electronic" barriers that keep the deaf community away from Information and Communication Technology (ICT). The editor has been developed modularly and can be integrated everywhere the use of SW, as an alternative to written vocal language, may be advisable.

研究动机与目标

• 解决在 ICT 环境中创建和使用 SignWriting (SW) 时缺乏有效数字工具的问题。
• 克服现有 SW 编辑器（如 SignMaker (SM)）在可用性方面的障碍，特别是导航缓慢和字形难以发现的问题。
• 开发一种模块化、可扩展的编辑器，支持聋人用户和语言学家通过 SW 组合和保存复杂手语符号。
• 通过减少对视频的依赖，实现基于文本的交互、搜索和笔记功能，提升手语书写的可访问性。
• 通过定制的可用性研究，使用手语视频和基于手语的问卷对界面进行验证，研究对象为聋人用户。

提出的方法

• 该系统采用一种新颖的字形选择界面，基于多个独立的选择框，分别对应不同的字形特征（例如，手部形态、旋转角度、手指数量）。
• 每个选择框为特定的手语组成部分显示兼容选项，实时过滤功能会随着选择的更改即时更新字形面板。
• 该界面通过允许用户以任意顺序选择特征，避免了线性菜单层级，从而降低认知负荷和导航时间。
• 中央的“手语显示”区域支持实时拖放已选字形，提供即时视觉反馈。
• 系统集成模块化架构，支持与更广泛的网络应用和在线学习平台集成。
• 可用性研究采用“自言自语”法，使用投影仪记录手语表达和屏幕操作，任务和问卷以手语和书面语言双语呈现。

实验结果

研究问题

• RQ1 如何重新设计 SignWriting 编辑器，以减少聋人用户的手语符号导航时间并提升字形的可发现性？
• RQ2 多条件、非线性的字形选择界面在手语创作中，相较于传统层级菜单，其优越性在多大程度上得以体现？
• RQ3 是否可以通过手语视频和基于手语的问卷对聋人用户定制的可用性评估框架，获得可靠且可操作的反馈？
• RQ4 聋人用户如何看待一种通过结构化、基于特征的选择方式支持复杂手语符号创作的 SW 编辑器的可用性？
• RQ5 哪些界面模式最能支持高效且直观的手语创作，同时保持 SignWriting 的表现力丰富性？

主要发现

• 与 SignMaker 中的层级菜单相比，多条件选择框界面显著减少了导航时间和认知负荷。
• 聋人用户倾向于先选择单一特征，再浏览约 400 个结果字形，表明需要改进对多选功能的视觉提示。
• 主页上缺少可见字形误导了用户，表明用户对先前工具（如 SignMaker）的界面预期影响了可用性感知。
• 可用性研究证实了通过手语问卷获得的回答具有高度可靠性，参与者对测试方式和最终评估表示高度赞赏。
• 界面控件的错误率极低，表明核心交互元素（如废纸篓图标和导航按钮）的设计非常有效。
• 总体而言，评估结果表明系统具有出色的可用性和用户满意度，趋势清晰，支持对界面和交互模型的进一步优化。