[论文解读] Comparing different qualitative methods to understand user experience in Saudi Arabia

Aisha Ahmed Alarfaj, Ellis Solaiman|arXiv (Cornell University)|Jan 1, 2022

Knowledge Management and Sharing被引用 2

一句话总结

本研究比较了在沙特阿拉伯社交电商平台中用于理解用户体验的定性方法——访谈、共同设计工作坊和批判性工作坊。研究发现，基于文本的访谈更符合家庭为中心的沟通文化偏好，而工作坊能提供更深入的洞察，但需要精心的引导，为此提供了跨文化人机交互研究的实际指导建议。

ABSTRACT

The HCI field has seen a growing body of qualitative research, making use of a wide range of activities and methods. Interviews and workshops are some of the main techniques used to help understand user needs and to conduct co-design activities with them. However, these methods might be conducted in various ways and have different advantage and disadvantages. An important aspect influencing the types of activities and methods used is the culture of research participants. This paper aims to compare the research methods conducted in the context of the Saudi Arabian culture. It provides a reflection on the methods used to understand user needs when designing social commerce platforms, including interviews, co-design workshops and critique design workshops. We found that each method has its positives and negatives in terms of user preferences, and can help to obtain useful information at different levels of detail. For example, conducting semi-structured interviews by text was preferred by participants who are at home with their families. However, they can be slower than other methods.

研究动机与目标

• 探究不同定性方法在沙特阿拉伯文化背景下的用户体验理解表现。
• 识别在沙特参与者中开展访谈与工作坊时面临的文化与实际挑战。
• 比较文本、语音、面对面及在线访谈在捕捉用户需求方面的优劣。
• 评估共同设计与批判性工作坊在生成可操作设计洞察方面的有效性。
• 为在沙特阿拉伯开展文化敏感的定性人机交互研究制定实用指导原则。

提出的方法

• 采用结合用户中心设计与共同设计方法的混合式定性研究方法。
• 共开展五项研究：买家的文本与语音访谈，卖家的面对面与文本访谈，结合日记与绘图任务的面对面访谈，使用界面截图与卡片分类法的共同设计工作坊，以及使用原型图的批判性工作坊。
• 采用半结构化访谈，辅以定制化提示，包括分享图片与地图，以激发详细的用户体验反馈。
• 通过结构化活动引导工作坊，促进参与与创意生成，确保文化适宜性。
• 应用SUS（系统可用性量表）评估感知可用性，尽管指出其在原型测试中的局限性。
• 向参与者提供补偿选择（礼品卡或巧克力），以支持伦理且符合文化规范的参与。

实验结果

研究问题

• RQ1 在沙特阿拉伯文化背景下，不同访谈形式（文本、语音、面对面）如何影响参与者参与度与数据质量？
• RQ2 在与沙特参与者（尤其是女性）开展面对面访谈与工作坊时，面临哪些文化与实际挑战？
• RQ3 共同设计与批判性工作坊在揭示用户需求及改进社交电商平台设计方面的有效性如何？
• RQ4 每种定性方法在捕捉沙特阿拉伯用户细微体验方面的关键优势与局限是什么？
• RQ5 研究人员如何调整定性方法以尊重文化规范，同时确保数据深度与参与者包容性？

主要发现

• 基于文本的访谈受到与家人同住的参与者青睐，表明其与私密书面沟通的文化偏好相契合。
• 与沙特参与者进行面对面访谈需谨慎考虑文化因素，特别是性别隔离问题，本研究因此仅限女性参与。
• 共同设计工作坊通过卡片分类与界面草图等协作活动产生丰富洞察，但需积极引导以确保所有参与者参与。
• 批判性工作坊通过与原型图互动，帮助用户识别缺失功能与可用性问题，但部分参与者过度关注颜色等视觉细节。
• 工作坊与访谈需要研究人员持续参与以维持专注并确保所有参与者贡献，尤其在小组环境中。
• 日记研究需要提醒，因为参与者常忘记提交记录，凸显了跟进机制的必要性。