[論文レビュー] Culture and International Usability Testing: The Effects of Culture in Structured Interviews

Ravikiran Vatrapu, Manuel A. Pérez-Quiñones|ArXiv.org|May 13, 2004

Usability and User Interface Design参考文献 28被引用数 23

ひとこと要約

本研究は、国際的ユーザビリティテストにおける構造化インタビューの効果に、文化的背景がどのように影響するかを調査する。インド人参加者を対象とした制御実験では、インド系とアングロ・アメリカン系の2名のインタビュアーを用いて、参加者が同文化のインタビュアーに対してより多くのユーザビリティ問題を特定し、より多くの提案をしたことが明らかになった。これは、文化的な一致がユーザビリティテストにおけるインタビュー効果を顕著に高めることを示している。

ABSTRACT

The global audience for software products includes members of different countries, religions, and cultures: people who speak different languages, have different life styles, and have different perceptions and expectations of any given product. A major impediment in interface development is that there is inadequate empirical evidence for the effects of culture in the usability engineering methods used for developing user interfaces. This paper presents a controlled study investigating the effects of culture on the effectiveness of structured interviews in usability testing. The experiment consisted of usability testing of a website with two independent groups of Indian participants by two interviewers; one belonging to the Indian culture and the other to the Anglo-American culture. Participants found more usability problems and made more suggestions to an interviewer who was a member of the same (Indian) culture than to the foreign (Anglo-American) interviewer. The results of the study empirically establish that culture significantly affects the efficacy of structured interviews during international user testing. The implications of this work for usability engineering are discussed.

研究の動機と目的

• 文化的差が国際的ユーザビリティテストにおける構造化インタビューの効果に与える影響を調査すること。
• インタビュアーと参加者との文化的一致が、ユーザビリティフィードバックの質と量に与える影響を検討すること。
• 文化がユーザビリティテストの文脈におけるユーザーの参加とフィードバックに与える影響について、実証的証拠を提供すること。
• 文化的感受性を強調することで、ユーザビリティ工学の実務に貢献すること。

提案手法

• インド人参加者を対象とした2つの独立したグループを用いた制御実験を実施した。
• ウェブサイトのユーザビリティを評価するために構造化インタビューを用い、インド文化に属するインタビュアーとアングロ・アメリカン文化に属するインタビュアーをそれぞれ使用した。
• 各セッション中に参加者が報告したユーザビリティ問題と提示した提案を収集・分析した。
• 2つのインタビュアー・参加者文化グループ間で、特定されたユーザビリティ問題の数と提示された提案の数を比較した。
• テストタスクと環境の一貫性を確保するため、被験者内設計を採用した。
• 定量的指標（参加者1人あたりの問題発見数と提案数）を用いて効果を測定した。

実験結果

リサーチクエスチョン

• RQ1 インタビュアーの文化的背景が、構造化インタビュー中に参加者が特定するユーザビリティ問題の数にどのように影響するか？
• RQ2 インタビュアーと参加者との文化的一致が、ユーザビリティテスト中に参加者が提示する提案の数に影響を与えるか？
• RQ3 インタビュアーと参加者との文化的差が、ユーザビリティテストにおける構造化インタビューの効果をどの程度阻害するか？
• RQ4 参加者が自分自身の文化的背景を持つ人物からインタビューを受ける際、より率直で関与度が高いと感じられるか？
• RQ5 文化的不一致が国際的ユーザビリティテストにおけるデータ品質に与える影響は何か？

主な発見

• 同じ（インド）文化のインタビュアーと作業した参加者は、外国（アングロ・アメリカン）のインタビュアーと作業した参加者よりも、顕著に多くのユーザビリティ問題を報告した。
• 参加者は、同じ文化的背景を持つインタビュアーに対してより多くの提案をした。これは、参加者の関与度とフィードバックの質が高まっていることを示している。
• インタビュアーと参加者との文化的一致は、構造化インタビューの結果に測定可能で統計的に有意な影響を与えた。
• 本研究は、文化的差が、構造化インタビューに依存するユーザビリティテスト手法の効果を低下させることを実証的に確認した。
• 参加者は、自分自身の文化に属するインタビュアーと対話する際、より快適で会話的であり、フィードバックが豊富になった。
• これらの結果から、文化的不一致は、とりわけクロスカルチャーテストの場面で、ユーザビリティ問題の低報告を引き起こす可能性があると示唆される。