[論文レビュー] As Content and Layout Co-Evolve: TangibleSite for Scaffolding Blind People's Webpage Design through Multimodal Interaction

Jiasheng Li, Zining Zhang+5 more|arXiv (Cornell University)|Feb 22, 2026

Tactile and Sensory Interactions被引用数 0

ひとこと要約

本論文は、盲目のデザイナーがウェブページ設計において内容とレイアウトを共進化させる方法を探究し、リアルタイムのエンドツーエンドのウェブ著作を提供するマルチモーダル・タンジブルUI TangibleSite を紹介します。盲目の参加者を対象とした形成的研究がプロトタイプの設計と評価に寄与します。

ABSTRACT

Creating webpages requires generating content and arranging layout while iteratively refining both to achieve a coherent design, a process that can be challenging for blind individuals. To understand how blind designers navigate this process, we conducted two rounds of co-design sessions with blind participants, using design probes to elicit their strategies and support needs. Our findings reveal a preference for content and layout to co-evolve, but this process requires external support through cues that situate local elements within the broader page structure as well as multimodal interactions. Building on these insights, we developed TangibleSite, an accessible web design tool that provides real-time multimodal feedback through tangible, auditory, and speech-based interactions. TangibleSite enables blind individuals to create, edit, and reposition webpage elements while integrating content and layout decisions. A formative evaluation with six blind participants demonstrated that TangibleSite enabled independent webpage creation, supported refinement across content and layout, and reduced barriers to achieving visually consistent designs.

研究の動機と目的

• 盲目のデザイナーがウェブページ作成中に内容とレイアウトをどのように概念化し、整理するかを理解する。
• 内容とレイアウトの衝突を検出し、ページレベルの一貫性を維持するのに役立つ情報を特定する。
• 盲目のウェブ著作者のために、内容とレイアウトの統合編集を支援するツールを設計する。
• リアルタイムのマルチモーダルフィードバックと支援を提供する TangibleSite を開発する。
• TangibleSite が独立したウェブページ作成と反復的な改良を可能にするか評価する。

提案手法

• TangibleGrid に触発されたタンジブルデザインプローブを用いた盲目の参加者との協働デザインセッションを2回実施する。
• ビデオ、音声トランスクрипト、テーマ別分析を通じた定性的分析を行い、ワークフローとフィードバックニーズを抽出する。
• 触覚、音声、音声対話のあるアクセシブルなマルチモーダルウェブ著作プロトタイプとして TangibleSite を開発する。
• 6 名の盲目参加者を対象にエンドツーエンドのウェブページ作成と改良を評価する形成的評価を実施する。

実験結果

リサーチクエスチョン

• RQ1 RQ1: 盲目の個人はウェブページ作成中の内容とレイアウトのワークフローをどのように概念化・整理するか？
• RQ2 RQ2: ローカルな内容とレイアウトの衝突を検出し、ページレベルの一貫性を維持するのに役立つ情報は何か？
• RQ3 RQ3: 局所的な編集のグローバルなレイアウト影響を解決するために、著作ツールはどのような機能と仕組みを提供すべきか？

主な発見

• 盲目のデザイナーは内容とレイアウトの共進化を好むが、複雑さは柔軟性を低下させ、認知負荷を増大させる。
• 非視覚的なワークフローは確認と計画のために触覚を頼るが、誤解を避けるために明確な相互作用モードとフィードバックが必要。
• 監視と計画の主なチャネルは手であり、音声フィードバックを用いて内容–レイアウトの適合性の曖昧さを解決する。
• 内容容量や要素関係性についての明示的で実行可能な音声フィードバックは、記憶負担を軽減するために強く求められる。
• TangibleSite はリアルタイムのマルチモーダルフィードバックを備えたエンドツーエンドの設計をサポートし、ユーザーが独立してページを作成・改良するのを助ける。