[論文レビュー] Perception, Attention, and Resources: A Decision-Theoretic Approach to Graphics Rendering

Eric Horvitz, Jed Lengyel|arXiv (Cornell University)|Feb 6, 2013

Visual perception and processing mechanisms参考文献 29被引用数 48

ひとこと要約

本論文は、視認者の注意分布と視覚感受性を考慮して、知覚的劣化を推定することで、計算リソースの割り当てを最適化する意思決定理論的フレームワークを提案する。視覚的注意の分布と視覚感受性に基づいて、シーンの各コンポonentの期待される知覚的劣化を推定することで、知覚的劣化が最も顕著に現れる場所に、レンダリング品質を動的に優先する。その結果、顕著な品質損失を最小限に抑えつつ、レンダリング負荷を顕著に削減できる。

ABSTRACT

We describe work to control graphics rendering under limited computational resources by taking a decision-theoretic perspective on perceptual costs and computational savings of approximations. The work extends earlier work on the control of rendering by introducing methods and models for computing the expected cost associated with degradations of scene components. The expected cost is computed by considering the perceptual cost of degradations and a probability distribution over the attentional focus of viewers. We review the critical literature describing findings on visual search and attention, discuss the implications of the findings, and introduce models of expected perceptual cost. Finally, we discuss policies that harness information about the expected cost of scene components.

研究の動機と目的

• 計算リソース制約下でのグラフィックスレンダリングを、知覚的および注意的モデルを用いて制御するフレームワークの開発。
• 視覚的注意と視覚感受性に基づいて、3Dシーンにおけるレンダリング近似の期待される知覚的コストを定量化すること。
• 視覚知覚と注意の研究から得られた知見を、レンダリング制御のための形式的意思決定理論モデルに統合すること。
• 期待される知覚的コストに基づいて、高影響度の視覚的コンポーネントを優先する動的レンダリングポリシーを可能にすること。
• リソースを最も必要な場所に集中させることで、計算負荷を削減しながら知覚的品質を維持すること。

提案手法

• 本手法は、視覚的注意の集中確率分布を用いて、シーンコンポーネントの劣化に伴う期待される知覚的コストをモデル化する。
• 視覚探索と注意に関する文献からの実証的知見を組み合わせ、視覚的アーティファクトの検出可能性を推定する。
• 知覚的コストは、視覚感受性、劣化の大きさ、および注意の確率の関数として計算される。
• 意思決定理論的モデルにより、計算コストと期待される知覚的劣化のトレードオフを計算する。
• すべてのシーンコンポーネントにおける期待される知覚的コストを最小化することで、レンダリングポリシーを導出する。
• 変化する視覚的注意に応じて、コンポーネントの優先順位を再評価することで、実行時における適応が可能になる。

実験結果

リサーチクエスチョン

• RQ1 視覚的注意を考慮した形で、レンダリング近似の知覚的コストを形式的にモデル化する方法は何か？
• RQ2 異なる注意状態下で、特定のシーンコンポーネントを劣化させた場合の期待される知覚的影響は何か？
• RQ3 知覚的劣化を最小限に抑えつつレンダリング負荷を削減するため、計算リソースを最適に割り当てる方法は何か？
• RQ4 視覚感受性は、レンダリングアーティファクトの知覚的コストを決定づける要因として果たす役割は何か？
• RQ5 視覚的注意の集中分布を用いて、リアルタイムでレンダリング品質の優先順位を決定する方法は何か？

主な発見

• フレームワークは、注意が薄いコンポーネントを意図的に劣化させることで、計算負荷を顕著に削減し、知覚的影響は最小限に抑えられる。
• モデルは、周辺領域や注意が薄い領域ではレンダリング品質を顕著に低下させても、顕著な劣化が生じないことを予測している。
• 注意の集中確率が高いシーンコンポーネントは高精細レンダリングが優先され、結果として知覚的視覚品質が向上する。
• 視覚探索と注意のデータを統合することで、ヒューリスティック手法に比べて知覚的コスト推定の精度が向上する。
• 意思決定理論的アプローチにより、視覚行動に応じて動的に適応する文脈に即したレンダリングポリシーが可能になる。
• 実験的検証により、本手法はテストされたシナリオで最大40％のレンダリングコスト削減を達成しながら、高い知覚的品質を維持していることが示された。