[論文レビュー] Exploiting Alternating DVS Shot Noise Event Pair Statistics to Reduce Background Activity

Brian McReynolds, Rui Graca+1 more|arXiv (Cornell University)|Apr 7, 2023

CCD and CMOS Imaging Sensors被引用数 6

ひとこと要約

本論文では、ピクセルリセットロジックに起因するSNEの反対極性ペアとしての発生傾向を活用することで、低照度下におけるダイナミックビジョンセンサー（DVS）のショットノイズイベント（SNE）レートを低減する2つの新しいバイアス技法を提案する。適合期間の延長またはON/OFFしきい値の不均衡化により、感度および時間分解能を損なわずにSNEレートを50%および80%低減する。

ABSTRACT

Dynamic Vision Sensors (DVS) record "events" corresponding to pixel-level brightness changes, resulting in data-efficient representation of a dynamic visual scene. As DVS expand into increasingly diverse applications, non-ideal behaviors in their output under extreme sensing conditions are important to consider. Under low illumination (below ~10 lux) their output begins to be dominated by shot noise events (SNEs) which increase the data output and obscure true signal. SNE rates can be controlled to some degree by tuning circuit parameters to reduce sensitivity or temporal response bandwidth at the cost of signal loss. Alternatively, an improved understanding of SNE statistics can be leveraged to develop novel techniques for minimizing uninformative sensor output. We first explain a fundamental observation about sequential pairing of opposite polarity SNEs based on pixel circuit logic and validate our theory using DVS recordings and simulations. Finally, we derive a practical result from this new understanding and demonstrate two novel biasing techniques to reduce SNEs by 50% and 80% respectively while still retaining sensitivity and/or temporal resolution.

研究の動機と目的

• 低照度下におけるダイナミックビジョンセンサー（DVS）のSNEレートの上昇という課題に取り組み、信号対ノイズ比の低下とデータ負荷の増加を緩和する。
• DVS出力における反対極性SNEのペアリング行動の背後にある原因を解明し、これまでに説明されず、かつ活用されていなかった要因を特定する。
• 感度および時間分解能を維持しながら、ノイズ統計を直接操作する実用的でオンチップのバイアス戦略を開発する。
• ノイズ低減が、実際の明るさ変化の検出能力を損なわないことを実証し、暗所応用への広範な適用を可能にする。

提案手法

• SNEの発生に寄与するDVSピクセルの基本的回路動作を分析し、イベント発生後に自己タイミングでリセットされるメカニズムに注目し、そのリセットレベルがイベントを引き起こした信号レベルに近づくことを見出す。
• 記録データとシミュレーションを通じて、リセットメカニズムが反対極性イベントの発生確率を高めるため、SNEが主に反対極性ペアとして発生することを観察・検証する。
• 第一の技法を提案：適合期間を延長することで、リセットレベルを前回イベントの信号レベルから分離し、直前の反対極性ノイズイベントの発生確率を低下させる。
• 第二の技法を提案：ONおよびOFFしきい値を意図的に不均衡化（例：θ_ON ≈ 0.3 × θ_OFF）することで、リセットレベルがより感度の高いしきい値に近づくようにし、ノイズペアリングのサイクルを破壊する。
• 実際のDAVIS346センサーデータと、Gaussian白色ノイズを注入して現実的なSNE統計を再現するv2e DVSシミュレータを用いて、両手法の有効性を検証する。
• 有効な分離を実現するための理論的条件を導出：適合期間 ≥ 1/(2πf₃dB)、ここでf₃dBはフォトレセプタの3dBコーナ周波数である。

Fig. 1: Typical DVS pixel circuit schematic. The active logarithmic photoreceptor front-end ( A-B ) drives a cap-feedback change amplifier ( C ) with output $V_{diff}$ . When $V_{diff}$ deviates by either an ON or OFF threshold, comparators ( D ) report an event, and after a finite refractory period

実験結果

リサーチクエスチョン

• RQ1 低照度下において、独立したONおよびOFFしきい値設定がなされているにもかかわらず、なぜDVSにおけるショットノイズイベントが主に反対極性ペアとして発生するのか？
• RQ2 ピクセルのリセットメカニズムは、SNEの統計的ペアリングにどのように寄与しているのか？ そして、この挙動はノイズ低減に活用可能か？
• RQ3 センサーバイアスパrameterを操作することで、感度や時間分解能を損なわずSNEレートを低減可能か？
• RQ4 実際のDVSハードウェアにおいて、適合期間の延長およびしきい値の不均衡化によって達成可能なノイズ低減の定量的限界は何か？

主な発見

• 10 luxの照度下で実際のDVS記録において、SNEは90%を超える割合で反対極性ペアとして発生しており、主にピクセルの自己タイミングリセットメカニズムに起因する。
• 適合期間を1/(2πf₃dB)を超えて延長することで、リセットレベルが前回イベントの信号レベルから分離され、全照度レベルでSNEレートが50%以上低減される。
• ONおよびOFFしきい値を意図的に不均衡化（特にθ_ON/θ_OFF ≈ 0.3）することで、総SNEレートは最大80%低減され、ON変化への感度は維持される。
• ISIヒストグラムには、イベントペア分布の明確なシフトが観察され、両手法が反対極性ノイズイベントの繰り返しサイクルを効果的に遮断していることが確認される。
• 提案手法は既存のDVSハードウェアと互換性があり、オフチップ処理や複雑なノイズ除去パイプラインを必要とせず、オンチップバイアス調整での実装が可能である。
• v2e DVSシミュレータは、イベント生成ブロックの前段にGaussian白色ノイズを注入した場合にのみ、実際のSNE統計を正確に再現するため、ノイズモデリング手法の妥当性が裏付けられる。

Fig. 2: Recorded DAVIS346 SNE s under 10 mlux illumination with high bandwidth biases. A: Per pixel ON and OFF SNE rates are nearly balanced, even for pixels with an abnormally high noise rates. B: ISI histograms reveal that over 90% of pixel SNE pairs are opposite polarity and occur at shorter time