Skip to main content
QUICK REVIEW

[论文解读] Bi-Directional Cascade Network for Perceptual Edge Detection

Jianzhong He, Shiliang Zhang|arXiv (Cornell University)|Feb 28, 2019
Advanced Neural Network ApplicationsComputer Science参考文献 61被引用 38
一句话总结

BDCN 引入带层级监督的双向级联以及尺度增强模块,学习浅层网络中的多尺度边缘表示,在 BSDS500、NYUDv2 和 Multicue 上达到最先进的边缘检测性能。

ABSTRACT

Exploiting multi-scale representations is critical to improve edge detection for objects at different scales. To extract edges at dramatically different scales, we propose a Bi-Directional Cascade Network (BDCN) structure, where an individual layer is supervised by labeled edges at its specific scale, rather than directly applying the same supervision to all CNN outputs. Furthermore, to enrich multi-scale representations learned by BDCN, we introduce a Scale Enhancement Module (SEM) which utilizes dilated convolution to generate multi-scale features, instead of using deeper CNNs or explicitly fusing multi-scale edge maps. These new approaches encourage the learning of multi-scale representations in different layers and detect edges that are well delineated by their scales. Learning scale dedicated layers also results in compact network with a fraction of parameters. We evaluate our method on three datasets, i.e., BSDS500, NYUDv2, and Multicue, and achieve ODS Fmeasure of 0.828, 1.3% higher than current state-of-the art on BSDS500. The code has been available at https://github.com/pkuCactus/BDCN.

研究动机与目标

  • 激励多尺度边缘检测以处理不同物体尺度的边缘。
  • 提出一个双向级联网络(BDCN),对每一层进行尺度特定边缘的监督。
  • 引入使用膨胀卷积的尺度增强模块(SEM),以丰富多尺度表示。
  • 以浅层网络实现具有竞争力的边缘检测性能。
  • 在 BSDS500、NYUDv2 和 Multicue 数据集上显示出改进。

提出的方法

  • 引入带嵌入 SEM 的增量检测块(ID Block),以产生尺度目标的边缘预测。
  • 在训练过程中使用双向级联在浅层向深层和从深层向浅层传播边缘预测(S2D 和 D2S);通过融合层进行组合。
  • 用两个层特定监督(s2d 和 d2s)以及一个总体融合损失来训练每个 ID Block。
  • SEM 应用多路并行膨胀卷积,膨胀率各不相同,以在一个块内捕获多尺度上下文。
  • 形式化多项损失:L = w_side * L_side + w_fuse * L_fuse,L_side 包括 P_s^{d2s} 对 Y_s^{d2s} 和 P_s^{s2d} 对 Y_s^{s2d}。
  • 真值被分解为尺度特定的边缘图和互补监督 Y_s^{s2d} 与 Y_s^{d2s},以促进尺度专注学习。

实验结果

研究问题

  • RQ1分层特定、尺度专用的监督是否能在多尺度上提升边缘检测?
  • RQ2双向级联是否能在不依赖更深网络的情况下实现有效的尺度专门化?
  • RQ3增强 SEM 的浅层网络是否能达到具有竞争力或更优的边缘检测性能?
  • RQ4SEM 参数(膨胀率和膨胀次数)如何影响多尺度边缘学习?
  • RQ5BNDCN 变体(有/无 SEM、不同的级联方向)在标准数据集上的性能是否不同?

主要发现

  • 含 SEM 的 BDCN 在 BSDS500 上达到最先进的 ODS F-measure(0.828),超越之前方法 1.3% 。
  • BDCN 在带 trainval 数据的 BSDS500 上在人类感知之上(ODS 0.828 vs 0.803)。
  • BDCN 在 NYUDv2 和 Multicue 上取得竞争性结果,通常在 ODS、OIS 和 AP 指标上优于竞争方法。
  • 参数更少的 BDCLN(BDCN)也表现强劲,例如 5-block 模型约 16M 参数,在 BSDS500 上达到 0.82 ODS。
  • 消融显示将 SEM 与双向级联结合可获得最佳结果,且 SEM 对浅层网络的多尺度表示尤为关键。
  • BDCN 对深度减小具有鲁棒性,在参数显著少于 HED 与 RCF 的情况下维持竞争性 ODS。

阅读本论文

在 Nubint 阅读器中打开原文,边读边就任意段落提问。

在 Nubint 中阅读本论文

本解读由 AI 根据论文原文生成,引用前请核对原文。