Skip to main content
QUICK REVIEW

[论文解读] Image Transformation can make Neural Networks more robust against Adversarial Examples

Dang Duy Thang, Toshihiro Matsui|arXiv (Cornell University)|Jan 10, 2019
Adversarial Robustness in Machine Learning参考文献 32被引用 8
一句话总结

本文提出了一种简单而有效的防御方法,通过图像旋转来恢复分类准确率,以应对对抗性样本。在MNIST数据集上使用FGSM生成的对抗性样本,作者发现将对抗性图像旋转30–40度后,可将正确分类准确率恢复至99%以上,表明旋转能够破坏对抗性扰动,同时保留自然图像的特征。

ABSTRACT

Neural networks are being applied in many tasks related to IoT with encouraging results. For example, neural networks can precisely detect human, objects and animal via surveillance camera for security purpose. However, neural networks have been recently found vulnerable to well-designed input samples that called adversarial examples. Such issue causes neural networks to misclassify adversarial examples that are imperceptible to humans. We found giving a rotation to an adversarial example image can defeat the effect of adversarial examples. Using MNIST number images as the original images, we first generated adversarial examples to neural network recognizer, which was completely fooled by the forged examples. Then we rotated the adversarial image and gave them to the recognizer to find the recognizer to regain the correct recognition. Thus, we empirically confirmed rotation to images can protect pattern recognizer based on neural networks from adversarial example attacks.

研究动机与目标

  • 研究简单的图像变换(如旋转)是否能减轻对抗性样本对神经网络的影响。
  • 评估神经网络在遭受对抗性扰动及后续旋转后的鲁棒性。
  • 确定旋转是否能在不重新训练或使用复杂防御机制的情况下,恢复对抗性样本的正确分类。
  • 提供实证证据,证明几何变换可作为对抗性攻击的轻量化防御机制。

提出的方法

  • 使用快速梯度符号法(FGSM)在MNIST上生成对抗性样本,扰动大小为ε。
  • 对对抗性图像在0°至90°的多个角度应用旋转变换,以评估分类恢复效果。
  • 使用预训练的LeNet-5模型评估旋转前后的分类概率。
  • 测量原始图像、对抗性图像和旋转后图像的分类准确率,以比较性能。
  • 选择分类准确率最高的最优旋转角度(如39°、28°)。
  • 分析预测类别概率的变化,确认对抗性影响已被中和。

实验结果

研究问题

  • RQ1图像旋转能否有效恢复神经网络中对抗性样本的正确分类?
  • RQ2对抗性图像的分类准确率在何种旋转角度达到峰值?
  • RQ3旋转是否在中和对抗性扰动的同时,保持原始图像语义内容的完整性?
  • RQ4神经网络在对抗性图像上的性能在旋转前后有何差异?
  • RQ5像旋转这样的简单几何变换能否作为对抗性攻击的可行防御机制?

主要发现

  • 将被错误分类为8的数字1的对抗性图像旋转约39度后,分类准确率恢复至99.3%。
  • 在首次实验中,10个对抗性样本中有9个在旋转后被正确重新分类,准确率恢复至99%以上。
  • 对于将数字6误分类为9的对抗性样本,旋转28度后正确分类准确率达到100%。
  • 在最优旋转后,目标错误类别的分类概率从97.1%下降至0.2%。
  • 该方法在多个对抗性样本上表现出一致性能,且原始图像分类准确率的退化极小。
  • 该方法成功中和了对抗性扰动,且无需模型微调或复杂架构修改。

更好的研究,从现在开始

从阅读论文到最终审阅,大幅缩短您的研究时间。

无需绑定信用卡

本解读由 AI 生成,并经人工编辑审核。