基于软边缘感知与空间注意力反馈的深度学习网络(SASFNet)在盲图像去模糊中的创新应用

【字体: 时间:2025年06月09日 来源:Computer Vision and Image Understanding 4.3

编辑推荐:

  针对自然场景中因相机抖动和目标位移导致的运动模糊问题,研究人员提出了一种结合软边缘辅助机制和注意力反馈机制的深度学习网络SASFNet。该网络通过软边缘提取分支映射模糊图像的精细边缘信息,指导去模糊分支恢复高质量清晰图像;同时利用注意力反馈机制模仿人类学习过程,逐步优化特征恢复。实验表明,SASFNet在GoPro和Realblur数据集上不仅能恢复符合人类感知的清晰图像,还具有优异的泛化能力,为复杂场景下的盲运动去模糊提供了新思路。

  

在自然场景摄影中,相机抖动和运动目标位移常导致图像出现难以避免的运动模糊,不仅降低视觉质量,还严重影响自动驾驶、目标检测等高级视觉任务的准确性。传统方法如维纳滤波(Wiener filtering)和总变分(Total Variation)依赖精确估计模糊核(blur kernel),而复杂场景中模糊核的不确定性使其性能受限。尽管深度学习通过端到端模型(如Nah等人的DeepDeblur和Gao等人的U-Net架构)取得进展,但恢复精细纹理和模型泛化仍是两大挑战。

为解决这些问题,西安工程大学的研究团队在《Computer Vision and Image Understanding》发表论文,提出软边缘感知与空间注意力反馈网络(SASFNet)。该研究创新性地融合软边缘辅助机制和注意力反馈机制:前者通过专用分支提取模糊图像的边缘信息,指导去模糊分支恢复纹理;后者模仿人类认知的“由易到难”学习过程,通过反馈连接逐步优化特征。实验显示,SASFNet在GoPro数据集上训练的模型,在Realblur数据集测试中展现出卓越的泛化性,且恢复图像更符合人类视觉偏好。

关键技术包括:(1)软边缘提取分支的对抗性训练;(2)空间注意力反馈模块(Spatial-attention Feedback)的迭代优化;(3)多尺度特征融合策略。研究使用GoPro数据集(2103对训练图像和1111对测试图像)进行验证,并引入PSNR和SSIM指标量化性能。

研究结果

  1. 网络结构设计:SASFNet采用双分支架构,去模糊分支通过反馈机制逐步修正输入特征,软边缘分支则通过对抗学习生成清晰边缘图。实验表明,该设计比单一U-Net结构提升纹理恢复效果达15%。
  2. 注意力反馈机制:通过引入空间注意力(Spatial-attention)模块,网络能动态增强对模糊区域的关注,在GoPro测试集上PSNR提升2.1 dB。
  3. 泛化性能验证:在Realblur数据集上的测试表明,SASFNet无需微调即可适应真实场景,SSIM值优于对比方法0.08,证明其鲁棒性。

结论与意义
该研究首次将软边缘信息与注意力反馈机制结合,为盲运动去模糊提供了新范式。其核心贡献在于:(1)通过边缘引导解决了纹理恢复的难题;(2)反馈机制赋予模型类人的渐进学习能力,显著提升泛化性;(3)为复杂场景下的实时去模糊应用(如车载摄像头)提供了可行方案。未来可进一步探索边缘提取与语义分割的协同优化,以应对更极端的运动模糊场景。

相关新闻
生物通微信公众号
微信
新浪微博
  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号