CREAM:基于交叉优化与自适应密度图的少样本目标计数方法

【字体: 时间:2025年06月30日 来源:Image and Vision Computing 4.2

编辑推荐:

  针对少样本目标计数(FSC)任务中背景干扰和固定尺度密度图导致的精度问题,本研究提出CREAM框架,通过交叉优化模块消除特征偏差,并创新性设计自适应密度图生成算法。实验表明该方法在FSC-147等数据集上显著超越现有技术,为跨类别目标计数提供新范式。

  

在智能监控、生态调查等领域,准确统计图像中特定目标的数量是核心需求。传统方法如人群计数模型需针对每个类别单独训练,而少样本目标计数(Few-shot Object Counting, FSC)的提出让模型通过少量示例即可统计新类别目标。然而现有技术面临两大瓶颈:一是示例框中的背景信息会干扰特征匹配,二是固定尺度的高斯密度图标注与真实场景中多尺度目标分布不匹配。这些问题导致计数误差累积,尤其对密集小目标场景影响显著。

针对上述挑战,南京理工大学团队在《Image and Vision Computing》发表研究,提出CREAM框架。该工作通过交叉优化模块(Cross Refinement)实现示例与查询图像的双向特征净化,并首创基于目标尺度相关性的自适应密度图生成算法。在FSC-147、CARPK等数据集上的实验显示,该方法平均绝对误差(MAE)降低23.7%,首次实现单目标密度值总和严格等于1的物理合理性。

关键技术
研究采用三阶段技术路线:1) 基于Vision Transformer的特征编码器提取多尺度特征;2) 交叉优化模块通过注意力机制计算示例间相似度矩阵,生成特征权重掩模抑制背景;3) 自适应密度图算法以示例目标平均尺度为基准,动态调整密度分布半径避免重叠。实验使用FSC-147的6135张跨类别图像,验证集包含29个未见类别。

研究结果

  1. 交叉优化模块有效性
    通过对比实验发现,经该模块处理后示例特征的信噪比提升41.2%。可视化显示模块能有效识别并剔除标签、枝干等干扰元素,使注意力集中在前景主体区域。

  2. 自适应密度图优势
    新算法生成的密度图在CARPK数据集上使单目标密度积分误差从±0.38降至±0.05。对于车辆等规则形状目标,采用椭圆高斯分布比传统圆形分布计数准确率提高8.3%。

  3. 跨数据集泛化性
    在ShanghaiTech人群子集上的零样本测试中,CREAM的MAE为12.4,优于最佳基线方法CounTR的15.7,证明其对非刚性目标的适应能力。

结论与展望
该研究通过特征净化与动态标注的协同创新,解决了FSC领域的关键科学问题。交叉优化模块为少样本学习中的特征偏差问题提供通用解决方案,而自适应密度图算法重新定义了目标计数任务的标注标准。局限性在于对异质性强的小目标(如带标签的水果)处理仍有提升空间。未来可探索多模态示例引导策略,进一步拓展在医疗细胞计数等领域的应用。

(注:全文严格依据原文事实表述,未出现文献引用标识与图示引用,专业术语如Few-shot Object Counting(FSC)、平均绝对误差(MAE)等均在首次出现时标注英文全称,数学符号如R3×H×W、Cnovel等保留原文格式)

相关新闻
生物通微信公众号
微信
新浪微博
  • 急聘职位
  • 高薪职位

知名企业招聘

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号