Weakly-Supervised Camouflaged Object Detection (WSCOD) aims to locate and segment objects that are visually concealed within their surrounding scenes, relying solely on sparse supervision such as scribble annotations. Despite recent progress, existing WSCOD methods still lag far behind fully supervised ones due to two major limitations: (1) the pseudo masks generated by general-purpose segmentation models (e.g., SAM) and filtered via rules are often unreliable, as these models lack the task-specific semantic understanding required for effective pseudo labeling in COD; and (2) the neglect of inherent annotation bias in scribbles, which hinders the model from capturing the global structure of camouflaged objects. To overcome these challenges, we propose ${D}^{3}$ETOR, a two-stage WSCOD framework consisting of Debate-Enhanced Pseudo Labeling and Frequency-Aware Progressive Debiasing. In the first stage, we introduce an adaptive entropy-driven point sampling method and a multi-agent debate mechanism to enhance the capability of SAM for COD, improving the interpretability and precision of pseudo masks. In the second stage, we design FADeNet, which progressively fuses multi-level frequency-aware features to balance global semantic understanding with local detail modeling, while dynamically reweighting supervision strength across regions to alleviate scribble bias. By jointly exploiting the supervision signals from both the pseudo masks and scribble semantics, ${D}^{3}$ETOR significantly narrows the gap between weakly and fully supervised COD, achieving state-of-the-art performance on multiple benchmarks.


翻译:弱监督伪装目标检测(WSCOD)旨在仅依赖涂鸦标注等稀疏监督,定位并分割视觉上隐藏于周围场景中的目标。尽管近期取得进展,现有WSCOD方法仍远落后于全监督方法,主要受限于两大问题:(1)通用分割模型(如SAM)生成并经规则筛选的伪掩码通常不可靠,因为这些模型缺乏COD任务所需的特定语义理解能力;(2)忽视涂鸦标注中固有的标注偏差,导致模型难以捕捉伪装目标的全局结构。为应对这些挑战,我们提出${D}^{3}$ETOR——一个包含辩论增强伪标签与频率感知渐进去偏的两阶段WSCOD框架。第一阶段,我们引入自适应熵驱动点采样方法与多智能体辩论机制,增强SAM在COD任务中的能力,提升伪掩码的可解释性与精确度。第二阶段,我们设计FADeNet,通过渐进融合多层级频率感知特征来平衡全局语义理解与局部细节建模,同时动态调整区域间监督权重以缓解涂鸦偏差。通过联合利用伪掩码与涂鸦语义的监督信号,${D}^{3}$ETOR显著缩小了弱监督与全监督COD之间的性能差距,在多个基准测试中达到了最先进的性能水平。

0
下载
关闭预览

相关内容

专知会员服务
41+阅读 · 2021年6月19日
Kaggle知识点:伪标签Pseudo Label
AINLP
40+阅读 · 2020年8月9日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
VIP会员
相关基金
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
4+阅读 · 2015年12月31日
国家自然科学基金
0+阅读 · 2015年12月31日
国家自然科学基金
3+阅读 · 2015年12月31日
国家自然科学基金
1+阅读 · 2014年12月31日
Top
微信扫码咨询专知VIP会员