Semi-supervised approaches for crowd counting attract attention, as the fully supervised paradigm is expensive and laborious due to its request for a large number of images of dense crowd scenarios and their annotations. This paper proposes a spatial uncertainty-aware semi-supervised approach via regularized surrogate task (binary segmentation) for crowd counting problems. Different from existing semi-supervised learning-based crowd counting methods, to exploit the unlabeled data, our proposed spatial uncertainty-aware teacher-student framework focuses on high confident regions' information while addressing the noisy supervision from the unlabeled data in an end-to-end manner. Specifically, we estimate the spatial uncertainty maps from the teacher model's surrogate task to guide the feature learning of the main task (density regression) and the surrogate task of the student model at the same time. Besides, we introduce a simple yet effective differential transformation layer to enforce the inherent spatial consistency regularization between the main task and the surrogate task in the student model, which helps the surrogate task to yield more reliable predictions and generates high-quality uncertainty maps. Thus, our model can also address the task-level perturbation problems that occur spatial inconsistency between the primary and surrogate tasks in the student model. Experimental results on four challenging crowd counting datasets demonstrate that our method achieves superior performance to the state-of-the-art semi-supervised methods.


翻译:由于完全监督的范式要求大量显示密集人群情景及其说明的图像,充分监督的人群计数的半监督方法十分昂贵和艰巨,因为它要求大量显示大量密集人群情景及其说明。本文件建议通过固定化替代任务(双分制),对人群计数问题采取空间不确定性半监督方法。不同于现有的半监督的基于学习的人群计数方法,以利用未加标签的数据,我们拟议的空间不确定性教师-学生框架侧重于高度自信区域的信息,同时以端对端方式处理来自未贴标签数据的大量监管的噪音。具体地说,我们根据教师模型的代孕任务对空间不确定性地图进行估算,以指导主要任务(密度回归)的特点学习和学生模型的代孕任务。此外,我们引入了一个简单而有效的差异转换层,以实施主要任务与学生模型的代孕期任务之间的内在空间一致性调整,从而帮助代孕任务产生更可靠的预测,并生成高质量的不确定性图。因此,我们根据教师模型的代孕期任务对空间不确定性进行空间不确定性地图的地图进行估算,因此,我们的模式还可以在学生的四级级实验方法上显示我们的任务等级的计算结果。

0
下载
关闭预览

相关内容

ACM/IEEE第23届模型驱动工程语言和系统国际会议,是模型驱动软件和系统工程的首要会议系列,由ACM-SIGSOFT和IEEE-TCSE支持组织。自1998年以来,模型涵盖了建模的各个方面,从语言和方法到工具和应用程序。模特的参加者来自不同的背景,包括研究人员、学者、工程师和工业专业人士。MODELS 2019是一个论坛,参与者可以围绕建模和模型驱动的软件和系统交流前沿研究成果和创新实践经验。今年的版本将为建模社区提供进一步推进建模基础的机会,并在网络物理系统、嵌入式系统、社会技术系统、云计算、大数据、机器学习、安全、开源等新兴领域提出建模的创新应用以及可持续性。 官网链接:http://www.modelsconference.org/
专知会员服务
65+阅读 · 2021年4月11日
【CVPR2021】自监督几何感知
专知会员服务
46+阅读 · 2021年3月6日
专知会员服务
45+阅读 · 2020年10月31日
【google】监督对比学习,Supervised Contrastive Learning
专知会员服务
32+阅读 · 2020年4月23日
【ACL2020-Allen AI】预训练语言模型中的无监督域聚类
专知会员服务
24+阅读 · 2020年4月7日
【CVPR2020-百度】用于视觉识别的门控信道变换
专知会员服务
13+阅读 · 2020年3月30日
Hierarchically Structured Meta-learning
CreateAMind
26+阅读 · 2019年5月22日
Transferring Knowledge across Learning Processes
CreateAMind
28+阅读 · 2019年5月18日
强化学习的Unsupervised Meta-Learning
CreateAMind
18+阅读 · 2019年1月7日
Unsupervised Learning via Meta-Learning
CreateAMind
42+阅读 · 2019年1月3日
用 CNN 分 100,000 类图像
AI研习社
5+阅读 · 2018年3月20日
条件GAN重大改进!cGANs with Projection Discriminator
CreateAMind
8+阅读 · 2018年2月7日
已删除
将门创投
6+阅读 · 2017年11月27日
Arxiv
8+阅读 · 2021年7月15日
Revisiting CycleGAN for semi-supervised segmentation
Arxiv
3+阅读 · 2019年8月30日
VIP会员
相关VIP内容
专知会员服务
65+阅读 · 2021年4月11日
【CVPR2021】自监督几何感知
专知会员服务
46+阅读 · 2021年3月6日
专知会员服务
45+阅读 · 2020年10月31日
【google】监督对比学习,Supervised Contrastive Learning
专知会员服务
32+阅读 · 2020年4月23日
【ACL2020-Allen AI】预训练语言模型中的无监督域聚类
专知会员服务
24+阅读 · 2020年4月7日
【CVPR2020-百度】用于视觉识别的门控信道变换
专知会员服务
13+阅读 · 2020年3月30日
Top
微信扫码咨询专知VIP会员