读SphereFace: Deep Hypersphere Embedding for FR(CVPR2017 )论文

2018 年 3 月 9 日 统计学习与视觉计算组 丁小莹

CVPR2017上一篇关于人脸识别的论文,基于softmax loss提出了一种新的计算损失的方法——angular softmax(A-Softmax),有效的将当前基于欧式空间上的损失度量函数转移到超球体上,同时在一定的度量空间中实现最大类类间距小于最小类内间距 ,从而更好的学习到位于流形域上更具有判别性和更鲁棒的人脸图像特征。

对于二分类问题,基于softmax loss的后验概率如下,如果p1>p2,则分类为类1,反之亦然。 此时的决策边界为 (W1-W2)x+b1-b2=0,其中x为网络最后一个全连接层的输出,wi,bi表示第i类的连接权重和偏置

损失函数为,其中


如果用角度(wi和x之间的夹角)表示概率pi,则:

如果将权值wj归一化使||wj||=1,将bj=0,将其都映射到一个单位球面上,则修正后的损失函数为:


此时的决策边界变为:


而本文旨在学习两个决策边界使分类更加判别,如果属于类别1,则

,此时,比原始的更难。决策边界为,损失函数为


对比总结一下:

几何表示如下,可以看出来,本文提出的决策边界比其他两种分类边界更具有判别性,并且将原特征空间转换到了超球体流形上,更符合人脸的分布特征,加入m的约束使类内间距更小,类间间距更大。

本文通过验证,m对最终分类的结果影响如下,并证明了一般分类下m=4是比较好的选择。

更直观的变现:

整个实验流程图如下:

最终实验结果:


登录查看更多
2

相关内容

专知会员服务
111+阅读 · 2020年6月26日
少标签数据学习,54页ppt
专知会员服务
196+阅读 · 2020年5月22日
【CVPR 2020-商汤】8比特数值也能训练卷积神经网络模型
专知会员服务
25+阅读 · 2020年5月7日
注意力图神经网络的多标签文本分类
专知会员服务
111+阅读 · 2020年3月28日
【Nature论文】深度网络中的梯度下降复杂度控制
专知会员服务
38+阅读 · 2020年3月9日
【NeurIPS2019】图变换网络:Graph Transformer Network
专知会员服务
110+阅读 · 2019年11月25日
图机器学习 2.2-2.4 Properties of Networks, Random Graph
图与推荐
10+阅读 · 2020年3月28日
CVPR 19系列2 | 强判别能力的深度人脸识别(文末附有源码)
再谈人脸识别损失函数综述
人工智能前沿讲习班
14+阅读 · 2019年5月7日
人脸识别损失函数综述(附开源实现)
极市平台
29+阅读 · 2019年3月12日
详解GAN的谱归一化(Spectral Normalization)
PaperWeekly
11+阅读 · 2019年2月13日
CosFace: Large Margin Cosine Loss for Deep Face Recognition论文笔记
统计学习与视觉计算组
44+阅读 · 2018年4月25日
读论文Discriminative Deep Metric Learning for Face and KV
统计学习与视觉计算组
12+阅读 · 2018年4月6日
Sparsifying Neural Network Connections for Face Recognition
统计学习与视觉计算组
7+阅读 · 2017年6月10日
Arxiv
14+阅读 · 2019年9月11日
Arxiv
7+阅读 · 2018年12月26日
A General and Adaptive Robust Loss Function
Arxiv
8+阅读 · 2018年11月5日
Arxiv
22+阅读 · 2018年2月14日
Arxiv
11+阅读 · 2018年1月18日
VIP会员
相关资讯
图机器学习 2.2-2.4 Properties of Networks, Random Graph
图与推荐
10+阅读 · 2020年3月28日
CVPR 19系列2 | 强判别能力的深度人脸识别(文末附有源码)
再谈人脸识别损失函数综述
人工智能前沿讲习班
14+阅读 · 2019年5月7日
人脸识别损失函数综述(附开源实现)
极市平台
29+阅读 · 2019年3月12日
详解GAN的谱归一化(Spectral Normalization)
PaperWeekly
11+阅读 · 2019年2月13日
CosFace: Large Margin Cosine Loss for Deep Face Recognition论文笔记
统计学习与视觉计算组
44+阅读 · 2018年4月25日
读论文Discriminative Deep Metric Learning for Face and KV
统计学习与视觉计算组
12+阅读 · 2018年4月6日
Sparsifying Neural Network Connections for Face Recognition
统计学习与视觉计算组
7+阅读 · 2017年6月10日
相关论文
Arxiv
14+阅读 · 2019年9月11日
Arxiv
7+阅读 · 2018年12月26日
A General and Adaptive Robust Loss Function
Arxiv
8+阅读 · 2018年11月5日
Arxiv
22+阅读 · 2018年2月14日
Arxiv
11+阅读 · 2018年1月18日
Top
微信扫码咨询专知VIP会员