深度学习是怎么识别人脸的?
原文发表在个人博客Technology-机器学习-人脸识别,转载请注明出处。
深度学习是机器学习研究中的一个新的领域,其动机在于建立、模拟人脑进行分析学习的神经网络,它模仿人脑的机制来解释数据。
卷积神经网络(CNN)
局部连接
传统的神经网络是全连接,即一层的神经元与上一层的所有神经元都建立连接,这样导致参数非常多,计算量非常大,而CNN是局部连接,一层的神经元只与上一层的部分神经元建立连接,这样可以减少参数和计算量。

权值共享
给一张输入图片,用一个filter去扫时,filter里面的数就叫权重。用该filter对整个图片进行了某个特征的扫描,例如Edge detection,这个过程就是权值共享,因为权重不变。

人脸识别
多个CNN加其他层,遍历而成的人脸识别处理结构:

层提取到的信息的演进:

人脸检测
传统算法
识别:滑动窗口+分类器
用一个固定大小的窗口去滑动扫描图像,并通过分类器去分辨是否是人脸。有时候人脸在图片中过小,所以还要通过放大图片来扫描。

训练:特征+Adaboost
传统特征:LBP/HOG/Harr
图片原始的RGB信息,维度太高,计算量过大,且不具备鲁棒性,即光照和旋转,对RGB信息影响非常大。
利用LBP得到二进制值,再转换成十进制:

Adaboost
由于移动设备对计算速度有一定要求,所以用多个弱分类器加权叠加来完成一个强分类器,从而保证速度。

深度学习
特征的选取是比较复杂的,可能需要大量的统计学和生物学知识积累,而深度学习不需要选择特征,这是其很大优势,另外通过GPU代替CPU等方式,可以得到一个更好的效果。

关键点检测、跟踪
传统算法
Cascade regression/ESR/SDM
传统算法步骤:
- 根据人脸检测的框位置,先初始化初始脸部轮廓位置;
- 进行上一步位置和图形特征检测下一步位置(一般是迭代残差);
- 进行迭代,最终得到相对准确的轮廓位置。

深度学习
深度学习算法步骤:
- 对图像进行轮廓定位态校正;
- 全局粗定位;
- 局部精细定位。

典型应用:


人脸语义分割
人脸语义分割:自定确定人脸每个pixel的所属类别(哪个器官)。
基于CDNN训练一个直接model输入图像到输出概率map的模型,然后将图像输入,即可得出pixel-level的分类概率输出。

典型应用:

传统算法
步骤:
- 基于特征点定位结果进行几何矫正;
- 手工特征提取(HOG\LBP\GABOR)
- 分类器/回归(SVM\BOOSTRING)
深度学习
基于CDNN,直接在一个网络中学习并识别出多个属性。

典型应用:

活体检测
活体检测:确定识别的物体是活物,而非死物。

人脸识别
人脸识别:根据人脸的表观特征自动识别人的身份。

深度学习
通过深度学习来进学习特征,让同一个人在特征空间中距离非常近,而不同人则非常远,且必须具备不受光照等影响的鲁棒性。
基本步骤
- 人脸检测;
- 关键点定位;
- 人脸表示。

人脸切割
将人脸切割成小块,每块去学习Model。

特征融合
将每一块学习到的特征,进行特征融合。

训练过程
- 训练分类;
- 对于两张照片的比较,用pairwise模式进行训练,得到两张图的特征,并计算特征间的距离,小于阈值时,则判断为同一个人;
- 对于三张照片的比较,用triplet模式进行训练,得到三张图之间的关系,而不是关注于距离值。


看了又看: