[Paper Share - 3]Light-Head R-CN

2017-12-16 本文已影响0人随心所欲_7b32

姓名：崔少杰学号：16040510021

转载自：http://www.jianshu.com/p/3c448a02f6a8=有修改

【嵌牛导读】：论文针对two-stage的目标检测框架中，回归坐标和分类的子网络进行优化，主要结合Faster RCNN和RFCN两个网络有点，同时提出自己的改进，最终在Accuracy和Speed上都取得了state-of-the-art的表现。

【嵌牛鼻子】：Introduction、Related works、Our Approach、Experiments

【嵌牛提问】：对比试验R-CNN subnet是什么？

【嵌牛正文】：1.Introduction

一般来说Two-Stage的检测框架，第一步是产生足够多的候选框，作者称之为Body；第二步是对候选框进行识别，作者称为Head，像大脑做出判断。通常，想要取得最好的准确率，Head的设计一般比较Heavy，就是计算量参数较多，计算量比较大。作者发现，像Faster RCNN和R-FCN都有共同点，就是一个非常Heavy的Head接到主体框架上。Faster RCNN就接了两个全连接层在ResNet 的第5个Stage后面。并且，ROI Pooling后的特征非常大，所以第一个全连接层非常耗内存，并且影响速度。并且，每个Region Proposal都要经过两个全连接层，计算量非常大。而在R-FCN中，虽然少了两个全连接层，但是，需要构建一个Classes×p×p大小的Score Map，也是需要非常大的内存和计算量。所以本文结合两者优点，提出一些改进，主要如下两点：

使用Large-Kernel Seperable Convolution来产生一个“Thin”的Score Map，Score Map只有a×p×p通道。在论文中，作者用了a=10。

在ROI Pooling后接上一个全连接层。为什么要接上这个全连接层呢？因为原来的R-FCN的Score Map是Classes×p×p通道，正好对应Classes的预测，现在没有这么多个通道了，没办法用原来的投票方法了，所以接上一个全连接层也是为了后面能够接上Faster RCNN的回归和分类。

2.Related works

这个没啥好说的，就是大体说了下目标检测的近况。挺全面的。

3.Our Approach

桥黑板！划重点！

事实上，论文的一张彩图已经说明了一切。好像已经不用费口舌去解释。

网络对比2

不过，作者还是做了些解释。

从Accuracy角度来看，Faster R-CNN为了减少第一层全连接层的计算量，引入global average pooling，虽然对ROI的分类有好处，但是损失了空间信息，对目标回归不好。而R-FCN直接对position-sensetive pooling后的结果进行Pooling，没有ROI-Wise层，所以效果没有Faster RCNN好。

从速度来看，Faster RCNN的每个Roi都要经过R-CNN子网络（R-CNN subnet），见图，所以计算量非常大。R-FCN虽然R-CNN subnet很小，但是他要生成一个非常大的Score Map，整个网络依然很消耗时间和内存。

3.2Light-Head R-CNN

文章使用“L”表示用一个大的主体网络，用“S”表示用一个小的主体网络。

Basic feature extractor

对于“L”网络，文章使用ResNet101作为基础的特征提取网络，对于“S”，文章使用类似于Xception的小网络。上面图中的“conv layes”表示基础网络。“S” 网络如下表格。

S网络

Thin feature maps

作者使用large separable convolution，接在基础网络的C5上。如下所示，k=15,对于S网络，Cmid=64，对于L网络，Cmid=256。Cout=10×p×p。

large separable convolution

R-CCN subnet

这里作者接了一个2048通道的全连接层，没有使用dropout。

RPN

RPN使用C4层的特征。ratios 取{1:2， 2:1}并且有五个scales {32 , 64 , 128 , 256 , 512 }。NMS阈值取0.7.

4.Experiments

作者在COCO数据集上做实验，训练集115K，测试集5K。当然还有些细节，OHEM，data augment之类不扯了。

4.2.1Baselines

B1：是R-FCN，直接用R-FCN跑出来的结果。

B2：也是R-FCN，不过做了些改进，

1.图片resize成最短边800，最长边1200,5个anchors {32 , 64 , 128 , 256 , 512 }

2.对位置回归的loss比分类的小，所以训练时，对回归的loss进行了double

3.训练时将box的loss排序，将loss表较大的前256个box作为反向传播的loss。并且训练时每张图像用了2000个ROIs，测试时用1000个Rois。这样mmAP提高了3个点。事实上我不太确定这个mmAP是啥意思。文章说，“We use mmAP to indicate results of mAP@[0.5:0.95]”难道是说对PR曲线积分时，积分范围是0.5-0.95？有懂得请在下方评论，让咱们学习学习。