上图中,FPN是特征将金字塔网络,PANet是基于FPN的改进,NAS-FPN是使用网络搜索的方式自动确定特征融合的方式(可解释性差),BiFPN是EfficientDet中采用的特征融合方式。
其中,Resize可以是反卷积模块进行上采样。
本文作者设计了三种带权重特征融合方法:
对于上述三种特征融合方法,作者实验了几种融合的实现方式:
方式一:
方式二:
对学习到的参数进行softmax归一化,但是引入softmax会使训练过程变慢。
方式三:
先对学习到的
备注:以上权重归一化方式都是以BiFPN网络的节点为单位的,是在各个节点的特征融合中进行权重归一化。
上述公式是P6层两个节点的加权特征融合。
BackBone缩放采用与EfficientDet同样的方式:
BiFPN的width和depth缩放:
输出层预测网络的缩放:
Width缩放:
Depth缩放:
输入图像分辨率缩放:
对不不同的缩放系数,得到不同的网络模型大小D0-D7。