当前位置: 测量装置 >> 测量装置资源 >> 目标检测盘点目标检测中的特征融合技巧
在深度研习的许多处事中(比方方针探测、图象分裂),合并不同标准的特色是抬高功用的一个严重权谋。低层特色分辩率更高,包括更多地位、细节讯息,不过由于颠末的卷积更少,其语义性更低,噪声更多。高层特色具备更强的语义讯息,不过分辩率很低,对细节的感知才能较差。怎样将两者高效合并,取其益处,弃之糟泊,是改进分裂模子的关键。
许多处事颠末合并多层来提高探测和分裂的功用,根据合并与推断的前后循序,分类为早合并(Earlyfusion)和晚合并(Latefusion)。
早合并(Earlyfusion):先合并多层的特色,尔后在合并后的特色上练习推断器(只在完整合并以后,才统一举办探测)。这种办法也被称为skipconnection,即采纳concat、add操纵。这一思绪的代表是Inside-OutsideNet(ION)和HyperNet。两个典范的特色合并办法:
(1)concat:系列特色合并,直接将两个特色举办连贯。两个输入特色x和y的维数若为p和q,输出特色z的维数为p+q;
(2)add:并行计谋,将这两个特色向量组合成复向量,关于输入特色x和y,z=x+iy,个中i是虚数单元。
晚合并(Latefusion):颠末分离不同层的探测成绩改良探测功用(尚未终了终究的合并以前,在部份合并的层上就开端举办探测,会有多层的探测,终究将多个探测成绩举办合并)。这一类钻研思绪的代表有两种:
(1)feature不合并,多标准的feture别离举办推断,尔后对推断成绩举办归纳,如SingleShotMultiBoxDetector(SSD),Multi-scaleCNN(MS-CNN)
(2)feature举办金字塔合并,合并后举办推断,如FeaturePyramidNetwork(FPN)等。
接下来,首要对晚合并办法举办归结归纳。
FeaturePyramidNetwork(FPN)