多模態(tài)特征融合和自蒸餾的紅外-可見(jiàn)光行人重識(shí)別

摘要： 現(xiàn)有跨模態(tài)行人重識(shí)別方法大多挖掘模態(tài)不變的特征,忽略了不同模態(tài)內(nèi)的具有判別性的自有特征.為了充分地利用不同模態(tài)內(nèi)的自有特征,提出一種多模態(tài)特征融合和自蒸餾的紅外-可見(jiàn)光行人重識(shí)別方法.首先提出一種基于雙分類(lèi)器的注意力融合機(jī)制,為各模態(tài)的自有特征賦予較大的融合權(quán)重,共有特征賦予較小的融合權(quán)重,得到含有各模態(tài)判別性自有特征的多模態(tài)融合特征;為了提升網(wǎng)絡(luò)特征的魯棒性以適應(yīng)行人外觀的變...