search

MCG-NJU / MixFormerV2

[NeurIPS 2023] MixFormerV2: Efficient Fully Transformer Tracking
MIT License
141 stars 19 forks source link

MixFormerV2和MixFormer之间的关系？ #18

Open Maggie1998 opened 9 months ago

Maggie1998 commented 9 months ago

MixFormerV2和MixFormer在模型结构上有哪些相同和不同呢？

yutaocui commented 9 months ago

最主要的区别是预测head不同，v2不再采用之前的corner head, 而是通过添加4个可学习的token，通过在backbone中跟search和template tokens进行交互提取内容和位置信息，最后直接利用mlp head来预测top bottom left right四个位置。

MrNeoBlue commented 8 months ago

想请教一下，head在学习的过程中只能通过蒸馏来吗？