search

lxtGH / OMG-Seg

OMG-LLaVA and OMG-Seg codebase [CVPR-24 and NeurIPS-24]
Other
1.32k stars 50 forks source link

omgllava finetune阶段EvaluateChatHook输出的结果与图片不符？ #29

Closed echo840 closed 3 months ago

echo840 commented 4 months ago

image 对于这张图片，在pretrain阶段，evaluate hook里面输出的对图片的描述是正确，loss也是正常的，log如下。 image 但是在finetune阶段，loss看起来是正常的，但是EvaluateChatHook输出的结果与图片完全不符，log如下。 image

请问这是什么原因，该如何解决呢？