dailenson / One-DM

Official Code for ECCV 2024 paper — One-Shot Diffusion Mimicker for Handwritten Text Generation
MIT License
298 stars 28 forks source link

!!!!复现测评代码的几点询问 #20

Open gudehhh666 opened 3 weeks ago

gudehhh666 commented 3 weeks ago

作者您好! 您的工作让我受益匪浅,作为小白,冒昧向您询问一些测评代码的细节: 我们尝试使用pytorch-fid复现您文中的指标,但发现复现结果相较于文中结果差距还是比较大的(我们在您开源的权重上测试的结果较论文结果高了约30个点),请问这部分指标您具体是如何实现的,权重、transform等如何设置的,还请不吝赐教。 我们在测评的时候操作是,对于不同写作风格的作者生成的oov或iv样本(这里oov样本只有80个,iv样本114个)特征提取,同时对train以及test中所有样本进行特征提取,再进行FID计算 我们注意到这样运算非常耗时。 还请作者解答。(我们同时以相同手段复现VATr的结果,发现也高出很多,还请作者指教哪里有问题)

dailenson commented 3 weeks ago

您好~参考ganwriting的测评即可:https://github.com/omni-us/research-GANwriting