如何用训练好已保存的模型测试新的评价指标？[💡SUG] 一句话描述您希望新增的功能或特性

RUCAIBox / RecBole

A unified, comprehensive and efficient recommendation library

https://recbole.io/

MIT License

3.27k stars 590 forks source link

如何用训练好已保存的模型测试新的评价指标？[💡SUG] 一句话描述您希望新增的功能或特性 #1968

Open kmr666 opened 5 months ago

kmr666 commented 5 months ago

作者您好，我想请教一下，比如我现在已经用模型跑出了部分评价指标的结果了，然后模型的model structure and parameters也保存在了save文件夹下了，我现在想用已经跑过的模型再在新的评价指标tialpercentage上测试，具体该怎么实现呢？又例如我想添加目前指标库中尚未收录的指标，例如新颖性的指标，请问您这边有相关测试推荐结果新颖性的指标吗？期待您的回答！

zhengbw0324 commented 5 months ago

@kmr666 您好！您可以使用trainer.evaluate函数进行测试。至于添加新的指标您可以参考我们的文档。我并不是很了解多样性和新颖性推荐这个研究领域，抱歉无法给您推荐合适的新颖性指标。