pykt-team / pykt-toolkit

pyKT: A Python Library to Benchmark Deep Learning based Knowledge Tracing Models
https://pykt.org
MIT License
194 stars 53 forks source link

请问一题多概念泄露问题应该如何解决 #107

Open auakerman opened 1 year ago

sonyawong commented 1 year ago

No description provided.

Hello,感谢您对我们工作的关注。对于一题多知识点问题,我们当前pykt benchmark的处理方式是在模型预测时将同一题目的多个知识点预测结果进行聚合(具体可见我们的论文https://arxiv.org/pdf/2206.11460.pdf section 3.3.1),这样可以解决测试集标签泄露问题,当然,您也可以直接在题目维度上进行模型训练&预测(可参考我们发表在AAAI2023上的另外一篇工作 https://arxiv.org/abs/2302.06885)