thuml / Transfer-Learning-Library

Transfer Learning Library for Domain Adaptation, Task Adaptation, and Domain Generalization
http://transfer.thuml.ai
MIT License
3.39k stars 553 forks source link

关于iwan训练时固定源域特征提取器的问题 #246

Closed Adenialzz closed 12 months ago

Adenialzz commented 1 year ago

您好,非常感谢您开源的tllib库。 有个小问题请教,iwan论文中的源域特征提取器Figure 1 $F_s$ 是固定的,而在本仓库的实现iwan.py中,源域和目标域似乎是共享特征提取器并同步更新的。 请问是我哪里理解有误吗,还是实现时忽略了这一点?

thucbx99 commented 1 year ago

tllib中实现的IWAN的确是source和target共享特征提取器并同步更新的,在最初实现的时候我们也考虑了固定源域特征提取器的策略,但发现实验效果上没有共享时好,所以最终保留了共享的版本。类似的,在Adversarial Discriminative Domain Adaptation(ADDA)中我们也发现了同样的现象

Adenialzz commented 12 months ago

好的,感谢您的回复。或许可以通过一个配置选项实现为可选固定源域特征提取器,以便其他人对比。

thucbx99 commented 11 months ago

好的,谢谢你的建议