junwenxiong / ContraTalkingFace

Contrastive Talking Face Generation Model
2 stars 0 forks source link

train_contrastive_loss #1

Closed AaronWong closed 2 years ago

AaronWong commented 2 years ago

你好,你的研究工作很不错 用了 train_contrastive_loss 来训练 效果好么?

还在学校读书么,我们也在做talking face的相关工作,可以交流下么?

junwenxiong commented 2 years ago

用contrastive_loss效果一般吧。

AaronWong commented 2 years ago

syncnet和wav2lip可以稳定训练么

https://github.com/Hangz-nju-cuhk/Talking-Face_PC-AVS

图片 周韩博士用了 InfoNCE,可以参考下

junwenxiong commented 2 years ago

嗯,两者是可以稳定训练的。Pose这篇文章我们也跑了demo,但是效果很差。