search

Yangxiaoda1 / SyncTalkLip

5 stars 0 forks source link

您好，这里的数据集是怎么预处理的呀，有处理后的目录树嘛，可以用hdtf数据集训练吗 #1

Open xiaoliu123881 opened 3 weeks ago

Yangxiaoda1 commented 1 week ago

您是说AV-SyncNet部分吗，follow AV-HuBERT处理就行

Rykertang commented 5 days ago

您好，您这个相比talklip做了哪些优化呀，我看代码没太看出来

Yangxiaoda1 commented 2 days ago

首先主要的优化是在把avhubert换成了syncavhubert，具体你可以看看这个SyncTalklip: Highly Synchronized Lip-Readable Speaker Generation with Multi-Task Learning

Yangxiaoda1 commented 2 days ago

哈喽同学您好，你熟悉avhubert吗，我有个idea要不要一起做一下，不知道你对avsr感不感兴趣

T @.***

 

------------------ 原始邮件 ------------------ 发件人: "Yangxiaoda1/SyncTalkLip" @.>; 发送时间: 2024年11月20日(星期三) 中午12:41 @.>; @.**@.>; 主题: Re: [Yangxiaoda1/SyncTalkLip] 您好，这里的数据集是怎么预处理的呀，有处理后的目录树嘛，可以用hdtf数据集训练吗 (Issue #1)

您好，您这个相比talklip做了哪些优化呀，我看代码没太看出来

— Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you commented.Message ID: @.***>