alibaba / euler

A distributed graph deep learning framework.
Apache License 2.0
2.89k stars 559 forks source link

请问 Parameter server 架构下,训练策略是同步SGD还是异步SGD啊 #225

Open pangedeshijie opened 4 years ago

pangedeshijie commented 4 years ago

想分布式使用一下,看Euler采用的是Parameter Server,想问一下训练策略是同步SGD还是异步SGD啊,如果是异步SGD,对于梯度延迟有什么补偿机制吗? 感谢!