ShusenTang / Dive-into-DL-PyTorch

本项目将《动手学深度学习》(Dive into Deep Learning)原书中的MXNet实现改为PyTorch实现。
http://tangshusen.me/Dive-into-DL-PyTorch
Apache License 2.0
18.2k stars 5.38k forks source link

丢弃法的 dropout 函数有误 #63

Closed aiselo closed 4 years ago

aiselo commented 4 years ago

好吧,发现是我看了旧版本。

bug描述 丢弃法的 dropout 函数使用的 torch.randn 是正态分布,这样的话就不是精确按指定概率丢弃了,应该用平均分布。 image

版本信息 算法错误,跟版本无关