fastnlp / fitlog

fitlog是一款在深度学习训练中用于辅助用户记录日志和管理代码的工具
https://gitee.com/fastnlp/fitlog
Apache License 2.0
1.48k stars 130 forks source link

Some error happens when initialize table. #41

Open dongZheX opened 3 years ago

dongZheX commented 3 years ago

你好,首先感谢fitlog。

今天我在使用fitlog的时候,发现了一个问题,可能是当我的实验记录条数(401条)过多,在打开网页的时候,会弹窗报错Some error happens when initialize table。 系统:win10,fitlog版本已经更新到最新。 请问应该如何解决这一问题? 期待您的回复。

yhcc commented 3 years ago

麻烦你首先看一下你启动fitlog的命令行有报什么错吗?401条应该还是可以加载的

dongZheX commented 3 years ago

麻烦你首先看一下你启动fitlog的命令行有报什么错吗?401条应该还是可以加载的

你好,谢谢回复。 命令行并没有报任何错误,既然它可以加载401条数据,那应该是别的地方出现错误,我再排除一下。

yhcc commented 3 years ago

那你在打开chrome的开发者模式(一般情况下是摁F12),看看它console输出的报错是啥。

dongZheX commented 3 years ago

那你在打开chrome的开发者模式(一般情况下是摁F12),看看它console输出的报错是啥。

image Console里只有这么一个返回,应该是table中一个错误的返回。

dongZheX commented 3 years ago

你好我已经找到了错误,在一个实验记录中,loss出现了NaN值,所以导致了这个错误。

yhcc commented 3 years ago

好的,之前我还特地写了一些判断来发现loss问NaN或者inf的逻辑来着,看来没有生效