honehaniwa
commented
3 years ago "batch_size": 256,
"epochs": 400,
"n_splits": 5,
"lr": 1e-4,
"decay_late": 1e-2,
"decay_epochs": 100
Dropout(0.001)これでいったん回します
Open honehaniwa opened 3 years ago
honehaniwa
commented
3 years ago "batch_size": 256,
"epochs": 400,
"n_splits": 5,
"lr": 1e-4,
"decay_late": 1e-2,
"decay_epochs": 100
Dropout(0.001)これでいったん回します
honehaniwa
commented
3 years ago 
回しました。
CV: 0.189, LB: 0.194
early stopping食らっちゃってたし仕方がなしのお気持ちに
honehaniwa
commented
3 years ago 
上記そのままbi-LSTMを改良して学習を回してみる
schedulerとdropoutいじったら解決できないか
色々いじり中(TT)