notebookの時系列順にsubmitしてエラーが起きないか確認していく

[bird0401]

1.

https://www.kaggle.com/code/hiromatu/happywhale-arcface-baseline-tpu?scriptVersionId=92476735

おそらく一番見られているnotebook

[bird0401]

2.

1を参考にしたnotebook

https://www.kaggle.com/code/hiromatu/backfins-arcface-tpu-effnet/edit

[bird0401]

3.

2.を参考にしたnotebook

https://www.kaggle.com/code/hiromatu/0-731-eff-b5-640-rotate/edit

[bird0401]

4.

3を参考にしたswinのnotebook

https://www.kaggle.com/code/hiromatu/swin-tranform-submission/edit

[bird0401]

1,2はエラーなしで完了した。現在は3を回し中。

[bird0401]

３はswinの著者が、swinの前に書いたnotebook。これのinferenceとか他の部分補完して、save_versionした。

[bird0401]

３でエラーが起きた。普通にrunして確かめてる。

[bird0401]

４と３で結構コード変わる。慎重に見ていく。

[bird0401]

３ 回して学習まではうまくいった。EFF_NET = 5だと学習重すぎたので、EFF_NET = 0にしてやってみてる。

[bird0401]

速度そんなに変わらなかった

https://zenn.dev/kleamp1e/articles/202104-efficientnet これによると10倍くらい変わるはずなんだが。

[bird0401]

そのリンクだと画像サイズを変えてるけど、それをしていないのが原因か。

IMAGE_SIZE = 32 でやってみる

[bird0401]

結果めちゃ早くなった。30倍くらい。

[bird0401]

エラーちょくちょく起こったが最後まで実行できたので、submitする。現在save allしてる。

[bird0401]

3のsave-all完了した。submitもした。解像度下げてる＋effnetB0を用いているので精度はゴミ。

[bird0401]

エラー一個一個対処してたらキリないので、元の実行成功したnotebookにmodelを移植する方面で進める

[bird0401]

commentsでも質問に上がってる原因不明のエラー起きて止まった

[bird0401]

swinはコメント上に同じ問題になってる人いたから、コメントしておいた

[bird0401]

swinの質問に回答来たのでそれを元に変えてみる

When you use swin transformer with TPU, you need to specify drop_remainder=True option. dataset = dataset.batch(BATCH_SIZE, drop_remainder=True)

[bird0401]

最後まで実行できたので提出してみる

[bird0401]

ハイパラ元に戻したので時間かかりそう