search

roboflow / notebooks

Examples and tutorials on using SOTA computer vision models and techniques. Learn everything from old-school ResNet, through YOLO and object-detection transformers like DETR, to the latest models like Grounding DINO and SAM.
https://roboflow.com/models
4.89k stars 759 forks source link

Getting negative loss while fine-tuning Segformer on custom dataset. #169

Open mohdsaqibxa opened 1 year ago

mohdsaqibxa commented 1 year ago

Search before asking

Notebook name

https://github.com/roboflow/notebooks/blob/25204ae5e0c183f88b3e6d4c022ef86941fda14f/notebooks/train-segformer-segmentation-on-custom-data.ipynb

Bug

While trying to fine tune Segformer on a custom dataset, I am getting negative loss. I am trying to train Segformer for one class object.

GPU available: True (cuda), used: True
TPU available: False, using: 0 TPU cores
IPU available: False, using: 0 IPUs
HPU available: False, using: 0 HPUs
LOCAL_RANK: 0 - CUDA_VISIBLE_DEVICES: [0]

  | Name  | Type                             | Params
-----------------------------------------------------------
0 | model | SegformerForSemanticSegmentation | 3.7 M 
-----------------------------------------------------------
3.7 M     Trainable params
0         Non-trainable params
3.7 M     Total params
14.858    Total estimated model params size (MB)
Epoch 0:  50%|███████████████████████████████████████████▌                                           | 19/38 [00:27<00:27,  1.46s/it, loss=0.672, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 0:  53%|█████████████████████████████████████████████▊                                         | 20/38 [00:32<00:29,  1.63s/it, loss=0.672, v_num=29]
Epoch 0:  55%|████████████████████████████████████████████████                                       | 21/38 [00:32<00:26,  1.57s/it, loss=0.672, v_num=29]
Epoch 0:  58%|██████████████████████████████████████████████████▎                                    | 22/38 [00:34<00:24,  1.56s/it, loss=0.672, v_num=29]
Epoch 0:  61%|████████████████████████████████████████████████████▋                                  | 23/38 [00:34<00:22,  1.51s/it, loss=0.672, v_num=29]
Epoch 0:  63%|██████████████████████████████████████████████████████▉                                | 24/38 [00:37<00:21,  1.56s/it, loss=0.672, v_num=29]
Epoch 0:  66%|█████████████████████████████████████████████████████████▏                             | 25/38 [00:37<00:19,  1.51s/it, loss=0.672, v_num=29]
Epoch 0:  68%|███████████████████████████████████████████████████████████▌                           | 26/38 [00:40<00:18,  1.58s/it, loss=0.672, v_num=29]
Epoch 0:  71%|█████████████████████████████████████████████████████████████▊                         | 27/38 [00:41<00:16,  1.53s/it, loss=0.672, v_num=29]
Epoch 0:  74%|████████████████████████████████████████████████████████████████                       | 28/38 [00:44<00:15,  1.58s/it, loss=0.672, v_num=29]
Epoch 0:  76%|██████████████████████████████████████████████████████████████████▍                    | 29/38 [00:44<00:13,  1.54s/it, loss=0.672, v_num=29]
Epoch 0:  79%|████████████████████████████████████████████████████████████████████▋                  | 30/38 [00:46<00:12,  1.57s/it, loss=0.672, v_num=29]
Epoch 0:  82%|██████████████████████████████████████████████████████████████████████▉                | 31/38 [00:47<00:10,  1.53s/it, loss=0.672, v_num=29]
Epoch 0:  84%|█████████████████████████████████████████████████████████████████████████▎             | 32/38 [00:49<00:09,  1.55s/it, loss=0.672, v_num=29]
Epoch 0:  87%|███████████████████████████████████████████████████████████████████████████▌           | 33/38 [00:50<00:07,  1.52s/it, loss=0.672, v_num=29]
Epoch 0:  89%|█████████████████████████████████████████████████████████████████████████████▊         | 34/38 [00:52<00:06,  1.54s/it, loss=0.672, v_num=29]
Epoch 0:  92%|████████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:52<00:04,  1.51s/it, loss=0.672, v_num=29]
Epoch 0:  95%|██████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:55<00:03,  1.54s/it, loss=0.672, v_num=29]
Epoch 0:  97%|████████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:55<00:01,  1.51s/it, loss=0.672, v_num=29]
Epoch 0: 100%|███████████████████████████████████████████████████████████████████████████████████████| 38/38 [01:00<00:00,  1.58s/it, loss=0.672, v_num=29]
Epoch 1:  50%|███████████████████████████████████████████▌                                           | 19/38 [00:26<00:26,  1.42s/it, loss=0.546, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 1:  53%|█████████████████████████████████████████████▊                                         | 20/38 [00:31<00:28,  1.58s/it, loss=0.546, v_num=29]
Epoch 1:  55%|████████████████████████████████████████████████                                       | 21/38 [00:32<00:26,  1.53s/it, loss=0.546, v_num=29]
Epoch 1:  58%|██████████████████████████████████████████████████▎                                    | 22/38 [00:35<00:25,  1.59s/it, loss=0.546, v_num=29]
Epoch 1:  61%|████████████████████████████████████████████████████▋                                  | 23/38 [00:35<00:23,  1.54s/it, loss=0.546, v_num=29]
Epoch 1:  63%|██████████████████████████████████████████████████████▉                                | 24/38 [00:39<00:23,  1.67s/it, loss=0.546, v_num=29]
Epoch 1:  66%|█████████████████████████████████████████████████████████▏                             | 25/38 [00:40<00:21,  1.62s/it, loss=0.546, v_num=29]
Epoch 1:  68%|███████████████████████████████████████████████████████████▌                           | 26/38 [00:44<00:20,  1.71s/it, loss=0.546, v_num=29]
Epoch 1:  71%|█████████████████████████████████████████████████████████████▊                         | 27/38 [00:45<00:18,  1.67s/it, loss=0.546, v_num=29]
Epoch 1:  74%|████████████████████████████████████████████████████████████████                       | 28/38 [00:49<00:17,  1.78s/it, loss=0.546, v_num=29]
Epoch 1:  76%|██████████████████████████████████████████████████████████████████▍                    | 29/38 [00:50<00:15,  1.73s/it, loss=0.546, v_num=29]
Epoch 1:  79%|████████████████████████████████████████████████████████████████████▋                  | 30/38 [00:53<00:14,  1.78s/it, loss=0.546, v_num=29]
Epoch 1:  82%|██████████████████████████████████████████████████████████████████████▉                | 31/38 [00:54<00:12,  1.75s/it, loss=0.546, v_num=29]
Epoch 1:  84%|█████████████████████████████████████████████████████████████████████████▎             | 32/38 [00:57<00:10,  1.79s/it, loss=0.546, v_num=29]
Epoch 1:  87%|███████████████████████████████████████████████████████████████████████████▌           | 33/38 [00:58<00:08,  1.76s/it, loss=0.546, v_num=29]
Epoch 1:  89%|█████████████████████████████████████████████████████████████████████████████▊         | 34/38 [01:01<00:07,  1.80s/it, loss=0.546, v_num=29]
Epoch 1:  92%|████████████████████████████████████████████████████████████████████████████████▏      | 35/38 [01:01<00:05,  1.77s/it, loss=0.546, v_num=29]
Epoch 1:  95%|██████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [01:04<00:03,  1.80s/it, loss=0.546, v_num=29]
Epoch 1:  97%|████████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [01:05<00:01,  1.77s/it, loss=0.546, v_num=29]
Epoch 1: 100%|███████████████████████████████████████████████████████████████████████████████████████| 38/38 [01:10<00:00,  1.84s/it, loss=0.546, v_num=29]
Epoch 2:  50%|███████████████████████████████████████████▌                                           | 19/38 [00:27<00:27,  1.43s/it, loss=0.426, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 2:  53%|█████████████████████████████████████████████▊                                         | 20/38 [00:32<00:29,  1.63s/it, loss=0.426, v_num=29]
Epoch 2:  55%|████████████████████████████████████████████████                                       | 21/38 [00:33<00:26,  1.58s/it, loss=0.426, v_num=29]
Epoch 2:  58%|██████████████████████████████████████████████████▎                                    | 22/38 [00:34<00:25,  1.59s/it, loss=0.426, v_num=29]
Epoch 2:  61%|████████████████████████████████████████████████████▋                                  | 23/38 [00:35<00:23,  1.54s/it, loss=0.426, v_num=29]
Epoch 2:  63%|██████████████████████████████████████████████████████▉                                | 24/38 [00:38<00:22,  1.61s/it, loss=0.426, v_num=29]
Epoch 2:  66%|█████████████████████████████████████████████████████████▏                             | 25/38 [00:38<00:20,  1.56s/it, loss=0.426, v_num=29]
Epoch 2:  68%|███████████████████████████████████████████████████████████▌                           | 26/38 [00:42<00:19,  1.62s/it, loss=0.426, v_num=29]
Epoch 2:  71%|█████████████████████████████████████████████████████████████▊                         | 27/38 [00:42<00:17,  1.57s/it, loss=0.426, v_num=29]
Epoch 2:  74%|████████████████████████████████████████████████████████████████                       | 28/38 [00:45<00:16,  1.62s/it, loss=0.426, v_num=29]
Epoch 2:  76%|██████████████████████████████████████████████████████████████████▍                    | 29/38 [00:45<00:14,  1.58s/it, loss=0.426, v_num=29]
Epoch 2:  79%|████████████████████████████████████████████████████████████████████▋                  | 30/38 [00:48<00:12,  1.60s/it, loss=0.426, v_num=29]
Epoch 2:  82%|██████████████████████████████████████████████████████████████████████▉                | 31/38 [00:48<00:10,  1.56s/it, loss=0.426, v_num=29]
Epoch 2:  84%|█████████████████████████████████████████████████████████████████████████▎             | 32/38 [00:50<00:09,  1.58s/it, loss=0.426, v_num=29]
Epoch 2:  87%|███████████████████████████████████████████████████████████████████████████▌           | 33/38 [00:51<00:07,  1.55s/it, loss=0.426, v_num=29]
Epoch 2:  89%|█████████████████████████████████████████████████████████████████████████████▊         | 34/38 [00:53<00:06,  1.58s/it, loss=0.426, v_num=29]
Epoch 2:  92%|████████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:54<00:04,  1.56s/it, loss=0.426, v_num=29]
Epoch 2:  95%|██████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:56<00:03,  1.58s/it, loss=0.426, v_num=29]
Epoch 2:  97%|████████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:57<00:01,  1.56s/it, loss=0.426, v_num=29]
Epoch 2: 100%|███████████████████████████████████████████████████████████████████████████████████████| 38/38 [01:01<00:00,  1.62s/it, loss=0.426, v_num=29]
Epoch 3:  50%|███████████████████████████████████████████▌                                           | 19/38 [00:21<00:21,  1.13s/it, loss=0.241, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 3:  53%|█████████████████████████████████████████████▊                                         | 20/38 [00:25<00:23,  1.29s/it, loss=0.241, v_num=29]
Epoch 3:  55%|████████████████████████████████████████████████                                       | 21/38 [00:26<00:21,  1.25s/it, loss=0.241, v_num=29]
Epoch 3:  58%|██████████████████████████████████████████████████▎                                    | 22/38 [00:27<00:19,  1.24s/it, loss=0.241, v_num=29]
Epoch 3:  61%|████████████████████████████████████████████████████▋                                  | 23/38 [00:27<00:18,  1.20s/it, loss=0.241, v_num=29]
Epoch 3:  63%|██████████████████████████████████████████████████████▉                                | 24/38 [00:29<00:17,  1.24s/it, loss=0.241, v_num=29]
Epoch 3:  66%|█████████████████████████████████████████████████████████▏                             | 25/38 [00:30<00:15,  1.21s/it, loss=0.241, v_num=29]
Epoch 3:  68%|███████████████████████████████████████████████████████████▌                           | 26/38 [00:32<00:14,  1.24s/it, loss=0.241, v_num=29]
Epoch 3:  71%|█████████████████████████████████████████████████████████████▊                         | 27/38 [00:32<00:13,  1.21s/it, loss=0.241, v_num=29]
Epoch 3:  74%|████████████████████████████████████████████████████████████████                       | 28/38 [00:34<00:12,  1.23s/it, loss=0.241, v_num=29]
Epoch 3:  76%|██████████████████████████████████████████████████████████████████▍                    | 29/38 [00:34<00:10,  1.21s/it, loss=0.241, v_num=29]
Epoch 3:  79%|████████████████████████████████████████████████████████████████████▋                  | 30/38 [00:37<00:09,  1.23s/it, loss=0.241, v_num=29]
Epoch 3:  82%|██████████████████████████████████████████████████████████████████████▉                | 31/38 [00:37<00:08,  1.21s/it, loss=0.241, v_num=29]
Epoch 3:  84%|█████████████████████████████████████████████████████████████████████████▎             | 32/38 [00:39<00:07,  1.24s/it, loss=0.241, v_num=29]
Epoch 3:  87%|███████████████████████████████████████████████████████████████████████████▌           | 33/38 [00:39<00:06,  1.21s/it, loss=0.241, v_num=29]
Epoch 3:  89%|█████████████████████████████████████████████████████████████████████████████▊         | 34/38 [00:42<00:04,  1.24s/it, loss=0.241, v_num=29]
Epoch 3:  92%|████████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:42<00:03,  1.22s/it, loss=0.241, v_num=29]
Epoch 3:  95%|██████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:44<00:02,  1.25s/it, loss=0.241, v_num=29]
Epoch 3:  97%|████████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:45<00:01,  1.23s/it, loss=0.241, v_num=29]
Epoch 3: 100%|███████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:49<00:00,  1.30s/it, loss=0.241, v_num=29]
Epoch 4:  50%|███████████████████████████████████████████                                           | 19/38 [00:19<00:19,  1.02s/it, loss=0.0921, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 4:  53%|█████████████████████████████████████████████▎                                        | 20/38 [00:23<00:21,  1.17s/it, loss=0.0921, v_num=29]
Epoch 4:  55%|███████████████████████████████████████████████▌                                      | 21/38 [00:23<00:19,  1.14s/it, loss=0.0921, v_num=29]
Epoch 4:  58%|█████████████████████████████████████████████████▊                                    | 22/38 [00:24<00:18,  1.13s/it, loss=0.0921, v_num=29]
Epoch 4:  61%|████████████████████████████████████████████████████                                  | 23/38 [00:25<00:16,  1.10s/it, loss=0.0921, v_num=29]
Epoch 4:  63%|██████████████████████████████████████████████████████▎                               | 24/38 [00:27<00:15,  1.13s/it, loss=0.0921, v_num=29]
Epoch 4:  66%|████████████████████████████████████████████████████████▌                             | 25/38 [00:27<00:14,  1.10s/it, loss=0.0921, v_num=29]
Epoch 4:  68%|██████████████████████████████████████████████████████████▊                           | 26/38 [00:29<00:13,  1.14s/it, loss=0.0921, v_num=29]
Epoch 4:  71%|█████████████████████████████████████████████████████████████                         | 27/38 [00:29<00:12,  1.11s/it, loss=0.0921, v_num=29]
Epoch 4:  74%|███████████████████████████████████████████████████████████████▎                      | 28/38 [00:31<00:11,  1.14s/it, loss=0.0921, v_num=29]
Epoch 4:  76%|█████████████████████████████████████████████████████████████████▋                    | 29/38 [00:32<00:10,  1.12s/it, loss=0.0921, v_num=29]
Epoch 4:  79%|███████████████████████████████████████████████████████████████████▉                  | 30/38 [00:34<00:09,  1.14s/it, loss=0.0921, v_num=29]
Epoch 4:  82%|██████████████████████████████████████████████████████████████████████▏               | 31/38 [00:34<00:07,  1.12s/it, loss=0.0921, v_num=29]
Epoch 4:  84%|████████████████████████████████████████████████████████████████████████▍             | 32/38 [00:37<00:06,  1.17s/it, loss=0.0921, v_num=29]
Epoch 4:  87%|██████████████████████████████████████████████████████████████████████████▋           | 33/38 [00:37<00:05,  1.14s/it, loss=0.0921, v_num=29]
Epoch 4:  89%|████████████████████████████████████████████████████████████████████████████▉         | 34/38 [00:39<00:04,  1.17s/it, loss=0.0921, v_num=29]
Epoch 4:  92%|███████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:40<00:03,  1.15s/it, loss=0.0921, v_num=29]
Epoch 4:  95%|█████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:42<00:02,  1.19s/it, loss=0.0921, v_num=29]
Epoch 4:  97%|███████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:43<00:01,  1.17s/it, loss=0.0921, v_num=29]
Epoch 4: 100%|██████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:47<00:00,  1.24s/it, loss=0.0921, v_num=29]
Epoch 5:  50%|██████████████████████████████████████████▌                                          | 19/38 [00:24<00:24,  1.28s/it, loss=-0.0576, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 5:  53%|████████████████████████████████████████████▋                                        | 20/38 [00:28<00:26,  1.44s/it, loss=-0.0576, v_num=29]
Epoch 5:  55%|██████████████████████████████████████████████▉                                      | 21/38 [00:29<00:23,  1.40s/it, loss=-0.0576, v_num=29]
Epoch 5:  58%|█████████████████████████████████████████████████▏                                   | 22/38 [00:30<00:22,  1.40s/it, loss=-0.0576, v_num=29]
Epoch 5:  61%|███████████████████████████████████████████████████▍                                 | 23/38 [00:31<00:20,  1.36s/it, loss=-0.0576, v_num=29]
Epoch 5:  63%|█████████████████████████████████████████████████████▋                               | 24/38 [00:33<00:19,  1.38s/it, loss=-0.0576, v_num=29]
Epoch 5:  66%|███████████████████████████████████████████████████████▉                             | 25/38 [00:33<00:17,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5:  68%|██████████████████████████████████████████████████████████▏                          | 26/38 [00:35<00:16,  1.38s/it, loss=-0.0576, v_num=29]
Epoch 5:  71%|████████████████████████████████████████████████████████████▍                        | 27/38 [00:36<00:14,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5:  74%|██████████████████████████████████████████████████████████████▋                      | 28/38 [00:38<00:13,  1.37s/it, loss=-0.0576, v_num=29]
Epoch 5:  76%|████████████████████████████████████████████████████████████████▊                    | 29/38 [00:38<00:12,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5:  79%|███████████████████████████████████████████████████████████████████                  | 30/38 [00:41<00:10,  1.37s/it, loss=-0.0576, v_num=29]
Epoch 5:  82%|█████████████████████████████████████████████████████████████████████▎               | 31/38 [00:41<00:09,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5:  84%|███████████████████████████████████████████████████████████████████████▌             | 32/38 [00:43<00:08,  1.37s/it, loss=-0.0576, v_num=29]
Epoch 5:  87%|█████████████████████████████████████████████████████████████████████████▊           | 33/38 [00:44<00:06,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5:  89%|████████████████████████████████████████████████████████████████████████████         | 34/38 [00:46<00:05,  1.36s/it, loss=-0.0576, v_num=29]
Epoch 5:  92%|██████████████████████████████████████████████████████████████████████████████▎      | 35/38 [00:46<00:04,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5:  95%|████████████████████████████████████████████████████████████████████████████████▌    | 36/38 [00:49<00:02,  1.37s/it, loss=-0.0576, v_num=29]
Epoch 5:  97%|██████████████████████████████████████████████████████████████████████████████████▊  | 37/38 [00:49<00:01,  1.34s/it, loss=-0.0576, v_num=29]
Epoch 5: 100%|█████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:53<00:00,  1.42s/it, loss=-0.0576, v_num=29]
Epoch 6:  50%|███████████████████████████████████████████                                           | 19/38 [00:23<00:23,  1.25s/it, loss=-0.208, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 6:  53%|█████████████████████████████████████████████▎                                        | 20/38 [00:28<00:25,  1.41s/it, loss=-0.208, v_num=29]
Epoch 6:  55%|███████████████████████████████████████████████▌                                      | 21/38 [00:28<00:23,  1.36s/it, loss=-0.208, v_num=29]
Epoch 6:  58%|█████████████████████████████████████████████████▊                                    | 22/38 [00:29<00:21,  1.35s/it, loss=-0.208, v_num=29]
Epoch 6:  61%|████████████████████████████████████████████████████                                  | 23/38 [00:30<00:19,  1.31s/it, loss=-0.208, v_num=29]
Epoch 6:  63%|██████████████████████████████████████████████████████▎                               | 24/38 [00:32<00:18,  1.34s/it, loss=-0.208, v_num=29]
Epoch 6:  66%|████████████████████████████████████████████████████████▌                             | 25/38 [00:32<00:16,  1.31s/it, loss=-0.208, v_num=29]
Epoch 6:  68%|██████████████████████████████████████████████████████████▊                           | 26/38 [00:35<00:16,  1.36s/it, loss=-0.208, v_num=29]
Epoch 6:  71%|█████████████████████████████████████████████████████████████                         | 27/38 [00:35<00:14,  1.32s/it, loss=-0.208, v_num=29]
Epoch 6:  74%|███████████████████████████████████████████████████████████████▎                      | 28/38 [00:38<00:13,  1.37s/it, loss=-0.208, v_num=29]
Epoch 6:  76%|█████████████████████████████████████████████████████████████████▋                    | 29/38 [00:38<00:12,  1.33s/it, loss=-0.208, v_num=29]
Epoch 6:  79%|███████████████████████████████████████████████████████████████████▉                  | 30/38 [00:40<00:10,  1.36s/it, loss=-0.208, v_num=29]
Epoch 6:  82%|██████████████████████████████████████████████████████████████████████▏               | 31/38 [00:41<00:09,  1.34s/it, loss=-0.208, v_num=29]
Epoch 6:  84%|████████████████████████████████████████████████████████████████████████▍             | 32/38 [00:44<00:08,  1.40s/it, loss=-0.208, v_num=29]
Epoch 6:  87%|██████████████████████████████████████████████████████████████████████████▋           | 33/38 [00:45<00:06,  1.37s/it, loss=-0.208, v_num=29]
Epoch 6:  89%|████████████████████████████████████████████████████████████████████████████▉         | 34/38 [00:47<00:05,  1.40s/it, loss=-0.208, v_num=29]
Epoch 6:  92%|███████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:48<00:04,  1.37s/it, loss=-0.208, v_num=29]
Epoch 6:  95%|█████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:50<00:02,  1.41s/it, loss=-0.208, v_num=29]
Epoch 6:  97%|███████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:51<00:01,  1.39s/it, loss=-0.208, v_num=29]
Epoch 6: 100%|██████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:55<00:00,  1.47s/it, loss=-0.208, v_num=29]
Epoch 7:  50%|███████████████████████████████████████████                                           | 19/38 [00:26<00:26,  1.42s/it, loss=-0.308, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 7:  53%|█████████████████████████████████████████████▎                                        | 20/38 [00:31<00:28,  1.59s/it, loss=-0.308, v_num=29]
Epoch 7:  55%|███████████████████████████████████████████████▌                                      | 21/38 [00:32<00:26,  1.54s/it, loss=-0.308, v_num=29]
Epoch 7:  58%|█████████████████████████████████████████████████▊                                    | 22/38 [00:33<00:24,  1.52s/it, loss=-0.308, v_num=29]
Epoch 7:  61%|████████████████████████████████████████████████████                                  | 23/38 [00:33<00:22,  1.47s/it, loss=-0.308, v_num=29]
Epoch 7:  63%|██████████████████████████████████████████████████████▎                               | 24/38 [00:35<00:20,  1.50s/it, loss=-0.308, v_num=29]
Epoch 7:  66%|████████████████████████████████████████████████████████▌                             | 25/38 [00:36<00:18,  1.45s/it, loss=-0.308, v_num=29]
Epoch 7:  68%|██████████████████████████████████████████████████████████▊                           | 26/38 [00:38<00:17,  1.48s/it, loss=-0.308, v_num=29]
Epoch 7:  71%|█████████████████████████████████████████████████████████████                         | 27/38 [00:39<00:15,  1.45s/it, loss=-0.308, v_num=29]
Epoch 7:  74%|███████████████████████████████████████████████████████████████▎                      | 28/38 [00:41<00:14,  1.48s/it, loss=-0.308, v_num=29]
Epoch 7:  76%|█████████████████████████████████████████████████████████████████▋                    | 29/38 [00:41<00:12,  1.44s/it, loss=-0.308, v_num=29]
Epoch 7:  79%|███████████████████████████████████████████████████████████████████▉                  | 30/38 [00:43<00:11,  1.46s/it, loss=-0.308, v_num=29]
Epoch 7:  82%|██████████████████████████████████████████████████████████████████████▏               | 31/38 [00:44<00:09,  1.43s/it, loss=-0.308, v_num=29]
Epoch 7:  84%|████████████████████████████████████████████████████████████████████████▍             | 32/38 [00:46<00:08,  1.45s/it, loss=-0.308, v_num=29]
Epoch 7:  87%|██████████████████████████████████████████████████████████████████████████▋           | 33/38 [00:46<00:07,  1.42s/it, loss=-0.308, v_num=29]
Epoch 7:  89%|████████████████████████████████████████████████████████████████████████████▉         | 34/38 [00:49<00:05,  1.44s/it, loss=-0.308, v_num=29]
Epoch 7:  92%|███████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:49<00:04,  1.41s/it, loss=-0.308, v_num=29]
Epoch 7:  95%|█████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:51<00:02,  1.44s/it, loss=-0.308, v_num=29]
Epoch 7:  97%|███████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:52<00:01,  1.41s/it, loss=-0.308, v_num=29]
Epoch 7: 100%|██████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:56<00:00,  1.48s/it, loss=-0.308, v_num=29]
Epoch 8:  50%|███████████████████████████████████████████▌                                           | 19/38 [00:20<00:20,  1.09s/it, loss=-0.61, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 8:  53%|█████████████████████████████████████████████▊                                         | 20/38 [00:25<00:22,  1.25s/it, loss=-0.61, v_num=29]
Epoch 8:  55%|████████████████████████████████████████████████                                       | 21/38 [00:25<00:20,  1.21s/it, loss=-0.61, v_num=29]
Epoch 8:  58%|██████████████████████████████████████████████████▎                                    | 22/38 [00:26<00:19,  1.22s/it, loss=-0.61, v_num=29]
Epoch 8:  61%|████████████████████████████████████████████████████▋                                  | 23/38 [00:27<00:17,  1.18s/it, loss=-0.61, v_num=29]
Epoch 8:  63%|██████████████████████████████████████████████████████▉                                | 24/38 [00:29<00:17,  1.23s/it, loss=-0.61, v_num=29]
Epoch 8:  66%|█████████████████████████████████████████████████████████▏                             | 25/38 [00:29<00:15,  1.20s/it, loss=-0.61, v_num=29]
Epoch 8:  68%|███████████████████████████████████████████████████████████▌                           | 26/38 [00:31<00:14,  1.23s/it, loss=-0.61, v_num=29]
Epoch 8:  71%|█████████████████████████████████████████████████████████████▊                         | 27/38 [00:32<00:13,  1.20s/it, loss=-0.61, v_num=29]
Epoch 8:  74%|████████████████████████████████████████████████████████████████                       | 28/38 [00:34<00:12,  1.24s/it, loss=-0.61, v_num=29]
Epoch 8:  76%|██████████████████████████████████████████████████████████████████▍                    | 29/38 [00:35<00:10,  1.22s/it, loss=-0.61, v_num=29]
Epoch 8:  79%|████████████████████████████████████████████████████████████████████▋                  | 30/38 [00:37<00:09,  1.24s/it, loss=-0.61, v_num=29]
Epoch 8:  82%|██████████████████████████████████████████████████████████████████████▉                | 31/38 [00:37<00:08,  1.22s/it, loss=-0.61, v_num=29]
Epoch 8:  84%|█████████████████████████████████████████████████████████████████████████▎             | 32/38 [00:40<00:07,  1.25s/it, loss=-0.61, v_num=29]
Epoch 8:  87%|███████████████████████████████████████████████████████████████████████████▌           | 33/38 [00:40<00:06,  1.23s/it, loss=-0.61, v_num=29]
Epoch 8:  89%|█████████████████████████████████████████████████████████████████████████████▊         | 34/38 [00:42<00:05,  1.25s/it, loss=-0.61, v_num=29]
Epoch 8:  92%|████████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:43<00:03,  1.23s/it, loss=-0.61, v_num=29]
Epoch 8:  95%|██████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:45<00:02,  1.25s/it, loss=-0.61, v_num=29]
Epoch 8:  97%|████████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:45<00:01,  1.24s/it, loss=-0.61, v_num=29]
Epoch 8: 100%|███████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:49<00:00,  1.31s/it, loss=-0.61, v_num=29]
Epoch 9:  50%|███████████████████████████████████████████                                           | 19/38 [00:21<00:21,  1.11s/it, loss=-0.948, v_num=29]
Validation: 0it [00:00, ?it/s]
Validation:   0%|                                                                                                                   | 0/19 [00:00<?, ?it/s]
Validation DataLoader 0:   0%|                                                                                                      | 0/19 [00:00<?, ?it/s]
Epoch 9:  53%|█████████████████████████████████████████████▎                                        | 20/38 [00:25<00:22,  1.27s/it, loss=-0.948, v_num=29]
Epoch 9:  55%|███████████████████████████████████████████████▌                                      | 21/38 [00:25<00:20,  1.23s/it, loss=-0.948, v_num=29]
Epoch 9:  58%|█████████████████████████████████████████████████▊                                    | 22/38 [00:26<00:19,  1.22s/it, loss=-0.948, v_num=29]
Epoch 9:  61%|████████████████████████████████████████████████████                                  | 23/38 [00:27<00:17,  1.18s/it, loss=-0.948, v_num=29]
Epoch 9:  63%|██████████████████████████████████████████████████████▎                               | 24/38 [00:29<00:17,  1.22s/it, loss=-0.948, v_num=29]
Epoch 9:  66%|████████████████████████████████████████████████████████▌                             | 25/38 [00:29<00:15,  1.18s/it, loss=-0.948, v_num=29]
Epoch 9:  68%|██████████████████████████████████████████████████████████▊                           | 26/38 [00:31<00:14,  1.22s/it, loss=-0.948, v_num=29]
Epoch 9:  71%|█████████████████████████████████████████████████████████████                         | 27/38 [00:32<00:13,  1.19s/it, loss=-0.948, v_num=29]
Epoch 9:  74%|███████████████████████████████████████████████████████████████▎                      | 28/38 [00:34<00:12,  1.23s/it, loss=-0.948, v_num=29]
Epoch 9:  76%|█████████████████████████████████████████████████████████████████▋                    | 29/38 [00:34<00:10,  1.20s/it, loss=-0.948, v_num=29]
Epoch 9:  79%|███████████████████████████████████████████████████████████████████▉                  | 30/38 [00:36<00:09,  1.22s/it, loss=-0.948, v_num=29]
Epoch 9:  82%|██████████████████████████████████████████████████████████████████████▏               | 31/38 [00:37<00:08,  1.20s/it, loss=-0.948, v_num=29]
Epoch 9:  84%|████████████████████████████████████████████████████████████████████████▍             | 32/38 [00:39<00:07,  1.23s/it, loss=-0.948, v_num=29]
Epoch 9:  87%|██████████████████████████████████████████████████████████████████████████▋           | 33/38 [00:39<00:06,  1.20s/it, loss=-0.948, v_num=29]
Epoch 9:  89%|████████████████████████████████████████████████████████████████████████████▉         | 34/38 [00:41<00:04,  1.23s/it, loss=-0.948, v_num=29]
Epoch 9:  92%|███████████████████████████████████████████████████████████████████████████████▏      | 35/38 [00:42<00:03,  1.20s/it, loss=-0.948, v_num=29]
Epoch 9:  95%|█████████████████████████████████████████████████████████████████████████████████▍    | 36/38 [00:44<00:02,  1.23s/it, loss=-0.948, v_num=29]
Epoch 9:  97%|███████████████████████████████████████████████████████████████████████████████████▋  | 37/38 [00:44<00:01,  1.20s/it, loss=-0.948, v_num=29]
Epoch 9: 100%|██████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:48<00:00,  1.28s/it, loss=-0.948, v_num=29]
Epoch 9: 100%|██████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:49<00:00,  1.30s/it, loss=-0.948, v_num=29]
`Trainer.fit` stopped: `max_epochs=10` reached.
Epoch 9: 100%|██████████████████████████████████████████████████████████████████████████████████████| 38/38 [00:49<00:00,  1.30s/it, loss=-0.948, v_num=29]

Please let me know what's the solution of this. Am I doing some wrong here?

Environment

Minimal Reproducible Example

No response

Additional

No response

Are you willing to submit a PR?

github-actions[bot] commented 1 year ago

👋 Hello @mohdsaqibxa, thank you for leaving an issue on Roboflow Notebooks.

🐞 Bug reports

If you are filing a bug report, please be as detailed as possible. This will help us more easily diagnose and resolve the problem you are facing. To learn more about contributing, check out our Contributing Guidelines.

If you require support with custom code that is not part of Roboflow Notebooks, please reach out on the Roboflow Forum or on the GitHub Discussions page associated with this repository.

💬 Get in touch

Do you have more questions about Roboflow that we haven't responded to yet? Feel free to ask them on the Roboflow Discuss forum. Our developer advocates and community team actively respond to questions there.

To ask questions about Notebooks, head over to the GitHub Discussions section of this repository.

mohdsaqibxa commented 1 year ago

Can anyone help me on this one please?

SkalskiP commented 1 year ago

Hi, @mohdsaqibxa 👋🏻! I just checked our notebook example, and it looks like it works. Loss is being minimized.

We will need more information to debug. What dataset are you using?

nataliameira commented 11 months ago

Hello @mohdsaqibxa

Were you able to train with your custom dataset?