search

modelscope / DiffSynth-Studio

Enjoy the magic of Diffusion models!
Apache License 2.0
6.54k stars 591 forks source link

Too Slow to Execute #162

Open mr-shitij opened 2 months ago

mr-shitij commented 2 months ago

I am executing

https://github.com/modelscope/DiffSynth-Studio/blob/main/examples/Diffutoon/diffutoon_toon_shading_with_editing_signals.py

it took me 6 hr to generate 11s video on RTX4090 GPU with 64GB of RAM; is there any way to do it fast.

nitinmukesh commented 2 months ago

I am trying a video on RTX 4060 / 8 GB VRAM / 16 GB RAM Duration: 10 s 287 ms fps: 30 width: 1024 height: 576


100%|███████████████████████████████████████████████████████████████████████████████| 308/308 [00:05<00:00, 55.64it/s]
100%|███████████████████████████████████████████████████████████████████████████████| 308/308 [00:37<00:00,  8.20it/s]
 70%|███████████████████████████████████████████████████████▎                       | 7/10 [1:10:38<30:15, 605.02s/it]

image

Let me try diffutoon_toon_shading_with_editing_signals.py

nitinmukesh commented 2 months ago

Yes it is very very slow For 1 sec video

Step 1

100%|█████████████████████████████████████████████████████████████████████████████████| 30/30 [00:04<00:00,  6.74it/s]
100%|█████████████████████████████████████████████████████████████████████████████████| 30/30 [00:07<00:00,  3.90it/s]
100%|█████████████████████████████████████████████████████████████████████████████████| 20/20 [19:43<00:00, 59.17s/it]
Fast Mode Step 1/4: 100%|██████████████████████████████████████████████████████████████| 7/7 [22:11<00:00, 190.24s/it]
Fast Mode Step 2/4: 100%|██████████████████████████████████████████████████████████████| 6/6 [18:51<00:00, 188.52s/it]
Fast Mode Step 3/4: 100%|██████████████████████████████████████████████████████████████| 7/7 [22:12<00:00, 190.29s/it]
Fast Mode Step 4/4: 100%|██████████████████████████████████████████████████████████████| 6/6 [19:09<00:00, 191.51s/it]
Saving images: 100%|██████████████████████████████████████████████████████████████████| 30/30 [00:09<00:00,  3.01it/s]
Saving video: 100%|███████████████████████████████████████████████████████████████████| 30/30 [00:00<00:00, 31.95it/s]

Step 2


100%|█████████████████████████████████████████████████████████████████████████████████| 30/30 [00:00<00:00, 64.72it/s]
100%|█████████████████████████████████████████████████████████████████████████████████| 30/30 [00:04<00:00,  7.10it/s]
100%|████████████████████████████████████████████████████████████████████████████████| 10/10 [58:49<00:00, 352.91s/it]
Saving images: 100%|██████████████████████████████████████████████████████████████████| 30/30 [00:17<00:00,  1.68it/s]
Saving video: 100%|███████████████████████████████████████████████████████████████████| 30/30 [00:02<00:00, 14.40it/s]