VasssilPopov / AllSpiders

Some spiders
0 stars 3 forks source link

RunAllSpiders from a python file #4

Closed peio closed 7 years ago

peio commented 7 years ago

Здравей,
За да избягаме от спецификите на плаформата (Linux vs. Windows), предлагам да изпълняваме всички scrapers от един файл.

Започнах RunAllSpiders.py, който вика два скрейпъра и съхранява изхода им в Report директорията. Крайната цел е да извиква всички спайдъри, да проверява данните им и да качва сваленото автоматично.

Би ли го разширил за останалите спайдъри и извикал проверките и качването на файловете.

Благодаря