[Podzadanie#17] Kod scrapera - proanima

Event-Hub / EventsScraper

Application which search information about cultural events and collect in one place

GNU General Public License v2.0

3 stars 1 forks source link

[Podzadanie#17] Kod scrapera - proanima #31

Open poweredbychocolate opened 2 years ago

poweredbychocolate commented 2 years ago

Scraper strony proanima

kret11 commented 2 years ago

HtmlScraper

serwis który cyklicznie odpala się i pobiera kod HTML podanych stron w jakimś pliku i przekazuje je do przetworzenia użył bym do tego Spring Quartz Scheudler HtmlProcessor

serwis wyciągający poszczególne eventy z kodu HTML oraz tworzący z nich obietky Java metoda sprawdzająca czy dany event się nie dupilkuje z już istniejącym w bazie danych (trzeba zwrócić uwagę aby z różnych stron sie nie dublowły)