爬虫启动管理 - Githubissues

JPCui / red-spider

:spider:基于webmagic的可定制规则爬虫

1 stars 1 forks source link

爬虫启动管理 #11

Open JPCui opened 5 years ago

JPCui commented 5 years ago

针对每个站点，分配单独的线程池
每个线程池单独管理（启动、暂停、队列监控）