search

zhegexiaohuozi / SeimiCrawler

一个简单、敏捷、分布式的支持SpringBoot的Java爬虫框架;An agile, distributed crawler framework.
http://seimicrawler.org
Apache License 2.0
1.98k stars 681 forks source link

更改线程池方案,增加springboot下测试用例 #41

Closed zzldnl closed 5 years ago

zzldnl commented 5 years ago

更改核心线程池方案，由原来一个crawler多个线程从队列中取抓取请求，改为一个crawler一个线程从队列里取抓取请求，再丢到crawler自己的线程池中处理。

zhegexiaohuozi commented 5 years ago

作为你们自己的分支使用吧，不适合公共分支。