search

zhegexiaohuozi / SeimiCrawler

一个简单、敏捷、分布式的支持SpringBoot的Java爬虫框架;An agile, distributed crawler framework.
http://seimicrawler.org
Apache License 2.0
1.98k stars 681 forks source link

不能自定义线程数吗？12核cpu ，跑了100多个线程。。。。 #59

Open kuaile1993 opened 4 years ago

kuaile1993 commented 4 years ago

不能自定义线程数吗？12核cpu ，跑了100多个线程。。。。

abadfox233 commented 4 years ago

不能自定义线程，只能修改源码中的 cn.wanghaomiao.seimi.Constants.BASE_THREAD_NUM 和 cn.wanghaomiao.seimi.spring.common.SeimiCrawlerBootstrapListener.java 来修改线程池逻辑

kuaile1993 commented 4 years ago

下个版本能否加上呢？ 自己改虽然可以，但是有点麻烦

fanlushuai commented 3 years ago

同样12核心同样遭遇，改了一个版本，后来发现不改源码。也能绕过去。 hack seimi