search

Python3WebSpider / ScrapyRedisBloomFilter

Scrapy Redis Bloom Filter
175 stars 52 forks source link

怎么和scrapy_redis结合，我发现这个俩不能并存 #5

Open billsteve opened 6 years ago

billsteve commented 6 years ago

rt

laggardkernel commented 4 years ago

结合个毛，这玩意就是 fork 自 scrapy_redis，尽管 commit 历史里作者抹掉了这些信息。

其实自己封装个支持 bloomfilter 的 RFPDupeFilter 类就完了，不知道作者为什么想要出个单独的包。

kanadeblisst commented 3 years ago

这是个什么独特的需求