thsheep / scrapy_redis_cluster

scrapy-redis的集群版,可以借助Redis集群实现海量网站的独立去重,避免单机内存不足的尴尬
138 stars 41 forks source link

使用这个组件我是需要先搭建一套redis集群嘛? #5

Closed ayay129 closed 5 years ago

ayay129 commented 5 years ago

使用这个组件我是需要先搭建一套redis集群嘛?

thsheep commented 5 years ago

当然需要