search

srx-2000 / spider_collection

python爬虫，目前库存：网易云音乐歌曲爬取，B站视频爬取，知乎问答爬取，壁纸爬取，xvideos视频爬取，有声书爬取，微博爬虫，安居客信息爬取+数据可视化，哔哩哔哩视频封面提取器，ip代理池封装，知乎百万级用户爬虫+数据分析，github用户爬虫
MIT License
1.22k stars 221 forks source link

代理池 #26

Closed stu-xsy closed 2 years ago

stu-xsy commented 2 years ago

请问代理具体怎么用呢

stu-xsy commented 2 years ago

requests.exceptions.ConnectionError: HTTPConnectionPool(host='127.0.0.1', port=5010): Max retries exceeded with url: /delete/?proxy= (Caused by NewConnectionError('<urllib3.connection.HTTPConnection object at 0x000002317DC4B048>: Failed to establish a new connection: [WinError 10061] 由于目标计算机积极拒绝，无法连接。'))

srx-2000 commented 2 years ago

我这个代理池的代码只是对jhao104/proxy_pool项目的一个封装，使用前需要先clone上述项目，并跑起来之后，就可以接入我封装的这个代码了，具体跑那个项目的流程。其README里面写的很清楚，我在这里就不复述了

stu-xsy commented 2 years ago

好的谢谢