ityouknow / python-crawler

Python Crawler
68 stars 52 forks source link

批量 #1

Open stsxing opened 7 years ago

stsxing commented 7 years ago

单个页面换了URL下载没问题,批量下载报错好多 😂😂,菜鸟,还不太懂怎么用chrome自带的HTTP工具解析表单

ityouknow commented 7 years ago

你指的是哪个项目。

stsxing commented 7 years ago

python-crawler 爬取1024的那个 , 单个页面挂代理可以下,批量的时候直接404了, 应该是urllist运行没通过的原因

ityouknow commented 7 years ago

有可能他们页面格式有调整。需要微调代码