Python3WebSpider / Jiepai

Jiepai Pictures of Toutiao
124 stars 142 forks source link

获取原图方式有点问题 #19

Open fatelpc opened 5 years ago

fatelpc commented 5 years ago

做了简单的修改

1. 原图(大图)之前使用的lager方法只能获取很少的图片部分(几张图片),修改后的代码现在测试都能正常获取下载全部的图片
2. 之前构建的url地址获取的 json做了下修改,加入cookies能正常获取网页提取的url地址(如果大量爬取或许需要加入cookies池),我不能理解为什么是那样去获取(很神奇他竟然不需要cookies能获取完整的json,虽然和我们访问网页获取的不一致),希望有人解释一下.

见附件 Jiepai-master.zip

pengshilin commented 5 years ago

不行,你的获取的也是小图