vicety / Pixiv-Crawler

Scrapy框架下的pixiv多功能爬虫
GNU General Public License v3.0
48 stars 12 forks source link

extract_json 函数报错 #5

Closed Luooke6002 closed 6 years ago

Luooke6002 commented 6 years ago

你好, 我昨天下载了你的Pixiv-Crawler,在运行main.py的过程中报错。 start = text.find(query_text) + len(query_text) 上面这行代码不起作用,我看了一下图片网页源码,发现: illust:{ 69758991(pid):{ {要提取的内容} } } 要提取的内容(上面加粗部分)在text(response.body)中没有找到。 作者君,有啥解决方法么? image image

vicety commented 6 years ago

我也不太确定为什么会出现这样的问题,我看了一下返回的response.body,在html head 第九个script下是有这个json的 image 你发的第一张图应该就是要提取出来的json内容,如果pixiv-beta.py 326行的text就是第一张图的内容的话,那应该是没有问题的

Luooke6002 commented 6 years ago

感谢作者君,找到问题了,是我密码输入错了。 非常感谢作者君的分享,阿里嘎多。