search

7325156 / jjwxcNovelCrawler

使用python3爬虫下载晋江小说（可下载VIP章节，app源下载）【此项目仅供学习交流使用，严禁用于商业用途，请在24小时之内删除。】
283 stars 48 forks source link

晋江VIP章节下载好像有问题... #3

Closed lyc8503 closed 3 years ago

lyc8503 commented 3 years ago

登录成功了也无法下载 VIP 章节... Fiddler 抓包发现页面访问成功, 但是还是显示下载失败.

7325156 commented 3 years ago

换个浏览器获取cookie，或者换个网试试

H1W0XXX commented 3 years ago

实测VIP章节下载失败，cookie用火狐谷歌ie都试了一遍还是下载失败。自己requests.get了一下，能正常请求到vip章节。

H1W0XXX commented 3 years ago

VIP章节有反爬

lyc8503 commented 3 years ago

可能晋江最近更新了, 现在网页端的反爬是用自定义的字体包做的...

7325156 commented 3 years ago

我最近比较忙，没空搞这个，可以试试简单的反爬虫机制，比如随机IP、user-agent什么的。

7325156 commented 3 years ago

已处理完，可以尝试最新测试版