search

Jiang-Fallen / JInfoSpider

爬虫，爬取皮皮虾、糗事百科、百思不得姐站点的内容
23 stars 9 forks source link

皮皮虾爬虫没有数据 #1

Open wenzidance opened 5 years ago

wenzidance commented 5 years ago

刚才看了一下你的代码,皮皮虾爬虫执行没有数据

Jiang-Fallen commented 5 years ago

可能皮皮虾做了一些反爬措施，皮皮虾的数据内容是通过charles解析皮皮虾app得到的。 如果需要可以尝试使用charles获得其api地址

wenzidance commented 5 years ago

可能皮皮虾做了一些反爬措施，皮皮虾的数据内容是通过charles解析皮皮虾app得到的。 如果需要可以尝试使用charles获得其api地址

我按照你说的做了, 我发现他们的as,cp和mas都是变化的, 找不到解决方案

Passengerss commented 3 years ago

可能皮皮虾做了一些反爬措施，皮皮虾的数据内容是通过charles解析皮皮虾app得到的。 如果需要可以尝试使用charles获得其api地址

我按照你说的做了, 我发现他们的as,cp和mas都是变化的, 找不到解决方案

皮皮虾对query参数跟Header都进行了签名, 比较麻烦. 需要逆向