facert / awesome-spider

爬虫集合
MIT License
22.41k stars 4.87k forks source link

Update README.md #24

Closed emc2-2022 closed 6 years ago

emc2-2022 commented 6 years ago

使用selenium爬取煎蛋妹纸图片(Python3)

简介 在脚本中输入煎蛋妹子首页网址'https://jandan.net/ooxx', 脚本将自动补全网址,并下载煎蛋妹子全站图片。 之所以使用selenium是因为,煎蛋妹子原始图片url不出现在网页原始代码中,但可在chrome开发者工具中的Elements选项卡中查看,而webdriver.Chrome().get(url_base)可以轻松获取这些url。

这里是一个简单的例子,其实使用类似的套路可以处理大量此类网站,希望对爬虫学习者有一点点借鉴作用。