Boris-code / feapder

🚀🚀🚀feapder is an easy to use, powerful crawler framework | feapder是一款上手简单,功能强大的Python爬虫框架。内置AirSpider、Spider、TaskSpider、BatchSpider四种爬虫解决不同场景的需求。且支持断点续爬、监控报警、浏览器渲染、海量数据去重等功能。更有功能强大的爬虫管理系统feaplat为其提供方便的部署及调度
http://feapder.com
Other
2.88k stars 476 forks source link

selenium可过Cloudflare检测 #212

Open ShellMonster opened 1 year ago

ShellMonster commented 1 year ago

修改库依赖;

第245行,换了实例化的方法; 第189,190行注释掉了,因为用undetected_chromedriver时这两个参数会导致Chrome闪退;

但是不知道咋结合源代码,根据use_stealth_js的布尔值进行判断用哪个来实例化;

Boris-code commented 1 year ago

因引入了三方库,暂不合并,如需使用,可自行实现下载器来解决