scrapy备忘

[kagxin]

• 洋葱网络 tor
• 随机选择一个代理 scrapy-proxies
• 一些免费代理 xiaoer 西刺
• 收费集成代理 scrapy-crawlera
• 一些插件scrapy-plugins
• pyvirtualdisplay

[kagxin]

xpath 标签有多个class，选中其中一个

//div[contains(@class, 'demo') and contains(@class, 'other')]