爬Twitter遇到JavaScript 不可用问题。

code4craft / webmagic

A scalable web crawler framework for Java.

http://webmagic.io/

Apache License 2.0

11.42k stars 4.18k forks source link

Open wayss000 opened 1 year ago

wayss000 commented 1 year ago

<h1>JavaScript 不可用。</h1>
<p>我们检测到浏览器禁用了 JavaScript。请启用 JavaScript 或改用支持的浏览器来继续访问 twitter.com。你可以在我们的帮助中心查看支持的浏览器列表。</p>

hooyantsing commented 1 year ago

尝试使用 webmagic-selenium 组件模拟浏览器后爬取