-
搜素微博时会出现这种情况:一页的内容非常少,远低于我这里的7条,推测可能微博屏蔽了某些内容,在最极端的情况下,一页可能什么都没有,这时就会出现搜索结果为空
因此parse_page似乎会提前终止
特别的,如果第一页什么都没有,就会导致诸如parse, parse_by_day之类的立即停止
这是我目前的改动
``
…
-
大佬,当在前端网页点击搜索按钮时,爬虫报错
Traceback (most recent call last):
File "C:\Users\hl199\Topic_and_user_profile_analysis_system-master\code\weibo_crawler\selector_parser\search_weibo_parser.py", line 2…
-
微博内容精选
-
昨天都还是正常的可以爬取数据,今天早上就续行了,很多字段报错,下面只是其中一个,之前改了一些修复了一些,现在还有,求大佬解答
Traceback (most recent call last):
File "C:\Users\\.conda\envs\Network_spider\lib\site-packages\scrapy\utils\defer.py", line 279, in …
-
-
D:\Anaconda3\envs\py37\python.exe D:/Code/weibo_supertopic_sign-main/index.py
2022-10-22 00:05:24 INFO Start forming user cookie dict
2022-10-22 00:05:29 INFO Start get username
2022-10-22 00:05:2…
-
```
Traceback (most recent call last):
File "C:\Users\Administrator\Desktop\weibo_points-master\main.py", line 1627, in
cid = find_super_topic(st_name)
File "C:\Users\Administrator\Deskto…
-
Github: [iwillwen](https://github.com/iwillwen)
Topic: All about MinDB
Weibo: [@Wen_小问](http://weibo.com/iwillwen)
讲讲 MinDB 的历程和实践应用。
-
可以私聊一下吗?
-
数据爬取正常,在分析的过程中,报错如下:
[2023-02-28 20:54:29,371: ERROR/MainProcess] Task celery_task.worker.task_schedule[f252c77a-183e-4b50-ac0e-3f138b6b8d31] raised unexpected: KeyError('hot_count')
Traceback (mo…