dataabc / weibo-crawler

新浪微博爬虫,用python爬取新浪微博数据,并下载微博图片和微博视频
3.22k stars 737 forks source link

如果是长微博出现'全文'字样爬取不全 #413

Closed HanchuQin closed 6 months ago

HanchuQin commented 6 months ago

https://i.imgur.com/qfTWY3H.png

HanchuQin commented 6 months ago

pycharm64_Dzp1rWMZdm

dataabc commented 6 months ago

感谢反馈。可能是网页格式改变了,导致全文无法全部获取,我现在不方便调试,可能要过一段时间才能修改。

HanchuQin commented 6 months ago

感谢反馈。可能是网页格式改变了,导致全文无法全部获取,我现在不方便调试,可能要过一段时间才能修改。

大佬是我错了,debug走了一下,发现是cookie过期了,导致get_long_weibo方法拿不到长微博的html。