dataabc / weibo-crawler

新浪微博爬虫,用python爬取新浪微博数据,并下载微博图片和微博视频
3.33k stars 744 forks source link

转发时候带的图片貌似不能下吧?还有,超话微博不能写入sqlite,貌似是因为那个超话图标 #327

Open gghrgr opened 1 year ago

dataabc commented 1 year ago

感谢反馈。您指的图片是被转发微博的图片,还是转发它的微博加的图片?前者应该是可以下载的,或者不确定。超话能写入其它文件吗?

gghrgr commented 1 year ago

转发它的微博加的图片 其他文件没试过,csv可以

dataabc commented 1 year ago

后加的图片可能是被过滤了,很多表情、图片格式比较特殊,没有保存。

gghrgr commented 1 year ago

后加的图片格式也是jpg的,请问有方法可以下吗

dataabc commented 1 year ago

因为很多表情特殊符号也是类似格式,所以在处理内容时过滤了。下载只能修改代码了。

gghrgr commented 1 year ago

因为很多表情特殊符号也是类似格式,所以在处理内容时过滤了。下载只能修改代码了。

谢谢解答