dataabc / weibo-crawler

新浪微博爬虫,用python爬取新浪微博数据,并下载微博图片和微博视频
3.25k stars 739 forks source link

希望增添 since_date 对时间的支持 #396

Closed plutonji closed 11 months ago

plutonji commented 11 months ago

目前since_date只能填写日期,精确到天。使用场景上来说,我如果一天内要多次爬取,可能就会发生重复爬取上一次爬取过的当天内容,因此希望能添加对更精确的时间支持,如 weibo-spider 一样。

dataabc commented 11 months ago

目前我不方便添加这个,不过思路很简单,您可以自己实现。比如是日期时,可以转化为这个日期的0点0分,然后和微博时间比较。