Chilfish / Weibo-archiver

将微博导出备份的油猴脚本,为号被完全夹没前未雨绸缪 😭
https://weibo.chilfish.top
Apache License 2.0
294 stars 11 forks source link

爬取过于频繁,被封 ip 或有其他限制 #40

Closed Chilfish closed 8 months ago

Chilfish commented 8 months ago

Bug 描述

发现并发过快了,爬取十分钟、一千多条之后便得不到数据了,有时会返回错误码

https://github.com/Chilfish/Weibo-archiver/discussions/37#discussioncomment-8908651

复现步骤

No response

脚本版本

No response

浏览器版本

v0.3.9

错误信息

No response

附加截图

No response

Chilfish commented 8 months ago

更多一些观察到的细节:

Chilfish commented 8 months ago

大概地修了一下这个问题,放缓了一些速度 weibo-archiver.user.js.zip