求助-爬微博进度100%，但是数量明显跟实际数量不一致有可能是何原因？

[wendywjhu]

在执行过程中，还有一个日志是写入MYSQL的日志，那个日志看着数量级是对的，但是最终落入MYSQL的数量不对。

[dataabc]

有可能是之前部分微博已经写入数据库了，程序只将数据库没有的内容写入，所以数量会少。

[wendywjhu]

有可能是之前部分微博已经写入数据库了，程序只将数据库没有的内容写入，所以数量会少。

可能是cookie的原因，从日志上看到2000条后打的日志就不太正常了，内容就打印不出来了，回来翻看文档，发现可能是cookie的原因，我去设置一下先

[wendywjhu]

解决了，是cookie的原因。