search

owner888 / phpspider

《我用爬虫一天时间“偷了”知乎一百万用户，只为证明PHP是世界上最好的语言 》所使用的程序
3.49k stars 1.18k forks source link

页面数据超过3M爬虫不处理有什么解决办法吗？ #147

Open lintingweiHS opened 4 years ago

lintingweiHS commented 4 years ago

页面数据超过3M爬虫不处理有什么解决办法吗？

owner888 commented 4 years ago

页面超过3M不处理一般是内存溢出了，有报错吗 ？