Sniper970119 / dianping_spider

大众点评爬虫(全站可爬,解决动态字体加密,非OCR)。持续更新
GNU General Public License v3.0
889 stars 157 forks source link

无评论的商家会报错中断 #39

Closed Euclid-Jie closed 1 year ago

Euclid-Jie commented 1 year ago

首先非常感谢您这个项目的帮助! 我需要遍历某地区所有银行网点,以及其评论信息。部分银行无评论信息,程序会报错终止,我尝试修改review.py,将这部分的循环reviews = html.select('.reviews-items')[0].select('.main-review'),添加try结构。这样以来缺失不会报错终止,但是数据库中不会写入这些无评论的银行数据。 非常期待得到您的答复

Sniper970119 commented 1 year ago

你好,给一个具体链接看一下吧,我这看如果只对那一句话加try,应该是可以正确保存其他非评论细节内容的

Euclid-Jie commented 1 year ago

你好,给一个具体链接看一下吧,我这看如果只对那一句话加try,应该是可以正确保存其他非评论细节内容的 感谢您,是我pycharm查看数据库只显示了前20条数据,让我误以为没有写入,非常感谢您的回复