search

zcyeee / EastMoney_Crawler

东方财富网股吧爬虫，爬取帖子及其评论的相关信息，并储存到数据库中（附详细操作说明）
MIT License
32 stars 7 forks source link

大佬能问一下，无法获取listitem的div.update.pub_time怎么办啊 #5

Closed cstk2715 closed 2 months ago

cstk2715 commented 2 months ago

image

cstk2715 commented 2 months ago

是因为网页为完全加载还是其他什么原因啊？之前尝试着爬都没出这个问题

cstk2715 commented 2 months ago

知道问题了，假如listitems中有一个listitem的url包含gubatopic.eastmoney.com，那么这个listitem的属性就与其他的不同，这就没有pub_time这个属性，取而代之的是update，这就会造成无法爬取。因此要么直接跳过那一页，或者检测有无gubatopic.eastmoney.com并跳过

zcyeee commented 2 months ago

非常感谢你的issue🤓，并且一针见血地指出了问题所在，我也会抽空修复这个小bug。最后祝您生活愉快！🎉

zcyeee commented 2 months ago

已顺利修复😌