srx-2000 / spider_collection

python爬虫,目前库存:网易云音乐歌曲爬取,B站视频爬取,知乎问答爬取,壁纸爬取,xvideos视频爬取,有声书爬取,微博爬虫,安居客信息爬取+数据可视化,哔哩哔哩视频封面提取器,ip代理池封装,知乎百万级用户爬虫+数据分析,github用户爬虫
MIT License
1.22k stars 221 forks source link

[Bug] #30

Open a139169370 opened 2 years ago

a139169370 commented 2 years ago

具体项目 【e.g. B站爬虫】

bug描述 创建了bilbili_Output.txt但是无内容,0字节

bug复现步骤

  1. 修改了bilibili.py的 base_url = "https://www.bilibili.com/video/BV1Lr4y1s7ty" up_uid = "37754047" image

  2. 修改了SP_download.py os.system(r"you-get -o D:/bilibili/sp "+url) image

3.尝试分别在路径 spider_collection\bilibiliSP spider_collection\bilibiliSP\bilibiliSP spider_collection\bilibiliSP\bilibiliSP\spiders 执行scrapy crawl bilibili得到的均是0字节文件

报错信息 无明显报错信息 image

系统环境

其他 其余相关描述或内容

srx-2000 commented 2 years ago

嗯.....我这里也测试了一下,那个爬虫确实不可用了,大概率是因为bilibili改了网页ui的问题,我争取在这个礼拜之内重新写一版上传

a139169370 commented 2 years ago

嗯..... 我这里也测试了一下,那个爬虫确实不可用了,大概率是因为 bilibili 改了网页 ui 的问题,我争取在这个礼拜之内重新写一版上传

好的!辛苦大佬

ForcedStuffy commented 6 months ago

重新改了嘛,我现在运行的output还是为空的