search

Sniper970119 / dianping_spider

大众点评爬虫（全站可爬，解决动态字体加密，非OCR）。持续更新
GNU General Public License v3.0
889 stars 157 forks source link

请教下复现时几个问题 #17

Closed DOO715 closed 3 years ago

DOO715 commented 3 years ago

主要是复现是卡在了这步 image

想请教下config.ini设置有没有问题

1、没有找到tcv 和uuid，使用的是默认值 主要是抓包的时候没有找到相应的allReview或者basicHiddenInfo的请求连接

2、mongdb设置为：mongo_path = mongodb://127.0.0.1:27017 运行时启动了mongod，能正常打开127.0.0.1:27017，如下图所示 image

但是是初次使用，不确定mongdb是否设置成功？ 另外商家搜索结果展示的图，请问是用什么软件看的？ image

3、keyword默认写的火锅，请问可以置空值吗？

Sniper970119 commented 3 years ago
  1. require.ini 中 谨慎值为True可以不用tsv和uuid，否则需要更新。
  2. 正确，Navicat或者其他 数据库可视化 软件
  3. 不可以（但是在使用定制url模式时会失效，但并不代表可以删）
DOO715 commented 3 years ago

http提取接口需要设置吗？ 无论此项删掉与否，这个配置下依然没速度呢 image image

Sniper970119 commented 3 years ago

如果use_proxy 为 True 则至少需要http_link 或者 key_id key_key（没有开发）中的一项。

也就是目前为止，必须要http_link ，详情查看 docs里的proxy.md

Sniper970119 commented 3 years ago

如果没问题了 就把issue关了吧