search

Ciyfly / Argo

Argo is an automated general crawler for automatically obtaining website URLs . Argo 是一个自动化扫描器爬虫 用于自动化获取网站的URL 基于go-rod实现了静态和动态结合的方式来实现
GNU General Public License v3.0
211 stars 23 forks source link

fix 超时卡死问题 #8

Closed Ciyfly closed 1 year ago

Ciyfly commented 1 year ago
  1. 合并了融合了yhy提交的代码
  2. 解决了卡死问题 设定了默认tab 超过30s会结束
  3. 优化下协程池的问题去掉了ants 直接使用管道限制
  4. 去除了多余的gologger代码 统一日志输出