lenarsaitov / cianparser

Сбор данных с сайта объявлений Циан / The parser of general information from the site cian.ru
https://pypi.org/project/cianparser/
MIT License
131 stars 43 forks source link

Проблема с полным скрапингом страницы (express false) #31

Open nikitastogniy812 opened 1 year ago

nikitastogniy812 commented 1 year ago

Это если просто вставить список прокси

9 | proxy 50.171.32.224:80: unavailable.. trying another..
Error: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate (_ssl.c:1002)>

Но если добавить в файл parser.py следующее

import ssl
ssl._create_default_https_context = ssl._create_unverified_context

На все прокси указана одна ошибка 32 | proxy 37.19.220.129:8443: there is captcha.. trying another

Без прокси 403