search

13adams37 / phpErrorCrawler

0 stars 0 forks source link

Остановить краулер при редиректе (301) #1

Closed 13adams37 closed 1 month ago

13adams37 commented 3 months ago

Проблема с переходом паука на не разрешённый домен (выход с основного). Получает ответ на запрос при редиректе на другой домен. Нужно отменить сохранения ответа после редиректа.

13adams37 commented 3 months ago

Плюс сохраняется отчёт с доменом редиректа

13adams37 commented 1 month ago

Добавить строгий режим (параметр запуска) проверки адреса запроса. То есть, если введён домен domain.test.ru то если будет .domain или .test, то он будет игнорироваться в отчёте (даже запросы не стоит отсылать)