estliberitas
commented
11 years ago Надо другую лейблу поставить. Это отсутствие анонимности. Нужно заставить тор:
- работать
- менять маршрут каждые N секунд
Closed Lactarius2010 closed 11 years ago
estliberitas
commented
11 years ago Надо другую лейблу поставить. Это отсутствие анонимности. Нужно заставить тор:
Lactarius2010
commented
11 years ago http://85.25.148.30:3001/?hl=ru#/executions/1471
SyntaxError: Unexpected token u Seems that we are blocked or page structure changed at Object.parse (native) at AvitoScraper.BaseScraper.tryParseJson ........
estliberitas
commented
11 years ago Если запуск выдаёт ошибку, это значит, что запрос списка объяв упал. А это значит, либо неполадки в передаче данных. Но скорее всего - нас по IP блочат.
estliberitas
commented
11 years ago Закрываю, так как блочит по IP avito. Это уже вопрос организации анонимности. Скрейпер авито работает прекрасно.
SyntaxError: Unexpected token u Seems that we are blocked or page structure changed at Object.parse (native) at AvitoScraper.BaseScraper.tryParseJson (/opt/scraper-panel/models/base-scraper.js:349:21) at AvitoScraper.getItemList (/opt/scraper-panel/models/scrapers/avito.js:109:23) at Request._.extend.evaluate as _callback at Request.init.self.callback (/opt/scraper-panel/node_modules/phantom-proxy/lib/request/main.js:122:22) at Request.EventEmitter.emit (events.js:99:17) at Request. (/opt/scraper-panel/node_modules/phantom-proxy/lib/request/main.js:655:16) at Request.EventEmitter.emit (events.js:126:20) at IncomingMessage.Request.start.self.req.self.httpModule.request.buffer (/opt/scraper-panel/node_modules/phantom-proxy/lib/request/main.js:617:14) at IncomingMessage.EventEmitter.emit (events.js:126:20)