Open matiskay opened 9 years ago
cada vez que activo un spider se va guardando el output en un log, usando import logging
.
talvez esa metadata se puede poner en el logging?
@aniversarioperu, estos datos deben ser parte del item. Esta informacion sirve para debugear la spider y ubicar donde se encuentra el item buscado. Ademas, tambien puede servir para hacer busquedas mas rapidamente en los sitios de visitas si se encuentra algo revelados.
We can also add magic fields: https://github.com/scrapinghub/scrapylib/blob/master/scrapylib/magicfields.py
Con el fin de rastrear los items scrapeados por una spider sugiro agregar la siguiente informacion a cada spider.
Por ahora esos campos serian utiles.