search

tocororo / iroko

Code of Sceiba
MIT License
0 stars 0 forks source link

Logs del harvester #74

Open malayibiri opened 8 months ago

malayibiri commented 8 months ago

Los logs del proceso de recoleccion en el modulo harvester, cuando hay un error se guardan en la base de datos, Esto es un error, corregirlo para almacenar los logs en la misma carpeta del repositorio o el registro que se está recolectando. Modulo: harvester/oai/harvester.py

`class OaiHarvester (SourceHarvester):

def process_pipeline(self):
    """
    overall process
    """
    file_path = OaiFetcher.fetch_url(self.repo.harvest_endpoint)
    source_id = OaiFetcherProcessor.process_file(file_path)
    OaiArchivist.archive_source(source_id)

`