Mejorar performance del scraper de exchange-rates

datosgobar / series-tiempo-ar-bcra-scraping

Pequeños proyectos de scraping de series de tiempo del Banco Central de la República Argentina de fuentes web.

MIT License

4 stars 3 forks source link

Open abenassi opened 5 years ago

abenassi commented 5 years ago

Evitando loops para hacer chequeos y usando más métodos de pandas para extraer los sets de queries ya hechos
No mejorar la performance al costo de paralelizar o exigir más velocidad a las requests hechas a la fuente

Alsosa commented 5 years ago

Agustín, te dejo los dos txt con el análisis de cuánto tiempo tarda cada función.

Sin el archivo intermedio creado: pyinstrument2.txt

Con el archivo intermedio creado: pyinstrument.txt