otimizar uso de memória RAM

covid19br / nowcasting

Repositório para análises de nowcasting

11 stars 1 forks source link

otimizar uso de memória RAM #41

Open renatocoutinho opened 3 years ago

renatocoutinho commented 3 years ago

Mesmo processando cidades pequenas, o uso de memória chega a 2.5G de RAM.

Várias possibilidades a investigar:

estamos mantendo na memória partes grandes da sivep?
não limpamos tantos campos quanto poderíamos?
copiamos milhares de vezes a parte consolidada pro cálculo do R efetivo?
poderíamos limpar mais agressivamente objetos não utilizados?
faz diferença carregar menos pacotes? (atualmente carregamos um monte de coisas do modelogro junto)
...

renatocoutinho commented 3 years ago

Parece que parte importante do problema é que a simples importação da SIVEP já gera uma pegada de memória imensa, mesmo removendo todos os objetos. Deixei um exemplo mínimo neste gist.