search

matth3us / RNu-D2

Extração e tratamento de dados de fatura atual do Nubank usando artoo.js para scrapping no próprio navegador e script em R para tratamento dos dados
GNU General Public License v3.0
0 stars 0 forks source link

Definir período de extração do Nubank #6

Open matth3us opened 5 years ago

matth3us commented 5 years ago

Hoje, o script retira apenas o que estiver à vista na página do Nubank. No futuro, permitir ao script interagir com o site, definindo períodos de transações diferentes.

matth3us commented 5 years ago

Fazer o Artoo pegar o máximo de informações possível da página, e deixar o R filtrar pela data de interesse

matth3us commented 5 years ago

http://medialab.github.io/artoo/spiders/

matth3us commented 5 years ago

Complicado demais. Não é simplesmente uma questão de scroll ou de entrada de dados ajax. O método de atualização do período por meio de um time chart personalizado tornou inviável fazer isso funcionar. A ideia será fazer uma extração manual com todos os dados desde o início do nubank, separando todas as classes utilizadas para as transações, e usar essa informação permanentemente no futuro.

matth3us commented 5 years ago

Nova abordagem: o Nubank parece funcionar com APIs públicas! Se for o caso, isso muda tudo. Estudar como funcionam essas APIs públicas e compreender como elas poderiam ser traduzidas para o R. Funcionando, resolve o projeto inteiro, bastando passar para a parte do Shiny App!

Não esquecer de agradecer o projeto original!

https://github.com/Astrocoders/nubank-api