[Sugestão] Tema: Numba e Dask para otimização do tempo de processamento

dunossauro / live-de-python

Repositório das lives de python semanais

https://youtube.com/@dunossauro

MIT License

1.18k stars 211 forks source link

[Sugestão] Tema: Numba e Dask para otimização do tempo de processamento #99

Open leo-smi opened 4 years ago

leo-smi commented 4 years ago

Numba e Dask para otimização do tempo de processamento de códigos em Python:

Quando usar;
Porque usar;
Comparar com Numpy, etc.; De repente abordar conjunto ao raspberry se possível (relacionado a eletrônica que exija um processamento de dados em tempo real maior)

Grato!

frbelotto commented 1 year ago

Vim procurar exatamente para sugerir algum vídeo sobre dask. Tenho trabalhado com Pandas mas ele começou não dar conta, e acho pouco material sobre o Dask.

leo-smi commented 1 year ago

Pois é, agora com o python sofrendo melhorias de desempenho nem sei de dask e numba ficarão ultrapassados.

frbelotto commented 1 year ago

Pois é, agora com o python sofrendo melhorias de desempenho nem sei de dask e numba ficarão ultrapassados.

Vejo de forma diferente. A melhor performance do python vai continuar ajudando no pandas e talvez torne algumas situações onde precisávamos de paralelismo desnecessárias, mas o dask tem um foco diferente, onde tratamos muito de bases que não cabem na memória ram da máquina (limitação crítica do pandas).

leo-smi commented 1 year ago

Faz sentido mesmo, no aguardo.