search

Swalloow / Swalloow.github.io

Swalloow Blog
http://swalloow.github.io
2 stars 0 forks source link

pandas-parallel/ #10

Open utterances-bot opened 2 years ago

utterances-bot commented 2 years ago

Pandas DataFrame을 병렬처리 하는 방법 | Swalloow Blog

Scikit-learn의 모델들은 cython과 joblib으로 최적화 및 자동 병렬처리 되도록 설계되어 있지만, Pandas는 여전히 내부적으로 병렬처리 기능을 지원하지 않습니다. 하지만, 큰 규모의 DataFrame을 돌리다보면 전처리에도 시간이 많이 걸리게 됩니다. 그런 경우에 병렬처리를

https://swalloow.github.io/pandas-parallel/

semanticist21 commented 2 years ago

빌려서 써봤는데 CPU 자원을 잘 활용하네요 굳굳