zeppelin에서 python pacakge module 사용하기.(feat. conda)

[kgneng2]

overview

• spark 개발하는데 있어서 zeppelin을 많이 사용하게 되는데 python 외부 module 을 사용할 일이 있어, 조사하게되었습니다.
• zeppelin docs 을 참고해보니 conda의 존재를 알게되었고 conda에 대해 간략한 사용법을 공유드립니다.

conda

• https://docs.conda.io/en/latest/
• 언어들의 의존성 패키지 환경 관리 해줌 주로 파이썬에서 쓰는것같습니다
• 기본적으로 zeppelin 내부에 설치되어있습니다. 따로 설치가 필요하다면, https://www.anaconda.com/products/individual 여기서 다운 가능합니다.
• conda-forge를 이용해서 검증된 파이썬 패키지를 모아놓은 채널임으로 (필수적으로) 사용한다. conda install -c conda-forge

Usage

• zeppelin에 접속해서, 또는 zeppelin app shell에 접근
• 기본명령 문서 : https://docs.conda.io/projects/conda/en/latest/user-guide/cheatsheet.html