[Spark] JupyterLab에 pyspark kernel 설치 No module named pyspark_kernel.install 해결
스파크 공부를 시작하기로 했다. 주피터랩(JupyterLab)에서 노트북으로 실습 예제를 돌려보려고 했는데, jupyterlab에 기본적으로 탑재되어 있는 파이썬 커널 말고도 pyspark 커널이나 스칼라 기반 스파
shrimp-taco.tistory.com
pyspark를 설치했고 pyspark kernel도 설치했지만 pyspark 실행이 안됨.
$ pyspark
JAVA_HOME is not set
java 8 이상을 설치하고 JAVA_HOME 환경변수 설정을 해주어야 정상적으로 사용이 가능하다고 함.
JDK Installation Guide
This topic describes the installation procedures of the JDK on the Linux platform, along with the system requirements.
docs.oracle.com
공홈 설치 가이드.
이긴 한데 ubuntu라면 apt-get install을 사용할 수 있음.
apt-get install openjdk-8-jdk -y
환경변수 설정
# install nano editor
apt-get install nano
# edit ~/.profile
export JAVA_HOME=$(dirname $(dirname $(readlink -f $(which java))))
export PATH=$PATH:$JAVA_HOME/bin
source ~/.profile
로 현재 터미널에 바로 적용시킨다.
안되면 새로운 터미널을 실행시키면 적용된다.
'IT' 카테고리의 다른 글
빅데이터분석기사 실기 시험환경에서 라이브러리 pandas sklearn 사용 방법 확인하기 (0) | 2023.06.03 |
---|---|
[Streamlit] 스트림릿이란? 데이터분석 시각화 오픈소스 라이브러리 (0) | 2023.05.31 |
데이콘 일기 (2) - matplotlib 한글 폰트 설정 (0) | 2023.05.14 |
[Spark] JupyterLab에 pyspark kernel 설치 No module named pyspark_kernel.install 해결 (0) | 2023.05.13 |
[Database] Oracle db 삭제 uninstall deinstall 하는 법 (0) | 2023.05.06 |
댓글