본문 바로가기
IT

Pyspark를 위한 Java 설치 및 JAVA_HOME 환경변수 설정

by ShrimpTaco 2023. 5. 24.
반응형

 

 

 

[Spark] JupyterLab에 pyspark kernel 설치 No module named pyspark_kernel.install 해결

스파크 공부를 시작하기로 했다. 주피터랩(JupyterLab)에서 노트북으로 실습 예제를 돌려보려고 했는데, jupyterlab에 기본적으로 탑재되어 있는 파이썬 커널 말고도 pyspark 커널이나 스칼라 기반 스파

shrimp-taco.tistory.com

 

pyspark를 설치했고 pyspark kernel도 설치했지만 pyspark 실행이 안됨.

$ pyspark
JAVA_HOME is not set

java 8 이상을 설치하고 JAVA_HOME 환경변수 설정을 해주어야 정상적으로 사용이 가능하다고 함.

 

 

JDK Installation Guide

This topic describes the installation procedures of the JDK on the Linux platform, along with the system requirements.

docs.oracle.com

공홈 설치 가이드.

이긴 한데 ubuntu라면 apt-get install을 사용할 수 있음.

apt-get install openjdk-8-jdk -y

환경변수 설정

# install nano editor
apt-get install nano

# edit ~/.profile 
export JAVA_HOME=$(dirname $(dirname $(readlink -f $(which java))))
export PATH=$PATH:$JAVA_HOME/bin

 

source ~/.profile

로 현재 터미널에 바로 적용시킨다.

안되면 새로운 터미널을 실행시키면 적용된다.

 

반응형

댓글