[spark] pyspark 환경만들기

1. 가상환경 리스트 확인

conda env list

2. 가상환경 만들기

conda create -n py38 python==3.8 -y

 

3. 확인

# To activate this environment, use
#
#     $ conda activate py38
#
# To deactivate an active environment, use
#
#     $ conda deactivate

 

 

4. pyspark 3.3.1 설치

#들어가서
conda activate py38

실행
conda install -c conda-forge pyspark==3.3.1 -y