[pyspark] pyspark 실행시 python: command not found 오류

티스토리 뷰

빅데이터/spark

hs_seo 2021. 3. 18. 09:34

pyspark 쉘을 실행하는 시점에 python 커맨드를 찾지 못한다는 오류가 발생하면 원인은 두 가지로 생각할 수 있습니다.

파이썬을 설치 하지 않음
- 파이썬을 설치 한다.
파이썬을 설치 했지만 python 명령이 아니라 python3나 python3.7 등의 버전명으로 명령어가 생성
- PYSPARK_PYTHON 환경변수를 설정

[spark] spark2와 hive2 메타스토어 연결 오류 수정. java.lang.NoSuchFieldError: HIVE_STATS_JDBC_TIMEOUT (0)	2021.06.21
[spark] spark에서 snappy 라이브러리를 찾지 못할때 수정 방법 : java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCodeLoader.buildSupportsSnappy (0)	2021.03.18
[spark] __spark_libs__.zip does not exist 오류 해결 방법 (0)	2020.09.14
[spark] Service 'sparkDriver' could not bind on a random free port. 오류 해결 (0)	2020.09.13
[pyspark] pyspark에서 udf를 이용하는 방법 (0)	2020.06.08

공지사항

최근에 올라온 글

최근에 달린 댓글

링크

글 보관함