티스토리 뷰
빅데이터/Hue
[Hue] 빌드 중 ValueError: bad marshal data (unknown type code) 오류 해결 방법
hs_seo 2020. 10. 5. 15:23문제
Hue를 빌드할 때 다음의 오류가 발생할 수 있습니다. 컴파일 된 pyc 파일과 실행환경의 파이선 버전이 달라서 데이터를 읽을 수 없을 때 발생하는 오류입니다.
ValueError: bad marshal data (unknown type code)
해결 방법
Hue를 빌드 할 때. 파이선3의 환경으로 설정하라고 되어 있었지만 장고 모듈을 빌드하는 과정에서 해당 오류가 발생하여 파이썬2로 빌드하여 문제를 해결할 수 있었습니다.
export PYTHON_VER=python2.7
해당 오류는 pyc 파일을 삭제하고 실행 환경의 파이썬으로 다시 빌드하면 해결할 수 있습니다.
find . -name "*.pyc"
참고
marshal을 이용해서 파일을 읽는 방법은 다음과 같습니다.
import marshal
filename = "bdist.linux-x86_64/egg/django_prometheus/__pycache__/__init__.cpython-38.pyc"
f = open(filename, 'rb')
f.read(8)
code = marshal.load(f)
f.close()
f = open(filename, 'rb')
f.read(12)
code = marshal.load(f)
f.close()
반응형
'빅데이터 > Hue' 카테고리의 다른 글
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- SPARK
- bash
- 하둡
- 정올
- nodejs
- 백준
- Linux
- HIVE
- java
- S3
- build
- Python
- ubuntu
- mysql
- Hadoop
- SQL
- 알고리즘
- 오류
- oozie
- emr
- 파이썬
- 하이브
- 다이나믹
- AWS
- hbase
- error
- airflow
- HDFS
- yarn
- Tez
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | ||||||
2 | 3 | 4 | 5 | 6 | 7 | 8 |
9 | 10 | 11 | 12 | 13 | 14 | 15 |
16 | 17 | 18 | 19 | 20 | 21 | 22 |
23 | 24 | 25 | 26 | 27 | 28 | 29 |
30 | 31 |
글 보관함