티스토리 뷰

빅데이터/hive

[hive3] hadoop3와 hive3 연동에서 guava 오류 처리

hs_seo 2021. 6. 17. 15:35

하둡3와 하이브3의 연동에서 하이브3에서 사용하는 guava 라이브러리 버전(27.0-jre)과 하둡3에서 사용하는 guava 라이브러리(19.0)의 버전이 달라서 문제가 발생합니다.

 

또한 hive-exec-3.x.x.jar의 라이브러리 안에는 guava 라이브러리가 포함되어 있기 때문에, 이 라이브러리를 제거하고 다시 빌드해야만 오류를 해결할 수 있습니다. 하이브 소스를 다운 받아서 ql 라이브러리의 pom.xml 파일을 수정하고 빌드하면 문제를 해결할 수 있습니다.

 

pom.xml 파일의 include를 수정하고 빌드합니다.

 

include 수정

include를 수정하고 빌드한후, 하둡의 guava 라이브러리와 하이브의 guava 라이브러리 버전을 맞춰주면 됩니다.

 

반응형
저작자표시 비영리 동일조건

'빅데이터 > hive' 카테고리의 다른 글

[hive] hive 2.3 버전 log4j2 취약점 처리 방안  (0) 2021.12.13
[hive] hive 와 db 연결에서 Public Key Retrieval is not allowed 오류가 발생하는 경우 처리  (0) 2021.10.06
[tez] TEZ ui 설정  (0) 2021.06.16
[hive] hive의 spark 엔진에서 Execution Error, return code 30041 오류  (0) 2021.06.01
[hive] hive on spark 작업 중 create Spark client due to invalid resource request: Required executor memory (9671), overhead (1706 MB), and PySpark memory (0 MB) is above the max threshold 오류  (0) 2021.05.30
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
링크
TAG more
«   2025/05   »
일 월 화 수 목 금 토
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31
글 보관함