티스토리 뷰

AWS에서 우지와 하둡 연동중 다음과 같은 오류가 발생할 경우

 

Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster

 

이는 우지에서 지정한 클래스패스와 하둡이 사용하는 클래스패스의 경로가 달라서 그렇다.

따라서 EMR의 하둡에 설정된 yarn-site.xml 의 내용에서

 

yarn.application.classpath 를 복사하여 우지의 설정에서 하둡으로 전달하는 yarn-site.xml 을 수정한다.

 

source(emr) : hadoop/conf/yarn-site.xml
target(oozie) : oozie/conf/hadoop-conf/yarn-site.xml

참고

반응형
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
«   2025/02   »
1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28
글 보관함