티스토리 뷰
빅데이터/hadoop
[하둡/AWS/오류] 우지와 하둡 연동중 발생하는 Could not find or load main class 오류
hs_seo 2015. 8. 21. 09:59AWS에서 우지와 하둡 연동중 다음과 같은 오류가 발생할 경우
Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster
이는 우지에서 지정한 클래스패스와 하둡이 사용하는 클래스패스의 경로가 달라서 그렇다.
따라서 EMR의 하둡에 설정된 yarn-site.xml 의 내용에서
yarn.application.classpath 를 복사하여 우지의 설정에서 하둡으로 전달하는 yarn-site.xml 을 수정한다.
source(emr) : hadoop/conf/yarn-site.xml
target(oozie) : oozie/conf/hadoop-conf/yarn-site.xml
반응형
'빅데이터 > hadoop' 카테고리의 다른 글
[hadoop] 하둡 명령어, 자주 사용하는 커맨드(hadoop command) (0) | 2016.01.25 |
---|---|
[개념] 쓰리프트 (0) | 2015.09.14 |
[개념] 하둡 0.x, 1.x, 2.x 의 차이 (0) | 2015.08.05 |
[하둡] 기본명령어 사용 팁 (0) | 2015.05.27 |
[하둡 2.x] 커패시티 스케줄러(capacity-scheduler.xml) 설정하기 (0) | 2015.01.27 |
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
- Total
- Today
- Yesterday
링크
TAG
- mysql
- oozie
- ubuntu
- Linux
- Python
- 하둡
- bash
- 정올
- HDFS
- Tez
- S3
- SQL
- 백준
- 하이브
- yarn
- java
- airflow
- hbase
- 알고리즘
- nodejs
- emr
- 오류
- 파이썬
- 다이나믹
- build
- AWS
- error
- SPARK
- HIVE
- Hadoop
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
글 보관함