티스토리 뷰

<개요>

하이브에서 다음과 같이 지정한 경로에 파일이 존재하지 않으면 

다음과 같은 오류가 발생한다. 


Launching Job 1 out of 1

Number of reduce tasks is set to 0 since there's no reduce operator

java.io.IOException: Not a file: hdfs://경로

at org.apache.hadoop.mapred.FileInputFormat.getSplits(FileInputFormat.java:286)


<해결방안>

이럴때는 지정한 경로 하위의 디렉토리까지 읽을 수 있게 지정하면 된다. 

다음의 프로퍼티를 설정하면 된다. 


SET mapred.input.dir.recursive=TRUE;


반응형
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
«   2025/01   »
1 2 3 4
5 6 7 8 9 10 11
12 13 14 15 16 17 18
19 20 21 22 23 24 25
26 27 28 29 30 31
글 보관함