빅데이터/hive
[hive][error] msck repair table 처리시 오류 수정
hs_seo
2016. 12. 20. 17:46
하이브에서 EXTERNAL 설정으로 생성한 테이블에
디렉토리에 파일을 추가하고 테이블의 파티션 추가를 위해서 "repair table" 명령을 사용하여 처리할 수 있다.
그런데 Hive 1.3 버전 이상에서는 파티션에 허용되지 않는 문자가 있는 디렉토리에 한해서
예외를 반환할 수도 있다.
이럴 때는 다음의 설정을 추가하고 호출하면 된다.
set hive.msck.path.validation=ignore;
MSCK REPAIR TABLE table_name;
하이브문서(Recover Partition 참조) - https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL
반응형