[에러] hive의 INSERT .. SELECT 작업중 No input paths specified in job 에러

2016. 6. 29. 13:54·빅데이터/hive

하이브에서 작업중 아래의 오류로 인하여 작업이 중단 되는 경우가 있다.


cause:java.io.IOException: No input paths specified in job


이럴때는 두가지 경우인것 같다.


1. MR 작업할 위치에 원천 로그 파일이 없을때

2. SELECT 문의 WHERE 조건으로 인하여 조회되는 건수가 0건 일때


즉, 입력할(INSERT) 데이터가 없을 때 발생한다.


이럴경우 데이터가 없어도 처리하게 하면, 에러를 내지 않고 처리한다.


set hive.merge.mapfiles=false;



https://svn.apache.org/repos/asf/hive/tags/release-0.5.0/conf/hive-default.xml

https://kidokim509.wordpress.com/2015/06/10/hive-query%EC%9D%98-output-%ED%8C%8C%EC%9D%BC%EC%9D%B4-%EC%9E%91%EC%9D%80-%EC%9A%A9%EB%9F%89%EC%9C%BC%EB%A1%9C-%EC%AA%BC%EA%B0%9C%EC%A0%B8-%EC%9E%88%EB%8A%94-%EA%B2%BD%EC%9A%B0/


반응형
저작자표시 비영리 (새창열림)

'빅데이터 > hive' 카테고리의 다른 글

[hive][개념] 하이브 서버2(hiverserver2), 비라인(beeline)  (0) 2016.08.26
[하이브] 파티션 복구 하기(repair partitions)  (0) 2016.07.11
[Tip/프로퍼티] hive에서 load 할 파일이 없을 때 발생하는 NullPointerException 회피하기  (0) 2016.01.06
[Hive] 하이브의 정렬, 집계, 유저 함수, 조인, 서브쿼리, 뷰의 정의  (0) 2015.09.14
[hive] 조회 조건에 정규식 이용하기  (0) 2014.12.26
'빅데이터/hive' 카테고리의 다른 글
  • [hive][개념] 하이브 서버2(hiverserver2), 비라인(beeline)
  • [하이브] 파티션 복구 하기(repair partitions)
  • [Tip/프로퍼티] hive에서 load 할 파일이 없을 때 발생하는 NullPointerException 회피하기
  • [Hive] 하이브의 정렬, 집계, 유저 함수, 조인, 서브쿼리, 뷰의 정의
hs_seo
hs_seo
Hello World!
    반응형
  • hs_seo
    개발자로 살아남기
    hs_seo
  • 전체
    오늘
    어제
    • 전체 (1140)
      • 개발자 (21)
        • 개발에 유의할 점 (0)
        • 면접 (5)
      • IT 소식 (5)
        • 업계 (1)
      • java (51)
        • 디자인패턴 (3)
        • apache-common (1)
      • 개념 (47)
        • 자료구조 (4)
        • 함수형사고 (8)
        • 디자인패턴 (1)
      • 데이터분석 (1)
      • python (67)
        • 코드조각 (12)
        • 라이브러리 (2)
      • 빅데이터 (418)
        • zookeeper (5)
        • hadoop (78)
        • hdfs (12)
        • hive (127)
        • hbase (16)
        • spark (40)
        • scala (4)
        • trino (3)
        • oozie (41)
        • Hue (9)
        • R (5)
        • sqoop (6)
        • flume (3)
        • elasticsearch (2)
        • airflow (16)
        • kafka (3)
        • kubernetes (10)
        • openstack (3)
        • flink (2)
        • redis (2)
      • 빅데이터 강좌 (2)
      • 알고리즘 (131)
        • 알고리즘 (1)
        • 백준 (61)
        • 정올 (41)
        • 더블릿 (5)
        • 프로그래머스 (1)
      • 프로그래밍 언어 (30)
        • go (4)
        • js (9)
        • .Net (6)
        • Jsp (1)
        • ansible (3)
        • terraform (6)
      • Tools (56)
        • docker (2)
        • macbook (6)
        • maven (3)
        • sublime (1)
      • 프레임워크 (25)
        • [JS] angularjs (2)
        • [JS] node.js (19)
        • [Java] spring (2)
        • Android (2)
      • 데이타베이스 (43)
        • SQLD (5)
        • Oracle (1)
        • MySQL (8)
        • ADsP (2)
      • 리눅스 (25)
        • Bash (61)
      • GCP (5)
      • AWS (34)
        • EC2 (2)
        • EMR (14)
      • 정보보안기사 (4)
        • 네트워크 (1)
      • 개인 (80)
        • 업무실수 (0)
        • 책 (9)
        • 교육 (3)
        • 여행 (17)
        • 영화 (12)
        • 음악 (2)
        • 피규어 (4)
        • 게임 (3)
        • 생각 (7)
        • 기타 (10)
        • 좋은글 (5)
        • 좋은 사이트 (2)
  • 블로그 메뉴

    • 홈
    • 태그
    • 미디어로그
    • 위치로그
    • 방명록
  • 링크

    • 빅데이터-하둡,하이브로 시작하기
    • 빅데이터-스칼라, 스파크로 시작하기
    • Kaggle에서 파이썬으로 데이터 분석 시작하기
    • 쉘스크립트 개발 시작하기
    • 개발자가 데이터 분석 준전문가 되기
    • 데브쿠마
  • 공지사항

  • 인기 글

  • 태그

    emr
    airflow
    SPARK
    다이나믹
    Linux
    파이썬
    백준
    hbase
    Tez
    k8s
    알고리즘
    Hadoop
    S3
    하이브
    오류
    bash
    mysql
    error
    HIVE
    AWS
    build
    nodejs
    하둡
    java
    정올
    yarn
    oozie
    HDFS
    Python
    ubuntu
  • 최근 댓글

  • 최근 글

  • hELLO· Designed By정상우.v4.10.6
hs_seo
[에러] hive의 INSERT .. SELECT 작업중 No input paths specified in job 에러
상단으로

티스토리툴바