[oozie] 우지의 HDFS EL 함수 알아보기

2019. 2. 13. 16:03·빅데이터/oozie

우지에는 워크플로우를 작성할 때 도움을 제공하는 기본 EL 상수와 함수가 있습니다.

우지 EL 함수 종류

  • Basic EL Constants
    • KB, MB, GB 등 사이즈 계산을 위한 상수
  • Basic EL Functions
    • concat, trim 등 문자열 관련 기본 함수와 wf:actionData(String actionName) 같은 워크플로우 관련 함수
  • Workflow EL Functions
    • wf:id() 등 워크플로우의 정보 확인을 위한 함수
  • Hadoop EL Constants
    • 맵리듀스 관련 상수 정보
  • Hadoop EL Functions
    • 하둡 카운터 정보
  • Hadoop Jobs EL Function
    • 하둡 잡의 정보
  • HDFS EL Functions
    • HDFS 파일의 존재여부, 사이즈 확인 정보
  • HCatalog EL Functions
    • HCat의 정보가 존재하는지 확인하는 함수

HDFS EL

이 중에서 HDFS EL 함수에 대해서 알아보겠습니다.

  • boolean fs:exists(String path)
    • path의 존재 여부 확인
  • boolean fs:isDir(String path)
    • path가 디렉토리 인지 확인
  • long fs:dirSize(String path)
    • path의 사이즈 확인
  • long fs:fileSize(String path)
    • path 파일의 사이즈 확인
  • long fs:blockSize(String path)
    • path의 블록 사이즈 확인

이 함수들은 <decision> 문에서 유용하게 사용할 수 있습니다. 다음의 예제를 통해서 확인해 보겠습니다.

다음 작업예제는 param1에서 지정한 경로의 사이즈가 0보다 크면,  
즉 데이터가 있으면 action1을 처리하고,
데이터가 없으면 action_default를 처리합니다.




반응형
저작자표시 비영리 (새창열림)

'빅데이터 > oozie' 카테고리의 다른 글

[oozie] 우지 워크플로우(workflow) 기본 스펙 및 실행  (0) 2019.04.19
[oozie] 코디네이터(coordinator)의 일자 변환 EL 함수 사용법  (0) 2019.03.19
[oozie] 우지 잡의 프로퍼티 업데이트  (0) 2018.12.14
[oozie] 우지 작업 리런 커맨드  (0) 2018.11.16
[oozie] 우지 명령어 실행중 발생하는 Oozie URL 설정 오류  (0) 2018.07.30
'빅데이터/oozie' 카테고리의 다른 글
  • [oozie] 우지 워크플로우(workflow) 기본 스펙 및 실행
  • [oozie] 코디네이터(coordinator)의 일자 변환 EL 함수 사용법
  • [oozie] 우지 잡의 프로퍼티 업데이트
  • [oozie] 우지 작업 리런 커맨드
hs_seo
hs_seo
Hello World!
    반응형
  • hs_seo
    개발자로 살아남기
    hs_seo
  • 전체
    오늘
    어제
    • 전체 (1140)
      • 개발자 (21)
        • 개발에 유의할 점 (0)
        • 면접 (5)
      • IT 소식 (5)
        • 업계 (1)
      • java (51)
        • 디자인패턴 (3)
        • apache-common (1)
      • 개념 (47)
        • 자료구조 (4)
        • 함수형사고 (8)
        • 디자인패턴 (1)
      • 데이터분석 (1)
      • python (67)
        • 코드조각 (12)
        • 라이브러리 (2)
      • 빅데이터 (418)
        • zookeeper (5)
        • hadoop (78)
        • hdfs (12)
        • hive (127)
        • hbase (16)
        • spark (40)
        • scala (4)
        • trino (3)
        • oozie (41)
        • Hue (9)
        • R (5)
        • sqoop (6)
        • flume (3)
        • elasticsearch (2)
        • airflow (16)
        • kafka (3)
        • kubernetes (10)
        • openstack (3)
        • flink (2)
        • redis (2)
      • 빅데이터 강좌 (2)
      • 알고리즘 (131)
        • 알고리즘 (1)
        • 백준 (61)
        • 정올 (41)
        • 더블릿 (5)
        • 프로그래머스 (1)
      • 프로그래밍 언어 (30)
        • go (4)
        • js (9)
        • .Net (6)
        • Jsp (1)
        • ansible (3)
        • terraform (6)
      • Tools (56)
        • docker (2)
        • macbook (6)
        • maven (3)
        • sublime (1)
      • 프레임워크 (25)
        • [JS] angularjs (2)
        • [JS] node.js (19)
        • [Java] spring (2)
        • Android (2)
      • 데이타베이스 (43)
        • SQLD (5)
        • Oracle (1)
        • MySQL (8)
        • ADsP (2)
      • 리눅스 (25)
        • Bash (61)
      • GCP (5)
      • AWS (34)
        • EC2 (2)
        • EMR (14)
      • 정보보안기사 (4)
        • 네트워크 (1)
      • 개인 (80)
        • 업무실수 (0)
        • 책 (9)
        • 교육 (3)
        • 여행 (17)
        • 영화 (12)
        • 음악 (2)
        • 피규어 (4)
        • 게임 (3)
        • 생각 (7)
        • 기타 (10)
        • 좋은글 (5)
        • 좋은 사이트 (2)
  • 블로그 메뉴

    • 홈
    • 태그
    • 미디어로그
    • 위치로그
    • 방명록
  • 링크

    • 빅데이터-하둡,하이브로 시작하기
    • 빅데이터-스칼라, 스파크로 시작하기
    • Kaggle에서 파이썬으로 데이터 분석 시작하기
    • 쉘스크립트 개발 시작하기
    • 개발자가 데이터 분석 준전문가 되기
    • 데브쿠마
  • 공지사항

  • 인기 글

  • 태그

    k8s
    Linux
    HDFS
    mysql
    bash
    백준
    정올
    파이썬
    Tez
    S3
    error
    oozie
    nodejs
    Hadoop
    HIVE
    ubuntu
    오류
    알고리즘
    하이브
    hbase
    build
    하둡
    SPARK
    airflow
    emr
    AWS
    java
    Python
    다이나믹
    yarn
  • 최근 댓글

  • 최근 글

  • hELLO· Designed By정상우.v4.10.6
hs_seo
[oozie] 우지의 HDFS EL 함수 알아보기
상단으로

티스토리툴바