[hbase] phoenix 연계 및 실행 방법

2025. 5. 17. 19:06·빅데이터/hbase

Apache Phoenix는 HBase 위에서 SQL 쿼리를 사용할 수 있게 해주는 오픈소스 프로젝트입니다.

 

HBase라는 NoSQL 데이터베이스 위에 RDBMS 스타일의 SQL 인터페이스를 제공하는 레이어입니다.

원래 HBase는 Key-Value 기반의 비정형 테이블이어서 SQL 같은 쿼리 언어가 없는데, Phoenix는 HBase의 데이터를 JDBC를 통해 SQL로 조회하거나 수정할 수 있게 해주는 도구입니다.

 

설치

HBase 2.6에 Phoenix 5.2.1 을 설치 하는 방법은 ${HBASE_HOME}/lib 아래에 Phoenix 라이브러리를 추가 하면 됩니다. ${PHOENIX_HOME}/phoenix-server-hbase-2.6-5.2.1.jar 의 라이브러리를 ${HBASE_HOME}/lib 아래로 추가합니다.

 

 

실행

라이브러리를 추가 하고 나면 HBase 를 재시작해야 합니다. HMaster와 RegionServer 를 재시작하여 실행합니다. 

${PHOENIX_HOME}/bin/sqlline.py localhost:2181 와 같이 실행하여 피닉스가 실행되는 것을 확인할 수 있습니다. 피닉스가 실행되면 메타 정보가 자동으로 추가 되고, SELECT 1 명령을 이용해서 동작을 확인할 수 있습니다.

 

sqlline.py $(hostname -f):2181

CREATE TABLE example_phoenix (
    id INTEGER PRIMARY KEY,
    name VARCHAR,
    age INTEGER
);

UPSERT INTO example_phoenix (id, name, age) VALUES (1, 'Alice', 30);

SELECT * FROM example_phoenix;

 

오류 상황

2025-05-16 13:32:35,228 INFO  [task-truncated-0] client.RpcRetryingCallerImpl: Call exception, tries=12, retries=46, started=68455 ms ago, cancelled=false, msg=no meta location available, details=row 'SYSTEM.CATALOG' on table 'hbase:meta' at null, see https://s.apache.org/timeout
2025-05-16 13:32:39,621 ERROR [RpcServer.priority.RWQ.Fifo.read.handler=10,queue=4,port=16020] coprocessor.MetaDataEndpointImpl: createTable failed
org.apache.hadoop.hbase.client.RetriesExhaustedException: Cannot get the location for replica0 of region for \x00\x00EXAMPLE_PHOENIX in SYSTEM.CHILD_LINK

 

피닉스를 실행하면서 이런 오류가 발생하면서 sqlline.py 가 행이 걸리는 오류가 있었습니다. 오류상으로는 통신이 되지 않는 상황 같았지만 리전서버를 재시작하면 다시 동작하였습니다. 라이브러리 추가후 재시작하고, 동작이 이상하면 다시 한번 재시작하면 동작할 수 있습니다.

반응형
저작자표시 비영리 동일조건 (새창열림)

'빅데이터 > hbase' 카테고리의 다른 글

[hbase] hbase 2.4.13 실행 중 java.lang.IncompatibleClassChangeError: Found interface org.apache.hadoop.hdfs.protocol.HdfsFileStatus, but class was expected 오류  (0) 2022.08.19
[HBase] java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures 오류 처리  (0) 2022.04.20
[ruby] Can't convert Range in to Integer (Ruby on Rails) 오류 처리 방법  (0) 2022.02.25
[hbase] hbase shell에서 데이터 필터링  (0) 2021.12.29
[hbase] hbase shell에서 ruby 를 이용하여 샘플 데이터 입력  (0) 2021.12.29
'빅데이터/hbase' 카테고리의 다른 글
  • [hbase] hbase 2.4.13 실행 중 java.lang.IncompatibleClassChangeError: Found interface org.apache.hadoop.hdfs.protocol.HdfsFileStatus, but class was expected 오류
  • [HBase] java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures 오류 처리
  • [ruby] Can't convert Range in to Integer (Ruby on Rails) 오류 처리 방법
  • [hbase] hbase shell에서 데이터 필터링
hs_seo
hs_seo
Hello World!
    반응형
  • hs_seo
    개발자로 살아남기
    hs_seo
  • 전체
    오늘
    어제
    • 전체 (1140)
      • 개발자 (21)
        • 개발에 유의할 점 (0)
        • 면접 (5)
      • IT 소식 (5)
        • 업계 (1)
      • java (51)
        • 디자인패턴 (3)
        • apache-common (1)
      • 개념 (47)
        • 자료구조 (4)
        • 함수형사고 (8)
        • 디자인패턴 (1)
      • 데이터분석 (1)
      • python (67)
        • 코드조각 (12)
        • 라이브러리 (2)
      • 빅데이터 (418)
        • zookeeper (5)
        • hadoop (78)
        • hdfs (12)
        • hive (127)
        • hbase (16)
        • spark (40)
        • scala (4)
        • trino (3)
        • oozie (41)
        • Hue (9)
        • R (5)
        • sqoop (6)
        • flume (3)
        • elasticsearch (2)
        • airflow (16)
        • kafka (3)
        • kubernetes (10)
        • openstack (3)
        • flink (2)
        • redis (2)
      • 빅데이터 강좌 (2)
      • 알고리즘 (131)
        • 알고리즘 (1)
        • 백준 (61)
        • 정올 (41)
        • 더블릿 (5)
        • 프로그래머스 (1)
      • 프로그래밍 언어 (30)
        • go (4)
        • js (9)
        • .Net (6)
        • Jsp (1)
        • ansible (3)
        • terraform (6)
      • Tools (56)
        • docker (2)
        • macbook (6)
        • maven (3)
        • sublime (1)
      • 프레임워크 (25)
        • [JS] angularjs (2)
        • [JS] node.js (19)
        • [Java] spring (2)
        • Android (2)
      • 데이타베이스 (43)
        • SQLD (5)
        • Oracle (1)
        • MySQL (8)
        • ADsP (2)
      • 리눅스 (25)
        • Bash (61)
      • GCP (5)
      • AWS (34)
        • EC2 (2)
        • EMR (14)
      • 정보보안기사 (4)
        • 네트워크 (1)
      • 개인 (80)
        • 업무실수 (0)
        • 책 (9)
        • 교육 (3)
        • 여행 (17)
        • 영화 (12)
        • 음악 (2)
        • 피규어 (4)
        • 게임 (3)
        • 생각 (7)
        • 기타 (10)
        • 좋은글 (5)
        • 좋은 사이트 (2)
  • 블로그 메뉴

    • 홈
    • 태그
    • 미디어로그
    • 위치로그
    • 방명록
  • 링크

    • 빅데이터-하둡,하이브로 시작하기
    • 빅데이터-스칼라, 스파크로 시작하기
    • Kaggle에서 파이썬으로 데이터 분석 시작하기
    • 쉘스크립트 개발 시작하기
    • 개발자가 데이터 분석 준전문가 되기
    • 데브쿠마
  • 공지사항

  • 인기 글

  • 태그

    emr
    백준
    Linux
    yarn
    Hadoop
    S3
    알고리즘
    java
    다이나믹
    Python
    HIVE
    error
    airflow
    bash
    오류
    k8s
    SPARK
    Tez
    nodejs
    ubuntu
    하이브
    build
    AWS
    파이썬
    oozie
    mysql
    정올
    HDFS
    hbase
    하둡
  • 최근 댓글

  • 최근 글

  • hELLO· Designed By정상우.v4.10.6
hs_seo
[hbase] phoenix 연계 및 실행 방법
상단으로

티스토리툴바