[hive] 하이브의 CSV 서데 사용 방법

하이브는 CSV 형식의 파일을 효과적으로 적재하기 위한 CSV 서데를 제공한다. 

  * Hive 0.14 버전부터 기본 지원

  ** CSV 서데를 이용하면  테이블 칼럼의 타입은 String 으로 고정

  - sepratorChar: 칼럼간의 구분자

  - quoteChar: 칼럼의 값을 지정한 문자로 묶어준다. 

  - escapeChar: 칼럼에 데이터를 입력할 때 파싱하지 않고 무시

CREATE TABLE my_table(

   a string, 

   b string

)

ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde'

WITH SERDEPROPERTIES (

   "separatorChar" = ",",

   "quoteChar"     = "'",

   "escapeChar"    = "\\"

)  

STORED AS TEXTFILE;

하이브 CSV 서데 - https://cwiki.apache.org/confluence/display/Hive/CSV+Serde