nodejs에서 한글이 깨지는 현상은 iconv 나 iconv-lite 모듈을 이용하여 처리 가능하다. iconv-lite는 iconv를 보고 자바스크립트로만 만들어진 모듈이다. 아래는 request 모듈을 이용하여 네이버 뉴스 페이지를 파싱하던중 한글깨짐이 발생하여 확인한 것이다. 둘중 편한 방법을 사용하면 될 것 같다. var request = require("request"); var cheerio = require('cheerio'); var iconv = require('iconv-lite'); //var Iconv1 = require('iconv').Iconv; var requestOptions = { method: "GET" ,uri: "http://news.naver.com/main/lis..
Base 64란 8비트 데이터를 문자코드에 영향을 받지 않는 공통 ASCII 문자로 이루어진 6비트 데이터로 변환하는 것이다. 8bit 데이터 3개가 6bit 데이터 4개로 변환되는 것이다. 이 6bit 데이터는 ASCII 코드로 변환이 되고, 이를 이용하면 이기종간 문자코드가 달라도 데이터 처리가 가능하게 된다. 위키, 참고1, 참고2, 참고3 Java에서 Base64 인코딩을 처리하려고 하면 sun.misc.BASE64Decoder 를 이용하게 되는데 Java에서 sun 의 하위폴더에 들어있는 패키지를 이용하는 것은 권장하지 않는다고 한다. 따라서 되도록 이면 apache 등에서 제공해주는 라이브러리를 이용하는 것이 좋을 것 같다. (apache common 의 codec 참조) 일단 sun의 라이브..
- Total
- Today
- Yesterday
- S3
- SPARK
- Tez
- nodejs
- oozie
- Python
- bash
- java
- 정올
- hbase
- SQL
- 알고리즘
- HDFS
- AWS
- Hadoop
- ubuntu
- emr
- 하이브
- mysql
- 백준
- 파이썬
- build
- 하둡
- airflow
- 다이나믹
- yarn
- HIVE
- Linux
- error
- 오류
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |