[hadoop] hadoop fs 명령에서 로그를 출력하는 방법

하둡 fs 명령에서 디버깅을 위한 메세지를 출력하고 싶을 때는 하둡의 로깅 레벨을 변경하면 됩니다. 다음은 HADOOP_ROOT_LOGGER를 변경하여 fs 커맨드에서 로그를 출력하는 방법입니다.

export HADOOP_ROOT_LOGGER=DEBUG,console

# 로그가 출력됨 
$ hadoop fs -Dfs.swift.service.kw.username= -Dfs.swift.service.kw.password= -ls swift://default.service/
20/11/04 08:24:37 DEBUG util.Shell: setsid exited with exit code 0
20/11/04 08:24:37 DEBUG conf.Configuration: parsing URL jar:file:/opt/hadoop-2.10.0/share/hadoop/common/hadoop-common-2.10.0.jar!/core-default.xml