티스토리 뷰

빅데이터/hadoop

[yarn] 커버로스 적용된 nodemanager에서 Linux Container Executor reached unrecoverable exception 오류

hs_seo 2022. 11. 16. 08:47

노드매니저가 Linux Container Executor reached unrecoverable exception 오류를 출력하면서 UNHEALTHY 상태로 들어가는 경우가 있습니다.

 

 

이 경우 실행된 컨테이너가 35번 오류를 출력하면서 종료 되었을 때 발생합니다. 다음과 같이 오류일 가능성이 있으므로 지속적으로 발생한다면 패치를 하거나, 버전을 올려야 합니다.

 

우선은 간단하게 캐쉬 파일 위치를 삭제하고, 재부팅하는 것으로 문제를 해결할 수 있습니다.

 

https://issues.apache.org/jira/browse/YARN-9833

 

[YARN-9833] Race condition when DirectoryCollection.checkDirs() runs during container launch - ASF JIRA

During endurance testing, we found a race condition that cause an empty localDirs being passed to container-executor. The problem is that DirectoryCollection.checkDirs() clears three collections: this.writeLock.lock(); try { localDirs.clear(); errorDirs.cl

issues.apache.org

 

반응형
저작자표시 비영리 동일조건

'빅데이터 > hadoop' 카테고리의 다른 글

[Tez] Tez 0.10.3과 Hadoop 3.3.6을 연결할 때 발생하는 오류  (0) 2024.09.23
[hdfs] HA 구성된 HDFS의 journalnode 3대 중 1대의 서버가 장애가 발생했을 때 대응 (Journal Storage Directory /hadoop/hdfs/journal/edit/user-hadoop not formatted ; journal id: user-hadoop)  (0) 2024.07.18
[yarn] InvalidResourceRequestException: Invalid resource request, requested memory < 0, or requested memory > max configured, requestedMemory=-1, maxMemory=102400 에러  (0) 2022.11.09
[hadoop] ha 하둡 실행 시 java.lang.IllegalStateException: Could not determine own NN ID in namespace 'ha-hadoop'. Please ensure that this node is one of the machines listed as an NN RPC address, or configure dfs.ha.namenode.id 오류 처리  (0) 2022.08.21
[hdfs] Unable to start failover controller. Parent znode does not exist. 오류 수정  (0) 2022.04.20
반응형
공지사항
최근에 올라온 글
최근에 달린 댓글
Total
Today
Yesterday
링크
TAG more
«   2025/01   »
일 월 화 수 목 금 토
1 2 3 4
5 6 7 8 9 10 11
12 13 14 15 16 17 18
19 20 21 22 23 24 25
26 27 28 29 30 31
글 보관함