메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


kudu Soft memory limit exceeded (at 100.05% of capacity) 오류 조치

총관리자 2022.01.17 10:31 조회 수 : 4320

Kudu서비스의 WebUI(node01.gooper.com/8050)를 통해서 Memory(detail)탭을 클릭하면 설정된 최대 메모리와 현재 사용 현황을 확인 할 수 있다. 

화면의 Process memory usage에서 아래 값을 확인해서 Percentage consumed가 95%이상 이면 필요시 tablet server를 restart해서 메모리가 release되게 해줘야 한다. 

(정상적인 경우라면 메모리가 자동으로 release되어야 하는데 악성쿼리 혹은 OS, Kudu 버그 등에 의해서 메모리가 relase되지 않고 1일 이상 유지되는 경우가 있음)


Total consumption : 50G

Memory limit 100.00G

Percentage consumed 50%



*오류 내용 : 

Error in Kudu table 'impala::DB명.table명': Timed out: Failed to write batch of 1432 ops to tablet 5trgy678996hjh after 455 attempt(s): Failed to write to server: (no server available): Write(tablet : 5trgy678996hjh, num_ops: 1432, num_attempts: 455) passwd its deadline: Remote error: Service unavailable: Soft memory limit exceeded (at 100.05% of capacity)



이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
430 [Oozie]Disk I/O error: Failed to open HDFS file dhfs://..../tb_aaa/....OPYING 2019.02.15 3797
429 Mountable HDFS on CentOS 6.x(hadoop 2.7.2의 nfs기능을 이용) 2016.11.24 3803
428 [SBT] project.sbt에 libraryDependencies에 필요한 jar를 지정했으나 sbt compile할때 클래스를 못찾는 오류가 발생했을때 조치사항 2016.08.03 3806
427 kudu의 내부 table명 변경하는 방법 2022.11.10 3808
426 Scala를 이용한 Streaming예제 2018.03.08 3809
425 SASL configuration failed: javax.security.auth.login.LoginException: java.lang.NullPointerException 오류 해결방법 2015.04.02 3811
424 Ubuntu 16.04 LTS에서 사이트에 무료인증서를 이용하여 SSL적용 file 2017.05.23 3811
423 Not enough replica available for query at consistency QUORUM가 발생하는 경우 2017.06.21 3814
422 Building a Cluster docs 2014.04.22 3815
421 solr vs elasticsearch 비교2 2014.09.29 3815
420 update(update와 delete->insert)사용시 주의/참고사항 2016.01.06 3817
419 [Jsoup]특정페이지를 jsoup을 이용하여 파싱하는 샘플소스 2017.04.18 3820
418 bash는 PS1 변수를 통해 프롬프트의 모양을 바꿀 수 있다. 2016.03.30 3825
417 kafka에서 메세지 중복 consume이 발생할 수 있는 상황 2018.10.23 3828
416 SPIN(SPARQL Inference Notation)이란.. file 2016.02.25 3835
415 streaming작업시 입력된 값에 대한 사본을 만들게 되는데 이것이 실패했을때 발생하는 경고메세지 2017.04.03 3841
414 Apache Toree설치(Jupyter에서 Scala, PySpark, SparkR, SQL을 사용할 수 있도록 하는 Kernel) 2018.04.17 3848
413 impala external 테이블 생성시 컬럼과 라인 구분자를 지정하여 테이블 생성하는 예시 2020.02.20 3850
412 Cloudera Manager재설치하는 동안 "Host is in bad health"오류가 발생하는 경우 확인/조치 사항 2018.05.24 3858
411 [shell script] 파일을 한줄씩 읽어서 파일내용으로 명령문 만들고 실행하는 shell script예제 2017.02.21 3859
쓰기 태그
위로