메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


kinit -kt /var/lib/keytab/hdfs.keytab hdfs


hdfs fsck / -list-corruptfileblocks



수행결과 : 

Connecting to namenode via http://namenode01.gooper.com:9870/fsck?ugi=hadoop&listcorruptfileblocks=1&path=%2F

The list of corrupt files under path '/' are:

blk_1073743651 /test/hdfs/test_terasort/pat-r-00196

The filesystem under path '/' has 1 CORRUPT files


조치하는 2가지 방법

### 1. /lost+found 디렉터리로 corrupt 파일 이동

$ hdfs fsck / -move


### 2. corrupt 파일 삭제

$ hdfs fsck / -delete



번호 제목 날짜 조회 수
150 [CDP7.1.7] oozie sqoop action으로 import혹은 export수행시 발생한 오류에 대한 자세한 로그 확인 하는 방법 2024.04.19 3148
149 java quartz 시간 설정 참고사항 2015.12.16 3147
148 spark-sql실행시 ERROR log: Got exception: java.lang.NumberFormatException For input string: "2000ms" 오류발생시 조치사항 2016.06.09 3135
147 oneM2M Specification(Draft Release 3, 2, 1), Draft Technical Reports 2017.10.25 3129
146 hadoop cluster구성된 노드를 확인시 Capacity를 보면 색이 붉은색으로 표시되어 있는 경우나 Unhealthy인 경우 처리방법 2017.08.30 3116
145 Flume을 이용한 데이타 수집시 HBase write 성능 튜닝 file 2016.10.31 3113
144 Hive MetaStore Server기동시 Could not create "increment"/"table" value-generation container SEQUENCE_TABLE since autoCreate flags do not allow it. 오류발생시 조치사항 2017.05.03 3112
143 spark 2.0.0의 api를 이용하는 예제 프로그램 2017.03.15 3108
142 [jsoup]Jsoup Tutorial 2017.04.11 3103
141 Ubuntu 16.04 LTS에 Hive 2.1.1설치하면서 "Version information not found in metastore"발생하는 오류원인및 조치사항 2017.05.03 3088
140 format된 namenode를 다른 서버에서 다시 format했을때 오류내용 2016.09.22 3086
139 대표 오픈소스 라이선스, 한 눈에 보기! 2015.12.10 3079
138 바나나 파이의 /tmp폴더를 외장하드로 변경하기 2015.07.24 3074
137 magento2 샘플데이타 설치 2017.01.31 3070
136 [Encryption Zone]Encryption Zone에 생성된 table을 select할때 HDFS /tmp/zone1에 대한 권한이 없는 경우 2023.06.29 3069
135 fuseki용 config-examples.ttl 예시 내용 2017.05.17 3067
134 Spark Streaming 코드레벨단에서의 성능개선 2016.10.31 3063
133 모두를 위한 머신러닝과 딥러닝의 강의 file 2016.09.27 3061
132 elasticsearch 기동시 permission denied on key 'vm.max_map_count' 오류발생시 조치사항 2017.06.23 3056
131 Authorization within Hadoop Projects 2022.06.13 3046
위로