메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


BDR의 Hive Replication중 Target Cluster의 Import HIve Metastore과정중에 "Specified catalog.database.table does not exist : hive.db명.table명"오류가 발생하면서 실패하는 경우가 있음.

이는 오류를 발생시킨 테이블이 Kudu table이면서 통계정보를 가지고 있는 경우 발생할 수 있는 bug성 오류이다. 

(현재 버젼의 BDR은 Kudu table이 대상이 아닌데 통계정보가 있는 Kudu table을 대상에 Hive Replication에 포함 시키는 bug가 있다고 cloudera 엔지니어가 가이드 하지만 모든 경우가 다 그렇지 않고 특정 DB의 경우만 발생하고 있는데.. 특정DB가 어떤것인지는 확인되지 않음)

임시조치는 오류를 발생시킨 테이블의 통계정보를 삭제하고 다시 Replication Policy를 수행해 주면 정상적으로 수행된다. 


*참고(테이블의 통계정보 삭제)

drop stats DB명.table명

번호 제목 글쓴이 날짜 조회 수
21 HBase shell로 작업하기 구퍼 2013.03.15 5834
20 org.apache.hadoop.hbase.PleaseHoldException: Master is initializing 구퍼 2013.03.15 2668
19 Cacti로 Hadoop 모니터링 하기 file 구퍼 2013.03.12 2367
18 HBase 설치하기 – Fully-distributed 구퍼 2013.03.12 3548
17 HBase 설치하기 – Pseudo-distributed file 구퍼 2013.03.12 2647
16 org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-root/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible. 구퍼 2013.03.11 14781
15 ../depcomp: line 512 exec : g++ : not found 구퍼 2013.03.08 2062
14 checking for termcap functions library... configure: error: No curses/termcap library found 구퍼 2013.03.08 4120
13 MySQL 다운로드 및 리눅스에서 간단 컴파일 설치 구퍼 2013.03.08 1869
12 hadoop설치시 참고사항 구퍼 2013.03.08 2131
11 hadoop 설치(3대) file 구퍼 2013.03.07 2613
10 Hive 사용법 및 쿼리 샘플코드 구퍼 2013.03.07 2991
9 Hive+mysql 설치 및 환경구축하기 file 구퍼 2013.03.07 2722
8 Hadoop Cluster 설치 (Hadoop+Zookeeper+Hbase) file 구퍼 2013.03.07 3995
7 ExWordCount jar파일 file 구퍼 2013.03.06 1336
6 이클립스에서 생성한 jar 파일 hadoop 으로 실행하기 file 구퍼 2013.03.06 2837
5 Hadoop wordcount 소스 작성 file 구퍼 2013.03.06 1888
4 Hadoop 설치 및 시작하기 file 구퍼 2013.03.06 1951
3 메이븐 (maven) 설치 및 이클립스 연동하기 file 구퍼 2013.03.06 2280
2 우분투 root 패스워드 설정하기 구퍼 2013.03.04 1314

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로