메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


datanode03노드의 DataNode서비스 restart시 org.apache.hadoop.security.KerberosAuthException: failure to login: for principal: hdfs/datanode03@GOOPER.COM from keytab hdfs.keytab와 Caused by: javax.security.auth.login.LoginException: Unable to obtain password from user같은 오류가 발생되면서 start에 실패하는 경우가 있다.

이는 OS에서 "hostname -f"이 보이는 값이 FQDN이 아닌 datanode03로 나오기 때문인데 이경우는 /etc/hosts파일에 동일한 ip에 "xxx.xxx.xxx.xxx datanode03"와 "xxx.xxx.xxx.xxx datanode03.gooper.com"가 등록되어 있으며 "xxx.xxx.xxx.xxx datanode03"먼저 등장하기 때문에 이것을 먼저 인식해서 keytab에 들어있는 principal과 달라서 kerberos인증을 못하고 오류가 발생하는것이다. 

그래서 DataNode서비스가 기동하지 못하게 되는것이다.  

이러한 경우는 /etc/hosts파일에서 "xxx.xxx.xxx.xxx datanode03"라인을 삭제한다. 

번호 제목 글쓴이 날짜 조회 수
40 hbase shell에서 컬럼값 검색하기(SingleColumnValueFilter이용) 총관리자 2014.04.25 2448
39 HBase, BigTable, Cassandra Schema Design file 구퍼 2013.03.15 2509
38 hadoop 설치(3대) file 구퍼 2013.03.07 2613
37 HBase 설치하기 – Pseudo-distributed file 구퍼 2013.03.12 2647
36 org.apache.hadoop.hbase.PleaseHoldException: Master is initializing 구퍼 2013.03.15 2668
35 mysql-server 기동시 Do you already have another mysqld server running on port 오류 발생할때 확인및 조치방법 총관리자 2017.05.14 2674
34 Hive+mysql 설치 및 환경구축하기 file 구퍼 2013.03.07 2722
33 banana pi에(lubuntu)에 hadoop설치하고 테스트하기 - 성공 file 총관리자 2014.07.05 2760
32 spark-sql실행시 Caused by: java.lang.NumberFormatException: For input string: "0s" 오류발생시 조치사항 총관리자 2016.06.09 2803
31 org.apache.hadoop.security.AccessControlException: Permission denied: user=hadoop, access=WRITE, inode="":root:supergroup:rwxr-xr-x 오류 처리방법 총관리자 2014.07.05 2835
30 이클립스에서 생성한 jar 파일 hadoop 으로 실행하기 file 구퍼 2013.03.06 2837
29 hue.axes_accessattempt테이블의 username컬럼에 NULL 혹은 space가 들어갈수도 있음. 총관리자 2021.11.03 2838
28 JobHistory 서버 기동시 HDFS상에 특정 폴더를 생성할 수 없어서 기동하지 못하는 경우 조치 총관리자 2018.05.29 2898
27 Hive 사용법 및 쿼리 샘플코드 구퍼 2013.03.07 2991
26 "java.net.NoRouteToHostException: 호스트로 갈 루트가 없음" 오류시 확인및 조치할 사항 총관리자 2016.04.01 3026
25 의사분산모드에서 presto설치하기 총관리자 2014.03.31 3050
24 sqoop 1.4.4 설치및 테스트 총관리자 2014.04.21 3134
23 Hbase Shell 명령 정리 구퍼 2013.04.01 3170
22 hadoop및 ecosystem에서 사용되는 명령문 정리 총관리자 2014.05.28 3455
21 HBase 설치하기 – Fully-distributed 구퍼 2013.03.12 3548

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로