메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


Hadoop AIX 7.1에 Hadoop설치(정리중)

총관리자 2016.09.12 13:32 조회 수 : 236

--os정보확인

-oslevel


-- bit확인

http://solarixer.blogspot.kr/2007/11/unixlinux-os-3264bit.html


----java다운로드/설치

http://m.blog.naver.com/dae0park/140194653364

혹은 

http://likebnb.tistory.com/99


C:UsersgooperDownloadDirector에 다운로드 된다.


---AIX에서 사용가능한 명령어

http://oracle.tistory.com/108


- AIX(ksh)에서 파일명 자동완성(리눅스에서 일부만 입력후 tab키 누르는 것과 같은 효과)

[ESC] + [=] 실행가능 list up

[ESC] + [] 파일명 자동완성


----ksh 사용법

http://madhaks.blogspot.kr/2004/12/ksh-100.html


------.profile파일에 java경로 지정

PATH=/usr/bin:/etc:/usr/sbin:/usr/ucb:$HOME/bin:/usr/bin/X11:/sbin:.:/usr/java7_64/bin


# .profile변경사항 반영

$ . .profile



-------------AIX에서 hadoop방법및 참고사항

http://www.programering.com/a/MzMwQDMwATU.html


-----------AIX에 Flume설치시오류 해결 내용

http://developordie.tistory.com/entry/%EB%A1%9C%EA%B7%B8-%EC%88%98%EC%A7%91%EA%B8%B0-flume-hadoop-%EB%A7%8C%EB%93%A4%EA%B8%B0-3-Flume-%EC%84%A4%EC%B9%98-%EB%B0%8F-%EB%A1%9C%EA%B7%B8-%EC%A0%84%EB%8B%AC



----------설치 참고

기타1.  
 - java6은 sdk와 jre가 같이 합쳐있어 하나의 파일만 설치하면 되지만 7의 경우 jre와 jdk가 분리되어 있다. 
 - 7의 경우 jre를 설치 후 sdk를 설치해야 한다.(의존성에 체크됨) 

기타2. 
 - 자바7의 경우 AIX6.1이상부터 설치가 가능한 듯 하다.



-----------------AIX에서 설치해서 사용할 수 있는 GNU/Linux 프로그램 목록

http://www-03.ibm.com/systems/power/software/aix/linux/toolbox/alpha.html



----AIX설치시 참고

http://developordie.tistory.com/category/IT%20story


----참고------------------------

unix/linux의 OS 32/64bit 확인 방법


HP UX


11.xx 일 경우

# getconf KERNEL_BITS 

64


10.xx 일 경우

# getconf LONG_MAX 

2147483647

(64비트임)로 확인할 수 있습니다 


AIX


현재 load된 kernel 이 32-bit 혹은 64-bit 인지 확인하는 명령어

# bootinfo -K 

32


사용중인 machine이 32-bit 혹은 64-bit 인지 확인하는 명령어

# bootinfo -y 

32 



SOLARIS


# isainfo -kv

64-bit sparcv9 kernel modules 

현재 이 시스템은 64bit 커널을 가지고 운영을 하는 시스템 이다. 


# isainfo -kv 

32-bit sparcv kernel modules 

이 시스템은 32bit 커널을 가지고 운영을 하는 시스템이다. 


# isainfo -v 

64-bit sparcv9 applications 32-bit sparc applications 

"-v"만 했을 경우 이 시스템에서는 32bit / 64bit 체계의 프로그램을 사용할 수 있다. 


# isainfo -v 

32-bit sparc applications 

이 시스템은 32bit 체계의 프로그램만 구성하여 사용할 수 있다.

번호 제목 글쓴이 날짜 조회 수
67 bananapi 5대(ubuntu계열 리눅스)에 yarn(hadoop 2.6.0)설치하기-ResourceManager HA/HDFS HA포함, JobHistory포함 총관리자 2015.04.24 19145
66 mapreduce appliction을 실행시 "is running beyond virtual memory limits" 오류 발생시 조치사항 총관리자 2017.05.04 16899
65 org.apache.hadoop.hdfs.server.common.InconsistentFSStateException: Directory /tmp/hadoop-root/dfs/name is in an inconsistent state: storage directory does not exist or is not accessible. 구퍼 2013.03.11 14781
64 [Decommission]시 시간이 많이 걸리면서(수일) Decommission이 완료되지 않는 경우 조치 총관리자 2018.01.03 5361
63 Hadoop Cluster 설치 (Hadoop+Zookeeper+Hbase) file 구퍼 2013.03.07 3995
62 hadoop 2.6.0 기동(에코시스템 포함)및 wordcount 어플리케이션을 이용한 테스트 총관리자 2015.05.05 3770
61 hadoop및 ecosystem에서 사용되는 명령문 정리 총관리자 2014.05.28 3455
60 "java.net.NoRouteToHostException: 호스트로 갈 루트가 없음" 오류시 확인및 조치할 사항 총관리자 2016.04.01 3024
59 이클립스에서 생성한 jar 파일 hadoop 으로 실행하기 file 구퍼 2013.03.06 2836
58 org.apache.hadoop.security.AccessControlException: Permission denied: user=hadoop, access=WRITE, inode="":root:supergroup:rwxr-xr-x 오류 처리방법 총관리자 2014.07.05 2835
57 banana pi에(lubuntu)에 hadoop설치하고 테스트하기 - 성공 file 총관리자 2014.07.05 2760
56 hadoop 설치(3대) file 구퍼 2013.03.07 2613
55 Cacti로 Hadoop 모니터링 하기 file 구퍼 2013.03.12 2367
54 hadoop설치시 오류 총관리자 2013.12.18 2313
53 메이븐 (maven) 설치 및 이클립스 연동하기 file 구퍼 2013.03.06 2280
52 hadoop설치시 참고사항 구퍼 2013.03.08 2131
51 W/F수행후 Logs not available for 1. Aggregation may not to complete. 표시되며 로그내용이 보이지 않은 경우 총관리자 2020.05.08 2110
50 Hadoop 설치 및 시작하기 file 구퍼 2013.03.06 1951
49 Hadoop wordcount 소스 작성 file 구퍼 2013.03.06 1888
48 access=WRITE, inode="staging":ubuntu:supergroup:rwxr-xr-x 오류 총관리자 2014.07.05 1719

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로