메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


  • 1. virtualbox에서 어댑터1에 브리지 어뎁터, 어댑터2에 호스트전용 어댑터를 설정한다.
  • 2. ubuntu 의 network interface 를 아래와 같이 추가한다.
  •          root@bigdata-host:/home/hadoop# cat /etc/network/interfaces
                  auto lo
                  iface lo inet loopback
  •               auto eth0
                  iface eth0 inet dhcp

                  

                  auto eth1
                  iface eth1 inet static
                  address 192.168.8.10
                  netmask 255.255.255.0
                  network 192.168.8.0
                  gateway 192.168.8.1
                  broadcast 192.168.8.255

    (가. 통신을 하기 위해서는 IP 주소가 같은 Network 대역안에 존재해야 한다. 그러므로 address를 Windows에 확인한 IP의 같은 네트워크 주소대로 설정해야 한다.

     나. 네트워크 정보를 수정한 후 Neworking을 Restart 하거나 서버를 재부팅한 후 HOST PC은 Windows의 DOS 창에서 ping을 한번 테스트 해 본다. ping test가 성공하면.. ssh접속이 가능하며.. 실패하는 경우 방화벽에서 필요한 포트를 열어줘야한다.)

     

    2. 변경사항 반영

        $sudo /etc/init.d/networking restart

     

  • 3. putty로 접근
    • host pc 가 윈도우인 경우 putty 같은 tool 을 사용해서 위에서 세팅한 ip(192.168.8.10, 포트는 22번) 로 ssh 접속이 되는지 확인한다.
    • 접속이 안되는 경우 방화벽을 확인한다.

        (

       방화벽 사용 = sudo ufw enable
       방화벽 전체 해제 = sudo ufw disable

       전부 닫고 포트 22  만 열기
       sudo ufw enable
       sudo ufw default deny
       sudo ufw allow 22

       )

    번호 제목 글쓴이 날짜 조회 수
    581 hbase startrow와 endrow를 지정하여 검색하기 샘플 총관리자 2016.12.07 70
    580 CentOS6에 python3.5.1 소스코드로 빌드하여 설치하기 총관리자 2016.05.27 71
    579 jdk 9이상 사용하려면 repository를 아래와 같이 지정해야한다. 총관리자 2019.06.02 71
    578 Cloudera의 CMS각 컴포넌트의 역할 총관리자 2020.02.10 71
    577 mysql sqoop작업을 위해서 mysql-connector-java.jar을 추가하는 경우 확실하게 인식시키는 방법 총관리자 2020.05.11 71
    576 SPIN(SPARQL Inference Notation)이란.. file 총관리자 2016.02.25 73
    575 [sbt] sbt 0.13.11 를 windows에 설치하고 scala프로그램을 compile해서 jar파일 만들기 총관리자 2016.07.11 74
    574 drools에서 drl관련 로그를 기록하기 위한 클래스 파일 총관리자 2016.07.21 74
    573 [SBT] project.sbt에 libraryDependencies에 필요한 jar를 지정했으나 sbt compile할때 클래스를 못찾는 오류가 발생했을때 조치사항 총관리자 2016.08.03 74
    572 DBCP Datasource(org.apache.commons.dbcp.BasicDataSource) 설정 및 속성 설명 총관리자 2016.09.26 74
    571 gradle을 이용하여 jar파일 생성시 provided속성을 지정할 수 있게 설정하는 방법 총관리자 2016.08.09 75
    570 특정 커밋 시점(commit id를 기준으로)으로 돌리기(reset) 총관리자 2016.11.21 75
    569 S2RDF 테스트(벤치마크 테스트를 기준으로 python, scala소스가 만들어져서 기능은 파악되지 못함) [2] file 총관리자 2016.05.27 76
    568 Hadoop 2.7.x에서 사용할 수 있는 파일/디렉토리 관련 util성 클래스 파일 총관리자 2017.09.28 76
    567 [CentOS 7.4]Hadoop NFS gateway기동시 Cannot connect to port 2049 오류 발생시 확인/조치 총관리자 2022.03.02 76
    566 small file 한개 파일로 만들기(text file 혹은 parquet file의 테이블) gooper 2022.07.04 76
    565 How-to: Tune Your Apache Spark Jobs (Part 2) file 총관리자 2016.10.31 77
    564 테이블의 row수를 빠르게 카운트 하는 방법 총관리자 2017.01.26 77
    563 hadoop에서 yarn jar ..를 이용하여 appliction을 실행하여 정상적(?)으로 수행되었으나 yarn UI의 어플리케이션 목록에 나타나지 않는 문제 총관리자 2017.05.02 77
    562 Query Status: Sender xxx.xxx.xxx.xxx timed out waiting for receiver fragment instance: 1234:cdsf, dest node: 10 의 오류 원인및 대응방안 총관리자 2021.11.03 77

    A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
    We are open to the required minutes. Please send inquiries to gooper@gooper.com.

    위로