상세 컨텐츠

본문 제목

virtualbox linux CentOS(Red Hat)에서 Cloudera를 이용한 Hadoop 설치

Server

by 뽀로룡 2019. 11. 14. 13:38

본문

<CentOS 클라우데라 하둡 설치>

https://abc2080.tistory.com/entry/CentOS-Cloudera-Manager-%EC%84%A4%EC%B9%98

 

https://lsjsj92.tistory.com/432

 

http://blog.naver.com/PostView.nhn?blogId=qkfl4&logNo=221435863884&parentCategoryNo=&categoryNo=20&viewDate=&isShowPopularPosts=true&from=search

 

https://sqlmvp.tistory.com/1358

 

<VirtualBox - 네트워크 개념>

https://hahaite.tistory.com/283

 

https://m.blog.naver.com/cumulusworld/50192630808

 

https://jm4488.tistory.com/37

 

 

<설치 과정>

master, slave01, slave02, slave03 이렇게 4개의 VM을 구성하였다.

각 VM의 ip설정은 앞에 설치하면서 진행함.

 

  • 각 VM에서 hostname 설정
    master VM에서   hostname master.hadoop.com
    slave01 VM에서  hostname slave01.hadoop.com
    slave02 VM에서  hostname slave02.hadoop.com
    slave03 VM에서  hostname slave03.hadoop.com
  • sudo yum upgrade
  • sudo yum update
  • sudo yum groupinstall "development tools"
  • sudo yum install net-tools
  • sudo wget http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo
  • sudo vi cloudera-manager.repo
    baseurl=https://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.9.0
  • sudo mv ./cloudera-manager.repo /etc/yum.repos.d/
  • jdk 1.7 설치
    sudo yum install oracle-j2sdk1.7
  • 클라우데라 데몬, 서버 설치
    sudo yum -y install cloudera-manager-deamons cloudera-manager-server
  • db와 관련된 클라우데라 설치
    sudo yum -y install cloudera-manager-server-db-2
  • db서버 실행
    sudo service cloudera-scm-server-db start
  • 클라우데라 실행
    sudo service cloudera-scm-server start

<master에서만 진행할 것>

  • sudo vi /etc/hosts
    192.168.1.101 server01.hadoop.com
    192.168.1.102 server02.hadoop.com
    192.168.1.103 server03.hadoop.com

그럼 master에서 server01.hadoop.com 으로 접속 가능

초기 로그인 정보는 admin/admin

'Server' 카테고리의 다른 글

geoserver - inspire plugin 설치  (0) 2020.03.20
virtualbox linux CentOS 6 (Red Hat) 설치 및 고정 IP 할당  (0) 2019.11.13

관련글 더보기