빅데이터

[빅데이터] 서버 주소 설정 및 Cloudera 설치

allempty_sheep 2024. 6. 10. 17:26
반응형

🎁 본 글은 실무로 '배우는 빅데이터기술' 책을 따라해보고 실행하여보는 과정을 기록한 글이다.

🎁 빅데이터 처리의 전체적인 흐름과 과정을 학습하기 쉬우며 빅데이터에 관심있는 사람들에게 추천한다.

 

이전 글에서 설정해 둔 내용을 살펴보자

 

Server01 에서 실행
# cat /etc/hosts

127.0.0.1 localhost server01
192.168.56.101 server01.hadoop.com server01
192.168.56.102 server02.hadoop.com server02
192.168.56.103 server03.hadoop.com server03

Server02 에서 실행
# cat /etc/hosts
127.0.0.1 localhost server02
192.168.56.101 server01.hadoop.com server01
192.168.56.102 server02.hadoop.com server02
192.168.56.103 server03.hadoop.com server03

 

각각 아래와 같이 나올 것이다.

 

윈도우 hostname 변경

C:\Windows\System32\drivers\etc
hosts 파일을 open

아래 두가지 주소를 추가 해 줄 것이다.

192.168.56.101 server01.hadoop.com
192.168.56.102 server02.hadoop.com

 

이후 웹 주소에 아래 내용을 입력하면 클라우데라 매니저 페이지가 나온다.

http://server01.hadoop.com:7180/

 

초기 사용자 이름과 비밀번호

아이디: admin

비밀번호: admin

 

클러스터 추가

 

 

계속을 눌러서 무료버전을 클릭하고 설정화면으로 들어간다.

 

 

클러스터 이름을 지정

 

호스트 이름(주소) 입력 후 검색 클릭.

 

주소 2개를 클릭 하여 주면 되는데

위와 같이 떴을 때 주소 2개가 비활성화 되어있다면 '현재 관리되는 포스트' 부분에서 2개의 주소를 체크해준다.

 

 

아래 화면은 만지지 않고 그대로 계속.

 

 

그렇다면 아래와 같이 설치가 될 것이다.

 

HDFS, YARN, ZOOKEEPER 세개를 선택

어느 서버에 설치할지 선택 아래와 같이 설정 해 준다.

 

다음 페이지는 수정 하지 않고 계속.