IT 공부정리

1. Cloudera Manager(CM)란? Hadoop 및 Hadoop Eco System을 직접 설치할 수 있지만 Cluster상의 수많은 머신에 일일이 설치하고 환경 구성을 하려면 매우복잡한 일이 될 수 있기 때문에 이런 작업을 편하게 해주는 도구이다. ※CM 주요기능 프로비저닝 : 하둡 에코시스템을 편리하게 설치, 삭제, 수정 관리 매니저먼트 : 설치한 에코시스템의 설정 변경 및 최적화 지원 모니터링 : 하드웨어의 리소스 및 설치 컴포넌트의 상태 모니터링/대시보드 2. CM 설치 clouder-manager(2.4 단계)는 master 서버에서만 설치를 진행을 하고 그것을 제외한 모든 설정은 모든 서버에 진행을 한다. 2.1 yum updata를 진행을 한다. yum update -y 2.2 N..

Hadoop 2021. 9. 1. 17:31

※환경구성 virtualbox에 가상머신 3대를 설치하고 os : Centos7 , RAM : 8GB, HDD : 100GB, cpu core 수 : 4 로 설정했습니다. Cloudera Manager(CM)를 설치하기 전에 환경구성입니다. Centos 환경구성 3대의 가상머신 모두 설정한다. 1. Hostname 변경 명령어 : hostname ( 원하는 호스트이름) ex) hostname을 nn이라고 설정을 하겠다. hostname nn 2.Host 파일 수정 vi 편집기로 hosts파일에 들어가 가상머신 3대 ip,hostname 등록을 해준다. 명령어 : vi /etc/hosts 아래와 같이 추가를 한다. 3 .방화벽 설정 systemctl stop firewalld systemctl disabl..

Hadoop 2021. 8. 30. 10:49