이 일련의 기사에서는 전체 내용을 다룰 것입니다. Cloudera Hadoop 클러스터 구축 건물 공급 업체 그리고 산업 권장 모범 사례.
8부: Sentry 설치 및 설정 방법(Authorization Tool)
9부: Hadoop 인증을 위한 Kerberos(클러스터 Kerberos화) 설치 방법
10부: CentOS/RHEL 7에서 클러스터 조정(Yarn Tuning) 방법
OS 설치 및 수행 OS 레벨 전제 조건은 하둡 클러스터. 하둡 다양한 Linux 플랫폼에서 실행할 수 있습니다. 센트OS, 빨간 모자, 우분투, 데비안, 수세 등, 실시간 생산에서 대부분의 하둡 클러스터 위에 건설된다 RHEL/CentOS, 우리는 사용할 것입니다 센트OS 7 이 자습서 시리즈의 데모용입니다.
조직에서 OS 설치는 다음을 사용하여 수행할 수 있습니다. 킥 스타트. 3~4노드 클러스터라면 수동 설치가 가능하지만 10노드 이상으로 큰 클러스터를 구축할 경우 OS를 하나씩 설치하는 것은 지루하다. 이 시나리오에서는 킥스타트 방식이 등장하며 킥스타트를 사용하여 대량 설치를 진행할 수 있습니다.
부터 좋은 성과 달성 하둡 환경 올바른 하드웨어 및 소프트웨어 프로비저닝에 따라 다릅니다. 따라서 생산을 구축 하둡 클러스터 하드웨어 및 소프트웨어와 관련하여 많은 고려 사항이 포함됩니다.
이 기사에서는 OS 설치에 대한 다양한 벤치마크와 배포를 위한 몇 가지 모범 사례를 살펴보겠습니다. Cloudera Hadoop 클러스터 서버 ~에 CentOS/RHEL 7.
다음은 배포 설정을 위한 모범 사례입니다. Cloudera Hadoop 클러스터 서버 ~에 CentOS/RHEL 7.
24TB 스토리지 서버의 디스크 파티셔닝에 대한 아래 예를 찾으십시오.
설치하기 전에 알아야 할 사항 센트OS 7 서버 하둡 서버.
이 기사에서는 OS(센트OS 7) VMware 가상 머신에서. 여기서는 파티션을 수행하기 위해 여러 디스크를 사용하지 않습니다. CentOS는 다음과 유사합니다. 렐 (동일한 기능), 그래서 우리는 설치 단계를 볼 것입니다 센트OS.
1. 시작 CentOS 7.x ISO 이미지 다운로드 로컬 Windows 시스템에서 가상 머신을 부팅하는 동안 선택합니다. 고르다 'CentOS 7 설치' 보여진 바와 같이.
2. 선택 언어, 기본값은 영어, 클릭 계속하다.
3.소프트웨어 선택 – '최소 설치'를 클릭하고 '완료‘.
4. 설정 루트 비밀번호 설정하라는 메시지가 표시됩니다.
5.설치 대상 – 이것은 조심해야 할 중요한 단계입니다. OS를 설치해야 하는 디스크를 선택해야 하며, OS용으로 전용 디스크를 선택해야 합니다. '를 클릭하세요.설치 대상'를 선택하고 디스크를 선택합니다. 실시간으로 여러 디스크가 있을 것이므로 선택해야 합니다. 선호하는 'sda‘.
6.기타 저장 옵션 – 두 번째 옵션(파티셔닝을 구성하겠습니다)을 선택하여 다음과 같은 OS 관련 파티셔닝을 구성합니다. /var, /var/log, /home, /tmp, /opt, /swap.
7. 완료되면 설치를 시작합니다.
8. 설치가 완료되면 서버를 재부팅합니다.
9. 서버에 로그인하고 호스트 이름을 설정합니다.
# hostnamectl 상태. # hostnamectl set-hostname tecmint. # hostnamectl 상태.
이 기사에서는 OS 설치 단계와 파일 시스템 파티셔닝에 대한 모범 사례를 살펴보았습니다. 이는 모두 일반적인 지침이며 작업 부하의 특성에 따라 클러스터의 최상의 성능을 달성하기 위해 더 많은 뉘앙스에 집중해야 할 수도 있습니다. 클러스터 계획은 하둡 관리자. 우리는 깊이 잠수 할 것입니다 OS 수준 전제 조건 및 보안 강화 다음 기사에서.