비디오: 소프트웨어 정의 스토리지를 위한 오픈소스 솔루션, 글러스터 스토리지 알아보기 2024
분산 시스템과 마찬가지로 네트워킹은 Hadoop 클러스터를 만들거나 끊을 수 있습니다. "Hadoop 클러스터의 마스터 노드와 슬레이브 노드 사이에는 클러스터 가동에 필수적인 많은 잡담이 있으므로 엔터프라이즈 급 스위치를 사용하는 것이 좋습니다.
클러스터의 각 랙에는 이중화 및 성능을 위해 두 개의 TOR (Top-of-rack) 스위치가 필요합니다. ToR 스위치에는 10GbE를 사용하십시오.
ToR 스위치는 랙에있는 모든 컴퓨터를 함께 연결하는 네트워크 스위치입니다. 일반적으로 랙의 맨 꼭대기에서 볼 수 있습니다. 이것이 바로 사람들이 "랙 상단 (top-of-rack)"이라고 말한 이유입니다. "대안적인 네트워킹 접근법은 EoR (end-of-row) 스위치를 사용하는 것이지만 매우 자주 볼 수는 없습니다.
ToR 접근은 성장하는 클러스터에 대한 네트워킹 관점에서 더 간단합니다. 예를 들어 ToR 스위치가 EoR보다 슬레이브 노드와 추가 랙을 추가하는 것이 훨씬 쉽습니다.
랙이 3 개 이상인 경우 코어 스위치 2 개 이상이 필요합니다 (다시 설명하자면 주로 중복을위한 것이지만 성능을위한 것입니다). 이 코어 스위치는 방대한 양의 트래픽을 처리하므로 40GbE가 필수적입니다.
클러스터를 여러 랙으로 확장하거나 확장하려는 경우 Hadoop에 익숙한 네트워킹 전문가, 향후 성장 계획 및 작업 부하를 고용하십시오. 나쁜 네트워킹은 성능을 심각하게 저해 할 수 있지만 미래 성장을 고통스럽고 비싸게 만들 수도 있습니다.
