비디오: AWS 빅데이터 아키텍처 패턴 및 모범 사례 - 남궁영환 빅데이터 컨설턴트(AWS 코리아) 2024
많은 기업들이 큰 데이터 문제를 탐구하고 몇 가지 혁신적인 솔루션을 찾고 있습니다. 지금은 큰 데이터 여행을 시작할 때 잘 작동 할 수있는 모범 사례 또는 기본 원칙에주의를 기울여야 할 때입니다.
실제로 대규모 데이터 통합은 회사 전체의 데이터 통합 프로세스 전반에 적합합니다. 따라서 기존 데이터 소스의 데이터 통합에서 배운 모든 것을 버릴 수 없습니다. 기존 데이터 관리 또는 대용량 데이터 관리에 관해서도 동일한 규칙이 적용됩니다.
큰 데이터 통합을 위해 우선 순위 목록 상단에 다음 주요 문제를 보관하십시오.
-
데이터 품질을 지속적으로 유지하십시오. 데이터 품질에 대한 귀하의 강조는 큰 데이터 분석의 단계에 달려 있습니다. 방대한 양의 데이터에 대한 초기 분석을 수행 할 때 데이터 품질을 제어 할 수있을 것으로 기대하지 마십시오. 그러나 조직에 가장 중요한 하위 집합을 식별하기 위해 큰 데이터의 범위를 좁히는 경우 데이터 품질에 중점을 두어야합니다.
궁극적으로 데이터 품질은 과거 데이터를 통해 결과를 이해하려는 경우 중요합니다. 귀사가 분석을 핵심 계획 도구로 사용함에 따라 데이터 품질은 성공과 실패의 차이를 의미 할 수 있습니다.
-
실시간 데이터 요구 사항을 고려하십시오. 빅 데이터는 스트리밍 데이터를 선두로 가져옵니다. 따라서 예측 가능한 분석을 위해 모션에서 데이터를 환경에 통합하는 방법을 명확하게 이해해야합니다.
-
새로운 정보 사일로를 만들지 마십시오. 큰 데이터를 강조하는 부분은 하둡 및 기타 구조화되지 않은 소스와 구조화 된 소스에 초점을 맞추고 있지만 비즈니스와 관련하여이 데이터를 관리해야한다는 점을 기억하십시오. 따라서 이러한 소스를 비즈니스 데이터 및 데이터웨어 하우스와 통합해야합니다.