Hadoop 분산 환경에서의 데이터 조인 전략 및 구현 기법
리듀스 측 조인 (Reduce-Side Join)
리듀스 측 조인은 리파티셔닝 정렬-병합 조인(Repartitioned Sort-Merge Join)이라고도 불립니다. 이 방식은 다양한 데이터 소스의 레코드를 리듀서로 전송하여 결합하므로, 셔플(Shuffle) 단계에서 발생하는 네트워크 및 I/O 오버헤드가 크다는 특징이 있습니다.
핵심 개념 및 처리 흐름
데이터 소스 (Data Source): 관계형 데이 ...
10월 1일 10:06에 게시됨