빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer

빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer

빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer

실무개발자를위한 실무교육 전문교육센터학원

www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.

Local Reducer

■ mapper의 출력에 적용

  - 따라서 mapper와 같은 타입의 출력이 필요.

  - 대부분 reducer를 그대로 combiner로 사용.

■ Reducer로 보내지는 네트웍 통신의 양을 최소화하기 위해 사용

  - 작업이 결합법칙과 교환법칙을 만족하는 사용 가능

  - WordCount나 Min, Max등이 이에 속함. 

  - Mean은 이에 속하지 않음.

■ C ombiner는 Job 클래스의 setCombinerClass 메소드를 통해 지정