빅데이터/빅데이터Hadoop
빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer
행복한짱짱이
2017. 1. 31. 19:47
빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer
빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer
실무개발자를위한 실무교육 전문교육센터학원
www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.
Local Reducer
■ mapper의 출력에 적용
- 따라서 mapper와 같은 타입의 출력이 필요.
- 대부분 reducer를 그대로 combiner로 사용.
■ Reducer로 보내지는 네트웍 통신의 양을 최소화하기 위해 사용
- 작업이 결합법칙과 교환법칙을 만족하는 사용 가능
- WordCount나 Min, Max등이 이에 속함.
- Mean은 이에 속하지 않음.
■ C ombiner는 Job 클래스의 setCombinerClass 메소드를 통해 지정