빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer
빅데이터 하둡 프로그래밍 교육과정 ]Local Reducer
실무개발자를위한 실무교육 전문교육센터학원
www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.
Local Reducer
■ mapper의 출력에 적용
- 따라서 mapper와 같은 타입의 출력이 필요.
- 대부분 reducer를 그대로 combiner로 사용.
■ Reducer로 보내지는 네트웍 통신의 양을 최소화하기 위해 사용
- 작업이 결합법칙과 교환법칙을 만족하는 사용 가능
- WordCount나 Min, Max등이 이에 속함.
- Mean은 이에 속하지 않음.
■ C ombiner는 Job 클래스의 setCombinerClass 메소드를 통해 지정
'빅데이터 > 빅데이터Hadoop' 카테고리의 다른 글
| 빅데이터 하둡 프로그래밍 교육과정 ]Mapper의 출력 버퍼링 (0) | 2017.01.31 |
|---|---|
| 빅데이터 하둡 프로그래밍 교육과정 ]Mapper출력을 어느 Reducer로? (0) | 2017.01.31 |
| 빅데이터 하둡 프로그래밍 교육과정 ]주요 WritableComparable 타입들 (0) | 2017.01.31 |
| 빅데이터 하둡 프로그래밍 교육과정 ]키 타입 (0) | 2017.01.31 |
| 빅데이터 하둡 프로그래밍 교육과정 ]밸류 타입 (0) | 2017.01.31 |