빅데이터/빅데이터Hadoop
빅데이터 하둡 프로그래밍 교육과정 ]MultipleInputs의 사용
행복한짱짱이
2017. 2. 7. 20:14
빅데이터 하둡 프로그래밍 교육과정 ]MultipleInputs의 사용
빅데이터 하둡 프로그래밍 교육과정 ]MultipleInputs의 사용
실무개발자를위한 실무교육 전문교육센터학원
www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.
MultipleInputs의 사용
■ MultipleInputs.addInputPath(pass, new Path(titleDocID), KeyValueTextInputFormat.class, MyMapper1.class);
- titleDocID에 있는 파일들을 읽을때는 MyMapper1.map을 mapper로 사용하면서 입력포맷으로는 KeyValueTextInputFormat을 사용해라.
■ MultipleInputs.addInputPath(pass, new Path(docIDFreq), KeyValueTextInputFormat.class, MyMapper2.class);
- docIDFreq에 있는 파일들을 읽을때는 MyMapper2.map을 mapper로 사용하면서 입력포맷으로는 KeyValueTextInputFormat을 사용해라.
*이 경우 Job 클래스의 setMapperClass는 호출이 불필요.