빅데이터공부하기 42 컴파일실행및 결과확인

빅데이터공부하기 이번주제는 소스컴파일을 실행해보고

결과확인을 해보려합니다.

며칠뒤면.. 추석이에요 ^^ 추석을바라보며~~ 오늘도 파이팅><

 

컴파일

 

컴파일은 메이븐을 이용

- sudo apt-get install maven2

 

작업 디렉토리를 만든 후 WordCount 프로젝트 파일 다운로드 (chapter4 디렉토리)하고 untar

 

프로젝트 루트 디렉토리에서 컴파일하고 jar 파일 생성(이 작업시 인터넷이 연결되어있어야함)

- mvn compile

- mvn install

*target이란 디렉토리 밑에 jar 파일 생성.

 

실행

 

앞서 하둡설치후 실행한 예제프로그램의 실행방법과 거의 흡사

 

bin/hadoop jar[생성된 Jar 파일위치] WordCount/input/README.txt/output/wordcount2

 

 

실행결과확인

 

앞 세션에서 한것과 마찬가지로 hdfs의 결과디렉토리 확인해보고 JobTracker 웹인터페이스로도 확인

 

참고로 MapReduce의 결과는 파트파일이란 것으로 만들어져 결과 디렉토리에

 존재

- "part-r-"이란 이름으로 시작하며 다섯자리의 일련번호가 붙음

(00000부터 시작)

 

 

 

 

 

빅데이터공부는 오라클자바 it공부하자 티스토리에서!!><