빅데이터 R-Hadoop 실무과정]

실무개발자를위한 실무교육 전문교육센터학원
www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.

 

 

 

 

 

소스컴파일,실행 및 결과확인

​

 

 

 
 
컴파일

컴파일은 메이븐을 이용
sudo apt-get install maven2
작업 디렉토리를 만든 후 WordCount 프로젝트 파일 다운로드(chapter4 디렉토리)하고 untar
프로젝트 루트 디렉토리에서 컴파일하고 jar 파일 생성 (이 작업시 인터넷에 연결되어있어야함)
mvn compile
mvn install
target이란 디렉토리 밑에 jar 파일 생성.

실행
앞서 하둡설치후 실행한 예제프로그램의 실행방법과 거의 흡사
bin/hadoop jar [생성된Jar파일위치] WordCount /input/README.txt /output/wordcount2

실행결과확인

앞 세션에서 한것과 마찬가지로 hdfs의 결과 디렉토리 확인해보고 JobTracker 웹인터페이스로도 확인.
참고로 MapReduce의 결과는 파트파일이란 것으로 만들어져 결과 디렉토리에 존재.
“part-r-”이란 이름으로 시작하며 다섯자리의 일련번호가 붙음 (00000부터 시작).

).

 

 

 

 

실무개발자를위한 실무교육 전문교육센터학원
www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.