빅데이터 하둡 프로그래밍 교육과정 ]야후 검색팀의 예 (하둡도입초반)

빅데이터 하둡 프로그래밍 교육과정 ]야후 검색팀의 예 (하둡도입초반)

빅데이터 하둡 프로그래밍 교육과정 ]야후 검색팀의 예 (하둡도입초반)

실무개발자를위한 실무교육 전문교육센터학원

www.oraclejava.co.kr에 오시면 보다 다양한 강좌를 보실 수 있습니다.

야후 검색팀의 예 (하둡도입초반)

■ 2006년초 Doug Cutting을 영입하여 하둡 도입을 실험. 20노드 하둡 클러스터 셋업.

■ 2008년 1000+ 노드 하둡 클러스터를 셋업

  - 웹페이지 그래프 계산을 하둡으로 포팅

■ 2009년 30여개 마켓의 모든 검색어를 하둡에 저장하고 처리.

■ 웹페이지 classification이나 Machine Learned Ranking등의 모델 빌딩에 하둡 클러스터 사용