[ 빅데이터 Tip ]- HDFS 개요

HDFS 개요

 

 

 

 

• 2003년 구글랩에서 발표된 The Google Filesystem이란 논문을 바탕으로 작성된 파일시스템.

 

• 이 시스템의 특징

     – 파일을 여러개의 블록으로 나눠 저장 (기본 64MB)

     – 하드웨어 고장에 견고

 

• 한 데이터블록을 보통 3군데 (Replication factor)에 저장하며 저장시 같은 rack에 있는 서버들에 두 개에 저장하고

   다른 하나는 다른 rack에 있는 서버에 저장.