Stack Empty

하둡의 각 데몬 및 역할NameNode 하둡은 master / slave 구조 하둡에서 어떻게 파일이 블록 단위로 나뉘어져 있는지, 어느 노드가 해당 블록을 가지고 있는지와 분산 파일 시스템의 전반적인 상태를 알고 있음, 즉 파일의 메타데이터 정보 보관DataNode 로컬 파일 시스템에 위치한 파일에 HDFS 블록을 기록하거나 해당 파일을 읽는 등의 단순 기능 수행, 지속적으로 현재 시점의 메타데이터를 가질 수 있도록 NameNode에게 보고Secondary NameNode NameNode는 하둡에서 단일 실패 지점을 가지는데 NameNode에서 장애가 발생할 경우를 대비하여 주기적으로 NameNode metadate의 Snapshot을 기록하며 NameNode 장애 발생 시SNN은 NameNode로 사..

하둡 설치 (우분투 12.04 LTS 기준)JDK6 설치 sudo apt-get install openjdk-6-jdk하둡 다운로드 : wget "http://archive.apache.org/dist/hadoop/core/hadoop-1.0.3/hadoop-1.0.3.tar.gz" (이 글 작성 기준 최신 stable version 1.2.1)하둡 압축 해제 tar xvfz hadoop-1.0.3.tar.gzJDK 설치 경로 및 하둡 패스 환경번수에 등록 cd ~ vi .hashrc 아래의 문구 추가 JAVA_HOME=JDK 설치 경로 (보통 /usr/lib/jvm/java-6-openjdk-amd64) HADOOP_HOME=HADOOP 압축 해제 경로 PATH=$PATH:$HADOOP_HOME/bin..