sncap Style

Hbase 를 사용하기 위해서 아래버전으로 Hadoop과 HBase를 설치함 Hadoop: hadoop-0.20.2.tar.gz HBase: hbase-0.90.4.tar.gz Hbase의 append 지원 문제로 Hadoop은 최신 버전이 아닌 이전 버전인 0.20.2 버전을 사용함 hadoop 계정을 생성하고 java version jdk 1.6.0_26을 다운로드하여 설치함 1. 환경 설정 [server] 192.168.186.131 ubuntu [client] 192.168.186.132 ubuntu2 192.168.186.133 ubuntu3 [계정] hadoop:hadoop [java 설치 폴더] /usr/lib/jvm/java-6-sun [Hadoop 설치 폴더] /usr/local/hado..

Hadoop은 다중 코어와 디스크를 사용하도록 설계되어 있으므로, 어떤 하드웨어라도 충분히 활용할 수있다. HDFS 클러스터에서 데이터노드 저장소 용도로 RAID(Redundant Array of Independent Disks)를 사용하더라도 얻을수 있는 이득은 없다. HDFS는 노드간에 복제하는 기능이 있어, RAID가 제공하는 중복성(Redundancy)은 필요하지 않다. Hadoop은 대부분이 자바로 작성되어 자바가상머신 JVM이 설치된 어떤 플랫폼에서도 구성될수 있다. 32Bit 구조에서는 자바의 최대 힙메모리는 3GB로 제한된다. 이를 피하기위해서 네임노드는 일반적으로 64Bit 하드웨어에서 구동된다. - 설 치 - * OS 설치 - Ubuntu 어떤 플랫폼에서도 가능하지만, 필자는 Ubunu..

zookeeper 설치하기 $ wget http://ftp.daum.net/apache//zookeeper/zookeeper-3.3.3/zookeeper-3.3.3.tar.gz ($ wget http://apache.tt.co.kr//zookeeper/zookeeper-3.3.3/zookeeper-3.3.3.tar.gz) #tar zxvf zookeeper-3.3.3.tar.gz #mv zookeeper-3.3.3 /usr/share/zookeeper zookeeper를 user/share에 놓아두기로 했다. 그리고는 /usr/share/zookeeper/conf/zoo_sample.cfg파일의 이름을 zoo.cfg파일로 변경한다. #cd /usr/share/zookeeper/conf #mv zoo_sa..

사용환경 - Hadoop 0.20.2 - Hbase 0.20.6 - ext library : tableIndexed library for hbase0.20.6 - fully-distributed setup 1. hbase 설치 http://hbase.apache.org 에서 0.20.6 버전을 다운로드 받아 설치한다. (현재 0.90.x가 나오고 있지만 아직 rc버전이다.) * 명심할것은 Hbase의 위치는 마스터또는 슬레이브서버 모두 동일해야 한다. 서로 동일한 패스에 위치해야한다는 것을 명심하자. 2. /etc/host에 다음을 등록하자. * localhost에 127.0.0.1 같이 설정하지 마라 * hostname에 - 같은 것을 쓰지마라. 인식을 할수 없다. http://en.wikipedia...

NoSQL 계통의 Hadoop 설치 1. VMWare에 ubuntu Server 설치 (11.04 Server Version 설치) http://www.ubuntu.com/download/ubuntu/download Server version으로 설치 완료후 $ uname -a Linux .. .... .... $ sudo passwd (password 설정) $ su root root@xxx:/home/test# vi /etc/apt/sources.list deb http://archive.canonical.com/ lucid partner :wq 저장하고 나옴 아래와 같이 설정해도 됨 $ add-apt-repository "deb http://archive.canonical.com/ lucid par..