분류 전체보기 834

[설치] hadoop(0.20.2) & Hbase(0.90.4)

Hbase 를 사용하기 위해서 아래버전으로 Hadoop과 HBase를 설치함 Hadoop: hadoop-0.20.2.tar.gz HBase: hbase-0.90.4.tar.gz Hbase의 append 지원 문제로 Hadoop은 최신 버전이 아닌 이전 버전인 0.20.2 버전을 사용함 hadoop 계정을 생성하고 java version jdk 1.6.0_26을 다운로드하여 설치함 1. 환경 설정 [server] 192.168.186.131 ubuntu [client] 192.168.186.132 ubuntu2 192.168.186.133 ubuntu3 [계정] hadoop:hadoop [java 설치 폴더] /usr/lib/jvm/java-6-sun [Hadoop 설치 폴더] /usr/local/hado..

Language/NoSQL&JDBC 2011.09.20

[영화] 3 iditos

오랜만에 휴일을 통해 본 인도영화... 평점이 하도 좋아서.. 뒤늦게 보긴 했는데.. 영화를 보고난뒤 맘속에 남는 딱한가지 단어는 "All is Well" 알이즈웰~ 알이즈웰.. 영화 중반부터 끝까지 너무 많이 나온다.ㅋㅋ 글쎄, 인도영화라 그런지.. 딱히 우리 정서에 맞는거 같지는 않지만. 3명의 천재 공학도 들이 똘끼 충만한 모습에서 .. 기존의 현실에서 느끼지 못했던 새롭고 신선함을 느꼈다. 약간의 반전도 있긴 하지만. ㅋㅋ 그래도 인도영화의 가장 큰 특징인.. 영화 전반에 흐르는 뮤지컬~~ 인도 사람들은 왜 영화에 뮤지컬을 넣는 걸까? 해피엔딩이라 좋기는 하지만.. 글쎄 그래도 마음 한구석에 뭔가... 조금의 아쉬움이 남긴 한다. 그래도 요즘 본 영화중에서 젤 괜찮았던거 같다. ㅋㅋ 특히 공학도 ..

낙서장 2011.09.19

Hadoop 설치 정리

Hadoop은 다중 코어와 디스크를 사용하도록 설계되어 있으므로, 어떤 하드웨어라도 충분히 활용할 수있다. HDFS 클러스터에서 데이터노드 저장소 용도로 RAID(Redundant Array of Independent Disks)를 사용하더라도 얻을수 있는 이득은 없다. HDFS는 노드간에 복제하는 기능이 있어, RAID가 제공하는 중복성(Redundancy)은 필요하지 않다. Hadoop은 대부분이 자바로 작성되어 자바가상머신 JVM이 설치된 어떤 플랫폼에서도 구성될수 있다. 32Bit 구조에서는 자바의 최대 힙메모리는 3GB로 제한된다. 이를 피하기위해서 네임노드는 일반적으로 64Bit 하드웨어에서 구동된다. - 설 치 - * OS 설치 - Ubuntu 어떤 플랫폼에서도 가능하지만, 필자는 Ubunu..

Language/NoSQL&JDBC 2011.08.30

sun-java6-jdk is not available.. 해결

$ apt-get install sun-java6-jdk Package sun-java6-jdk is not available, but is referred to by another package. This may mean that the package is missing, has been obsoleted, or is only available form another source. 위와 같은 error를 내면서 더이상 자바가 설치되지 않는다. 이유는 java version up.. ubuntu에 자바를 설치 하기 위해서 다음과 같은 방법을 사용했다. $ sudo add-apt-repository ppa:dlecan/openjdk $ sudo apt-get update $ sudo apt-get inst..

OS/Linux 2011.08.19

zookeeper 설치하기

zookeeper 설치하기 $ wget http://ftp.daum.net/apache//zookeeper/zookeeper-3.3.3/zookeeper-3.3.3.tar.gz ($ wget http://apache.tt.co.kr//zookeeper/zookeeper-3.3.3/zookeeper-3.3.3.tar.gz) #tar zxvf zookeeper-3.3.3.tar.gz #mv zookeeper-3.3.3 /usr/share/zookeeper zookeeper를 user/share에 놓아두기로 했다. 그리고는 /usr/share/zookeeper/conf/zoo_sample.cfg파일의 이름을 zoo.cfg파일로 변경한다. #cd /usr/share/zookeeper/conf #mv zoo_sa..

Language/NoSQL&JDBC 2011.08.17

Hbase 설치하기

사용환경 - Hadoop 0.20.2 - Hbase 0.20.6 - ext library : tableIndexed library for hbase0.20.6 - fully-distributed setup 1. hbase 설치 http://hbase.apache.org 에서 0.20.6 버전을 다운로드 받아 설치한다. (현재 0.90.x가 나오고 있지만 아직 rc버전이다.) * 명심할것은 Hbase의 위치는 마스터또는 슬레이브서버 모두 동일해야 한다. 서로 동일한 패스에 위치해야한다는 것을 명심하자. 2. /etc/host에 다음을 등록하자. * localhost에 127.0.0.1 같이 설정하지 마라 * hostname에 - 같은 것을 쓰지마라. 인식을 할수 없다. http://en.wikipedia...

Language/NoSQL&JDBC 2011.08.17

ssh-keygen 사용법

참조 : http://jwmx.tistory.com/272 http://blog.naver.com/paradox1573/40087216505 ssh접속은 아이디와 암호를 타이핑해서 로그인하는 방법과 인증서를 이용해서 로그인하는 방법이있다. ssh-keygen은 인증서를 이용한 로그인에 사용되는 인증서를 만드는 프로그램이다. 단, sshd가 인증서로그인을 허용해야 한다. 따라서 /etc/ssh/sshd_config에서 아래와 같은 라인이 주석해제 되어있는지 확인해야한다. RSAAuthentication yes PubkeyAuthentication yes AuthorizedKeysFile .ssh/authorized_keys #홈디렉토리에서의 공개키위치 인증서를 이용해서 로그인하는 과정은 다음과 같다. SS..

OS/Linux 2011.08.12