1월, 2015의 게시물 표시

HDP 2.X Install

이미지
프롤로그 Prologue - 설치 순서만 기록해 놓았기 때문에 따로 개념 정리는 하지 않았습니다. - 호튼웍스 ambari를 이용한 설치로, 설치 방법은 해당 홈페이지를 참고하였습니다. - 테스트 할 목적으로 서버 4대를 사용하여 설치하였습니다. [1].구성 환경 및 사전 준비 작업 1. 테스트 할 서버 준비, 호스트 네임 설정 /*hadoop01*/ hostname hadoop01 vim /etc/sysconfig/networks vim /etc/hosts 10.10.1.2 hadoop01 hadoop01.test /*hadoop02*/ hostname hadoop02 vim /etc/sysconfig/networks vim /etc/hosts 10.10.1.3 hadoop02 hadoop02.test /*hadoop03*/ hostname hadoop03 vim /etc/sysconfig/networks vim /etc/hosts 10.10.1.4 hadoop03 hadoop03.test /*hadoop04*/ hostname hadoop04 vim /etc/sysconfig/networks vim /etc/hosts 10.10.1.5 hadoop04 hadoop04.test 2. 각 노드(하나의 물리 서버)들이 인터넷이 될 수 있도록 설정 3. Java설치 yum install java 4. NTP 설정, 인터넷이 안되는 환경일 경우 마스터 노드에 NTP를 올려서 사용 vim /etc/ntp.conf 5. DNS 설정 - 테스트 용도로 pdns-recursor를 설치 하여 구성. - 한 서버에만 pdns-recursor 설치하고 DNS구성 후, 다른 서버들이 pdns-recursor서버를 바라보도록 설정함 /*hadoop01 서버에 DNS 설정*/ vim /etc/hosts 10.10.1.2 hadoop0

CDH Manager를 이용한 CDH5 설치하기

Kibana 4.x beta Build and Run

프롤로그 Prologue 현재 저의 경우 ELK(kibana 3.x)를 구축하여 실시간 모니터링 서비스로 사용하고 있습니다. 설치 및 사용 가이드는 추후 올릴 예정입니다. 위 문서는 kibana 4.x beta버전을 빌드 하고 설치 및 관련 후기를 적어 놓은 문서입니다. 틀린 점 및 부족한 점이 있다면 코멘트 달아주시길 바랍니다. Kibana 4.x Build하기 1. git clone git clone https://github.com/elasticsearch/kibana.git 2. kibana 폴더로 이동 cd kibana 3. npm command install, 의존성 있는 모듈 설치 yum install npm npm install 4. grunt command install npm install grunt-cli /npm install -g grunt-cli 5. grunt build grunt build TroubleShooting-1 build를 하면 다음과 같은 에러가 나오는경우 6번 명령어를 실행하여 해당 모듈을 설치합니다. Running "get_build_props" task Running "clean:target" (clean) task Running "clean:build" (clean) task Running "require_css_deps:copy" task Warning: Unable to read "/<;YourPath>;/kibana/src/kibana/bower_components/require-css/css-builder.js" file (Error code: ENOENT). Use --force to continue. Aborted due to warnings. 6. bower install npm install bower bower install TroubleShoot