본문 바로가기

개발/HADOOP_SPARK_ETC30

zookeeper 설치 [펌] ■ Zookeeper를 아래의 3대의 Linux CentOS7이 설치된 서버에 설치하고자 한다. 각 서버의 호스트파일(/etc/hosts)에 아래의 정보가 등록되어있다.123456789[nextman@centos01 etc]$ cat /etc/hosts127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4::1 localhost localhost.localdomain localhost6 localhost6.localdomain6192.168.192.128 centos01192.168.192.130 centos02192.168.192.133 centos03192.168.192.132 centos04192.168.192.131.. 2017. 3. 24.
zookeeper no route to host zookeeper 설치 후 hbase 를 설치하려는 마주하는 에러다. 나 같은 경우, zkCli.sh -server [host ip]:2181 로 접속 할 때는 에러가 안났었는데, hbase 설치시 에러가 나서 매우 당황했다. 그래서, 다시 zkCli.sh 로 접속을 시도했다. 자연스레 접속이 되어서 끄려는 순간위에러가 표시됐다. 약간의 시차를 두고 나온 경우를 잘 설치 된걸로 착각 ..;;; 결론은 온갖삽질 끝에 os 네트워크 설정과 관련이 있다. 인터넷을 찾아보면, /etc/hosts 에 127.0.0.1 을 막아라 및 어쩌구 저쩌구 많은데 ... 결론은 firewall 문제다. 나같은 경우 centos 라 일단 그냥 firewall 을 끄고 테스트해보니zookeepr 부터 hbase 까지 잘 동작했.. 2017. 3. 24.
hadoop 완전 분산 설치 [펌] 완전 잘됨.... 굿 ... 출처 : http://blog.iotinfra.net/?p=1275 ■ Hadoop 완전분산 모드 설치에 대해 알아보고자 한다. 먼저 설치하려는 서버 정보는 아래와 같으며 각 서버간 통신을 원활히 하기 위한 ssh 공개키 분배는 이미 완료된것으로 가정한다. 참고 ssh 자동 로그인Hadoop 설치 대상 서버 정보Host NameIP용도centos01192.168.192.128Master Nodecentos02192.168.192.130Slave Nodecentos03192.168.192.133Data Node 1centos04192.168.192.132Data Node 2centos05192.168.192.131Data Node 3 ■ 각 서버의 /etc/hosts 파일 정보.. 2017. 3. 20.
centos clusterssh [설치] The clusterssh package can be found in EPEL. You can install it as follows yum -y install epel-release && yum -y install clusterssh 출처 : http://serverfault.com/questions/251789/how-to-install-clusterssh-cssh-on-centos $ cssh 192.168.0.{1,2,3} -> 이거슨 사용법 ... 2017. 3. 20.