개발183 spark-shell error : Service 'sparkDriver' failed after 16 retries! # To solve the problems :Step 1. Go to your installed spark directories.Step 2. Go into 'bin' directory and then open the filed 'load-spark-env.sh'Step 3. After adding 'export SPARK_LOCAL_IP='127.0.0.1' to 'load-spark-env.sh'.It worked for me. I'm using Mac OS X EI Captain.(10.11.6) 출처 : http://jacob119.blogspot.kr/2016/08/spark-shell-error-service-sparkdriver.html 2017. 8. 29. diff 개요diff [옵션] file1 file2 설명file1과 file2 비교하여 차이점을 찾아낸다. 옵션-b : 연속된 공백 무시-i : 대소문자를 구분하지 않음-t : 출력 라인에 TAB 문자를 넣음-w : 두 행의 비교 시 공백을 무시--brief : 파일 비교 후 결과 표시(같은지, 다른지)-d : 세세한 차이까지 검색-H : 큰 파일을 빠르게 처리할 때 사용-q : 두 파일의 차이점만 출력-s : 두 파일이 같은 지 확인-r : 두 디렉토리의 차이점 출력-u : undirectional new file 옵션으로 비교하는 파일/디렉토리가 빠져있을 경우 dummy로 처리해서 출력을 통일시킴-r : recursive 하위 디렉토리 모두 검색-N : 검색 중 new file도 적용 가능 출처: http:/.. 2017. 8. 29. grant all GRANT ALL PRIVILEGES ON mydb.* TO 'myuser'@'%' WITH GRANT OPTION; 2017. 8. 23. xargs 사용법 & find exce 사용법 파이프 이전의 명령어의 결과를 인자로 받아 명령어 실행 # 간단한 사용법 - find를 이용하여 mtime이 30일 이상된 파일들을 ..bak으로 바꾸기$ find . -mtime +30 | xargs mv -i {} {}.bak - find를 이용하여 *.mp3 파일을 지우기$ find . -name '*.mp3' | xargs rm - ls 를 이용해서 text 파일 목록을 가져온 뒤 각각의 파일내용을 cat으로 읽고 병합파일 만듬$ ls *.txt | xargs cat >> abc.merge 이런식으로 사용하면 된다. 하다보니 find명령어랑 많이 쓰게 되는데 find 명령어의 -exec를 이용해도 된다 하지만!! 기본적으로 find의 -exec는 명령의 인자가 길 때 argument too lon.. 2017. 8. 11. 이전 1 2 3 4 5 6 7 ··· 46 다음