메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


/etc/profile등에 JAVA_HOME환경변수가 설정되어 있어도 "sda5:   JAVA_HOME is not set" 가 발생하면서 Worker등이 기동되지 않는 경우는

spark-env.sh에 JAVA_HOME을 설정해주고 sbin/start-all.sh를 실행해준다.

번호 제목 날짜 조회 수
67 Caused by: java.lang.ClassNotFoundException: org.apache.spark.Logging 발생시 조치사항 2017.04.19 11903
66 streaming작업시 입력된 값에 대한 사본을 만들게 되는데 이것이 실패했을때 발생하는 경고메세지 2017.04.03 14791
65 JavaStreamingContext를 이용하여 스트림으로 들어오는 문자열 카운트 소스 2017.03.30 8474
64 spark 2.0.0의 api를 이용하는 예제 프로그램 2017.03.15 14075
63 It is indirectly referenced from required .class files 오류 발생시 조치방법 2017.03.09 15152
62 spark2.0.0에서 hive 2.0.1 table을 읽어 출력하는 예제 소스(HiveContext, SparkSession, SQLContext) 2017.03.09 11286
61 spark에서 hive table을 읽어 출력하는 예제 소스 2017.03.09 12258
60 spark에서 hive table을 읽어 출력하는 예제 소스 2017.03.09 15697
59 spark 2.0.0를 windows에서 실행시 로컬 파일을 읽을때 발생하는 오류 해결 방법 2017.01.12 10396
58 spark notebook 0.7.0설치및 설정 2016.11.14 14956
57 참고할만한 spark예제를 설명하는 사이트 2016.11.11 15786
56 How-to: Tune Your Apache Spark Jobs (Part 2) file 2016.10.31 11112
55 VisualVM 1.3.9을 이용한 spark-submit JVM 모니터링을 위한 설정및 spark-submit실행 옵션 2016.10.28 12043
54 java.lang.OutOfMemoryError: unable to create new native thread오류 발생지 조치사항 2016.10.17 10764
53 AIX 7.1에서 hive실행시 "hive: line 86: readlink: command not found" 오류가 발생시 임시 조치사항 2016.09.25 11855
52 hive기동시 Caused by: java.net.URISyntaxException: Relative path in absolute URI: ${system:java.io.tmpdir%7D/$%7Bsystem:user.name%7D 오류 발생시 조치사항 2016.09.25 10039
51 schema설정없이 hive를 최초에 실행했을때 발생하는 오류메세지및 처리방법 2016.09.25 14021
50 파일끝에 붙는 ^M 일괄 지우기(linux, unix(AIX)) 혹은 파일내에 있는 ^M지우기 2016.09.24 8554
» start-all.sh로 spark데몬 기동시 "JAVA_HOME is not set"오류 발생시 조치사항 2016.08.01 15081
48 Apache Spark와 Drools를 이용한 CEP구현 테스트 2016.07.15 11947
위로