메뉴 건너뛰기

검색창 닫기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


Hadoop W/F수행후 Logs not available for 1. Aggregation may not to complete. 표시되며 로그내용이 보이지 않은 경우

총관리자 2020.05.08 17:17 조회 수 : 2221

workflow 수행후 stdout등의 클릭했을때 Logs not available for 1. Aggregation may not to complete. 가 표시되며 정상적인 로그가 표시되지 않으면 /tmp/logs 폴더의 소유자및 권한을 확인해본다.

기본적으로 아래 형태의 소유권과 권한을 가져야 함.

-----------------

drwx-wx-wx hive supergroup /tmp/hive

drwxrwxrwxt mapred:hadoop /tmp/logs

-------------

drwxrwx--- hadoop:hadoop /tmp/logs/hadoop

drwxrwx--- hdfs:hadoop /tmp/logs/hdfs



이 게시물을
이 글의 추천인 목록 목록
번호 제목 날짜 조회 수
63 Apache Toree설치(Jupyter에서 Scala, PySpark, SparkR, SQL을 사용할 수 있도록 하는 Kernel) 2018.04.17 483
62 CentOS 7.x에 Jupyter설치 2018.04.18 770
61 우분투 16.04LTS에 Zeppelin 0.7.3설치 2018.04.18 456
60 Toree 0.1.0-incubating이 Scala 2.10.4까지만 지원하게 되어서 발생하는 NoSuchMethod오류 문제 해결방법(scala 2.11.x을 지원하지만 오류가 발생할 수 있음) 2018.04.20 232
59 upsert구현방법(년-월-일 파티션을 기준으로) 및 테스트 script file 2018.07.03 1646
58 conda를 이용한 jupyterhub(v0.9)및 jupyter설치 (v4.4.0) 2018.07.30 723
57 RHEL 7.4에 zeppelin 0.7.4 설치 2018.07.31 494
56 oracle to hive data type정리표 2018.08.22 944
55 hive metastore ERD file 2018.09.20 882
54 [sentry]role부여후 테이블명이 변경되어 오류가 발생할때 조치방법 2018.10.16 501
53 json으로 존재하는 데이터 parsing하기 2019.03.25 1264
52 hive테이블의 물리적인 위치인 HDFS에 여러개의 데이터 파일이 존재할때 한개의 파일로 merge하여 동일한 테이블에 입력하는 방법 2019.05.23 911
51 hive metadata(hive, impala, kudu 정보가 있음) 테이블에서 db, table, owner, location를 조회하는 쿼리 2020.02.07 641
50 impala external 테이블 생성시 컬럼과 라인 구분자를 지정하여 테이블 생성하는 예시 2020.02.20 344
49 impald에서 idle_query_timeout 와 idle_session_timeout 구분 2021.05.20 1881
48 Hive JDBC Connection과 유형별 에러및 필요한 jar파일 2021.05.24 962
47 impala session type별 표시되는 정보로 구분하는 방법 2021.05.25 463
46 AnalysisException: Incomplatible return type 'DECIMAL(38,0)' and 'DECIMAL(38,5)' of exprs가 발생시 조치 2021.07.26 201
45 you are accessing a non-optimized hue please switch to one of the available addresses 2021.10.06 167
44 TLS/SSl설정시 방법및 참고 사항 2021.10.08 638
쓰기 태그
위로