메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


Cloudera Hue에서 Oozie을 coordinator및 workflow등을 생성할 수 있는데.. hue사용자별 생성된 coordinator및 workflow를 확인하는 방법은 hue에서 사용하는 table의 정보를 이용하는 방법이 있다.

삭제된것과 history로 유지되는것을 제외한 나머지 workflow혹은 coordinator를 아래와 같이 추출할 수 있다.

여기서 

a.id : workflow 혹은  coordinator의 id

a.owner_id : workflow 혹은  coordinator의 소유자 hue id

b.username : hue id의 이름

a.name :  workflow 혹은  coordinator의 이름(명칭)

a.description : workflow 혹은  coordinator의 설명




---coordinator현황---

select a.id, a.owner_id, b.username, a.name, a.description from hue.desktop_document2 a inner join auth_user b on a.owner_id=b.id 

where a.is_history=0 and a.is_trashed=0 and a.type='oozie-coordinator2';



---workflow현황---

select a.id, a.owner_id, b.username, a.name, a.description from hue.desktop_document2 a inner join auth_user b on a.owner_id=b.id 

where a.is_history=0 and a.is_trashed=0 and a.type='oozie-workflow2';

번호 제목 글쓴이 날짜 조회 수
419 [CDP7.1.6,HDFS]HDFS파일을 삭제하고 Trash비움이 완료된후에도 HDFS 공간을 차지하고 있는 경우 확인/조치 방법 gooper 2023.07.17 15
418 [Hue admin]Add/Sync LDAP user, Sync LDAP users/groups 버튼 기능 설명 gooper 2023.08.09 15
417 [Hue metadata]Oracle에 있는 Hue 메타정보 테이블을 이용하여 coordinator와 workflow관계 목록을 추출하는 방법 gooper 2023.08.22 15
416 [oozie]Oozie WF수행시 단계별 ID넘버링 비교/설명 총관리자 2022.03.23 16
415 [Sentry] sentry메타 DB를 이용하여 테이블에 매핑되어 있는 role명칭 찾는 방법. gooper 2022.06.22 16
414 [EncryptionZone]User:hdfs not allowed to do 'DECRYPT_EEK on 'enc_key'오류 gooper 2023.11.02 16
413 임시 테이블에서 데이터를 읽어서 partitioned table에 입력하는 impala SQL문 예시 gooper 2023.11.10 16
412 [Active Directory] AD Kerberos보안 설정 변경 방법 (Maximum lifetime for user ticket, Maximum lifetime for user ticket renewal) gooper 2024.03.12 16
411 [Hadoop Encryption] Encryption Zone 생성/설정시 User:hadoop not allowed to do 'DECRYPT_EEK' ON 'testkey' 오류 발생 조치 사항 gooper 2023.06.28 18
410 oozie webui접근시 id/pw를 물어보는 Windows보안 팝업창이 뜰때 확인/조치방법 총관리자 2022.05.02 19
409 [CDP7.1.3]Ranger WebUI에서 Error! Connection refused: Please check the KMS provider URL and whether the Ranager KMS is running발생시 조치 방법 gooper 2023.06.07 19
408 [impala]insert into db명.table명 select a, b from db명.table명 쿼리 수행시 "Memory limit exceeded: Failed to allocate memory for Parquet page index"오류 조치 방법 gooper 2023.05.31 21
407 kudu의 내부 table명 변경하는 방법 gooper 2022.11.10 22
406 not leader of this config: current role FOLLOWER 오류 발생시 확인방법 총관리자 2022.01.17 23
405 [Ranger]RangerAdminRESTClient Error gertting pplicies; Received NULL response!!, secureMode=true, user=rangerkms/node01.gooper.com@ GOOPER.COM (auth:KERBEROS), serviceName=cm_kms gooper 2023.06.27 23
404 hadoop에서 yarn jar ..를 이용하여 appliction을 실행하여 정상적으로 수행되었으나 yarn UI의 어플리케이션 목록에 나타나지 않는 문제 총관리자 2017.05.02 24
403 oracle 접속 방식에 따른 --connect 지정 방법 총관리자 2022.02.11 24
» 클러스터내의 전체 workflow및 coordinator현황을 사용자별로 추출하는 방법 총관리자 2021.11.25 25
401 kudu table와 impala(hive) table정보가 틀어져서 테이블을 읽지 못하는 경우(Error Loading Metadata) 조치방법 gooper 2023.11.10 25
400 Error: IO_ERROR : java.io.IOException: Error while connecting Oozie server 총관리자 2022.05.02 26

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로