메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


fuseki에서 전체개수를 확인(예, count all)하고 heap memory의 사용량이 급격하게 증가하면서 heap memory를 거의 다 소진하는 상태가 되고 전체 성능이 급격하게 떨어지는 문제가 발생하여 memory분석을 해보면 아래와 같은 클래스가 대부분의 메모리를 점유하고 있다.

-------------메모리 점유 클래스--------------

org.apache.jena.tdb.transaction.NodeTableTrans

org.apache.jena.tdb.transaction.BlockMgrJournal

org.apache.jena.tdb.store.DatasetGraphTDB


원인은 정확히 모르겠고 일단은 fuseki-server 데몬을 찾아 kill한 후에 재기동 해주어야 서비스가 가능해진다.


fuseki-count-all_0.png


fuseki-count-all_1.png



번호 제목 글쓴이 날짜 조회 수
59 halyard 1.3을 다른 서버로 이전하는 방법 총관리자 2017.07.05 66
58 전체 컨택스트 내용 file 총관리자 2017.12.19 66
57 실시간 쿼리 변환 모니터링(팩트내 필드값의 변경사항을 실시간으로 추적함)하는 테스트 java 프로그램 file 총관리자 2016.07.21 67
56 슬라이딩 윈도우 예제 총관리자 2016.07.28 67
55 SPIN(SPARQL Inference Notation)이란.. file 총관리자 2016.02.25 73
54 drools에서 drl관련 로그를 기록하기 위한 클래스 파일 총관리자 2016.07.21 74
53 S2RDF 테스트(벤치마크 테스트를 기준으로 python, scala소스가 만들어져서 기능은 파악되지 못함) [2] file 총관리자 2016.05.27 76
52 oneM2M Specification(Draft Release 3, 2, 1), Draft Technical Reports 총관리자 2017.10.25 81
51 jena의 data폴더를 hadoop nfs를 이용하여 HDFS상의 폴더에 마운트 시키고 fuseki를 통하여 inert를 시도했을때 transaction 오류 발생 총관리자 2016.12.02 82
50 [Elephas] Jena Elephas를 이용하여 Spark에서 rdfTriples의 RDD를 만들고 RDD관련 작업하는 샘플소스 총관리자 2016.08.10 90
49 Jena는 기본적으로 multi thread환경을 지원하지 않는다. 총관리자 2016.08.16 94
48 시맨틱 관련 논문 모음 사이트 총관리자 2017.06.13 94
47 RDF storage조합에대한 test결과(4store, Jena+HBase, Hive+HBase, CumulusRDF, Couchbase) 페이지 링크 총관리자 2016.05.26 102
46 fuseki의 endpoint를 이용한 insert, delete하는 sparql예시 총관리자 2018.02.14 102
45 https://github.com/Merck/Halyard프로젝트 컴파일및 배포/테스트 총관리자 2017.01.24 103
44 TopBraid Composer에서 SPIN 사용법 file 총관리자 2016.02.25 104
43 solrcloud에 solrdf1.1설치하고 테스트 하기 총관리자 2016.04.22 113
42 select와 group by결과 값이 없는경우의 리턴 값이 다름 file 총관리자 2016.02.05 119
41 protege 4.3 다운로드 총관리자 2015.12.09 126
40 한번에 여러값 update하기 총관리자 2016.01.13 134

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로