메뉴 건너뛰기

Bigdata, Semantic IoT, Hadoop, NoSQL

Bigdata, Hadoop ecosystem, Semantic IoT등의 프로젝트를 진행중에 습득한 내용을 정리하는 곳입니다.
필요한 분을 위해서 공개하고 있습니다. 문의사항은 gooper@gooper.com로 메일을 보내주세요.


실행문 : java -jar ./queryTranslator-1.1.0.jar -i ./test3/test3.sparql -o ./test3/test3.sparql -sd ./test3/statistics/ -sUB 0.2
==> java.lang.ArrayIndexOutOfBoundsException발생시 stat_vp.txt파일의 값이 tab으로 분리 되어 있는지 확인하고 tab으로 분리되어 
있지 않으면 tab으로 분리 하고 저장해준다(vi에서 :set list 하면 tab문자와 줄끝 제어문자를 볼수 있다)

----------------------------------------오류메세지의 일부 --------------
inputFile- =================>./test3/test3.sparql
18:25:28 DEBUG Main                 :: inputFile-- =================>./test3/test3.sparql
18:25:28 DEBUG JenaIOEnvironment    :: Failed to find configuration: location-mapping.ttl;location-mapping.rdf;location-mapping.n3;etc/location-mapping.rdf;etc/location-mapping.n3;etc/location-mapping.ttl
Exception occurred trying to read './test3/statistics//stat_vp.txt'.java.lang.ArrayIndexOutOfBoundsException: 3
        at queryTranslator.SparkTableStatistics.readVPStatistic(SparkTableStatistics.java:210)
        at queryTranslator.SparkTableStatistics.init(SparkTableStatistics.java:40)
        at queryTranslator.Translator.translateQuery(Translator.java:122)
        at queryTranslator.run.Main.main(Main.java:79)
VP STAT Size = 1
OS STAT Size = 0
SO STAT Size = 0
SS STAT Size = 4
THE NUMBER OF ALL SAVED (< ScaleUB) TRIPLES IS -> 3
THE NUMBER OF ALL SAVED (< ScaleUB) TABLES IS -> 1
TABLE-><http__//www.w3.org/1999/02/22-rdf-syntax-ns#type>
Exception in thread "main" java.lang.NullPointerException
        at queryTranslator.SparkTableStatistics.determineBestCandidateTable(SparkTableStatistics.java:302)
        at queryTranslator.op.SqlBGP.translate(SqlBGP.java:76)
        at queryTranslator.SqlOpTranslator.visit(SqlOpTranslator.java:127)
        at queryTranslator.op.SqlBGP.visit(SqlBGP.java:141)
        at queryTranslator.SqlOpWalker.visit0(SqlOpWalker.java:78)
        at queryTranslator.SqlOpVisitorByType.visit(SqlOpVisitorByType.java:62)
        at queryTranslator.op.SqlBGP.visit(SqlBGP.java:141)
        at queryTranslator.SqlOpWalker.visit1(SqlOpWalker.java:91)
        at queryTranslator.SqlOpVisitorByType.visit(SqlOpVisitorByType.java:93)
        at queryTranslator.op.SqlProject.visit(SqlProject.java:59)
        at queryTranslator.SqlOpWalker.walkBottomUp(SqlOpWalker.java:68)
        at queryTranslator.SqlOpTranslator.translate(SqlOpTranslator.java:73)
        at queryTranslator.Translator.translateQuery(Translator.java:237)
        at queryTranslator.run.Main.main(Main.java:79)
번호 제목 글쓴이 날짜 조회 수
140 python 2.6.6에서 print 'A=' 형태의 사용이 python 3.5.1에서 오류(SyntaxError: Missing parentheses in call to 'print') 발생함.. 총관리자 2016.05.27 62
139 [TLS/SSL]Kudu Master 설정하기 총관리자 2022.05.13 61
138 [TLS]TLS용 사설 인증서 변경 혹은 신규 지정시 No trusted certificate found 오류 발생시 확인및 조치사항 총관리자 2022.03.15 60
137 lagom-windows용 build.sbt파일 내용 총관리자 2017.10.12 60
136 Mysql DB 생성 및 권한. 특정아이피, 대역에 대한 접근 허용 총관리자 2017.05.04 60
135 Master rejected startup because clock is out of sync 오류 해결방법 총관리자 2016.05.03 60
» queryTranslator실행시 NullPointerException가 발생전에 java.lang.ArrayIndexOutOfBoundsException발생시 조치사항 총관리자 2016.06.16 58
133 Lagom프레임웍에서 제공하는 HelloWorld 테스트를 수행시 [unknown-version]오류가 발생하면서 빌드가 되지 않는 경우 조치사항 총관리자 2017.12.22 56
132 9대가 hbase cluster로 구성된 서버에서 테스트 data를 halyard에 적재하고 테스트 하는 방법및 절차 총관리자 2017.07.21 56
131 [hive] hive.tbls테이블의 owner컬럼값은 hadoop.security.auth_to_local에 의해서 filtering된다. 총관리자 2022.04.14 55
130 HDFS에서 quota 설정 방법및 확인 방법 총관리자 2022.03.30 55
129 [Impala jdbc]CDP7.1.7환경에서 java프로그램을 이용하여 kerberized impala cluster에 접근하여 SQL을 수행하는 방법 gooper 2023.08.22 54
128 fuseki가 제공하는 web ui를 통해서 dataset를 remove->create할 경우 동일한 동일한 이름으로 지정했을때 fuseki-server.jar가 뜨지 않는 현상 총관리자 2017.02.03 54
127 Windows에서 sbt개발환경 구축 방법(링크) 총관리자 2016.06.02 54
126 서버 5대에 solr 5.5.0 설치하고 index data를 HDFS에 저장/search하도록 설치/설정하는 방법 총관리자 2016.04.08 54
125 DataSetCreator.py 실행시 파일을 찾을 수 없는 오류 총관리자 2016.05.27 53
124 [HDFS]Encryption Zone에 생성된 테이블 조회시 Failed to open HDFS file hdfs://nameservice1/tmp/zone1/sec_test_file.txt Error(255): Unknown error 255 Root cause: AuthorizationException: User:impala not allowd to do 'DECRYPT_EEK' on 'testkey' gooper 2023.06.29 52
123 jar파일의 dependency찾는 프로그램 총관리자 2016.08.11 52
122 RDF4J의 rdf4j-server.war가 제공하는 RESTFul API를 이용하여 repository에 CRUD테스트 총관리자 2017.08.30 51
121 hadoop에서 yarn jar ..를 이용하여 appliction을 실행하여 정상적으로 수행되었으나 yarn UI의 어플리케이션 목록에 나타나지 않는 문제 총관리자 2017.05.02 51

A personal place to organize information learned during the development of such Hadoop, Hive, Hbase, Semantic IoT, etc.
We are open to the required minutes. Please send inquiries to gooper@gooper.com.

위로