메뉴 건너뛰기

Cloudera, BigData, Semantic IoT, Hadoop, NoSQL

Cloudera CDH/CDP 및 Hadoop EcoSystem, Semantic IoT등의 개발/운영 기술을 정리합니다. gooper@gooper.com로 문의 주세요.


oracle LOB(NLOB, CLOB, BLOB)타입의 컬럼에 대해서는 sqoop작업시 자동으로 매핑할 수 있는 java type이 없어서 "Cannot resolve SQL type 2011", "No Java type for SQL type 2011 for column rst" 오류가 발생한다. 

--map-columu-java "컬럼명=String"을 sqoop 문의 인자로 지정하라고 되어 있지만 여전히 오류가 발생한다. 

그래서 --query에 지정되는 쿼리에서 가장 바깥 부분의 select문장에서 DBMS_LOB.SUBSTR(LOB타입의컬럼명, 32767, 1) AS rst와 같이 oracle에서 지원하는 함수를 사용하여 일반 문자열로 변경해주면 면 sqoop이 정상적으로 수행된다.  

to_char(LOB타입의컬럼명) 형태도 가능하지만 지원하는 문자열의 길이가 4000byte까지만 가능하고 DBMS_LOB.SUBSTR함수는 최대 32767Bytes까지 지원 가능하다. 

(한글의 경우는 최대 지원 문자열의 1/2까지만 사용가능함)



번호 제목 날짜 조회 수
367 znode /hbase recursive하게 지우기 2015.05.06 4291
366 hbase CustomFilter만들기 (0.98.X이상) 2015.05.08 4773
365 hbase가 기동시키는 zookeeper에서 받아드리는 ip가 IPv6로 사용되는 경우가 있는데 이를 IPv4로 강제적용하는 방법 2015.05.08 4571
364 secureCRT에서 backspace키가 작동하지 않는 경우 해결방법 2015.05.11 4468
363 Nodes of the cluster (unhealthy)중 1/1 log-dirs are bad: 오류 해결방법 2015.05.17 4498
362 Permission denied: user=hadoop, access=EXECUTE, inode="/tmp":root:supergroup:drwxrwx--- 오류해결방법 2015.05.17 3409
361 java.lang.ClassNotFoundException: org.apache.hadoop.util.ShutdownHookManager 오류조치사항 2015.05.20 4264
360 flume 1.5.2 설치및 테스트(source : file, sink : hdfs) in HA 2015.05.21 4414
359 hbase shell 필드 검색 방법 2015.05.24 5705
358 Error: Could not find or load main class nodemnager 가 발생할때 해결하는 방법 2015.06.05 4449
357 Error: E0501 : E0501: Could not perform authorization operation, User: hadoop is not allowed to impersonate hadoop 해결하는 방법 2015.06.07 4249
356 "File /user/hadoop/share/lib does not exist" 오류 해결방법 2015.06.07 4197
355 hadoop 2.6.0에 sqoop2 (1.99.5) server및 client설치 == fail 2015.06.11 4526
354 Exception in thread "main" java.lang.NoSuchMethodError: org.apache.hadoop.http.HttpConfig.getSchemePrefix()Ljava/lang/String; 해결->실패 2015.06.14 2614
353 hortonworks에서 제공하는 메모리 설정값 계산기 사용법 file 2015.06.14 4275
352 java.lang.RuntimeException: org.apache.hadoop.hive.ql.metadata.HiveException: Hive Runtime Error: Unable to deserialize reduce input key from...오류해결방법 2015.06.16 5944
351 Tracking URL = N/A 가발생하는 경우 - 환경설정값을 잘못설정하는 경우에 발생함 2015.06.17 4616
350 mongodb 2.6.6 설치(64bit) 2015.09.30 2633
349 SQL문장과 Mongo에서 사용하는 명령어를 비교한 것입니다. 2015.09.30 4038
348 root계정으로 MariaDB설치후 mysql -u root -p로 db에 접근하여 바로 해줘야 하는일..(케릭터셑은 utf8) 2015.10.02 3732
위로