OpenMAINT 설치하면서 필요한 것들 정리중...

postgresql 설치 참고

https://www.postgresql.org/download/linux/redhat/

centos 6 버전에서 tomcat 9 설치

https://www.itzgeek.com/how-tos/linux/centos-how-tos/install-apache-tomcat-7-0-on-rhel-6-centos-6.html

계속 추가중...

org.apache.tomcat.util.bcel.classfile.ClassFormatException 문제 처리..

개발 환경

Synology NAS 에 개발중...

환경은 Tomcat 7 + Java 1.8에

gson 2.8.6 으로 데이터를 교환하게 처리 중..

편하게 설치하려면 Docker를 설치해서 가는 방법도 있지만,

난 귀찮은건 질색인지라.. 그냥.. 주어진 환경으로 진행!!

위의 환경을 내 로컬에 설정하고 서버를 돌렸더니..

org.apache.tomcat.util.bcel.classfile.ClassFormatException

문제가 지속적으로 발생.. 특별히 문제가 있는건 아닌거 같아서 그냥 넘어가려 했으나..

혹시나.. 실제 운영에 영향을 줄까봐 해결하기로 결심..

처음에는

https://stackoverflow.com/questions/23541532/org-apache-tomcat-util-bcel-classfile-classformatexception-invalid-byte-tag-in

위에 나와있는 걸 참고해서.. 개발 환경을 바꾸다가..

문득!!! gson 자체가 문제가 있는게 아닌가 싶어서 살펴보니..

낮은 java 에 대해서는 gson 2.6까지 인것으로 추정되는 문서를 봤음..

그래서.. 버전만 2.6.2로 낮추니.. 모든것이 해결...

이쯤되면.. 삽질은 컨셉인가...

tomcat에서 서비스 호출 시 다음과 같은 오류가 발생

java.lang.IllegalArgumentException: Invalid character found in the request target. The valid characters are defined in RFC 7230 and RFC 3986

분명 잘 돌아가던 서비스인데 Windows OS 에서 CentOS 로 서비스를 이전 중 테스트 하다가 웹서비스를 호출하면 저런 오류와 함께 HTTP 400 에러가 발생했다.

처음엔 Chrome으로 서비스 호출시에는 발생하지 않고, IE 에서 호출하면 발생하기에

일단 서비스 호출 주소에 파라메터로 한글이 들어가면 오류가 발생하길래

브라우저 + 서버 OS 특징으로 생각하고 문제를 접근했으나, 해결 안됨.

좀 더 구글링을 해 보았다..

찾다보니 다음과 같은 글을 발견

http://stackoverflow.com/questions/41053653/tomcat-8-is-not-able-to-handle-get-request-with-in-query-parameters

요약하면 보안상의 이유로 Tomcat 7.0.73, 8.0.39, 8.5.7 버전 부터는

호출 주소에 특수문자가 들어갈 시 차단한다는 것을 알게 됨.

그리고 특수문자를 선택해서 허용하는 옵션이 있다고 하나,

내 경우엔 한글 전체가 encoding 되어(URIEncode 안하고 브라우저에서 자동으로 .)

허용하지 않는 것으로 파악하여, 그냥 간단하게 접근 하기로 함.

Tomcat Down Grade!!

CentOS 최신 버전에선 Tomcat 6를 제공 안하므로

레포지터리를 등록해야 함!

https://zetawiki.com/wiki/CentOS5_%ED%86%B0%EC%BA%A36_%EC%84%A4%EC%B9%98

위의 글 참고하여 다운그레이드 하고, 한글도 이상없이 처리됨을 확인!

끗!

Apache solr + tomcat 서비스를 java에서 호출연동..

어바웃 쪽에 광고 연동 프로그램을 만드는 중...

solr의 데이터를 json으로 받아서 java로 parsing 하는 예제임.. 

라이브러리는 Apache Commons 와 log4J 1.2(!!! 반드시 이걸 사용해야 함..난 최신버전이 좋아요~--> 개고생으로 이어질꺼임!)

ezmorph-1.0.6

json-lib-2.4-jdk15

package com.lifebook.util.about; import java.io.BufferedReader; import java.io.IOException; import java.io.InputStreamReader; import java.net.MalformedURLException; import java.net.URL; import net.sf.json.JSONArray; import net.sf.json.JSONObject; import org.apache.commons.logging.Log; import org.apache.commons.logging.LogFactory; public class retrieveGoods { private static Log log = LogFactory.getLog(retrieveGoods.class); /**  * @param args  */ public static void main(String[] args) { // TODO Auto-generated method stub //String strClassPath = System.getProperty("java.class.path"); log.info("Start Process..."); //log.info("java.class.path..." + strClassPath); String bookInfo = ""; try { String urlStr = ""; urlStr = "http://IP:PORT/solr/CORE명/select?q=검색어~~"; URL url = new URL(urlStr); log.info("Call URL : " + url.toString()); BufferedReader in = new BufferedReader(             new InputStreamReader(url.openStream(), "UTF-8"));  String inputLine; while ((inputLine = in.readLine()) != null) bookInfo += inputLine; in.close(); JSONObject json = JSONObject.fromObject(bookInfo); JSONObject response = JSONObject.fromObject(json.getString("response")); JSONArray docs = response.getJSONArray("docs"); System.out.println(docs.size()); JSONObject detailInfo = null; for(int i = 0 ; i < docs.size(); i ++){ detailInfo = (JSONObject) docs.get(i); System.out.println(detailInfo); System.out.println(detailInfo.get("prma_name")); } log.info("End Process..."); } catch (MalformedURLException e) { // TODO Auto-generated catch block e.printStackTrace(); log.error("error..." + e); } catch (IOException e) { // TODO Auto-generated catch block e.printStackTrace(); log.error("error..." + e); } } }

MSSQL + SOLR + Tomcat 구축 완료

생각보다 쉬웠네..

1. 준비물 : solr, mssql, tomcat, jdk1.6(반드시!!!!!)

2. 구축시 환경 : solr 4.3, mssql2000, tomcat 7, jdk1.6

3. 비고 : mssql jdbc driver 4.0을 구동 시키려면 jdk1.6 밖에 동작이 되지 않는다. solr 문제 같긴 한데.. jdk1.7이나 jdk1.6이나 차이가 별로 없으므로 그냥 jdk1.6 사용함.

4. 시작

4.1. solr 압축파일 해제 : 본인의 경우 --> D:\workspace\search\solr-4.3.0에 해제 함

4.2. solr 정상구동부터 시작

4.2.1. dist 디렉토리에 mssql jdbc driver를 넣는다(sqljdbc4.jar)

4.2.2. example 디렉토리에서 start.jar 실행(java -jar start.jar) --> 기본적으로 경량 WAS인 jetty가 실행된다. context의 경로는 example의 contexts의 solr-jetty-context.xml에서 설정 가능.

http://www.eclipse.org/jetty/configure.dtd

">

 

  /webapps/solr.war

  /etc/webdefault.xml

  /solr-webapp

4.2.3. http://localhost:8983/solr이 실행되면 1단계 성공!! 넌 이미 성공하고 있다!!

4.3 mssql과 solr 연결

4.3.0. CORE 추가(이걸 뺴먹었네..)

solr.xml안에 core를 추가한다...

4.3.1. D:\workspace\search\solr-4.3.0\example\example-DIH\solr\db 디렉토리를 D:\workspace\search\solr-4.3.0\example\solr에 복사해 놓는다. 요따구로..

4.3.2. D:\workspace\search\solr-4.3.0\example\solr\db\conf안의 db-data-config.xml와 schema.xml, solrconfig.xml를 편집한다.

4.3.2.1.  db-data-config.xml편집.

Sample
<dataconfig> <datasource driver="Java DB 드라이버" name="DB별칭" password="암호" url="JDBC연결문" user="계정"> <document> <entity deltaimportquery="DB질의어" name="item" pk="KEY커럼" query="업데이트시 사용할 쿼리"> <field column="상품코드" name="상품코드"> <field column="상품명" name="상품명"> </field></field></entity> </document> </datasource></dataconfig>

기본적인 데이터만 일단 가져오게 설정함.. 

가. dataSource에는 연결할 db 설정.. 일반적인 jdbc db pool 설정과 동일하다

나. entity의 name은 solr 관리자에서 참고할 이름임.

다. query는 요거 말고 deltaQuery도 있고 그런데.. 일단 저것만 하시라..(귀찮다)

라. field에서는 불러올 column 설정.

끗~~!

4.3.2.2.  schema.xml편집. 안에 내용이 너무 많아서.. 필요한 부분만...

prma_pcode prma_name

가. 알아서 재주껏 수정!

나. uniqueKey도 변경해야 할 듯하나.. 실제 연동시 문제가 생기는 듯 하다..

끗~~~!

4.3.2.3 solrconfig.xml편집. 라이브러리 경로설정만 해주면 된다. 구글링 해보니 절대경로는 안되는듯 하다..상대경로로 입력.. dist의 경로를 잘 찾게 하시라!!

4.3.2. 이제 다시 solr 재시작 : 검색 코어 선택기에 위에 설정한 이름이 보인다.

4.3.3. Dataimport 시작 : 체크는 해주는 센스.. 데이터 받자마자 바로 입력을 위해서...

Auto-Refresh Status 체크하면 실시간으로 데이터가 들어오는걸 볼 수 있다. complete가 뜰때까지 대기.. 완료화면은 생략.. 초록색 글자가 뜰것이다..

4.3.4. 실행 테스트 q 항목에 검색컬럼:검색어 를 입력하고 출력형식(여기선 json)을 선택후 쿼리 실행을 하면 json 형태의 데이터 출력 완료.

4.3.5. solr + mssql 연동 끗~~~!~!

4.4. Tomcat과 연동 : jetty자체로 윈도우 서비스에 등록하기에 무리가 있어서... 사실.. 방법이 있는데.. 난 귀찮은게 싫다!!!! Tomcat으로 묶어서 윈도우 서비스에 올릴꺼임.. 싫으면 꺼져!!

4.4.1. 톰캣 설치 : 이 정도는 다들 하잖아요??

4.4.2. D:\workspace\search\solr-4.3.0\example\solr-webapp\webapp 안에 있는 파일을 Tomcat의 webapps로 복사.. 사실.. D:\workspace\search\solr-4.3.0\dist안의 solr war를 그냥 넣으면 Tomcat이 알아서 압축을 풀지만.. 이거나 저거나 똑 같음.. 다들 war 배포는 하잖아요?? 그따위꺼~!

4.4.3. Tomcat의 lib에 mssql jdbc driver 잊지말고 넣어주기!!!

4.4.4. 톰캣 실행 옵션에 solr이 실제 구동하는 경로를 넣어준다.

-DSolr.Solr.home=D:\workspace\search\solr-4.3.0\example\solr

4.4.5. Tomcat의 solr 웹컨테이너로 가서.. web.xml을 열고 env-entry의 주석을 풀고 수정해 준다.

다른건 필요없고 env-entry-value 값만 넣어주면 된다!!!

solr/home        D:\workspace\search\solr-4.3.0\example\solr

       java.lang.String

 

4.4.6. 브라우저 주소창에 http://localhost:8080/solr/#/를 힘차게 입력!!

위에서 본 jetty 구동화면이 나오면 성공.. 이하는 생략한다.. 할게 없거든...ㅡㅡ;;

끗~~~~~~~~~~~~~~~!! 안뇽~~~~~!