개발잡부

집계를 해야 하는데 쿼리 한방으로 다수의 집계 결과를 얻어야 하는데 그게 또 조건이 다 다르네.. filter aggregation 을 사용해 보자 Filters 에 term 조건을 복수로 넣으니 or 연산이 반영되어서 원하는 결과가 나오지 않았다. fliter 에 bool 쿼리도 안드어가지고 그래서 잴 다루기쉬운 query_string 으로 filter 생성 sample 쿼리를 만들고 실행했더니 얼추 원하는 결과가 나옴 GET hyper-item/_search { "_source": [ "docDispYn", "rsvDocDispYn" ], "size": 0, "query": { "bool": { "filter": [ { "term": { "itemNo": "146526241" } } ] } }, "a..

kibana dev tool 에서 메뉴가 disable 되어 있거나 해드로 접속했는데 접속이 안된다 근데 http://localhost:9200/ 는 접속이 된다 이러경우 트라이얼 라이센스가 만료되어 생기는 이슈.. 돈주고 살꺼 아니면 라이센르를 삭제 하자 접속이 된다!!

elasticsearch random sort 를 구현해보자 여러가지 방법이 있지만 잴 만만한 방법으로 개발환경 elasticsearch 7.9.2 sample code GET exp-item/_search/ { "_source": [ "itemNm", "itemNo", "itemStoreInfo.eventInfo.rmsEventKind" ], "size": 12, "query": { "bool": { "must_not": [ { "term": { "itemNo": { "value": "055964330" } } } ], "filter": [ { "terms": { "itemStoreInfo.eventInfo.rmsEventKind": [ "BASIC", "PICK", "TOGETHER", "GIFT" ..

https://ldh-6019.tistory.com/352 [es] sort - payload sort 3 payload sort 2 는 어떻게 됐는지.. 모르겠네.. 왜 작성하다 말았지.. https://ldh-6019.tistory.com/270 [es] payload-score 7.15.1 gradle payload score plugin 을 만들어 보자 https://www.elastic.co/guide/e.. ldh-6019.tistory.com Payload sort 를 만드는 도중.. 유닛테스트의 필요성을 느껴 ESSingleNodeTestCase 를 활용하여 TEST 케이스를 만들어 보았드아 개발 환경 macOS intelliJ IDEA springboot gradle build.gradl..

에러메시지를 확인해 보면 startOffset은 음수면 에러발생 endOffset은 startOffset 보다 같거나 커야하고 startOffset은 역행하면 안됨 elasticsearch.exceptions.RequestError: RequestError(400, 'illegal_argument_exception', "startOffset must be non-negative, and endOffset must be >= startOffset, and offsets must not go backwards startOffset=36,endOffset=37,lastStartOffset=37 for field 'itemNm'") analyzer 를 통해서 분해된 토큰은 확인 start_offset, end_..

payload sort 2 는 어떻게 됐는지.. 모르겠네.. 왜 작성하다 말았지.. https://ldh-6019.tistory.com/270 [es] payload-score 7.15.1 gradle payload score plugin 을 만들어 보자 https://www.elastic.co/guide/en/elasticsearch/reference/7.15/analysis-delimited-payload-tokenfilter.html#analysis-delimited-payload-tokenfilter java 11 elasticsea.. ldh-6019.tistory.com 일단 여기 플러그인 만들어 놓았고 아래는 회사에서 쓰는거로 테스트 집에가서 섞어봐야지 encoding (Optional, s..

전체 쿼리 더보기 GET hyper-item,ds-item/_search { "from": 0, "size": 0, "timeout": "60s", "query": { "bool": { "filter": [ { "range": { "saleStartDt": { "from": null, "to": "now/m", "include_lower": true, "include_upper": true, "boost": 1 } } }, { "range": { "saleEndDt": { "from": "now/m", "to": null, "include_lower": true, "include_upper": true, "boost": 1 } } }, { "term": { "docDispYn": { "value": "Y..

데이터 셋으로 활용할 test 데이터를 만들어 보자 원천데이터는 900gle shopping 의 데이터를 활용. create_dataset.py # -*- coding: utf-8 -*- import json from elasticsearch import Elasticsearch def create(): script_query = { "match_all": {} } response = client.search( index=INDEX_NAME, body={ "size": SEARCH_SIZE, "query": script_query, "_source": ["name"] } ) es_data = [] for hit in response["hits"]["hits"]: row = dict(name=str(hi..

Specifying Sorting The SearchSourceBuilder allows to add one or more SortBuilder instances. There are four special implementations (Field-, Score-, GeoDistance- and ScriptSortBuilder). 정렬 지정 SearchSourceBuilder 를 사용하면 하나 이상의 SortBuilder 인스턴스 를 추가할 수 있습니다 . 4가지 특수 구현(Field-, Score-, GeoDistance- 및 ScriptSortBuilder)이 있습니다. sourceBuilder.sort(new ScoreSortBuilder().order(SortOrder.DESC)); sourceBu..

요구사항 1. 등록된 키워드가 입력되는 경우 미리 설정해 놓은 ranking 순서가 우선으로 반영되어야 한다 2. 매칭되지 않은 문서에 대하여 기존 정렬 값 반영 구현설계 1 1. 기본 키워드, 추가키워드, 랭킹을 입력 받는다 2. 기본키워드 : keyword, 추가키워드: array, 랭킹: integer 3. 키워드가 포함된 문서를 검색 (filter - bool - should​) 등록된 랭킹으로 정렬 문제발생 다른검색조건에 포함되어 검색될 경우 랭킹이 반영되는 문제 - 해당키워드가 분해되어 조건에 노출 해결 1 1. script filelds 로 키워드를 조회 하는 스크립트통해서 값을 변경 문제발생 script filelds 는 정렬이 되지 않음 해결 2 1. 스크립트에서 나온값으로 정렬 조건 추..