개발잡부

샤드의 갯수가 인덱싱 속도에 어떻게 영향을 테스트 해보겠다 후보군 샤드 1~ 9 까지 생성 색인시간 체크 셈플데이이터 20개 동일한 조건으로 색인 20개는 애매해서 1000개로 테스트 1회 2회 3회 4회 5회 shard 20개 X 1000docs 1회 2회 3회 4회 5회 음.. 애매하다..

https://www.elastic.co/kr/subscriptions 구독 | Elastic Stack 제품 및 지원 | Elastic 구독 수준, 요금제, Elastic Stack(Elasticsearch Kibana, Beats, Logstash)의 온-프레미스 배포에 대한 계층화된 기능, Elastic Cloud, Elastic Cloud Enterprise에 대해 알아보세요. www.elastic.co basic license 사용하고 있었는데 license 때문에 테스트를 재대로 못해보네.. 일단 해결책은 지워버리자 DELETE _license url 로 지우고 싶으면 아래와 같이 입력 (base) ➜ es8.8.1 git:(master) ✗ curl -XDELETE elastic:패스워드@l..

IP 와 location 정보를 색인하는데 .. 의미는 없지만 timestamp 를 찍어 보고 싶었다. _timestamp Elasticsearch 초기 _timestamp에는 인덱스에 매핑 필드를 사용할 수 있었습니다. 이 기능은 버전 2.0부터 더 이상 사용되지 않지만, 그렇다고 해서 더 이상 타임스탬프가 있는 문서를 인덱싱할 수 없다는 의미는 아닙니다. Elasticsearch 타임스탬프는 여전히 가능하지만 생성하는 데 필요한 프로세스에는 약간의 노하우가 필요합니다. 이 기사에서는 Elasticsearch 타임스탬프를 생성하는 데 도움이 되는 단계별 지침을 제공합니다. 자 이렇다고 한다. _timestamp 필드는 더 이상 사용되지 않습니다. 버전 2.0부터 더 이상 사용 되지 않으므로 이 매핑 필..

mapping PUT my-index-000001 { "mappings": { "properties": { "location": { "type": "geo_point" } } } } indexing PUT my-index-000001 { "mappings": { "properties": { "location": { "type": "geo_point" } } } } PUT my-index-000001/_doc/1 { "text": "Geopoint as an object using GeoJSON format", "location": { "type": "Point", "coordinates": [-71.34, 41.12] } } PUT my-index-000001/_doc/2 { "text": "Geopoi..

역시나 베이스는 아래 에서 시작하는데 https://ldh-6019.tistory.com/394?category=1096525 [es8] Elasticsearch Plugin 8.4.1 Elasticsearch 8.4 Plugin Build & Install TEST 작업 요약 github.com (https://github.com/elastic/elasticsearch.git) 에서 elasticsearch 소스 다운로드 소스에서 plugin > example > rest-handler 복사 build.. ldh-6019.tistory.com analysis-nori 를 카피해서 analysis-doori 를 만들것임 $ cp -r plugins/analysis-nori ~/plugin $ cp -r ..

900gle 에서 사용할 elasticsearch 8.4.1 plugin 만들기 for gradle plugin localproject path : /Users/doo/project/dooplugin docker elk localproject path : /Users/doo/docker/900gle-elk project base 는 아래의 프로젝틀를 기반으로 생성 https://ldh-6019.tistory.com/394?category=1096525 [es8] Elasticsearch Plugin 8.4.1 Elasticsearch 8.4 Plugin Build & Install TEST 작업 요약 github.com (https://github.com/elastic/elasticsearch.git) ..

Elasticsearch 8.4 Plugin Build & Install TEST 작업 요약 github.com (https://github.com/elastic/elasticsearch.git) 에서 elasticsearch 소스 다운로드 소스에서 plugin > example > rest-handler 복사 build.gradle 수정 및 plugin 빌드 elasticsearch 에 빌드한 플러그인 설치 - docker compose 테스트 1. elasticsearch project source code download - https://github.com/elastic/elasticsearch.git $ cd plugin $ git clone https://github.com/elastic/el..

ES8 에서 사용할 payload-score 플러그인을 만들어보자 https://github.com/900gle/payload-dscore/branches/all 에서 master (7.15.1) 를 베이스로 한 8.4.1 을 만든다 원격 branch 를 패치 받아서 로컬에 8.4.1 을 내려 받자. 그리고 체크아웃 #패치 git fetch #8.4.1 을 체크아웃 받자 git checkout 8.4.1

elasticsearch 버전 8.4.1에 맞춰 플러그인을 변경해 보잣 지난번에 할땐 안되던것이 지금은 또 되네..;; https://github.com/900gle/kr-danalyzer/tree/8.4.1 GitHub - 900gle/kr-danalyzer: doo analyzer for korean doo analyzer for korean. Contribute to 900gle/kr-danalyzer development by creating an account on GitHub. github.com branch 7.15.1, 8.4.1 2개를 만들었는데.. 이렇게 관리하려고 하니까 PR 하라고 메시지가 나와서 귀찮.. docker compose 를 활용해서 elastic stack 8.4.1 을..

Precision(정밀도), Recall(재현율), Accuracy(정확도) 케이스 True Positive(TP) : 실제 True인 정답을 True라고 예측 (정답) False Positive(FP) : 실제 False인 정답을 True라고 예측 (오답) False Negative(FN) : 실제 True인 정답을 False라고 예측 (오답) True Negative(TN) : 실제 False인 정답을 False라고 예측 (정답) Precision(정밀도) 정밀도란 모델이 True라고 분류한 것 중에서 실제 True인 것의 비율입니다. Recall(재현율) 재현율이란 실제 True인 것 중에서 모델이 True라고 예측한 것의 비율입니다. Accuracy(정확도) False를 False라고 예측한 경우..