Start Elasticsearch with docker
Elasticsearch
정의
ElasticSearch는 아파치 루씬 기반 검색인진으로 문서 검색, 지도 위치 검색, 머신 러닝 기반 검색,
로그분석등 다양한 용도로 활용되고 있다. 이런 검색 관련 데이터 처리시 사용이유는 여러 노드에 분산하여 구성함으로써 데이터의 가용성을 높이고 성능을 향상 시킬수 있다
역인덱싱
기본적으로 ElasticSearch는 데이터 저장시 이를 색인화한다. 이후에 역 인덱싱을 통해 검색을 빠르고 효율적으로
수행한다. 쉽게 말하면 책 뒤에 순서대로 적혀있는 단어와 해당 단어의 위치 적혀있는 것을 예시로 들면 쉬울 것이다.
Kibana
키바나는 ElasticSearch와 함께 사용되는 데이터 시각화 및 관리 도구이다. 키바나를 사용하면 ElasticSearch에서 수집된 데이터를 시각적으로 분석하고 이해할 수 있습니다. 대시보드, 차트, 그래프 등을 통해 데이터를 직관적으로 표현할 수 있습니다.
Docker를 통해 Elasticsearch 시작을 위한 세팅
싱글 노드실행
docker run --name es01 --net elastic -p 9200:9200 -it -m 1GB docker.elastic.co/elasticsearch/elasticsearch:8.12.2
다중 클러스터 및 키바나 추가해서 실행
.env파일 설정과 compose.yml파일 필요
파일은 원하는 폴더에 생성하면 된다(추후에 실행할때 이 폴더에서 docker compose up -d해줘야함)
참고로 아래 파일 그대로 하게 되면 https로 되니 보안 관련된 지식이 없고 간단한 로컬 테스트시에 사용하는 경우는
xpack.security.http.ssl.enable = false로 설정해주면 된다
.env
아래 링크 코드 참고
https://github.com/elastic/elasticsearch/blob/8.12/docs/reference/setup/install/docker/.env
compose.yml
아래 링크 코드 참고
생성된 컨테이너 제거(docker ps를 통해서 실행된 이미지가 종료된 것을 확인하고 진행필요)
# Remove the Elastic network
docker network rm elastic
# Remove Elasticsearch containers
docker rm es01
docker rm es02
docker rm es03
# Remove the Kibana container
docker rm kib01
Docker를 통한 실행 과정
터미널에서 진행
cd /path your compose.yml file folder
## docker container 생성 및 실행
docker compose up -d
## 현재 실행중인 docker파일 확인
docker ps
웹 페이지를 통한 확인
하단 창이 뜨게되면 .env파일에서 설정했던 아이디와 비번을 입력해준다
localhost:5601로 들어가게되면 다음과 같이 kibana페이지를 볼 수 있다
이후에 Dev Tools에서 쿼리를 통해 데이터를 조회하기도 가능하고 시각적으로도 볼수 있다
출처
- Install Elasticsearch with Docker | Elasticsearch Guide [8.12] | Elastic
- https://www.elastic.co/guide/en/elasticsearch/reference/current/docker.html