[elasticsearch] 로그스태시로 엘라스틱서치 MySQL 동기화하기
[elasticsearch] 로그스태시로 엘라스틱서치 mysql 동기화하기 ELK Stack은 Elastic Search, Logstash, Kibana를 통칭하는 말인데, 데이터 로그들이 logstash를 거쳐 엘라스틱서치에 저장되고, 이를 시각화하여 Kibana에서 보여주게 된다. 그중에서도 로그스태시는 다양한 소스에서 데이터를 수집해 이를 변환하여, 저장소로 전달하는 역할을 한다. 소스의 종류, 사이즈, 형태에 관계 없이 수집할 수 있는 것이 특징적이다. 데이터가 로그 스태시를 거칠 때 필터링이 발생하는데, 필터를 통해 각 이벤트를 공통 형식으로 변환, 통합해줄 수 있다. 먼저, 로그스태시를 활용하여 jdbc(mysql)에 저장된 데이터를 엘라스틱서치로 자동으로 동기화하도록 설정하기를 해보자! 1️..
2021. 1. 27.