01. logstash

  Logstash는 실시간 파이프라이닝 기능을 갖춘 오픈 소스 데이터 수집 엔진입니다. Logstash는 서로 다른 소스의 데이터를 동적으로 통합하고 선택한 대상으로 데이터를 정규화할 수 있습니다. 다양한 고급 다운스트림 분석 및 시각화 사용 사례를 위해 모든 데이터를 정리하고 민주화합니다. 다양한 입력, 필터 및 출력 플러그인으로 모든 유형의 이벤트를 강화하고 변환할 수 있으며 많은 기본 코덱이 수집 프로세스를 더욱 단순화합니다. Logstash는 더 많은 양과 다양한 데이터를 활용하여 통찰력을 가속화합니다.

 

Logstash 특징

• Elasticsearch와 Kibana 시너지로 수평적으로 확장 가능한 데이터 처리 파이프라인(ELK Stack)
• 다양한 입력, 필터 및 출력을 혼합, 일치 및 조직화한 플러그형 파이프라인 아키텍처
• 200개 이상의 플러그인을 사용할 수 있으며 자신만의 플러그인을 만들고 기여할 수 있는 플러그인 에코시스템

https://www.elastic.co/guide/en/logstash/current/introduction.html

 

Logstash Pipeline

  Logstash 파이프라인에는 두 개의 필수 요소 input 및 output, 하나의 선택적 요소 filter가 있습니다. 입력 플러그인은 소스의 데이터를 사용하고 필터 플러그인은 사용자가 지정한 대로 데이터를 수정하며 출력 플러그인은 데이터를 대상에 씁니다.

 

Logstash Installation