thisisnew (매일 코딩, 매일 독서)

키바나(Kibana)는 엘라스틱 스택(Elastic stack)에서 시각화하는 역할을 담당합니다. 엘라스틱서치(Elasticsearch)에서 받은 데이터를 말이죠. 엘라스틱 스택의 개괄적인 설명은 아래 포스팅을 참고해주세요. https://thisisnew-storage.tistory.com/42 Elasticsearch - Elastic Stack 엘라스틱 스택 데이터가 늘어나는 현실에서는, 다양한 사용 사례를 유연하게 지원할 필요가 있습니다. 여기서 말하는 유연함이란, 데이터의 수집과 가공 그리고 저장, 분석, 시각화를 전부 포함합니다. 이런 thisisnew-storage.tistory.com 엘라스틱서치의 커맨드(또는 API)를 일일이 타이핑하는 것은 꽤나 번거롭습니다. https://www.el..

Development/Elasticsearch 2022. 10. 29. 18:39

https://thisisnew-storage.tistory.com/44 Elasticsearch - Beats 비츠 비츠(Beats)는 데이터 수집기입니다. 데이터를 수집하기 위해서는 서비스가 동작하는 호스트에 수집기를 설치해야 하는데요. 비츠와 비슷한 역할을 수행하는 소프트웨어로서 로그스태시(logstash) thisisnew-storage.tistory.com 앞서 설명드린 비츠(Beats)와 마찬가지로 로그스태시(Logstash)도 데이터 수집기입니다. 로그스태시가 비츠보다는 좀 더 풍부한 기능을 가지고 있습니다. 그만큼 무겁고요. 비츠가 상대적으로 리소스를 덜 잡아먹습니다. 로그스태시가 좋은 점은, 우선 사용법이 간단합니다. 대부분의 설정이 플러그인 형태로 제공되기 때문이죠. 또 영속적 큐(Pe..

Development/Elasticsearch 2022. 10. 27. 11:06

비츠(Beats)는 데이터 수집기입니다. 데이터를 수집하기 위해서는 서비스가 동작하는 호스트에 수집기를 설치해야 하는데요. 비츠와 비슷한 역할을 수행하는 소프트웨어로서 로그스태시(logstash)가 있습니다. 로그스태시는 앞서 개괄적으로 설명드렸던 엘라스틱 스택의 글에서도 나왔었죠. https://thisisnew-storage.tistory.com/42 Elasticsearch - Elastic Stack 엘라스틱 스택 데이터가 늘어나는 현실에서는, 다양한 사용 사례를 유연하게 지원할 필요가 있습니다. 여기서 말하는 유연함이란, 데이터의 수집과 가공 그리고 저장, 분석, 시각화를 전부 포함합니다. 이런 thisisnew-storage.tistory.com 하지만 로그스태시는 많은 기능을 지원하는 만큼 ..

Development/Elasticsearch 2022. 10. 26. 17:32

데이터가 늘어나는 현실에서는, 다양한 사용 사례를 유연하게 지원할 필요가 있습니다. 여기서 말하는 유연함이란, 데이터의 수집과 가공 그리고 저장, 분석, 시각화를 전부 포함합니다. 이런 빅데이터 파이프라인을 간편하게 구성할 수 있도록 엘라스틱 스택(elastic stack)이 개발되었습니다. 엘라스틱 스택은 일반적인 빅데이터 파이프라인을 구성하기 위한 모든 소프트웨어를 갖추고 있습니다. 이 소프트웨어들이 위에서 언급한 데이터의 수집, 가공, 저장, 분석, 시각화를 담당합니다. 가장 아래의 비츠(beats)와 로그스태시(logstash)는 데이터를 수집하고 가공하는 역할을 맡고 있습니다. 중간의 엘라스틱서치(elasticsearch)는 데이터를 저장하고 분석하는 역할을 담당합니다. 맨 위에 위치한 키바나(..

Development/Elasticsearch 2022. 10. 25. 18:34