fluentd 썸네일형 리스트형 fluent-bit 이란 무엇인가? (ft. fluentd와 차이점) Fluent Bit 홈페이지에서는 Fluent Bit에 대해서 매우 빠르고 가볍고 확장성이 뛰어난 로깅 및 메트릭 프로세서 및 포워더라고 설명하고 있고요. 클라우드 및 컨테이너화 환경에서 선호되는 선택이라고 이야기하고 있죠 (저는 한마디로 아래와 같이 머릿속에 정리해두었는데요) Fluent Bit은 한마디로 "경량 로그 수집기"라고요. 다시말해서, Fluent Bit 은 실시간 로그 데이터를 수집하고 이를 처리하는 데 사용됩니다. 어떻게 보면 이것은 Fluentd의 경량 버전으로, IoT 및 임베디드 시스템과 같은 리소스 제한이 있는 환경에서 사용하기에 이상적이라고 보시면되고요. 특히 Fluent Bit은 C 언어로 작성되어 있다고 하고요. 결과적으로 효율적인 메모리 사용과 빠른 처리 속도를 제공합니다... 더보기 로그분석 활용할 수 있는 EFK 스택에 대해서 간단하게 정리해보기 블로그 목적 로그를 분석할 수 있는 EFK 스택을 정리해본다. 블로그 요약 EFK에 대해서 알아본다. EFK를 설치하는 방법을 알아본다. EFK관련 나의 생각을 간단하게 정리해본다. EFK 관련 간단한 소개 로그 데이터는 현대 소프트웨어 개발 및 운영에서 중요한 부분을 차지하고 있습니다. 제가 EFK 를 사용하게된 이유는 제가 맡은 업무를 진행하다가 시스템으로 공격이 오더라고요...;; (한 한달간 방어를 하느라...;;; 힘들었네요.....) 그래서, 해당 공격에 대해서 로그 분석을 하려고 했는데 쉘 명령어(grep, cat 등등)를 통해서 통계서버에서 데이터를 추출해서 보려고 하니 몬가 1%부족함을 느껴서 이번에 EFK 스택을 도입하는 과정에 있습니다. 해당 부분은 이 아티클에서 다뤄보고자 합니다. .. 더보기 EFK 스택: Elasticsearch, Fluentd, Kibana로 로그 데이터 관리하기 EFK 소개 로그 데이터는 현대 소프트웨어 개발 및 운영에서 중요한 부분을 차지하고 있습니다. 제가 EFK 를 사용하게된 이유는 업무를 진행하다가 저희 시스템으로 공격이 오더라고요... 그래서 분석을 하려고 했는데 명령어로만 하려니 몬가 1%부족함을 느껴서 이번에 EFK 스택을 도입하게 되었습니다. 아무튼, 분석을 위한 이러한 로그 데이터를 효과적으로 수집, 저장, 시각화하고 분석하는 것은 기업의 성공과 안정성을 위해 너무너무 중요합니다. 이부분을 해결할 수 있는 EFK 스택은 Elasticsearch, Fluentd, Kibana의 조합으로 이러한 작업을 간편하게 수행할 수 있는 강력한 도구라고 말씀드리고 싶네요. Elasticsearch 하나, 역할 및 특징 Elasticsearch는 실시간 분산 검.. 더보기 fluentd 란 무엇인가? 그리고 설치하기 fluentd 란 무엇인가? fluentd 는 데이터를 더 잘 사용하고 이해하기 위해서 데이터 수집및 소비를 통합할 수 있는 오픈소스 데이터 수집기라고 머릿속에 넣어두면될것 같다. 목적은 회사에서 비정상적인 대량 로그인 사태가 발생해서 해당 로그를 분석하기 위해서 fluentd 를 도입해보려고 진행하게 되었고 이렇게 티스토리에 정리해보기로 한다. 잘 수집될까? 되겠지! 그럼, fluentd 설치를 본격적으로 해보자. fluentd 설치하기 fluentd 관련 dockerhub 를 통해서 아래와 같이 설치한다. $ docker pull fluentd 그리고 정상적으로 fluentd 가 설치 되었는지 docker image 를 확인한다. docker images | grep fluentd 환경설정은 기본적으.. 더보기 이전 1 다음
