목록LOG (4)

마시멜로

Fluentd 예제(log파일을 읽어들여 POST API로 전송)

Fluentd 예제입니다. 대상서버에 td-agent(Fluentd)를 실행시켜 수집된 데이터를 대상서버 POST API로 저장하는 예제입니다. Fluentd의 conf의 구성은 아래와 같습니다. 코드 ex) # 다양한 Input Plugins 중에서 tail을 사용했습니다. @type tail # 실제 물리적 파일 위치 # 파일 타입에 따라 *를 쓰거나 %Y%m%d(20211224)로 해당 폴더에서 특정 패턴의 파일을 지정할 수 있다. path /test/test_%Y%m%d*.log # tag를 이용하여 동일한 conf파일에서 각각의 filter와 match를 구성할 수 있다. tag logFile.* # 현재 추적하고 있는 파일의 index를 저장하고 있는 파일 pos_file /var/log/td..
LOG/Fluentd 2021. 12. 24. 11:44
Fluentd(td-agent) linux(ubuntu)설치 가이드

1.대상서버 2.OS환경 Ubuntu 20.04.3 LTS (Ubuntu Focal) 3.Fluentd 셋팅 가이드 3-1. Install url https://docs.fluentd.org/installation/install-by-deb – 설치가이드 curl -fsSL https://toolbelt.treasuredata.com/sh/install-ubuntu-focal-td-agent4.sh | sh 3-2. Version td-agent v4 (Ubuntu Focal는 td-agent 4버전만 지원) 3-3. Run td-agent as Ubuntu 서비스 재시작은 아래 두가지 타입으로 가능합니다. sudo systemctl start td-agent.service sudo systemctl s..
LOG/Fluentd 2021. 12. 24. 09:51
Fluentd(td-agent) Windows 설치 가이드

안녕하세요 1.대상서버 2.OS환경 Window Server 3.Fluentd 셋팅 가이드 3-1. Install url https://docs.fluentd.org/installation/install-by-msi – 설치가이드 https://td-agent-package-browser.herokuapp.com/3/windows – 다운로드 td-agent-3.8.1-0-x64.msi 26.05M 3-2. Version td-agent v3 3-3. Run td-agent as Windows service fluentd --reg-winsvc i --reg-winsvc-auto-start --reg-winsvc-delay-start fluentd --reg-winsvc-fluentdopt '-c C:/..
LOG/Fluentd 2021. 12. 24. 09:46
Fluentd 시작하기

보통 ELK와 EFK를 많이 들어보셨을 겁니다. ELK란 Elasticsearch, Logstash 및 Kibana, 이 오픈 소스 프로젝트 세 개의 머리글자입니다. 1. Elasticsearch는 검색 및 분석 엔진입니다. 2. Logstash는 여러 소스에서 동시에 데이터를 수집하여 변환한 후 Elasticsearch 같은 “stash”로 전송하는 서버 사이드 데이터 처리 파이프라인입니다. 3. Kibana는 사용자가 Elasticsearch에서 차트와 그래프를 이용해 데이터를 시각화할 수 있게 해줍니다 -https://www.elastic.co/kr/what-is/elk-stack- ELK Stack: Elasticsearch, Logstash, Kibana ELK Stack이란 무엇인가요? ELK..
LOG/Fluentd 2021. 12. 24. 09:17
이전 Prev 1 Next 다음