| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 | 29 |
| 30 | 31 |
- 상무지구 파티룸
- 모임룸
- Logstash
- 즐디자인파티룸
- 실내이벤트
- tdagent
- 편안한룸
- 게임 충돌
- EFK
- Elk
- 로그수집
- application/vnd.ms-excel
- 블록체인
- Spring vs NestJS
- 선형 보간법
- 트렌드파티
- td-agent
- 하이퍼레저
- The Cloud Native Computing Foundation
- rmtp
- Git
- fluentd
- ngnix
- getOutputStream
- k8s ngnix rmtp
- CloudArchitecture
- ngnix rmtp
- 패브릭
- Spring Cloud MSA
- MariaDB 10
- Today
- Total
목록로그수집 (2)
마시멜로
Fluentd 예제(log파일을 읽어들여 POST API로 전송)
Fluentd 예제입니다. 대상서버에 td-agent(Fluentd)를 실행시켜 수집된 데이터를 대상서버 POST API로 저장하는 예제입니다. Fluentd의 conf의 구성은 아래와 같습니다. 코드 ex) # 다양한 Input Plugins 중에서 tail을 사용했습니다. @type tail # 실제 물리적 파일 위치 # 파일 타입에 따라 *를 쓰거나 %Y%m%d(20211224)로 해당 폴더에서 특정 패턴의 파일을 지정할 수 있다. path /test/test_%Y%m%d*.log # tag를 이용하여 동일한 conf파일에서 각각의 filter와 match를 구성할 수 있다. tag logFile.* # 현재 추적하고 있는 파일의 index를 저장하고 있는 파일 pos_file /var/log/td..
Fluentd 시작하기
보통 ELK와 EFK를 많이 들어보셨을 겁니다. ELK란 Elasticsearch, Logstash 및 Kibana, 이 오픈 소스 프로젝트 세 개의 머리글자입니다. 1. Elasticsearch는 검색 및 분석 엔진입니다. 2. Logstash는 여러 소스에서 동시에 데이터를 수집하여 변환한 후 Elasticsearch 같은 “stash”로 전송하는 서버 사이드 데이터 처리 파이프라인입니다. 3. Kibana는 사용자가 Elasticsearch에서 차트와 그래프를 이용해 데이터를 시각화할 수 있게 해줍니다 -https://www.elastic.co/kr/what-is/elk-stack- ELK Stack: Elasticsearch, Logstash, Kibana ELK Stack이란 무엇인가요? ELK..