AWS ELK 구축 논의 - Githubissues

gkswls321 / SKinfosec

SK 인포섹 최종프로젝트

0 stars 0 forks source link

Open sys1781 opened 3 years ago

sys1781 commented 3 years ago

Elasticsearch는 검색 및 분석 엔진입니다. RDB와 비슷하나 검색 및 분석 성능은 훨씬 뛰어납니다.

sys1781 commented 3 years ago

Logstash는 여러 소스의 데이터를 동시에 가져 와서 변환 한 다음 Elasticsearch와 같은 stash로 보내는 서버 측 데이터 처리 파이프 라인입니다.

sys1781 commented 3 years ago

Kibana를 사용하면 Elasticsearch에서 차트와 그래프로 데이터를 시각화 할 수 있습니다.

sys1781 commented 3 years ago

단일 목적의 데이터 수집기 플랫폼인 Beats는 수백 수천 개의 장비와 시스템으로부터 Logstash나 Elasticsearch에 데이터를 전송합니다.

sys1781 commented 3 years ago

1개 이상의 Client( 수집할 Data 발생 서버 )에서 beats가 특정 트리거에 의해 logstash로 Data를 전송합니다. (각 Client마다 Beats 존재)
logstash로 전달 된 Data를 커스터마이징이 가능한 필터를 통해 가공하여 Elasticsearch로 전달 합니다.

3, Elasticsearch로 전달 받은 데이터를 서버(Elasticsearch)에 저장합니다.

gkswls321 commented 3 years ago

아모레퍼시픽 고객 빅데이터 분석사례를 보고 고객을 이벤트 로그로 바꿔서 적용해보면 어떨까 라는 생각이 듭니다.

sys1781 commented 3 years ago

gkswls321 commented 3 years ago

ECS 에서 ELK 생성하는 dockercompose 내용입니다.

sys1781 commented 3 years ago

Elastic Stack과 Lambda를 활용한 데이터 모니터링 시스템 구축내용입니다. https://d2.naver.com/helloworld/9878588