Prometheus

[snaag]

Reference

• https://prometheus.io/docs/introduction/overview/
• https://sodayeong.tistory.com/6
• https://sodayeong.tistory.com/19
• https://westlife0615.tistory.com/2
• https://americanopeople.tistory.com/449
• https://devthomas.tistory.com/15

[snaag]

프로메테우스 (Prometheus) 란

• 2012년에 SoundCloud 에서 만든 모니터링 및 알림 툴킷 으로 opensource 임
• 현재는 SoundCloud 휘하가 아닌 독립적으로 관리되고있음
• 지표(metric) 을 시계열 데이터(time series data) 로 수집하고 저장함
  • 지표 정보는 key-value pair 로 저장되는데, 이 pair 를 label 이라 함
• 관련 학습자료 및 커뮤니티 https://prometheus.io/docs/introduction/media/

프로메테우스 특징

• 다차원 데이터 모델
  • 다차원 데이터 모델에 유연하게 조회할 수 있는 쿼리 언어인 PromQL (Promethues Query Language) 사용
• pull model 로 데이터를 수집함 (HTTP 의 Request/Response 방식)
• 다양한 graph 작성 및 대시보드 만들기를 지원함

구조

• Grafana 에서 PromQL 로 request/response 로 데이터를 받아와서 시각화 함

프로메테우스는 언제 쓰면 좋을까

• 모니터링 을 위한 데이터 수집에 적합함
  • 순수하게 시계열 데이터를 기록하는데 적합하기 때문임
  • 다차원 쿼리에도 강점을 갖고 있음

메트릭 (Metric)

• 한국어로 측정 항목 이라는 뜻으로, 일반적으로 수집하여 그 값을 측정하는 것을 말함
• 즉 시계열 데이터는 metric 임
• spring application 의 actuator 를 통해 prometheus 가 메트릭을 수집할 수 있음
• 이렇게 생겼음

http_requests_total{container="A"} 1037
# <메트릭 이름>{<레이블 키>=<레이블 값>, <레이블 키>=<레이블 값> ...} <메트릭 값> [<timestamp>]
# 출처: https://devthomas.tistory.com/15

메트릭의 종류

• 측정하려는 항목 = 매트릭의 종류
• 사용자가 측정하려는 항목은 애플리케이션마다 다름
  • ex. 웹서버: 요청시간 등등
  • ex. 데이터베이스: active connections, active queries 등등
  • ex. 애플리케이션: 요청 수, 응답 수 등등

시계열 데이터 (time series data)

• 시간의 흐름 에 따라 일정한 간격 으로 관찰하여 기록한 자료 (데이터) 를 말함
• 시계열 데이터의 특징
  • 시간에 관해 순서 가 매겨져 있음
  • 연속한 관측치는 서로 상관관계 를 갖고 있음

시계열 데이터와 그래프

• 시계열 데이터는 그래프(time series graph) 로 나타낼 수 있음

Pull model

• 데이터 전송의 주도권이 소비자에게 있음
  • 데이터 소비자가 생산자로부터 요청 하여 받아오는 방식
• Polling 이라고도 함
• HTTP 에서 Request 를 보내면 Response 를 받는 방식이 대표적인 예시

cf. Push model

• 데이터 전송의 주도권이 생산자에게 있음
  • 데이터가 생성될 때마다 (변할 때 마다 등) 데이터 생산자는 데이터 소비자들에게 직접적으로 데이터를 전달
• RxJS 의 Observable 이 대표적인 예시
• 소비자가 누구인지 알고 어떻게 보내주는지
  • 데이터 생산자는 데이터 소비자들의 정보를 알고 있어, 자신과 연결된 소비자들에게 직접적으로 전달함
  • Kafka, RabbitMQ 같은 메시지 시스템을 사용하면 소비자들의 정보를 모르고 있어도 괜찮음

Spring actuator

• spring 애플리케이션의 매트릭 수집을 위한 endpoint
• 이를 프로메테우스가 수집할 수 있음

spring actuator + prometheus + grafana 구조

(그림 클릭 시 그림의 출처로 이동합니다)