개요

유니버설 서비스 모니터링은 널리 사용되는 컨테이너 태그(예: app, short_imagekube_deployment)를 사용하여 서비스를 검색하고 Service Catalog에서 해당 서비스에 대한 항목을 생성합니다.

유니버설 서비스 모니터링으로 검색된 모든 서비스의 인바운드 및 아웃바운드 트래픽에 대해 Datadog의 요청, 오류 및 기간 메트릭에 액세스할 수 있습니다. 이러한 서비스 상태 메트릭은 알림 생성, 배포 추적, 서비스 수준 목표(SLO) 시작에 유용하므로 인프라에서 실행 중인 모든 서비스에 대한 포괄적인 가시성을 확보할 수 있습니다.

BITSBOUTIQUE용 유니버설 서비스 모니터링 SLO

이 가이드에서는 universal.http.*와 같은 USM 메트릭을 검색하고 모니터, SLO 및 대시보드에서 사용하는 방법을 설명합니다.

USM 메트릭 vs APM 메트릭

메트릭 이름단위유형설명
universal.http.client분포아웃바운드 요청의 대기 시간, 카운트, 오류 및 속도.
universal.http.client.hits히트카운트총 아웃바운드 요청 및 오류 수.
universal.http.client.apdex스코어게이지이 서비스에 대한 아웃바운드 요청의 Apdex 스코어.
universal.http.server분포인바운드 요청의 대기 시간, 카운트, 오류 및 속도.
universal.http.server.hits히트카운트총 인바운드 요청 및 오류 수.
universal.http.server.apdex스코어게이지이 웹 서비스에 대한 Apdex 스코어.

APM 메트릭과 달리 오류는 별도의 메트릭이 아닌 error:true 태그 아래에서 사용할 수 있습니다.

참고: .hits 메트릭에는 모든 인프라스트럭처 태그가 포함되어 있으며 요청 및 오류 카운트를 쿼리하는 데 권장되는 방법입니다. 모든 USM 메트릭에 두 번째 기본 태그를 추가할 수도 있습니다.

메트릭 구문

USM 메트릭 쿼리 구문은 trace.*를 사용하는 APM 메트릭 쿼리 구문과 다릅니다. USM 메트릭은 단일 분포 메트릭 이름에 속합니다.

예를 들면 다음과 같습니다.

APMUSM
trace.universal.http.client.hits{*}count:universal.http.client{*}
trace.universal.http.client.errorscount:universal.http.client{error:true}
trace.universal.http.client.hits.by_http_statuscount:universal.http.client{*} by http_status_family
pXX:trace.universal.http.client{*}pXX:universal.http.client{*}
trace.universal.http.client.apdex{*}universal.http.client.apdex{*}

인바운드 트래픽을 캡처하는 universal.http.server 작업에도 동일한 변환이 적용됩니다. 분포 메트릭에 대한 자세한 내용은 APM의 DDSketch 기반 메트릭을 참조하세요.

사용법

APM > Service Catalog로 이동하여 Universal Service Monitoring telemetry 유형별로 필터링하고 서비스를 클릭합니다. Performance 탭에는 히트, 지연 시간, 요청, 오류 등에 대한 서비스 수준 그래프가 표시됩니다. 모니터 또는 SLO를 생성하거나 Service Catalog대시보드를 통해 메트릭에 액세스할 수도 있습니다.

모니터 생성

APM 모니터를 생성하여 universal.http.client와 같은 USM 메트릭이 임계값을 초과하거나 예상 패턴에서 벗어날 때 알림을 트리거할 수 있습니다.

  1. Monitors > New Monitor로 이동하여 APM을 클릭합니다.
  2. APM Metrics을 선택하고 서비스나 리소스의 env 및 기타 기본 태그를 정의합니다. 모니터링할 서비스 또는 리소스를 선택하고 모니터가 쿼리를 평가할 시간 간격을 정의합니다.
  3. Threshold Alert를 선택하고 트리거할 모니터에 대해 Requests per Second와 같은 USM 메트릭을 선택합니다. 그런 다음 값이 알림 및 경고 임계값 초과 또는 미만이어야 하는지 정의합니다. 알림 임계값에 대한 값을 입력하고 필요시 경고 임계값에 대한 값도 입력합니다.
  4. 알림 섹션에는 모니터에 대해 미리 채워진 메시지가 포함되어 있습니다. 알림 이름과 메시지를 사용자 정의하고 이 모니터에 대한 권한을 정의합니다.
  5. Create를 클릭합니다.
BITSBOUTIQUE용 유니버설 서비스 모니터링 모니터

자세한 내용은 APM 모니터 문서를 참조하세요.

SLO 생성하기

서비스별로 SLO를 생성하여 USM 메트릭이 설정한 목표를 충족하고 시간이 지남에 따라 가용성을 향상시킬 수 있습니다. Datadog은 많은 서비스를 처리하기 위해 프로그래밍 방식의 SLO 생성을 권장합니다.

Service Catalog에서 SLO를 생성하려면:

  1. Service CatalogReliability 탭으로 이동합니다.
  2. SLOs 열 아래에서 서비스 위로 마우스를 가져간 다음 + Create Availability SLO 또는 + Create Latency SLO를 클릭합니다.
BITSBOUTIQUE에 대한 유니버설 서비스 모니터링 SLO 설정

(선택 사항) USM 메트릭을 사용하여 수동으로 SLO를 생성하려면:

  1. Service Management > SLOs로 이동하여 New SLO를 클릭합니다.

  2. Metric Based를 선택하고 Good events (numerator) 섹션에 두 개의 쿼리를 만듭니다.

    • 쿼리 A: universal.http.server와 같은 USM 메트릭을 입력하고, from 필드에 기본 serviceenv 태그를 추가하여 특정 서비스로 필터링합니다. 그런 다음 as 필드에서 count를 선택합니다.
    • 쿼리 B: universal.http.server와 같은 USM 메트릭을 입력하고, from 필드에 error:true 태그와 더불어 기본 serviceenv 태그를 추가하여 특정 서비스로 필터링합니다. 그런 다음 as 필드에서 count를 선택합니다.
  3. + Add Formula를 클릭하고 a-b를 입력합니다.

  4. Total events (denominator) 섹션에서 universal.http.server와 같은 USM 메트릭을 입력하고, from 필드에 기본 serviceenv 태그를 추가하여 특정 서비스로 필터링합니다. 그런 다음 as 필드에서 count를 선택합니다.

  5. + New Target을 클릭하여 다음 설정으로 목표 임계값을 생성합니다.

    • 기간은 7 Days이고 목표 임계값은 95%이며 경고 임계값은 99.5%입니다. Datadog은 모든 기간에 걸쳐 동일한 목표 임계값을 설정할 것을 권장합니다.
  6. SLO의 이름과 설명을 입력합니다. team 태그와 더불어 기본 envservice 태그를 설정합니다.

  7. Save and Set Alert를 클릭합니다.

BITSBOUTIQUE에 대한 유니버설 서비스 모니터링 SLO 설정

자세한 내용은 서비스 수준 목표 문서를 참조하세요.

정의된 대시보드에 액세스

Service Catalog는 서비스 정의 파일에 정의된 대시보드를 식별하고 이를 Dashboards 탭에 나열합니다. GitHub에서 직접 서비스 정의에 액세스하고 편집하려면 Manage Dashboards를 클릭하세요.

Service Catalog에서 서비스의 Dashboards 탭에 있는 Manage Dashboards 버튼

자세한 내용은 대시보드 문서를 참조하세요.

참고 자료