개요

본 점검은 Datadog Agent를 통해 Impala를 모니터링합니다.

설정

아래 지침에 따라 호스트에서 실행 중인 Agent에 이 점검을 설치하고 설정하세요. 컨테이너화된 환경의 경우 Autodiscovery 통합 템플릿에서 해당 지침을 적용하는 방법에 관한 가이드를 참고하세요.

설치

Impala 점검은 Datadog Agent 패키지에 포함되어 있습니다. 서버에 추가로 설치할 필요가 없습니다.

설정

1. Impala 성능 데이터 수집을 시작하려면 Agent 구성 디렉터리 루트에서 conf.d/ 폴더에 있는 impala.d/conf.yaml 파일을 편집합니다. 사용 가능한 모든 구성 옵션은 샘플 impala.d/conf.yaml을 참고하세요.

다음은 Daemon 모니터링 예시입니다.

init_config:

instances:
  ## @param service_type - string - required
  ## The Impala service you want to monitor. Possible values are `daemon`, `statestore`, and `catalog`.
  #
- service_type: daemon

  ## @param openmetrics_endpoint - string - required
  ## The URL exposing metrics in the OpenMetrics format.
  ##
  ## The default port for the services are:
  ## - Daemon: 25000
  ## - Statestore: 25010
  ## - Catalog: 25020
  #
  openmetrics_endpoint: http://%%host%%:25000/metrics_prometheus

동일한 Agent로 여러 서비스를 동시에 모니터링할 수도 있습니다.

init_config:

instances:

- service_type: daemon
  service: daemon-1
  openmetrics_endpoint: http://<DAEMON-1-IP>:25000/metrics_prometheus
- service_type: daemon
  service: daemon-2
  openmetrics_endpoint: http://<DAEMON-2-IP>:25000/metrics_prometheus
- service_type: statestore
  openmetrics_endpoint: http://<STATESTORE-IP>:25010/metrics_prometheus
- service_type: catalog
  openmetrics_endpoint: http://<CATALOG-IP>:25020/metrics_prometheus

2. Agent를 다시 시작합니다.

검증

Agent 상태 하위 명령을 실행하고 Checks 섹션에서 impala를 찾습니다.

수집한 데이터

Metrics

이벤트

Impala 통합은 이벤트를 포함하지 않습니다.

서비스 점검

impala.daemon.openmetrics.health

점검이 Impala Daemon 인스턴스의 Prometheus 메트릭 엔드포인트에 접근할 수 없는 경우 CRITICAL을 반환합니다.

상태: ok, critical

impala.statestore.openmetrics.health

점검이 Impala Statestore 인스턴스의 Prometheus 메트릭 엔드포인트에 접근할 수 없는 경우 CRITICAL을 반환합니다.

상태: ok, critical

impala.catalog.openmetrics.health

점검이 Impala 카탈로그 인스턴스의 Prometheus 메트릭 엔드포인트에 접근할 수 없는 경우 CRITICAL을 반환합니다.

상태: ok, critical

로그

Impala 통합은 Impala 서비스에서 로그를 수집하여 Datadog으로 전달할 수 있습니다.

1. Datadog Agent에서 로그 수집은 기본적으로 비활성화되어 있으므로 datadog.yaml 파일에서 활성화합니다.

   logs_enabled: true
   

2. impalad.d/conf.yaml 파일에서 로그 구성 블록의 주석 처리를 제거하고 편집하세요. 다음은 Daemon 프로세스의 예시입니다.

   logs:
     - type: file
       path: /var/log/impala/impalad.INFO
       source: impala
       tags:
       - service_type:daemon
       log_processing_rules:
       - type: multi_line
         pattern: ^[IWEF]\d{4} (\d{2}:){2}\d{2}
         name: new_log_start_with_log_level_and_date
     - type: file
       path: /var/log/impala/impalad.WARNING
       source: impala
       tags:
       - service_type:daemon
       log_processing_rules:
       - type: multi_line
         pattern: ^[IWEF]\d{4} (\d{2}:){2}\d{2}
         name: new_log_start_with_log_level_and_date
     - type: file
       path: /var/log/impala/impalad.ERROR
       source: impala
       tags:
       - service_type:daemon
       log_processing_rules:
       - type: multi_line
         pattern: ^[IWEF]\d{4} (\d{2}:){2}\d{2}
         name: new_log_start_with_log_level_and_date
     - type: file
       path: /var/log/impala/impalad.FATAL
       source: impala
       tags:
       - service_type:daemon
       log_processing_rules:
       - type: multi_line
         pattern: ^[IWEF]\d{4} (\d{2}:){2}\d{2}
         name: new_log_start_with_log_level_and_date
   

모든 로그를 수집하는 방법은 샘플 구성 파일을 참조하세요.

트러블슈팅

도움이 필요하세요? Datadog 지원 팀에 문의하세요.