이 가이드에서는 Datadog의 CloudFormation 템플릿을 사용해 Amazon Web Service(AWS) 계정을 Datadog과 통합하는 과정 개요를 설명합니다.
간단하게 보면, 여기에는 Datadog의 AWS 계정이 데이터 수집이나 푸시를 위해 AWS 계정으로 API를 호출하도록 허용하는 IAM 역할 및 관련 정책 작성이 포함됩니다. 본 템플릿은 Datadog로 로그를 전송하기 위한 Datadog Forwarder Lambda 함수를 배포합니다. CloudFormation 템플릿을 사용하면 Datadog 계정으로 데이터를 전송할 때 필요한 모든 도구를 지원받을 수 있으며, Datadog는 최신 기능을 제공하기 위해 CloudFormation 템플릿을 유지 관리합니다.
초기 연결이 설정된 후에는 AWS 환경과 관련된 개별 AWS 서비스 통합을 활성화할 수 있습니다. Datadog에서는 클릭 한 번으로 AWS 계정에 필요한 리소스를 공급하고 사용자가 사용하는 서비스에 대한 메트릭과 이벤트 쿼리를 시작할 수 있습니다. 사용 빈도가 높은 AWS 서비스에서 Datadog를 사용하면 기본 대시보드에서 즉시 데이터를 확인할 수 있고 사용자 지정할 수 있습니다. 이 가이드에서는 Amazon Linux EC2 인스턴스에 통합을 설정하고 Datadog 에이전트를 설치하는 방법을 설명하고 통합 기능을 개략적으로 설명합니다. 사용 가능한 하위 통합 목록은 [개별 AWS 서비스에 통합 사용](#Enable-integrations-for individual-aws-service) 섹션을 참고하세요.
이 프로세스는 여러 AWS 계정에서 반복해 사용할 수 있습니다. 또는 API, AWS CLI나 Terraform을 사용해 한 번에 여러 계정에서 구성할 수도 있습니다. 더 자세한 정보는 Datadog-Amazon CloudFormation 가이드에서 알아보세요.
시작하기 전에 다음의 전제 조건을 충족하는지 확인하세요.
AWS 계정. AWS 사용자가 다음의 IAM 권한을 허용해야 CloudFormation 템플릿을 실행할 수 있습니다.
Datadog에서 AWS 통합 설정 페이지로 이동하여 Add AWS Account를 클릭합니다.
Automatically using CloudFormation 옵션에서 통합 설정을 설정합니다. a. 통합할 AWS 영역을 선택합니다. b. Datadog API 키를 추가합니다. c. 또는 Datadog 포워더 Lambda를 사용하여 로그 및 기타 데이터를 Datadog으로 보냅니다. d. 또는 클라우드 보안 관리 오류를 활성화하여 클라우드 환경, 호스트, 컨테이너에서 잘못된 설정 및 보안 위험을 검색합니다.
CloudFormation Template 실행을 클릭합니다. 그러면 AWS 콘솔이 열리고 CloudFormation 스택이 로드됩니다. 이전 Datadog 양식에서 선택한 내용을 기반으로 모든 파라미터를 입력하므로 원하는 경우에는 수정할 필요가 없습니다.
참조: DatadogAppKey 파라미터는 CloudFormation 스택이 Datadog로 API를 호출해 해당 AWS 계정에 Datadog 설정을 추가하고 수정하도록 해줍니다. 키는 자동으로 생성하며, 사용자의 Datadog 계정과 연동됩니다.
AWS에서 필요한 상자를 선택하고 Create stack을 클릭합니다. 그러면 3개의 중첩된 스택과 함께 Datadog 스택에 대한 생성 프로세스가 시작됩니다. 몇 분 정도 걸릴 수 있습니다. 계속하기 전에 스택이 성공적으로 생성되었는지 점검하세요.
스택이 생성되면 Datadog의 AWS 통합 타일로 돌아가서 **Ready!**를 클릭합니다
최대 10분 정도를 기다리면 데이터 수집이 시작되고, 곧바로 사용 가능한 AWS 개요 대시보드가 표시됩니다. 여기에서 AWS 서비스와 인프라스터럭처에서 전송한 메트릭을 확인할 수 있습니다.
이용 가능한 서브 통합의 전체 목록은 Integrations 페이지에서 확인할 수 있습니다. 대다수의 통합은 Datadog에서 AWS 계정으로 들어오는 데이터를 인식하는 시점에 기본으로 설치됩니다.
Datadog로 AWS 서비스 로그를 전송하는 방법에는 두 가지가 있습니다.
가장 많이 사용되는 AWS 서비스의 로그 흐름을 보려면 AWS 서비스 로깅 활성화 섹션을 확인하세요.
로그를 활성화한 후에는 패싯 패널의 source나 service 패싯을 사용해 Logs Explorer에서 원하는 로그를 찾아볼 수 있습니다. 다음은 S3 예시입니다.
Datadog AWS 통합은 기본적으로 CloudWatch API를 크롤링하여 AWS가 제공하는 메트릭을 얻습니다. 여기서 [Datadog 에이전트 16를 사용하면 EC2 인스턴스를 더욱 깊이 있게 시각화할 수 있습니다. 에이전트는 가벼운 데몬으로 메트릭이나 이벤트를 보고하며 로그나 트레이스용으로 구성할 수도 있습니다. 다양한 운영체제에 에이전트를 설치하는 방법을 알아보려면 Datadog 애플리케이션에서 [에이전트 설치] 17 섹션을 참고하세요. 다양한 운영체제(예: Amazon Linux)에는 인스턴스 터미널에서 실행하여 에이전트를 설치할 수 있는 원스텝 설치 명령어가 존재합니다.
에이전트가 설치되면 Infrastructure List에 뼈다귀 아이콘 그래픽이 표시됩니다.
위의 스크린샷은 시스템 및 NTP 점검에서 데이터를 보고하는 Datadog 에이전트와 함께 호스트를 보여줍니다. 시스템 점검은 CPU, 메모리, 파일 시스템 및 I/O에 대한 메트릭을 제공하여 호스트에 대한 추가적인 인사이트를 제공합니다. 환경 및 사용 사례에 맞게 추가 통합을 활성화하거나 DogStatsD를 사용하여 커스텀 메트릭을 Datadog에 직접 전송할 수 있습니다.
이 방법의 장점에 관한 자세한 내용은 클라우드 인스턴스에 Datadog 에이전트를 사용해야 하는 이유 FAQ를 참고하세요.
컨테이너 환경에서 인스턴스 관리나 Fargate를 이용한 서버리스 환경 활용 시에도 Datadog 에이전트를 사용할 수 있습니다.
Amazon ECS 설명서를 활용해 ECS 클러스터 내 EC2 인스턴스에서 Datadog Docker 에이전트를 실행하세요. Datadog 계정으로 리포트하는 메트릭과 이벤트를 알아보려면 Amazon ECS Data Collection 설명서를 참고하세요.
Amazon ECS on AWS Fargate 설명서를 이용해 애플리케이션과 동일한 작업 정의를 사용해 컨테이너로 에이전트를 실행하세요. 참조: Fargate 통합 시의 장점을 전부 활용하려면 Datadog 에이전트 버전 6.1.1 이상이 필요합니다.
쿠버네티스 배포 설명서에 안내되어 있듯, Amazon Elastic Kubernetes Service(EKS)에서는 특별한 설정이 필요하지 않습니다. 쿠버네티스 전용 설명서를 참고해 EKS 클러스터에 에이전트를 배포하세요.
Fargate Pod는 AWS에서 관리하므로 CPU, 메모리를 비롯한 호스트 기반의 시스템 점검을 배제합니다. AWS Fargate Pod에서 데이터를 수집하려면 Amazon EKS on AWS Fargate 설명서를 참조하여 커스텀 RBAC(역할 기반 액세스 컨트롤)을 활용해 애플리케이션 Pod를 보조하는 역할로 에이전트를 실행하세요. 참조: Datadog 에이전트 버전 7.17 이상이 필요합니다.
온프레미스 쿠버네티스 클러스터의 경우, EKS Anywhere 설명서를 사용하세요.
Datadog UI 또는 API을 사용하는 것 외에도 CloudFormation 등록을 사용하여 많은 Datadog 리소스를 만들 수 있습니다. 가시성과 트러블슈팅을 위해 대시보드을 사용하여 주요 데이터를 표시하고 기능/함수을 적용한 후 메트릭 상관관계를 찾습니다.
계정에서 원하지 않거나 예상하지 못한 동작이 발생했을 때 알림을 받고 싶다면 [모니터링]을 생성하세요39. 모니터링을 사용하면 꾸준히 계정으로 보고된 데이터를 평가하고, 알림을 보내 해당하는 팀원에게 적절한 정보를 전송하도록 해줍니다. 팀에게 알림을 보내는 방법을 모두 알아보려면 알림 통합 목록을 참고하세요.
Datadog 서버리스 애플리케이션을 실행하는 AWS Lambda 함수에서 메트릭, 트레이스, 로그를 일원화하여 관리할 수 있습니다. 서버리스에서 애플리케이션 계측, 서버리스 라이브러리 및 통합 설치, 서버리스 애플리케이션을 이용한 분산 트레이싱, 서버리스 트러블슈팅과 관련한 자세한 내용을 알아보세요.
애플리케이션과 AWS 서비스에서 더 많은 데이터를 수집하고 심층적으로 파악하려면 애플리케이션 성능 모니터링(APM)을 사용하여 AWS 엑스레이 통합이나 Datadog 에이전트와 호스트에서 분산 트레이스를 수집할 수 있습니다. 그런 다음 애플리케이션 성능 모니터링(APM) 설명서를 읽고 이 데이터를 사용하여 애플리케이션 성능에 대한 인사이트를 얻을 수 있습니다.
또한 APM 성능 및 인프라스트럭처 메트릭용 알고리즘 기능인 Watchdog을 사용해 잠재적 애플리케이션 문제를 자동으로 감지하고 알림을 받을 수 있습니다.
Cloud SIEM을 이용해 시작하기을 보고 즉각적으로 이용 가능한 로그 탐지 규칙과 비교해 로그를 평가하세요. 로그 탐지 규칙은 사용자 지정할 수 있고, 위협을 감지하면 Security Signals Explorer에서 액세스할 수 있는 보안 신호를 생성합니다. 적절한 팀에 알림을 보내려면 알림 규칙을 사용해 여러 규칙에 적용할 알림 설정을 구성하세요.
CSM 설정이 잘못된 경우의 가이드를 참고해 클라우드 환경에서 잘못된 설정을 감지하고 평가하는 방법을 알아보세요. 리소스 구성 데이터는 즉시 사용 가능한 클라우드 및 인프라스트럭처 규정 준수 규칙을 기준으로 평가되어 공격자의 기술 및 잠재적인 잘못된 구성에 플래그를 지정하여 신속한 대응 및 업데이트 적용을 가능하게 합니다.
Datadog is not authorized to perform sts:AssumeRole오류가 발생하면 전용 트러블슈팅 페이지를 참고하세요. 기타 문제는 AWS 통합 트러블슈팅 가이드을 참고하세요.
Additional helpful documentation, links, and articles:
