Información general

Cuando se planifica una nueva instalación de software, es esencial comprender sus capacidades, objetivos, plazos, equipos y patrones de diseño. En la fase de planificación, aprende los conceptos básicos de Datadog, define tus objetivos más importantes, conoce las prácticas recomendadas e identifica cómo optimizar tu instalación de Datadog.

Diseño

Ejercicio de delimitación del contexto

Fijar un objetivo claro es fundamental para instalar Datadog. Sin embargo, en la práctica, al inicio es imposible predecir todo lo que se podría necesitar. Los ingenieros de productos iteran sus implementaciones y los operadores de sistemas controlan sus cambios, todo ello para controlar el riesgo. El despliegue de una instalación de Datadog a gran escala se beneficiará de las prácticas habituales de gestión de proyectos. Como parte de este proceso, hay ciertos elementos de Datadog que debes incluir. Envía a tu organización de ingeniería un formulario de análisis para dimensionar y marcar tus necesidades.

Recomendaciones:
Empieza pronto a recopilar y consolidar un análisis de tu organización. Crea una vista completa de tus ecosistemas, lenguajes de aplicación, almacenamiento de datos, redes e infraestructura.

Un ejemplo de formulario de análisis podría ser el siguiente:

Nombre de la aplicación:  
  Lenguaje:  
     Marcos:  
  Capa de modelo:  
  Capa de vista: 
  Capa de controlador:  
  Tipo infra:  
  Sistemas operativos:

Prácticas recomendadas generales

Completa el ejercicio de delimitación del contexto para comprender los tipos de tecnologías con las que trabajas y empezar a asignarlas a los productos principales en Datadog.

Etiquetado de recursos

Datadog es una herramienta para correlacionar datos de máquinas con las aplicaciones en ejecución y sus descriptores físicos. Puede cruzar referencias de un dato individual con otros, independientemente de su tipo. El nombre de host, las regiones de la nube, la versión del sistema operativo y la IP son algunos de los atributos de recursos que se aplican automáticamente. Además, Datadog permite generar etiquetas (tags) personalizadas como cost-code, AppName, environment y version.

La potencia de Datadog reside en su capacidad para mantener y gestionar un vocabulario unificado e incluye funciones de datos integradas. El Etiquetado unificado de servicios utiliza etiquetas (tags) reservadas que permiten correlacionar la telemetría en todas las funciones de la plataforma Datadog.

Las etiquetas (tags) son pares key:value o valores simples. Añaden dimensión a los datos de rendimiento de la aplicación y a las métricas de la infraestructura. Antes de empezar a monitorizar con Datadog, aprovecha las capacidades de etiquetado que ofrecen tus plataformas, ya que Datadog importa automáticamente estas etiquetas (tags) a través de sus integraciones. La siguiente tabla es una representación de cómo funcionan los pares key:value y si las etiquetas (tags) se añaden automática o manualmente.

La guía Empezando con el etiquetado es un buen lugar para empezar con este tema. He aquí algunos puntos destacados adicionales:

• Una servicio se define como una huella de aplicación única, algo que puede desplegarse de forma independiente.
• Los valores de etiquetas (tags) deben ser coherentes. Por ejemplo, “Producción” es diferente de “Prod”.
• Define fuentes de verdad para la etiquetas (tags) dinámicas, como la versión del código.

Recomendaciones:

• Tan pronto como sea posible, comprende el Etiquetado unificado de servicios de Datadog y desarrolla tu esquema de etiquetado.
• Alinea tu infraestructura con tus etiquetas (tags) recopiladas y automatiza el proceso de etiquetado siempre que sea posible (por ejemplo, utiliza valores hash git de pipelines CI como etiquetas (tags) de versión mediante etiquetas (labels) de Kubernetes). Esto unifica tus datos, permitiéndote crear alertas informativas asignando propietarios a servicios y cambiar entre métricas, logs, y trazas (traces) de servicios.

El siguiente diagrama muestra el aspecto de cada una de las tres etiquetas (tags) reservadas a medida que creas tu entorno:

Control de acceso

A nivel de diseño arquitectónico, existen dos áreas principales de control de acceso dentro de Datadog: estructura de la organización y control de acceso basado en roles (RBAC).

RBAC

El control de acceso basado en roles de Datadog puede conectarse a tu servicio de autenticación SAML existente. Las asignaciones agrupadas SAML se pueden crear a partir de los roles y objetos de equipo predeterminados de Datadog. Datadog proporciona tres roles predeterminados que puedes personalizar para adaptarlos a la complejidad de tus propios roles AD/LDAP. También puedes configurar cuentas de servicios para fines no interactivos como la propiedad de API y clave de API, para separar las actividades del usuario de las tareas del sistema. Los permisos granulares determinan el acceso y las protecciones que necesitas.

Como capa adicional, Equipos te permite crear grupos flexibles, informales y ad hoc a los que los usuarios pueden unirse o ser añadidos. La función Equipos está disponible en todos los productos de Datadog.

Estructura multiorganización

Los grandes clientes de Datadog suelen tener más de una instalación de Datadog. Esto lo suelen utilizar los proveedores de servicios gestionados para garantizar que sus clientes no tengan acceso a los datos de los demás. En algunos casos, es necesario el aislamiento total dentro de una misma empresa. Para adaptarte a esta topología, puedes gestionar varias cuentas de organización. Por ejemplo, puedes ver el uso total en el nivel principal, mientras permaneces completamente separado tecnológicamente. Las organizaciones secundarias deben gestionarse desde una única cuenta de organización principal.

Recomendaciones:

• Define un plan específico para crear roles de usuario en Datadog.
• Aprovecha las cuentas de servicios para la administración de claves de API.
• Explora Equipos para vincular recursos como dashboards, servicios, monitores e incidentes a un grupo de usuarios.

Prácticas recomendadas de productos

APM

APM depende de la aplicación del Etiquetado unificado de servicios. Estas etiquetas (tags) son fundamentales para la experiencia operativa y también son útiles para permitir la correlación a través de tus datos de telemetría. Así es como Datadog puede ayudarte a determinar el propietario de un proceso Java aleatorio que descubras.
Por lo general, la configuración de APM predeterminada es suficiente para la mayoría de los casos de uso, pero, por ejemplo, si quieres cambiar las frecuencias de muestreo o personalizar otras configuraciones de APM, utiliza las siguientes directrices.

Recomendaciones:

• Identifica los servicios a instrumentar y determina si están basados en hosts, en contenedores o en serverless.
• Determina el método disponible para instrumentar tus servicios en Datadog, dependiendo del lenguaje utilizado o de su entorno de tiempo de ejecución. Estos métodos van desde el paso único hasta la instrumentación manual.
• Revisa la documentación de los controles de ingesta.
• Configura tu frecuencia de muestreo mediante configuración remota para escalar la ingesta de trazas de tu organización, según tus necesidades, sin necesidad de reiniciar tu Agent. Para obtener más información, consulta los casos de uso de la frecuencia de muestreo.
• Asegúrate de que se aplica el Etiquetado unificado de servicios y revisa la semántica de las etiquetas (tags) de tramos.
• Opta por dependencias de servicios inferidos para permitir la detección automática de tus nombres de servicios a partir de los atributos de tramos.

Gestión de Logs

Las capacidades de gestión de logs te permiten a ti y a tus equipos diagnosticar y solucionar problemas de infraestructura. Con Logging without LimitsTM, puedes crear patrones de recopilación de logs sintonizables y extraer información de tus datos de logs en métricas personalizadas. También puedes recibir alertas de errores críticos en tus logs, sin necesidad de indexarlos (es decir, almacenarlos).

La arquitectura de índices de logs de Datadog es un almacén columnar distribuido de series temporales que está optimizado para servir consultas de análisis y agregación de gran tamaño. Para obtener más información sobre la arquitectura de la generación de logs de Datadog, consulta Presentación de Husky y Husky Deep Dive.

La plataforma de generación de logs puede configurarse con varias capas de almacenamiento de logs. Cada una de ellas tiene sus propios casos de uso, que se describen a continuación:

* La capacidad Flex Logs no incluye monitores/alertas y Watchdog. Pero aún podrás realizar logs-a-métricas en el flujo (flow) de ingesta antes de que los logs se indexen (tanto en estándar como en flex) y utilizar esas métricas en monitores. Se admite la correlación con otras telemetrías, como trazas.

Con estas funciones básicas puedes ingerir y monitorizar logs para algunos de los siguientes casos de uso:

Normalización del formato de logs

Control centralizado de fecha/hora, sustitución de valores y búsqueda de referencias.

Gestión global de datos sensibles e información de identificación personal (PII)

La información de identificación personal (PII) y el analizador de datos sensibles (SDS) se depuran en primer lugar.

Enrutamiento y reenvío

Interfaz de usuario centralizada para enviar logs al índice, archivo o destino de reenvío.

Captura del valor rentable

Definición del campo de log adaptable y destilación de alto volumen/bajo valor.

Archivo de logs global

Archivador de logs globales.

SIEM global

Se prueba la seguridad de todos los logs durante la ingesta como preprocesador.

Recomendaciones:

• Determina el método para enviar tus logs a Datadog, ya sea directamente a los endpoints de admisión URL de logs de Datadog o desde herramientas como Fluentbit, Syslog o Logstash.
• Pon a punto tu plan de ingesta de logs y revisa las prácticas recomendadas para la gestión de logs.
• Comprende Logging without LimitsTM. Identifica el estado de tus servicios con mayor cantidad de logs, observa los patrones de generación de altos volúmenes de logs y crea filtros de exclusión para patrones de logs.
• Configura archivos de logs.

Real User Monitoring

Real User Monitoring y Session Replay ofrecen información detallada sobre las experiencias de los usuarios finales de servicios o aplicaciones. Instala RUM en aplicaciones con sesiones de gran valor para aprovechar los datos y realizar cambios significativos. Session Replay proporciona una representación visual muy valiosa para solucionar los problemas observados por los usuarios. Puedes realizar un seguimiento de la experiencia real del cliente, que es más valiosa en los entornos de producción.

Recomendaciones:

• Identifica los sitios web, las pantallas de las aplicaciones móviles, las acciones de los usuarios y el código front-end que son fundamentales para tu negocio, para realizar un seguimiento.
• Despliega RUM y Session Replay en producción y entornos de casi producción.
• Descarta errores de front-end.
• Configura tu frecuencia de muestreo de RUM.

Synthetic Monitoring

La monitorización Synthetic es un conjunto de tests sintéticos completo que incluye tests para aplicaciones de navegador, aplicaciones móviles y API. Los resultados de los tests Synthetic pueden vincularse al comportamiento de la aplicación que generó y, a partir de allí, a la base de datos, las colas de mensajes y los servicios posteriores.

Recomendaciones:

• Identifica los endpoints de la API y los recorridos del usuario que son fundamentales para tu empresa y pruébalos con frecuencia.
• Elabora una hoja de ruta de las transacciones comerciales que se van a probar.
• Utiliza Synthetics junto con APM y RUM.
• Revisa las consideraciones sobre el consumo de la monitorización Synthetic.
• Reduce el mantenimiento de los tests utilizando subtests.
• Haz elecciones intencionadas en la selección de localizaciones de tests. Realiza los tests desde donde se encuentran realmente tus clientes.
• Utiliza el check HTTP o el check TCP para monitorizar la caducidad del certificado SSL o el tiempo de actividad básico.

Integraciones

Puedes utilizar integraciones 800+ de Datadog para reunir todas las métricas y logs de tu infraestructura, para obtener información sobre todo un sistema de observabilidad. Las integraciones, ya sean basadas en SaaS o en el Agent, recopilan métricas para monitorizar dentro de Datadog. Las integraciones basadas en hosts se configuran con archivos yaml que viven en el directorio conf.d y las integraciones basadas en contenedores se configuran con metadatos como anotaciones o etiquetas (labels).

Existen diferentes tipos de integraciones en Datadog y el orden en que se presentan aquí es el que Datadog recomienda para su instalación.

Recomendaciones:

• Empieza a recopilar métricas de tus proyectos en el proceso de desarrollo lo antes posible.
• Los Agents instalados tienen automáticamente integraciones del sistema y NTP en ejecución y pueden detectar automáticamente las tecnologías compatibles en el host. (Procesos en directo debe estar activado para esta funcionalidad).
• Puedes elegir en la lista anterior aquello que te gustaría monitorizar. Si hay servicios que quieres monitorizar y que no tienen una integración, puedes explorar Procesos en directo, [Universal Services Monitoring]]68, la integración de un proceso o un check personalizado.

Recursos adicionales

Has logrado algunas victorias importantes y has adoptado las prácticas recomendadas de APM, RUM, la Monitorización Synthetic y la Gestión de logs. A continuación se indican algunos recursos adicionales que son importantes a la hora de planificar la fase de instalación.

Procesos en directo

Utiliza Procesos en directo para ver todos tus procesos en ejecución en un solo lugar. Por ejemplo, observa la información a nivel de PID de un proceso Apache en ejecución para ayudarte a entender y solucionar problemas transitorios. Además, puedes consultar los procesos que se ejecutan en un host específico, en una zona de disponibilidad específica, o que ejecutan una carga de trabajo específica. Configura procesos en directo en tus hosts, contenedores o instancias AWS ECS Fargate para aprovechar esta función.

Disponibilidad, latencia y caducidad de SSL

Las operaciones del servidor web dependen de la disponibilidad de puertos en la red, la validez de los certificados SSL y las bajas latencias. Instala el check HTTP para monitorizar endpoints HTTP locales o remotos, detectar códigos de respuesta erróneos (como 404) y utilizar tests de API Synthetic para identificar certificados SSL que vayan a caducar pronto.

Monitorización de redes en la nube

Los servidores web casi siempre están interconectados con otros servicios a través de un tejido de redes que es vulnerable a las caídas y puede dar lugar a retransmisiones. Utiliza la integración de red de Datadog y activa la monitorización de redes en la nube para obtener visibilidad del tráfico de red entre servicios, los contenedores, las zonas de disponibilidad y otras etiquetas (tags) de tu infraestructura.

Servicios de plataforma

La monitorización de la infraestructura de Datadog viene con productos adicionales que puedes utilizar para maximizar la observabilidad de tus entornos.

Catálogo de servicios

El catálogo de servicios proporciona información general de los servicios, mostrando cuáles se han desplegado recientemente, cuáles llevan tiempo sin desplegarse, qué servicios informan de más errores y cuáles tienen incidentes en curso, y mucho más.

El catálogo de servicios también te ayuda a evaluar la cobertura de tu configuración de observabilidad. A medida que avanzas en tu implementación, puedes ingresar a la pestaña Guía para la configuración de cada uno de tus servicios, para asegurarte de que tienen las configuraciones esperadas:

Puedes añadir componentes que no estés planificando monitorizar inmediatamente, como trabajos o bibliotecas cron, para crear una vista global de tu sistema y marcar a los miembros del equipo responsables de estos componentes antes de la siguiente fase de tu implementación de Datadog.

Catálogo de recursos

Utiliza el catálogo de recursos para ver información clave sobre los recursos, como metadatos, propiedad, configuraciones, relaciones entre recursos y riesgos de seguridad activos. Es el núcleo central de todos los recursos de tu infraestructura. El catálogo de recursos ofrece visibilidad sobre el cumplimiento de la infraestructura, incentiva las prácticas de etiquetado recomendadas, reduce los riesgos de las aplicaciones mediante la identificación de vulnerabilidades de seguridad, proporciona a los responsables de ingeniería una visión muy clara de las prácticas de seguridad y permite la exportación de recursos para el mantenimiento de registros o auditorías.

Puedes utilizar el catálogo de recursos en diversos contextos, entre ellos:

• Comprender la propiedad de los recursos por parte del equipo y encontrar los huérfanos para limpiarlos.
• Planificar actualizaciones de recursos que ejecutan versiones obsoletas.
• Acceder a la información de configuración y otros metadatos para acelerar la respuesta ante incidentes.
• Mantener tu postura de seguridad encontrando y resolviendo errores de configuración y vulnerabilidades.

Catálogo de API

Utiliza el catálogo de API para la categorización específica de endpoints de recursos, el rendimiento, la fiabilidad y la propiedad de todos tus endpoints de API en un solo lugar.

Gestión de eventos

Sin ninguna configuración adicional, la gestión de eventos puede mostrar estados de evento de terceros, eventos generados a partir del Agent e integraciones instaladas. La gestión de eventos de Datadog centraliza eventos de terceros, como eventos de alertas y cambios. Datadog también crea automáticamente eventos a partir de varios productos, incluidos los monitores y el seguimiento de errores. También puedes utilizar la gestión de eventos para enviar alertas y notificaciones de monitores basadas en consultas de eventos.

Seguimiento de errores

Ve los errores allí donde se producen con el Seguimiento de errores de Datadog. El Seguimiento de errores puede ingerir errores de APM, Gestión de logs y Real User Monitoring para depurar problemas más rápidamente.

Automatización de flotas

Administra y gestiona de forma centralizada todos sus Datadog Agents con la Automatización de flotas. La Automatización de flotas puede identificar qué Agents necesitan actualizarse, enviar un aviso al servicio de asistencia y ayudar en la tarea de desactivar o rotar las claves de API.

Configuración remota

Utiliza la configuración remota (activado por defecto) de Datadog para configurar y cambiar de forma remota el comportamiento de los componentes Datadog (por ejemplo, Agents, bibliotecas de rastreo y workers de Observability Pipelines) desplegados en tu infraestructura. Para obtener más información, consulta productos y capacidades compatibles.

Notebooks

Utiliza notebooks de Datadog para compartir información con los miembros del equipo y para ayudar a solucionar problemas en investigaciones o incidentes.

Optimizar la recopilación de datos

Datadog recopila muchas cosas en tus entornos, por lo que es importante limitar la cantidad de puntos de recopilación y establecer delimitaciones. En esta sección, aprenderás los mecanismos que controlan la recopilación de telemetría y analizarás cómo puedes codificar las necesidades de tu organización.

Infraestructura

Datadog interactúa con la API de monitorización de gestores de HyperVisor (Hyper-V, vSphere, PCF), planificadores de contenedores (Kubernetes, Rancher, Docker) y proveedores de nube pública (AWS, Azure, GCP). La plataforma para detectar automáticamente recursos (pods, máquinas virtuales, EC2, ALB, AzureSQL, blobs GCP) dentro de esos entornos. Es importante limitar el número de recursos monitorizados, ya que afectan a la facturación.

Recomendaciones:

Habilita la recopilación de recursos para AWS y GCP para ver un inventario de recursos, así como información sobre costes y seguridad. Además, limita la recopilación de métricas de tus recursos de Azure y de tus entornos en contenedores.

Niveles de servicio

Durante la fase de planificación, puede que descubras que no todos los casos de observabilidad son igualmente importantes. Algunos de ellos son de misión crítica, mientras que otros no lo son. Por este motivo, resulta útil diseñar patrones para los niveles de cobertura y para los entornos que quieres monitorizar con Datadog. Por ejemplo, un entorno de producción puede ser monitorizado en todos los niveles, pero una instancia de desarrollo de la misma aplicación puede tener sólo las herramientas centradas en el desarrollador.

Recomendaciones:

• Establece estimaciones de los niveles de servicio desde el principio. No es necesario que sean precisas al principio, pero serán útiles a medida que aumente la adopción.

Ciclo de vida del desarrollo de software

Para empezar a trazar los patrones de tu instalación, combina la información que obtengas del ejercicio de delimitación del alcance con la formación de Datadog 101 y elabora un plan de acción. Considera el siguiente ejemplo y modifícalo para adaptarlo a las necesidades de tu organización. El ejemplo esboza un patrón de instalación de la dimensión del entorno SDLC (dev, qa, stage, prod), que puedes personalizar según tus normas y condiciones. Comienza a definir expectativas dentro de tu propia base de usuarios de Datadog de lo que significa “instalación estándar de Datadog”.

Recomendaciones : No todas las herramientas sirven para todos los trabajos. Evalúa los casos de uso de los productos de Datadog y compáralos con tus necesidades. Ten en cuenta los niveles de SDLC, la importancia de la aplicación y la finalidad de cada producto de Datadog.

Resumen

Es importante desarrollar y planificar un curso realista para la instalación de Datadog. En esta sección, has aprendido sobre la fase de planificación y las prácticas recomendadas, preparando tu huella Datadog para tener éxito. Has identificado y reunido tu base de conocimientos y a los miembros de su equipo, has desarrollado tus modelos de instalación, has planificado optimizaciones y has compilado una lista de prácticas recomendadas para los productos principales. Estas bases te preparan para las siguientes fases de la instalación de Datadog: creación y ejecución.

Próximos pasos

Crea una metodología de despliegue detallada en la fase de compilación centrándote en la construcción del propio Datadog, itera en tu entorno, define algunos mecanismos de apoyo interno y prepárate para la producción.

Referencias adicionales

Más enlaces, artículos y documentación útiles:

Empezando con el Etiquetado unificado de serviciosDOCUMENTACIÓN Empezando con el rastreo de APMDOCUMENTACIÓN