Información general

A medida que crecen tu infraestructura y tus aplicaciones, también lo hace el volumen de logs y la complejidad de los datos. Un gran volumen de logs puede introducir mucho ruido y dificultar el análisis y la resolución de problemas de logs. Utiliza los procesadores de Observability Pipelines para decidir qué logs son valiosos y cuáles son ruidosos y carecen de interés, antes de enviar tus logs a sus destinos. Puedes utilizar los siguientes procesadores en Observability Pipeline Worker para gestionar tus logs:

• Filtro: añade una consulta para enviar sólo un subconjunto de logs en función de tus condiciones.
• Muestreo: define una frecuencia de muestreo para enviar sólo un subconjunto de tus logs.
• Cuota: impone límites diarios al volumen de datos de log o al número de eventos de log.
• Dedupe: elimina las copias duplicadas de tus logs, por ejemplo, debido a reintentos por problemas de red.
• Mapa: añade, suelta o cambia el nombre de un campo en tus logs.

Selecciona una fuente de logs para empezar:

• Datadog Agent
• Fluentd o Fluent Bit
• Google Pub/Sub
• Cliente HTTP
• Servidor HTTP
• Logstash
• Splunk HTTP Event Collector (HEC)
• Splunk Heavy o Universal Forwarders (TCP)
• Sumo Logic Hosted Collector
• Rsyslog o Syslog-ng

Referencias adicionales

Más enlaces, artículos y documentación útiles:

Estrategias para reducir el volumen de logsDOCUMENTACIÓN