Información general

La integración de Datadog con Google BigQuery proporciona una monitorización de tus cargas de trabajo de análisis de datos.

Al conectar BigQuery con Datadog (mediante la integración con Google Cloud Platform), obtendrás información en tiempo real sobre el rendimiento de las consultas, el consumo de recursos y los generadores de costes.

Esta integración te permite realizar un seguimiento de métricas críticas, como los tiempos de finalización de trabajos, el uso de ranuras y los bytes procesados, lo que te permite identificar latencias elevadas durante la ejecución de trabajos de BigQuery.

Configuración

Instalación

Si aún no lo has hecho, configura la integración Google Cloud Platform. No es necesario realizar ningún otro paso de instalación.

Monitorización ampliada de BigQuery

La monitorización ampliada de BigQuery proporciona una visibilidad granular de tus entornos BigQuery.

Consulta la documentación de la integración Google Cloud para obtener instrucciones de configuración detalladas.

Recopilación de logs

Los logs de Google BigQuery se recopilan con Google Cloud Logging y se envían a una tarea de Dataflow a través de un tema Cloud Pub/Sub. Si aún no lo has hecho, configura la generación de logs con la plantilla Dataflow de Datadog.

Una vez hecho esto, exporta tus logs de Google BigQuery desde Google Cloud Logging al tema Pub/Sub:

1. Ve a la página de Google Cloud Logging y filtra los logs de Google BigQuery.
2. Haz clic en Create Export (Crear exportación) y asigna un nombre al sumidero.
3. Elige “Cloud Pub/Sub” como destino y selecciona el tema Pub/Sub creado para tal fin. Nota: El tema Pub/Sub puede encontrarse en un proyecto diferente.
4. Haz clic en Create (Crear) y espera a que aparezca el mensaje de confirmación.

Datos recopilados

Métricas

Eventos

La integración Google BigQuery no incluye eventos.

Checks de servicio

La integración Google BigQuery no incluye checks de servicios.

Solucionar problemas

¿Necesitas ayuda? Ponte en contacto con asistencia técnica de Datadog.