Utiliza el destino Azure Storage para enviar logs a un bucket de Azure Storage. Si deseas enviar logs a Azure Storage para archivado y rehidratación, debes configurar archivos de logs. Si no deseas rehidratar los logs en Datadog, pase a Configurar el destino para tu pipeline.

Configurar archivos de logs

Este step (UI) / paso (generic) solo es necesario si deseas enviar logs a Azure Storage en formato rehidratable de Datadog para archivado y rehidratación y aún no tienes un archivo de logs de Datadog configurado para Observability Pipelines. Si ya tienes un archivo de logs de Datadog configurado o no deseas rehidratar los logs en Datadog, ve a Configurar el destino para tu pipeline.

Necesitas tener la integración de Azure de Datadog instalada para configurar archivos de logs de Datadog.

Create a storage account

Create an Azure storage account if you don’t already have one.

1. Navigate to Storage accounts.
2. Click Create.
3. Select the subscription name and resource name you want to use.
4. Enter a name for your storage account.
5. Select a region in the dropdown menu.
6. Select Standard performance or Premium account type.
7. Click Next.
8. In the Blob storage section, select Hot or Cool storage.
9. Click Review + create.

Create a storage bucket

1. In your storage account, click Containers under Data storage in the left navigation menu.
2. Click + Container at the top to create a new container.
3. Enter a name for the new container. This name is used later when you set up the Observability Pipelines Azure Storage destination.

Note: Do not set immutability policies because the most recent data might need to be rewritten in rare cases (typically when there is a timeout).

Connect the Azure container to Datadog Log Archives

1. Navigate to Datadog Log Forwarding.
2. Click New archive.
3. Enter a descriptive archive name.
4. Add a query that filters out all logs going through log pipelines so that none of those logs go into this archive. For example, add the query observability_pipelines_read_only_archive, assuming no logs going through the pipeline have that tag added.
5. Select Azure Storage.
6. Select the Azure tenant and client your storage account is in.
7. Enter the name of the storage account.
8. Enter the name of the container you created earlier.
9. Optionally, enter a path.
10. Optionally, set permissions, add tags, and define the maximum scan size for rehydration. See Advanced settings for more information.
11. Click Save.

See the Log Archives documentation for additional information.

Configurar el destino de tu pipeline

Configura el destino de Azure Storage y tus variables de entorno cuando configures un pipeline de logs de archivo. La siguiente información se configura en la interfaz de usuario de pipelines.

1. Introduce el nombre del contenedor Azure que creaste anteriormente.
2. Si lo deseas, introduce un prefijo.
   • Los prefijos son útiles para particionar objetos. Por ejemplo, puedes utilizar un prefijo como clave de objeto para almacenar objetos en un directorio concreto. Si se utiliza un prefijo con este fin, debe terminar en / para que actúe como una ruta de directorio; no se añade automáticamente un / al final.
   • Consulta sintaxis de plantillas si deseas dirigir los logs a diferentes claves de objeto en función de campos específicos de tus logs.
   • Nota: Datadog recomienda empezar los prefijos con el nombre del directorio y sin barra oblicua (/). Por ejemplo, app-logs/ o service-logs/.
3. Opcionalmente, activa el interruptor para activar Buffering Options (Opciones de almacenamiento en búfer).
   Nota: Las opciones de almacenamiento en búfer están en vista previa. Ponte en contacto con tu gestor de cuenta para solicitar acceso.
   • Si se deja desactivado, el tamaño máximo del búfer es de 500 eventos.
   • Si está activado:
     1. Selecciona el tipo de búfer que deseas configurar (Memoria o Disco).
     2. Introduce el tamaño del búfer y selecciona la unidad.

Configurar las variables de entorno

Azure Storage

• Azure connections string to give the Worker access to your Azure Storage bucket.
  • Stored in the environment variable DD_OP_DESTINATION_DATADOG_ARCHIVES_AZURE_BLOB_CONNECTION_STRING.

To get the connection string:

1. Navigate to Azure Storage accounts.
2. Click Access keys under Security and networking in the left navigation menu.
3. Copy the connection string for the storage account and paste it into the Azure connection string field on the Observability Pipelines Worker installation page.

Cómo funciona el destino

Procesamiento de eventos por lotes

Un lote de eventos se descarga cuando se cumple uno de estos parámetros. Consulta lote de eventos para obtener más información.