Compatibilidad de la evaluación

Este producto no es compatible con el sitio Datadog seleccionado. ().

Compatibilidad de la evaluación

Los proveedores de LLM de terceros compatibles son OpenAI, Azure OpenAI, Anthropic, Amazon Bedrock, Vertex AI y AI Gateway.

Evaluaciones gestionadas

Las evaluaciones gestionadas son compatibles con las siguientes configuraciones.

EvaluaciónVersión de DD-traceProveedor de LLMTramo aplicable
Alucinaciónv2.18+OpenAISolo LLM
Desajuste lingüísticoTotalmente compatibleAutoalojadoTodos los tipos de tramo

Evaluaciones personalizadas de LLM como evaluador

Las evaluaciones personalizadas de LLM como evaluador son compatibles con las siguientes configuraciones.

EvaluaciónVersión de DD-traceProveedor de LLMTramo aplicable
BooleanoTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
PuntuaciónTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
CategóricoTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
JSONTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo

Plantilla de evaluaciones de LLM como evaluador

Las plantillas existentes para las evaluaciones personalizadas de LLM como evaluador son compatibles con las siguientes configuraciones.

EvaluaciónVersión de DD-traceProveedor de LLMTramo aplicable
Falta de respuestaTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
SentimientoTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
ToxicidadTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
Inyección de promptsTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
Relevancia del temaTotalmente compatibleTodos los proveedores externos de LLMTodos los tipos de tramo
Selección de herramientasv3.12+Todos los proveedores externos de LLMSolo LLM
Adecuación del argumento de la herramientav3.12+Todos los proveedores externos de LLMSolo LLM
Cumplimiento de objetivosTotalmente compatibleTodos los proveedores externos de LLMSolo LLM