Présentation

Les évaluations gérées sont des outils intégrés pour évaluer votre application LLM. Agent Observability associe les évaluations à des spans individuels. spans individuels afin que vous puissiez voir les entrées et les sorties qui ont conduit à une évaluation spécifique.

En savoir plus sur les exigences de compatibilité.

Créer de nouvelles évaluations

1. Accédez à AI Observability > Evaluations.
2. Cliquez sur le bouton Create Evaluation dans le coin supérieur droit.
3. Sélectionnez une évaluation gérée spécifique. Cela ouvrira la fenêtre de l’éditeur d’évaluation.

Après avoir cliqué sur Save and Publish, l’évaluation est mise en ligne. Alternativement, vous pouvez Save as Draft et les modifier ou les activer plus tard.

Modifier les évaluations existantes

1. Accédez à AI Observability > Evaluations.
2. Survolez l’évaluation que vous souhaitez modifier et cliquez sur le bouton Edit.

Évaluations gérées prises en charge

• Inadéquation linguistique - Signale les réponses rédigées dans une langue différente de celle de l’entrée de l’utilisateur
• Analyse des données sensibles - Signale la présence d’informations sensibles ou réglementées dans les entrées ou sorties du modèle

Pour aller plus loin

Documentation, liens et articles supplémentaires utiles:

Obtenez une visibilité sur les workflows des Agents Strands avec Datadog LLM Observability.BLOG En savoir plus sur les termes et concepts d'Agent Observability.DOCUMENTATION Apprenez à configurer Agent Observability.DOCUMENTATION