Discrepancia de idioma

Este producto no es compatible con el sitio Datadog seleccionado. ().

Esta verificación identifica casos en los que el LLM genera respuestas en un idioma o dialecto diferente al utilizado por el usuario, lo que puede generar confusión o falta de comunicación. Esta verificación garantiza que las respuestas del LLM sean claras, relevantes y apropiadas para las preferencias y necesidades lingüísticas del usuario.

La discrepancia de idioma solo es compatible con prompts de lenguaje natural. Los pares de entrada y salida que consisten principalmente en datos estructurados, como JSON, fragmentos de código o caracteres especiales, no se marcan como discrepancia de idioma.

Afrikáans, albanés, árabe, armenio, azerí, bielorruso, bengalí, bokmal noruego, bosnio, búlgaro, chino, croata, checo, danés, neerlandés, inglés, estonio, finés, francés, georgiano, alemán, griego, guyaratí, hebreo, hindi, húngaro, islandés, indonesio, irlandés, italiano, japonés, kazajo, coreano, letón, lituano, macedonio, malayo, maratí, mongol, nynorsk noruego, persa, polaco, portugués, panyabí, rumano, ruso, serbio, eslovaco, esloveno, español, suajili, sueco, tamil, telugu, tailandés, turco, ucraniano, urdu, vietnamita, yoruba, zulú

Una evaluación de discrepancia de idioma detectada por un modelo de código abierto en Agent Observability
Etapa de evaluaciónMétodo de evaluaciónDefinición de evaluación
Evaluado en entrada y salidaEvaluado mediante modelo de código abiertoLa discrepancia de idioma marca si cada par de solicitud-respuesta demuestra que la aplicación de LLM respondió a la pregunta del usuario en el mismo idioma que utilizó el usuario.