TruLens Eval

Supported OS Linux Windows Mac OS

marketplace

개요

TruLens Eval은 피드백 함수를 사용하여 LLM 기반 애플리케이션의 품질과 효과를 객관적으로 측정할 수 있도록 지원하는 소프트웨어입니다. 피드백 함수는 입력, 출력 및 중간 결과의 품질을 프로그래밍 방식으로 평가하여 실험 평가를 신속하게 진행하고 확장할 수 있도록 지원합니다.

TruLens Eval 통합을 통해 다음을 할 수 있습니다.

  • SQLAlchemy 호환 데이터베이스에서 데이터를 가져오고 Datadog에 레코드와 피드백을 전송합니다.
  • 포함된 대시보드에서 LLM 애플리케이션 성능을 시각화하여 여러 LLM 애플리케이션 성능, 비용 등을 비교하는 등의 작업을 합니다.

지원

지원이나 기능 요청이 있을 경우 다음 채널로 Crest Data에 연락하세요.

참고 자료

기타 유용한 문서, 링크 및 기사:


이 애플리케이션은 Datadog Marketplace를 통해 제공되며 Datadog Technology Partner가 지원합니다. 사용하려면 Marketplace에서 구매하세요.