Skip to content

[FEATURE] 인공지능 응답 품질 측정 및 모니터링 #14

Description

@wonjun0120

제안 배경

인공지능이 생성하는 응답에 대한 품질 측정에 대한 모니터링이 필요합니다
이를 통해 프롬프트를 업데이트하거나, 모델을 업데이트하는 작업이 필요합니다

제안 내용

인공지능이 생성하는 내용을 langfuse로 트래킹할 수 있으나,
품질에 대한 측정이 없는 상황입니다.

품질에 초점을 맞추고 이를 측정하고 평가할 수 있는 방법이 필요합니다.

완료 기준 (Acceptance Criteria)

  • langfuse 및 llm 모니터링 확인
  • llm 응답 품질 평가 방법 조사 및 적용
  • 사용자의 응답 품질 평가 시스템 (좋아요, 싫어요)
  • 응답 품질 평가 결과 모니터링

대안

No response

우선순위

P2-보통

Metadata

Metadata

Assignees

Labels

Fields

No fields configured for Feature.

Projects

No projects

Milestone

No milestone

Relationships

None yet

Development

No branches or pull requests

Issue actions