다중 응답 비교 선택
1. 도구 정의
다중 응답 비교 선택은 동일한 질문에 대해 여러 LLM이 생성한 응답을 비교하고, 그 중 가장 적절한 응답을 선택하거나 우선순위를 매길 때 사용합니다.
2. 도구 사용 방법
2-1. 라벨링 유형 설정(프로젝트 생성)
다중 응답 비교 예시
질문: “강아지 산책은 하루에 몇 번 해야 해요?”“
응답 A: “두 번이 적당합니다”
응답 B: “하루 두 번 이상 산책시키는 것이 좋아요”
→ 선택: 더 구체적이고 친절한 응답 (응답 B)
-
클래스 유형을 '질문'으로 선택한다.
-
해당 '질문'클래스의 속성을 추가하여 입력하고, 위젯은 단일 선택을 선택한다.
-
옵션을 추가하여 LLM 종류에 따라 코드와 이름을 입력한다.
2-1. 라벨링 방법
IN PUT 영역의 우측 상단 라벨 버튼을 클릭하여, 라벨링 영역의 적절한 옵션(ex, gpt, gemini 등)을 선택한다.

Updated 6 days ago