모델이 읽을 글 · 이벤트 · 기록
한 번의 호출로 전부 판단한다 · 답은 정해진 것 중에서만
아직 판단하지 않았어요
「판단」을 누르면 질문마다 답과 확률 분포가 나옵니다.
고객 글 유형 100건(애매하게 쓴 글 20건 포함) · 질문 「이 고객 글의 유형은?」 · 2026-10-06
90% 아래를 사람에게 넘기면 100건 중 41건을 보고, 그 안에 오답 10/19건이 든다.
90% 아래를 사람에게 넘기면 100건 중 7건을 보고, 그 안에 오답 3/6건이 든다.
「가르기」는 틀린 답(또는 애매한 글)이 나머지보다 확률이 낮게 나올 확률입니다. 0.5 면 확률이 그것과 무관하고 1 이면 완벽히 가릅니다. 확률은 틀린 답은 꽤 가르지만, 두 라벨이 모두 맞는 애매한 글은 잘 못 가릅니다 — 모델이 둘 중 하나를 자신 있게 고르기 때문입니다. 확률은 보정 전 원시값입니다.