메뉴 건너뛰기
소속 기관 / 학교 인증
인증하면 논문, 학술자료 등을  무료로 열람할 수 있어요.
한국대학교, 누리자동차, 시립도서관 등 나의 기관을 확인해보세요
(국내 대학 90% 이상 구독 중)
고객센터 ENG
주제분류

거대언어모델을 활용한 응답 자동평가에서 모델 및 리커트 척도 설정이 미치는 영향 The Impact of Model and Likert Scale Settings on Automatic Response Evaluation using Large Language Models

논문 기본 정보

저자정보
(서울대학교) (서울대학교)
저널정보
Korean Institute of Information Scientists and Engineers 한국정보과학회 학술발표논문집 한국정보과학회 2025 한국컴퓨터종합학술대회 논문집
발행연도
수록면
1,096 - 1,098 (3page)
오류 신고하기

피인용 0

거대언어모델을 활용한 응답 자동평가에서 모델 및 리커트 척도 설정이 미치는 영향
검색

    초록·키워드

    거대언어모델(Large Language Model, LLM)을 활용하여 다른 LLM의 응답을 평가하는 방식은 크게 1) 두 개의 응답을 비교하여 더 우수한 것을 선택하는 쌍대 비교(pairwise comparison)와 2) 단일 응답에 대해 점 수를 부여하는 단일 평가(direct scoring)로 구분된다. 그러나 LLM 기반 평가에는 다양한 편향이 존재하며, 특히 단일 평가 방식에서는 Likert 척도 설정에 따라 결과가 달라질 수 있음에도 불구하고 이에 대한 체계적 인 연구는 부족한 실정이다 ... 전체 초록 보기

    최근 본 자료 전체보기

      UCI(KEPA) : I410-151-25-02-093746803