인문학
사회과학
자연과학
공학
의약학
농수해양학
예술체육학
복합학
지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
거대언어모델을 활용한 응답 자동평가에서 모델 및 리커트 척도 설정이 미치는 영향 The Impact of Model and Likert Scale Settings on Automatic Response Evaluation using Large Language Models
논문 기본 정보
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers 한국정보과학회 학술발표논문집 한국정보과학회 2025 한국컴퓨터종합학술대회 논문집
- 발행연도
- 2025.7
- 수록면
- 1,096 - 1,098 (3page)
거대언어모델을 활용한 응답 자동평가에서 모델 및 리커트 척도 설정이 미치는 영향
초록·키워드
거대언어모델(Large Language Model, LLM)을 활용하여 다른 LLM의 응답을 평가하는 방식은 크게 1) 두 개의 응답을 비교하여 더 우수한 것을 선택하는 쌍대 비교(pairwise comparison)와 2) 단일 응답에 대해 점 수를 부여하는 단일 평가(direct scoring)로 구분된다. 그러나 LLM 기반 평가에는 다양한 편향이 존재하며, 특히 단일 평가 방식에서는 Likert 척도 설정에 따라 결과가 달라질 수 있음에도 불구하고 이에 대한 체계적 인 연구는 부족한 실정이다 ... 전체 초록 보기
본문·목차
인공지능 문자 인식 모델을 통해 추출된 텍스트로, 일부 오타나 오류가 포함될 수 있으나 지속적으로 개선 중입니다.
오류를 발견하셨다면 해당 부분을 드래그한 후 ' 를 통해 신고해주세요.
오류를 발견하셨다면 해당 부분을 드래그한 후 ' 를 통해 신고해주세요.
최근 본 자료 전체보기
UCI(KEPA) : I410-151-25-02-093746803