인문학
사회과학
자연과학
공학
의약학
농수해양학
예술체육학
복합학
DBpia AI
AI 에이전트
AI 아이디어
AI 리더
AI 뷰어
Citeasy
크롬 서지관리 다운로드
지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 저자정보
피인용 0
초록·키워드
최근 멀티모달 대규모 언어 모델이 발전하면서 다양한 멀티모달 태스크에서 높은 성능을 발휘하고 있다. 하지만 이미지와 텍스트의 암묵적 연결성을 추론해야 하는 혐오 밈 탐지 태스크에서는 여전히 낮은 성능을 보여주고 있다. 따라서 본 연구에서는 기존 멀티모달 대규모 언어 모델이 어려움을 겪고 있는 혐오 밈 탐지 태스크를 수행하기 위해 CLIP 기반 이미지 캡션 방법론을 제안한다. 제안하고자 하는 방법론에서는 다양한 캡션의 생성 및 요약, 그리고 CLIP 임베딩 유사도 점수 기반 캡션 추출 과정을 통해 이미지 전체의 상황 및 문맥 정보를 담고 이미지와 텍스트의 암묵적 연결성에 대한 추론 성능을 높이고자한다. 해당 방법론을 적용한 결과, InstructBLIP-Flan-T5-xl, InstructBLIP-Flan-T5-xxl 모델이 각각 3.4%, 1.0%의 정확도 향상을 기록하여 본 연구에서 제안한 방법론이 효과 있었음을 보였다.
본문·목차
인공지능 문자 인식 모델을 통해 추출된 텍스트로, 일부 오타나 오류가 포함될 수 있으나 지속적으로 개선 중입니다.
오류를 발견하셨다면 해당 부분을 드래그한 후 ' 를 통해 신고해주세요.
오류를 발견하셨다면 해당 부분을 드래그한 후 ' 를 통해 신고해주세요.
최근 본 자료 전체보기
UCI(KEPA) : I410-151-25-02-092460788
