메뉴 건너뛰기
소속 기관 / 학교 인증
인증하면 논문, 학술자료 등을  무료로 열람할 수 있어요.
한국대학교, 누리자동차, 시립도서관 등 나의 기관을 확인해보세요
(국내 대학 90% 이상 구독 중)
고객센터 ENG
주제분류

추천
검색
질문

논문 기본 정보

자료유형
학술저널
저자정보
(연세대학교) (연세대학교) (연세대학교)
저널정보
한국멀티미디어학회 멀티미디어학회논문지 멀티미디어학회논문지 제27권 제7호
발행연도
수록면
816 - 824 (9page)
DOI
10.9717/kmms.2024.27.7.816

이용수

표지
📌
연구주제
📖
연구배경
🔬
연구방법
이 논문의 연구방법이 궁금하신가요?
🏆
연구결과
이 논문의 연구결과가 궁금하신가요?
AI에게 요청하기
추천
검색
질문

초록· 키워드

Existing sign language translation research has improved performance by utilizing glosses in sign language datasets. However, due to the limitations of manually annotating glosses, gloss-free models have been proposed. Since these approaches do not teach glosses in a supervised manner, the model must infer glosses indirectly by utilizing spatially detailed information. However, previous studies have been limited by their inability to provide three-dimensional information of real-world space. To tackle this issue, we propose Depth-GASLT, a new architecture that estimates depth information from 2D sign language images and incorporates it to reflect three-dimensional position of the hands. Our method leverages depth information to enhance the translation process by accurately capturing the spatial nuances of hand movements in sign language. To demonstrate the effectiveness of our method, we conduct experiments on the PHEONIX-14 dataset and show that our method outperform the baseline model by 0.45 points based on the BLEU-4 score. In addition, the combining experiment showed that the element-wise combining method was effective. The results emphasize the significance of three-dimensional information in sign language translation, and are expected to contribute as a basis for effectively reflecting it.
상세정보 수정요청해당 페이지 내 제목·저자·목차·페이지
정보가 잘못된 경우 알려주세요!

목차

  1. ABSTRACT
  2. 1. 서론
  3. 2. 관련 연구
  4. 3. 방법론
  5. 4. 실험 결과 및 고찰
  6. 5. 결론
  7. REFERENCE

참고문헌

참고문헌 신청

최근 본 자료

전체보기
UCI(KEPA) : I410-151-24-02-090334093