시청자의 시각적 주의 연구를 통한 시각적 매체에서 비언어 커뮤니케이션의 효과적인 감정 및 상태 정보 전달 연구 -얼굴 표정과 몸짓을 중심으로-

장다윤; 김창원; 김지윤

doi:10.7230/KOSCAS.2022.68.451

추천

검색

질문

자료유형: 학술저널

저자정보: 장다윤 (홍익대학교) 김창원 (홍익대학교) 김지윤 (홍익대학교)

저널정보: 한국만화애니메이션학회 만화애니메이션 연구 만화애니메이션연구 통권 제68호, 2022년

발행연도: 2022.9

수록면: 451 - 481 (31page)

DOI: 10.7230/KOSCAS.2022.68.451

이용수

📌

연구주제

📖

연구배경

🔬

연구방법

🏆

연구결과

초록· 키워드

오류제보하기

사람들은 의사소통할 때 언어적 표현과 비언어적 표현으로 의미를 전달한다. 얼굴 표정과 몸짓은 특정 심리 상태, 반응 및 의도를 표현하고 상대방의 감정을 추론할 수 있는 핵심적인 정보를 전달한다.
신경심리학 연구에서 얼굴 표정은 신경회로를 통해 내적 감정 상태와 연결되어 있어서 표정을 통해 내적 상태 정보를 전달하고 이로 인해 사람들은 무의식적으로 정보를 읽기 위해 상대방의 얼굴을 먼저 본다고 한다. 몸짓이나 자세와 같은 동작 요소들은 심리상태에 따른 움직임의 특징을 가지고 있으며, 팔의 방향이나 위치, 손의 모양이나 동작의 속도 등을 조절하여 감정 및 상태정보를 전달한다.
본 연구에서는 비언어적 의사소통에서 정보를 전달하고 상태 및 감정을 추론할 수 있는 얼굴 표정과 몸짓에 시선이 집중된다는 선행연구를 바탕으로 어떤 요소가 시청자에게 더 중요한 요소인지 알아보았다. 영상매체에서 시청자의 시선이 어디로 집중 및 분산이 되는지 아이트래킹 시선 움직임 실험을 통해 얼굴표정과 몸짓의 상관관계를 분석하였다.
시선 집중도를 알아보기 위한 실험 결과, 얼굴 표정 부분에 시선이 먼저 응시하였으며 이를 통해 표정을 먼저 읽으려고 시도하였다는 것을 알 수 있다. 시각적 관심도를 알아보기 위해 총 응시 횟수를 실험한 결과 시청자는 얼굴 표정을 읽으려는 습관으로 인해 표정이 가려졌어도 시선은 얼굴 표정부분으로 계속 응시했음을 알 수 있다. 시청자들은 얼굴 표정을 통해서 상태 및 감정을 이해하고 파악한다는 선행연구의 결과와 같다. 시청자의 시각적 관심도는 몸짓보다는 얼굴 표정에 있음을 알 수 있다.
기존의 비언어적 표현의 시각적 주의 연구는 캐릭터 혹은 이미지를 실험대상으로 연구하였으며 시각 영상 매체를 분석한 시각적 주의 연구는 부족하다. 본 연구에서는 영상을 보는 시청자의 시각적 주의를 얼굴 표정과 몸짓을 나눠서 비교 분석하였다. 조사한 실증적 연구 결과를 통해 다양한 시각적 매체와 가상 캐릭터 산업, 디지털 콘텐츠 영상 제작에서 효과적인 감정 및 상태표현 정보 전달을 위해 고려할 요소로 참고하고 활용할 수 있다.

People deliver their expression in both verbal and nonverbal ways. Nonverbal expression is the nonverbal communication based expression using the motions of various body parts. The facial expression and gesture show specific mental state, reaction and intention to deliver the core information that enables the counterpart can infer the expresser’s emotion.
According to some of neuro-psychology studies, the facial expression connects to the expresser’s internal emotion state through neuro-circuit making her or his internal state information delivered to her or his counterpart. In any situation, therefore, people look at the counterparts’ faces unconsciously to read the counterparts’ information. Such motional factors as gesture and posture have the motional characters depending on the expresser’s mental state, so that the expresser delivers her or his emotion and state information by controlling her or his arms’ direction or position, hand shape or motion speed and etc.
This study looks into which factors are more important to the audience based on the preceding research, which indicates that the eyes are caught to the facial expression and gesture that deliver the expresser’s information and enable the audience to infer her or his state and emotion. That is, this study analyzes the correlation between the facial expression and gesture based on the test of eye-tracking gaze motion: where the audience’s eyes are caught to and dispersed from.
The test result of the focus level indicates that the eyes are first focusing on the facial expression, which the audiences try to read the expresser’s face by. The total gaze number is tested to look into the visual interest level and the test result shows that the audiences’ eyes keep being caught to the facial expression part due to their habit of trying to read the expresser’s face even after the expresser’s face is blocked. This result is as same as the result of the preceding research, which indicates that the audiences understand and grasp the expresser’s state and emotion through her or his facial expression. According to also the study result based on the eyes’ fixation time test additionally conducted, the visual processing is bigger on the facial expression than gesture to try to read the information through the facial expression. The focus and interest level test indicates that the audiences’ visual interest level is higher on the facial expression than on the gesture.
The preceding research of the visual attention based on nonverbal expression targets the characters and images as its test objects, so that it is insufficient in the visual attention study that analyzes the visual media as nonverbal expression. This study, therefore, divides the audiences’ visual attention into the facial expression and gesture on each video footage to compare and analyze. The practical results of this study can be referred to and used as the factors to consider for efficient delivery of the information of emotion and state expression in digital contents video production.

#비언어적 표현방식 #아이트래킹 #시각적주의 #얼굴표정 #몸짓 #감정 및 상태 정보전달 #Nonverbal Communication #Eye-Tracking #Visual Attention #Facial Expression #Gesture #Delivery of the Emotion and State Information

참고문헌 (0)

참고문헌 신청

참고문헌이 DBpia에서 서비스 중이라면, [참고문헌 신청]을 통해 등록해보세요

함께 읽어보면 좋을 논문

논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!

이 논문의 저자 정보

장다윤

소속기관 홍익대학교

주요연구분야 예술체육학 > 디자인 예술체육학 > 공연매체예술 > 영화

논문수 4 이용수 1,864

김창원

소속기관 홍익대학교

주요연구분야 예술체육학 > 공연매체예술 > 영화

논문수 1 이용수 925

이 논문과 함께 이용한 논문

다양한 딥러닝 알고리즘과 활용

김지원 , 표현아 , 하정우 외 2명 정보과학회지 2015 .08

인공지능과 딥러닝이 가져올 변화

장윤옥 철도저널 2015 .02

자동차 시트 프레임 구조의 내구성 향상 설계에 관한 연구

우창수 , 조현직 , 구정서 외 1명 한국자동차공학회논문집 2004 .07

모바일 텍스트 메시지에 나타난 비언어적 커뮤니케이션 양상의 연구

곽면선 영어영문학 2021 .05

애니메이션 속 캐릭터의 감정에 따른 표정과 몸짓 연구 Ⅲ : 놀람과 공포의 감정에 따른 표정과 몸짓 방법론을 중심으로

김미숙 애니메이션연구 2020 .12

최근 본 자료

전체보기

UCI(KEPA) : I410-ECN-0101-2023-657-000107901

구분	그룹	데이터 항목
AI 학습용 데이터	원문	원문 PDF 파일
AI 학습용 데이터	원문 + 메타 (기본/상세)	원문 PDF 파일 및 서지정보 CSV
대량 구매용 데이터	B2B 구독 방식	특정 자료 한정으로 원문 접근 권한 부여
대량 구매용 데이터	URL 전달 방식	바로 PDF 뷰어를 열람할 수 있는 URL 제공

구분	그룹	데이터 항목
AI 학습용 데이터	기본 메타	발행기관명, 간행물명, 권호명, 권(vol), 호(issue), 통권, 발행연도, 발행월, 논문명, 저자명, 시작페이지, 종료페이지, 전체페이지, 상세페이지URL
상세 메타 데이터	발행기관 메타	발행기관 이명, 영문명, 창립연도, 홈페이지URL, 발행기관 소개
	간행물 메타	부제목, 간행물 유형, ISSN, ISBN, 최초발행연도, 폐간연도, 간행빈도, 발행주기, 등재사항, 이용수, 피인용수, 권호수, 논문수, 표지이미지
	논문 메타	작성 언어, 부제목, 대등제목, 목차, 키워드, 초록, 이미지, 참고문헌, 이용수, 피인용수, 논문활용도, DBpia통합주제분류, KDC분류, DDC분류, 한국연구재단분류, UCI, DOI
	저자 메타	소속기관, 소속부서, 직급, 연구분야, 연구키워드, 이용수, 피인용수, 저자 논문활용도

구분	그룹	데이터 항목
※ 결합형/맞춤형 메타 데이터는 신청 내용에 따라 다양하게 제공 가능
이용순위 정보	주제분야별 많이 이용된 논문	“인문학”에서 많이 이용된 논문 TOP100
	이용기관별 많이 이용된 논문	“중고등학교”에서 많이 이용된 논문 TOP100
	세부기관별 많이 이용된 논문	“서울대학교”에서 많이 이용된 논문 TOP100
	키워드별 많이 이용된 논문	“Chat GPT”에서 많이 이용된 논문 TOP100
키워드 정보	많이 이용된 키워드	특정기간/분야/저널 내 많이 이용된 키워드
	많이 발행된 키워드	특정기간/분야/저널 내 많이 발행된 키워드
	많이 검색된 키워드	특정기간/분야/저널 내 많이 검색된 키워드
	연구 트렌드 키워드	특정 키워드 연관 연구동향 분석 데이터 키워드

논문 기본 정보

초록· 키워드

AI 요약

연구주제

연구배경

연구방법

연구결과

주요내용

목차

참고문헌 (0)

함께 읽어보면 좋을 논문

이 논문의 저자 정보

이 논문과 함께 이용한 논문

최근 본 자료

댓글(0)