Core Concepts
아이콘 제스처의 의미는 정보적 평가를 통해 결정된다. 정보적 평가는 제스처의 시각적 아이콘 모델에 대한 지각적 분류를 통해 이루어진다. 이를 통해 제스처는 언어적 수준으로 격상되어 언어적 내용과 상호작용할 수 있게 된다.
Abstract
이 논문은 아이콘 제스처의 의미론을 다룬다. 아이콘 제스처의 "의미"는 정보적 평가에 의해 결정된다. 정보적 평가는 제스처의 시각적 아이콘 모델에 대한 지각적 분류를 통해 이루어진다. 이를 통해 제스처는 언어적 수준으로 격상되어 언어적 내용과 상호작용할 수 있게 된다.
제스처 의미론은 운동학적 제스처 표현, 모델 이론적 평가, 동적 의미론 체계에서의 추론적 해석을 포괄한다. 운동학적 제스처 표현은 벡터 공간 모델을 통해 해석된다. 이 모델은 제스처 공간을 표현하고 제스처 형태를 벡터 시퀀스로 매핑한다. 지각적 분류는 확장된 예시화(extemplification)를 통해 이루어지며, 이를 통해 제스처 의미가 준-언어적 수준으로 격상된다. 이렇게 격상된 제스처 의미는 어휘 지식에 의해 주도되는 추론을 통해 언어적 내용과 상호작용한다.
이러한 아이콘 제스처 의미론은 기존의 레이블링 이론과 공간 이론의 한계를 극복하고 이들을 통합하는 것을 목표로 한다. 레이블링 이론은 제스처에 의미 술어를 부여하지만 이는 임의적이다. 공간 이론은 제스처의 공간적 구조를 모델링하지만 이로부터 해석을 도출하는 계산 절차가 제공되지 않는다. 본 연구는 이러한 한계를 극복하고자 한다.
Stats
"제스처의 "의미"는 정보적 평가에 의해 결정된다."
"정보적 평가는 제스처의 시각적 아이콘 모델에 대한 지각적 분류를 통해 이루어진다."
"이를 통해 제스처는 언어적 수준으로 격상되어 언어적 내용과 상호작용할 수 있게 된다."
Quotes
"as we see them, we see something in them."
"So You Think Gestures are Nonverbal?"