HandWind-Sim++: A web-based cloth simulation for learning-based gesture-controlled wind interaction
제목 : 학습 기반 제스처 제어 바람 상호작용을 위한 웹 기반 천 시뮬레이션
오예송* 김종현*
(* : 인하대학교 소프트웨어융합대학 디자인테크놀로지학과)
한국컴퓨터정보학회 동계학술대회 2026년
제목 : 학습 기반 제스처 제어 바람 상호작용을 위한 웹 기반 천 시뮬레이션
오예송* 김종현*
(* : 인하대학교 소프트웨어융합대학 디자인테크놀로지학과)
한국컴퓨터정보학회 동계학술대회 2026년
Abstract : 본 논문에서는 웹 환경에서 사용자의 손동작에 따라 실시간으로 반응하는 바람 및 옷감 상호작용 시스템을 제안한다. 물리적 정확성보다 시각적 타당성을 우선시하는 비동기적 데이터 수집 전략을 통해, 다양한 세기의 손동작 영상과 이에 상응하는 옷감의 펄럭임 영상을 데이터셋으로 구축한다. 구축된 옷감의 벡터 필드 데이터로부터 K-Means 클러스터링을 통해 5가지의 대표적인 공기장 템플릿을 추출한다. 실시간 추론 단계에서는 사용자의 연속적인 손동작 시퀀스를 LSTM(Long Short-Term Memory) 모델로 분석하여 가장 적절한 템플릿을 분류하고, 웹소켓을 통해 WebGL 기반의 유체 시뮬레이션과 연동하여 시각화한다. 이를 통해 사용자는 자신의 손 움직임에 따라 실시간으로 변화하는 공기장과 옷감(천)의 상호작용을 직관적으로 경험할 수 있다.
[paper]