Real-time mesh deformation simulation of aluminum cans using hand tracking on smart glasses
제목 : 스마트글래스 기반 손 추적을 활용한 알루미늄 캔의 실시간 메쉬 변형 시뮬레이션
류주연* 김종현*
(* : 인하대학교 소프트웨어융합대학 디자인테크놀로지학과)
한국컴퓨터정보학회 동계학술대회 2026년
제목 : 스마트글래스 기반 손 추적을 활용한 알루미늄 캔의 실시간 메쉬 변형 시뮬레이션
류주연* 김종현*
(* : 인하대학교 소프트웨어융합대학 디자인테크놀로지학과)
한국컴퓨터정보학회 동계학술대회 2026년
Abstract : 본 연구에서는 스마트글래스 환경에서 손 추적(Hand Tracking)기반의 실시간 메쉬 변형 시스템을 제안한다. 사용자는 가상의 알루미늄 캔을 손으로 잡고 손가락을 굽히는 자연스러운 제스처를 통해 캔 표면을 실시간으로 찌그러뜨릴 수 있다. 시스템은 각 손가락의 굽힘 정도(curl)와 엄지의 pinch 거리 변화를 입력 강도로 변환하고, 접촉점 주변의 정점들을 가우시안 감쇠 함수에 따라 법선 방향으로 이동시켜 국소적 버클링 변형을 생성한다. Unity와 C#을 기반으로 구현된 본 시스템은 4개의 독립적인 캔 오브젝트에 대해 런타임 메쉬 인스턴싱을 적용하여 상호 간섭 없이 동시 변형을 지원한다. 정성적 실험을 통해 손 움직임에 대한 즉각적인 시각적 피드백이 확인되었으며, 이는 스마트 글래스에서의 촉각적 상호작용 경험을 향상시킬 수 있는 기반 기술로 활용될 수있다.
[paper]