Abstract : 본 연구에서는 별도의 고가 햅틱 장비 없이, 일상적으로 사용하는 스마트폰을 햅틱 컨트롤러로 활용한 실시간 상호작용 시스템을 제안한다. 사용자는 스마트폰 화면에서 핀치나 회전 동작을 수행하며, 이러한 입력은 UDP 통신을 통해 Unity 환경의 3D 손 모델에 실시간으로 반영된다. 또한 Unity에서 손과 물체 간 충돌이 발생하면, 스마트폰에 진동과 소리를 전달하여 양방향 햅틱 피드백을 제공한다. 두 대의 스마트폰을 사용해 양손을 독립적으로 제어함으로써, 양손 협업 동작이나 물체 전달 시나리오도 구현할 수 있다. 손 애니메이션 상태를 베이킹한 후 V-HACD 알고리즘을 적용하여 정밀한 콜라이더를 생성함으로써, 보다 현실감 있는 물리적 상호작용도 가능하게 하였다. 수묵화 시뮬레이터와의 연동을 통해 XR, 예술, 원격 조작 등 다양한 분야로의 확장 가능성도 확인하였다. 결과적으로 본 시스템은 누구나 가지고 있는 스마트폰만으로도 직관적이고 비용 효율적인 햅틱 상호작용 환경을 제공한다.

[paper]