A web 3D interaction system for real-time pose estimation and smoke simulation using an RGB camera
제목 : RGB 카메라 기반 실시간 포즈 추정과 연기 시뮬레이션의 웹 3D 인터랙션 시스템
권유빈* 김종현*
(* : 인하대학교 소프트웨어융합대학 디자인테크놀로지학과)
한국컴퓨터정보학회 하계학술대회 2025년
제목 : RGB 카메라 기반 실시간 포즈 추정과 연기 시뮬레이션의 웹 3D 인터랙션 시스템
권유빈* 김종현*
(* : 인하대학교 소프트웨어융합대학 디자인테크놀로지학과)
한국컴퓨터정보학회 하계학술대회 2025년
Abstract : 본 논문에서는 RGB 카메라와 딥러닝 기반의 자세 추정(Pose Estimation) 기술을 활용하여, 사용자와 연기 간의 실시간 상호작용이 가능한 웹 3D 프레임워크를 제안한다. 기존에는 키넥트(Kinect)나 모션 캡처 장비처럼 고가의 복잡한 하드웨어가 필요했지만, 본 연구는 별도의 외부 센서 없이 웹 브라우저 환경에서 사용자 동작을 실시간으로 인식할 수 있도록 구현하였다. 딥러닝을 통해 RGB 카메라만으로도 정밀한 키포인트를 추출하여 사용자 동작을 인식하고, 이를 Three.js 기반의 연기 시뮬레이션과 연동함으로써 브라우저 상에서 직관적이고 자연스러운 실시간 인터랙션을 가능하게 한다. 제안하는 프레임워크는 실시간성과 높은 접근성을 바탕으로 기존 하드웨어의 한계를 극복할 수 있으며, 향후 인터랙티브 퍼포먼스, 예술, 교육 등 다양한 분야에 활용될 수 있다.
[paper]