Research

3차원 디지털 가상 휴먼 (3D Digital Virtual Human)

  • 디지털 가상 휴먼 기술은 이미지나 비디오로부터 사람의 자세와 형상을 예측하여 장면과 상황을 이해하거나, 3차원 공간에서 사람들이 주변 환경과 상호작용하는 다양한 상황을 모델링하고 생성하는 3차원 컴퓨터비전 분야 연구입니다. 3차원 공간에서 주위와 상호작용하면서 자연스럽게 움직이는 사람들을 생성하는 기술은 메타버스, VR/AR, 디지털트윈, 게임 캐릭터 설계, 영화/방송미디어콘텐츠 제작 등의 다양한 응용에 적용할 수 있습니다.

  • 우리 연구실의 디지털 휴먼 연구는 현재 아래와 같은 주제들로 나뉘어 진행되고 있습니다.

3차원 자세 및 형상 예측
(3D Pose and Shape Estimation)

이미지나 비디오 입력으로부터 2차원/3차원 사람의 자세와 형상을 예측합니다. 여러 사람들이 모인 상황에서 사람들의 자세와 형상을 동시예측이나 비정상적인 상황에서의 사람의 자세 예측을 통해서 장면을 분석하고 이해합니다.

모션 생성 및 모델링
(Motion Synthesis and Modeling)

3차원 공간에서 주변 사물과의 접촉이나 상황을 인식하여 사실적인 움직임과 행동을 모델링하고 생성합니다.

극사실적인 3차원 장면 생성
(Photorealistic 3D Scene Synthesis)

Neural rendering 등을 이용하여 사람의 의상이나 외형, 그리고 주위 공간을 사실적인 3차원 영상으로 생성합니다..

신뢰성 있는 인공지능 (Trustworthy AI)

  • 기술에 대한 신뢰는 그 기술이 어떻게 동작하는지에 대한 이해를 전제로 합니다. Trustworthy AI는 신경망이 내린 결정에 대한 이유에 대한 이해와 분석을 통해 신뢰성과 정확성을 모두 갖춘 신경망을 개발하는 연구분야입니다. 우리 연구실에서는 심층 신경망을 설명가능하고 강인하게 만들기 위해 아래와 같은 연구들을 진행하고 있습니다.

신경망의 적대적 강인성 분석
(Understanding the adversarial robustness of neural networks)

신경망은 적대적 섭동(adversarial perturbation)으로 변형된 입력을 제대로 예측하지 못합니다. 이에 대한 원인을 분석하고 이해하여 강인한 신경망을 설계합니다.

신경망에 대한 강인한 설명 기법
(Robust explanation of neural networks)

금융, 의료, 자율주행 등과 같은 사람의 생명이나 돈에 직접 관련된 분야에 AI를 사용하기 위해서는 AI의 판단에 대해 사람이 이해할 수 있는 시각적인 설명 방법을 개발합니다.

진행 중인 연구 과제 (Current Research Grants)

  • Development of an AI technique for creating hyper-realistic 3D digital humans that interact with a 3D virtual space environment from sentence descriptions (문장 묘사로부터 3차원 가상공간 환경과 상호작용하는 극사실적인 디지털 휴먼을 생성하는 AI 기술 개발), 중견연구, NRF, Mar. 2022 - Feb. 2026

  • AI 혁신 허브, IITP, Jul. 2021 - Dec. 2025