Research
Immersive Video Experience
360VR 동영상, 그리고 이를 넘어서는 6자유도 동영상은 앞으로 사용자에게 실감 넘치는 미디어 경험을 제공할 것입니다. 사람들은 보다 현실적이고 입체적인 환경을 원할 것이고 이러한 실감미디어를 더욱 소비하게 될 것입니다. 그렇다면, 훨씬 커지고 무거워진 이러한 동영상을 스마트폰, VR 기기에 전송하려면 얼마나 압축을 해야 할까요? 사람의 눈은 실감미디어의 화질에 얼마나 민감하게 반응할까요?
Video Coding Standard
동영상을 재생하기 위해서는 미디어 기기(스마트폰, TV, 블랙박스 등)와의 호환성이 필요합니다. 또한 최신 기술을 담아 효율적으로 전송/보관하기 위해서도 특정 포맷을 명시하는 것이 필요합니다. 이를 위하여 MPEG, VCEG의 표준화기구에서는 동영상 부호화 표준을 위하여 매년 국제 표준화 회의를 주도합니다.
우리는 최신 동영상 표준으로 HEVC을 비롯하여, 현재 표준화가 진행중인 VVC(Versatile Video Coding), MPEG-I: Immersive Video, 그리고 동영상을 위한 딥러닝 관련 표준화 프로젝트인 VCM(Video Coding for Machine)등을 연구하고, 국제 표준에 채택할 수 있는 표준특허 및 원천기술을 연구합니다. 또한 미래 산업이 원하는 동영상 표준의 방향이 무엇인지 탐구합니다.
Efficient Deep Learning Model
이제 딥러닝 연구도 단순 영상(picture)에서 동영상(video)로 콘텐츠 범위를 넓히고 있는 추세이며, 딥러닝 모델은 더욱 깊어지고(deep) 커지고(wide) 있습니다. 이는 영상 분류/해석/예측의 정확도를 높이는데 기여하는 반면, 비싸고 거대한 장치를 필요로 하기 때문에 실생활에 쓰이기에는 어려운 점이 많습니다. 따라서 사람들이 쉽게 접하는 스마트폰/자동차/드론/IoT 등의 전력이 제한된 기기에서는 덜 복잡한 딥러닝 모델이 필요할 것입니다. 이에 따라 딥러닝 모델도 압축이 가능한지, 더 빠르게 모델링할 수 있는지 탐구합니다.
Funding
한국전자통신연구원, "머신비전 특성을 고려한 VTM기반 부호화 도구 구현", 2023.5.30 ~ 2023.11.30
정보통신기획평가원(IITP), "3차원 공간 디지털미디어 규격화 기술 개발", 2023.04.01 ~ 2025.12.31
정보통신기획평가원(IITP), "이동형 로봇 기반 실사 메타버스 실감형 비디오의 획득 및 처리 기술 개발", 2022.7.1 ~ 2024.12.31
한국전자통신연구원, "VTM기반 머신비전 부호화 도구 구현", 2022.5.19 ~ 2022.11.30
정보통신기획평가원(IITP), "머신러닝기반 재난정보미디어 텍스트-영상 변환 기술 연구", 2022.4.1 ~ 2023.12.31
정보통신기획평가원(IITP), "객체 가로 비율을 고려한 화면비 변환 기술 연구", 2022.1.1 ~ 2022.12.31
정보통신기획평가원(IITP), "SW중심대학(경북대학교)", 2021.4.1 ~ 2026.12.31
정보통신기획평가원(IITP), "딥러닝 기반 객체 및 배경 인식 기술 연구", 2021.4.1 ~ 2021.12.31
한국연구재단(NRF), "지능융합 소프트웨어 교육연구단"(4단계 BK21), 2020.9.1 ~ 2027.8.31
한국연구재단(NRF), "다목적 비디오 부호화를 위한 초경량화 신경망 연구", 2020.6.1 ~ 2024.5.31
경북대학교, "딥러닝 기반 동영상 인코딩/디코딩 복잡도 제어 기술 연구", 2020.3.1 ~ 2023.2.28
공동연구자/협력기관
(과거/현재 포함, 기관 오름차순)
경희대학교 최기호교수(Video Processing Lab )
경희대학교 황효석교수(AIR Lab )
동아대학교 전동산교수(지능형영상신호처리연구실 )
성균관대학교 류은석교수(Multimedia Computing Systems Laboratory)
세종대학교 이진영교수(Intelligent Visual Computing Lab)
이화여자대학교 강제원교수(정보부호화및처리연구실 )
한양대학교 장의선교수(미디어스미스랩 )
Peking University, Prof. Ronggang Wang(PKU)