Deep learning based color restoration of corrupted black and white facial photos
제목 : 딥러닝 기반 손상된 흑백 얼굴 사진 컬러 복원
신재우* 김종현** 이정* 송창근* 김선정*
(* : 한림대학교, ** : 강남대학교)
한국컴퓨터그래픽스학회논문지 제24권 2호, 2018.6, 1-9페이지
제목 : 딥러닝 기반 손상된 흑백 얼굴 사진 컬러 복원
신재우* 김종현** 이정* 송창근* 김선정*
(* : 한림대학교, ** : 강남대학교)
한국컴퓨터그래픽스학회논문지 제24권 2호, 2018.6, 1-9페이지
Abstract : 본 논문에서는 손상된 흑백 얼굴 이미지를 컬러로 복원하는 방법을 제안한다. 기존 연구에서는 오래된 증명사진처럼 손상된 흑백 사진에 컬러화 작업을 하면 손상된 영역 주변이 잘못 색칠되는 경우가 있었다. 이와 같은 문제를 해결하기 위해 본 논문에서는 입력받은 사진의 손상된 영역을 먼저 복원한 후 그 결과를 바탕으로 컬러화를 수행하는 방법을 제안한다. 본 논문의 제안 방법은 BEGAN(Boundary equilibrium generative adversarial networks) 모델 기반 복원과 CNN(Convolutional neural network) 기반 컬러화의 두 단계로 구성된다. 제안하는 방법은 이미지 복원을 위해 DCGAN(Deep convolutional generative adversarial networks) 모델을 사용한 기존 방법들과 달리 좀 더 선명하고 고해상도의 이미지 복원이 가능한 BEGAN 모델을 사용하고, 그 복원된 흑백 이미지를 바탕으로 컬러화 작업을 수행한다. 최종적으로 다양한 유형의 얼굴 이미지와 마스크에 대한 실험 결과를 통해 기존 연구에 비해 많은 경우에 사실적인 컬러 복원 결과를 보여줄 수 있음을 확인하였다.
[paper]