실시간 비디오 스타일 전이 기법에 관한 연구 (Real-time Style Transfer for Video)

서지정보

· 발행기관 : (사)한국스마트미디어학회
· 수록지 정보 : 스마트미디어저널 / 5권 / 4호 / 63 ~ 68페이지
· 저자명 : 서상현

초록

텍스처전이(Texture Transfer) 기법은 타겟영상의 고주파 성분인 텍스쳐를 소스영상에 적용시키는 영상처리 방법이다. 이텍스쳐 전이기법은 입력 영상에 표현되고 있는 질감 등의 스타일을 대상 영상에 전이시키는데 사용 될 수 있다. 본 연구에서는이러한 텍스쳐 전이기법을 비디오에 적용시키기 위한 방법을 제안한다. 특히 동영상에 적용시키기 위한 실시간 병렬 처리 알고리즘을 제안한다. 이를 위해서 기존 텍스쳐 전이기법에 사용되는 커널의 모양을 변경하여 병렬화가 가능하도록 하였으며, 동영상 적용 시 발생하는 시간적 일관성문제를 해결하기 위한 방법으로 비디오 프레임 영상의 다중해상도를 사용한 광류측정법을제안하여 적용함으로써 실시간 비디오 처리를 가능하게 하였다.

영어초록

Texture transfer is a method to transfer the texture of an input image into a target image, and is also used fortransferring artistic style of the input image. This study presents a real-time texture transfer for generating artisticstyle video. In order to enhance performance, this paper proposes a parallel framework using T-shape kernel usedin general texture transfer on GPU. To accelerate motion computation time which is necessarily required formaintaining temporal coherence, a multi-scaled motion field is proposed in parallel concept. Through theseapproach, an artistic texture transfer for video with a real-time performance is archived.

참고자료

· 없음