公开(公告)号：KR102242334B1

公开(公告)日：2021-04-20

申请号：KR1020190167488

申请日：2019-12-16

Applicant: 한국전자기술연구원

Inventor： 정진우 ,  안하은 ,  김제우

IPC: H04N7/01 ,  H04N5/262

Abstract: 고해상도비디오영상에대하여고품질, 고속으로프레임보간을수행하는딥러닝에기반프레임율 고속변환방법및 장치가제공된다. 본발명의실시예에따른데이터변형방법은프레임보간을위한중간프레임을생성하는인공지능모델의학습에이용될연속하는입력영상들을입력받는단계; 입력된입력영상들의영상값을변경하여, 변형된영상들을생성하는제1 생성단계; 입력된입력영상들의중간프레임의영상값을변경하여, 변형된영상들의중간프레임을생성하는제2 생성단계;를포함한다. 이에의해, 4K 프레임과같은고해상도영상을고속으로보간이가능하며, Fade-in/out, 조명변화, 줌영상에강인하게학습데이터변형을수행하여이런다양한영상에서도정확한광학흐름지도를생성해낼 수있게하여, 고해상도영상에대한고속의강인한프레임보간이가능해진다.

公开(公告)号：KR102242343B1

公开(公告)日：2021-04-20

申请号：KR1020190137132

申请日：2019-10-31

Applicant: 한국전자기술연구원

Inventor： 정진우 ,  안하은 ,  김제우

IPC: H04N7/01 ,  H04N21/2343 ,  H04N21/4402

Abstract: 고해상도비디오영상에대하여고품질, 고속으로프레임보간을수행하기위한방안으로, 입력고해상도영상을저해상도영상으로변환하여고속으로광학흐름지도를생성하고이를원본고해상도로복원하여고해상도영상을고속으로보간하는동영상프레임율 고속변환방법및 장치가제공된다. 본발명의실시예에따른, 동영상프레임율 변환방법은시간적으로연속된고해상도의프레임들로부터생성한저해상도의프레임들들로광학흐름을예측하여, 저해상도의광학흐름지도들을생성하는제1 생성단계; 저해상도의광학흐름지도들의해상도를단계적으로높이면서, 고해상도의중간프레임들을생성하는제2 생성단계; 생성된고해상도의중간프레임들을블렌딩하여, 최종보간프레임을생성하는제3 생성단계:를포함한다. 이에의해, 입력고해상도영상을저해상도영상으로변환하여고속으로광학흐름지도를생성하고이를원본고해상도로복원하여고해상도영상을보간함으로써, 4K와같은고해상도비디오영상에대하여실시간성을요구하는시스템환경에서도고품질, 고속으로프레임보간을수행할수 있게된다.