公开(公告)号：WO2021118200A1

公开(公告)日：2021-06-17

申请号：PCT/KR2020/017840

申请日：2020-12-08

Applicant: 한국전자기술연구원

Inventor： 김성제 ,  김제우 ,  윤주홍 ,  박민규 ,  정진우

IPC: G06T9/00 ,  G06T17/20

Abstract: 3D 메시 분할 기반 3D 모델 압축 및 압축해제 시스템 및 방법이 제공된다. 본 발명의 실시예에 따른 3D 메시 분할 기반 3D 모델 압축 및 압축해제 방법은, 3D 메시 데이터를 입력하는 단계; 입력된 3D 메시 데이터를 분할하는 단계; 및 분할된 적어도 둘 이상의 메시 조각을 각각의 인코더 인스턴스를 이용하여 병렬적으로 압축하는 단계;를 포함한다. 이에 의해, 본 발명의 실시예들에 따르면, 3D 메시를 분할하고, 분할된 메시 조각들에 대해 동시에 병렬적으로 압축을 수행함으로써 기존 기술보다 더 빠르게 3D 모델 데이터의 압축을 수행할 수 있다. 또한, 3D 메시를 분할함에 있어서 압축 속도와 효율을 고려한 최적의 분할 알고리즘을 사용함으로써 효율적으로 압축을 수행할 수 있다.

公开(公告)号：WO2023282426A2

公开(公告)日：2023-01-12

申请号：PCT/KR2022/002168

申请日：2022-02-14

Applicant: 한국전자기술연구원

Inventor： 김성제 ,  정진우 ,  이승호 ,  문현철

IPC: H04N7/01 ,  G06T3/40 ,  G06T5/00 ,  G06N20/00 ,  H04M1/72403 ,  G06T5/002 ,  G06T5/009 ,  H04N7/0122 ,  H04N7/0135

Abstract: 본 발명은 지능적 영상 변환을 위한 전자 장치 및 방법에 관한 것이다. 본 발명의 일 실시예에 따른 전자 장치는 영상을 변환하여 재생하는 전자 장치로서, 상기 전자 장치의 파지 상태에 관련된 센서 값을 감지하는 센서부; 및 상기 센서 값에 따른 파지 상태 및 상기 영상의 영상비율에 따라, 상기 영상에 대한 변환을 수행하는 제어부;를 포함하며, 상기 제어부는, 상기 영상의 내용을 유지하면서 화질을 개선하는 제1 변환, 상기 영상의 내용에 새로운 영상 내용을 추가 합성하는 제2 변환, 및 상기 영상의 내용에서 적어도 일부분을 확대하면서 화질을 개선하는 제3 변환 중 적어도 하나의 변환을 수행한다.

公开(公告)号：WO2023282425A2

公开(公告)日：2023-01-12

申请号：PCT/KR2022/002166

申请日：2022-02-14

Applicant: 한국전자기술연구원

Inventor： 김성제 ,  정진우 ,  이승호 ,  문현철

IPC: H04N7/01 ,  H04N21/2662 ,  H04N21/462 ,  G06V40/16 ,  G06N20/00 ,  G06F18/00 ,  H04N21/4621 ,  H04N7/0117

Abstract: 본 발명은 지능적 가로-세로 영상 변환을 위한 전자 장치, 시스템 및 방법에 관한 것이다. 본 발명의 일 실시예에 따른 전자 장치는 단말이 가로 보다 세로가 더 긴 화면비율의 상태인 경우에 세로 보다 가로가 더 긴 제1 영상비율의 영상을 확대 재생하도록 상기 영상에 대한 정보를 포함한 비트스트림을 상기 단말에 전송하는 전자 장치로서, 상기 영상의 프레임마다 해당 프레임 영상의 컨텐츠를 분석하여 해당 프레임 영상의 일부에 해당하는 재생 영역을 산출하는 분석부; 상기 영상을 다수의 소단위로 분리하고 영상의 컨텐츠 종류 별로 기 학습된 다수의 AI(artificial intelligence) 모델 중에서 해당 소단위 내 영상의 컨텐츠에 따라 소단위 별로 적용되는 최적 AI 모델을 선택하는 선택부; 및 상기 영상, 상기 재생 영역 및 상기 최적 AI 모델에 대한 정보를 각각 포함하는 상기 비트스트림을 생성하는 생성부;를 포함한다.

公开(公告)号：WO2022045401A1

公开(公告)日：2022-03-03

申请号：PCT/KR2020/011528

申请日：2020-08-28

Applicant: 한국전자기술연구원

Inventor： 김성제 ,  정진우 ,  최병호 ,  홍민수 ,  이승호

IPC: H04N19/13 ,  H04N19/124 ,  H04N19/625 ,  H04N19/176 ,  H04N19/423 ,  H04N19/70 ,  G06N3/063 ,  G06T9/00

Abstract: 본 발명은 딥러닝 가속 장치에 관한 것으로, 본 발명에 따른 딥러닝 가속 장치는 딥러닝 네트워크 모델 데이터를 인코딩/디코딩 할 때 전체 데이터가 아닌 레이어 등 특정 단위로 필요한 만큼만 인코딩/디코딩을 수행함으로써 전체 데이터를 외부 메모리에 저장하거나 불러오면서 소모되는 전력을 절약할 수 있는 효과가 있다. 또한 멀티미디어 비트스트림의 부가정보 영역에 딥러닝 네트워크 모델을 함께 포함시켜 전송할 수 있으므로 딥러닝 모델 데이터의 관리가 용이하며, 프레임, 신, 픽쳐 단위로 딥러닝 네트워크 모델을 적용할 수 있으므로 딥러닝 성능 또한 향상시키며 정확한 딥러닝 네트워크 모델 적용이 가능한 장점이 있다.

公开(公告)号：KR102242334B1

公开(公告)日：2021-04-20

申请号：KR1020190167488

申请日：2019-12-16

Applicant: 한국전자기술연구원

Inventor： 정진우 ,  안하은 ,  김제우

IPC: H04N7/01 ,  H04N5/262

Abstract: 고해상도비디오영상에대하여고품질, 고속으로프레임보간을수행하는딥러닝에기반프레임율 고속변환방법및 장치가제공된다. 본발명의실시예에따른데이터변형방법은프레임보간을위한중간프레임을생성하는인공지능모델의학습에이용될연속하는입력영상들을입력받는단계; 입력된입력영상들의영상값을변경하여, 변형된영상들을생성하는제1 생성단계; 입력된입력영상들의중간프레임의영상값을변경하여, 변형된영상들의중간프레임을생성하는제2 생성단계;를포함한다. 이에의해, 4K 프레임과같은고해상도영상을고속으로보간이가능하며, Fade-in/out, 조명변화, 줌영상에강인하게학습데이터변형을수행하여이런다양한영상에서도정확한광학흐름지도를생성해낼 수있게하여, 고해상도영상에대한고속의강인한프레임보간이가능해진다.

公开(公告)号：KR102154407B1

公开(公告)日：2020-09-09

申请号：KR1020180140511

申请日：2018-11-15

Applicant: 한국전자기술연구원

Inventor： 김용환 ,  간호약간저릭 ,  정진우

IPC: H04N19/55 ,  H04N19/117 ,  H04N19/70 ,  H04N19/172 ,  H04N19/119

公开(公告)号：KR102242343B1

公开(公告)日：2021-04-20

申请号：KR1020190137132

申请日：2019-10-31

Applicant: 한국전자기술연구원

Inventor： 정진우 ,  안하은 ,  김제우

IPC: H04N7/01 ,  H04N21/2343 ,  H04N21/4402

Abstract: 고해상도비디오영상에대하여고품질, 고속으로프레임보간을수행하기위한방안으로, 입력고해상도영상을저해상도영상으로변환하여고속으로광학흐름지도를생성하고이를원본고해상도로복원하여고해상도영상을고속으로보간하는동영상프레임율 고속변환방법및 장치가제공된다. 본발명의실시예에따른, 동영상프레임율 변환방법은시간적으로연속된고해상도의프레임들로부터생성한저해상도의프레임들들로광학흐름을예측하여, 저해상도의광학흐름지도들을생성하는제1 생성단계; 저해상도의광학흐름지도들의해상도를단계적으로높이면서, 고해상도의중간프레임들을생성하는제2 생성단계; 생성된고해상도의중간프레임들을블렌딩하여, 최종보간프레임을생성하는제3 생성단계:를포함한다. 이에의해, 입력고해상도영상을저해상도영상으로변환하여고속으로광학흐름지도를생성하고이를원본고해상도로복원하여고해상도영상을보간함으로써, 4K와같은고해상도비디오영상에대하여실시간성을요구하는시스템환경에서도고품질, 고속으로프레임보간을수행할수 있게된다.