Abstract:
A multi-view video scalable coding and decoding methods, and apparatuses thereof are provided to offer various video services to terminals of various environments through intra-estimation in other resolutions of peripheral videos. A multi-view video scalable coding apparatus comprises a base scalability video encoder(21) and plural enlarged scalability video encoders(22-25). The base scalability video encoder divides one base video into multi-layer resolutions through spatial filtering, and performs a scalable video coding for the divided low resolution image frames and at least one high resolution image frame through space time estimation. The plural enlarged scalability video encoders receive and divide self video and at least one other video at the same time into multi-layer resolutions through the spatial filtering. The enlarged scalability video encoders perform a scalable video coding for the divided low resolution image frames through time space estimation, and perform the scalable video coding for the at least one divided high resolution image frames through time space estimation.
Abstract:
본 발명은 다시점 동영상을 부호화 및 복호화하기 위한 방법 및 장치를 제공한다. 본 발명에 따른 다시점 동영상 부호화 방법은, 상기 다시점 동영상을 이루는 각 시점 영상을 다른 시점 영상과 겹쳐지는 영역 및 겹쳐지지 않는 영역으로 분류하는 단계와, 가운데 시점 영상과 상기 겹쳐지지 않는 영역을 조합하여 합성영상을 생성하는 단계와, 상기 합성영상을 제1 부호화 방식에 기반하여 부호화하는 단계와, 상기 합성영상을 기준으로 각 시점 영상의 상기 겹쳐지는 영역의 영상을 제2 부호화 방식에 기반하여 부호화하는 단계를 포함한다. 일실시예에서, 상기 분류 단계는, 상기 다시점 동영상을 이루는 각 시점 영상에 대하여 선정된 다른 시점 영상을 기준으로 하는 변이값을 추정하는 단계와, 상기 추정된 변이값을 이용하여 각 시점 영상을 상기 다른 시점 영상과 겹쳐지는 영역 및 겹쳐지지 않는 영역으로 분류하는 단계를 포함한다. 다시점 동영상, 가운데 시점 영상, 합성 영상, 부호화, 복호화
Abstract:
A method and an apparatus for encoding a multi-view moving picture are provided to down-sample the multi-view moving picture and encode the down-sampled moving picture and then to improve a compression rate effectively. A subtracter(406) subtracts a pixel value of a reference image from a pixel value of an image to be currently encoded and generates a residual signal. A down-sampling unit(408) down-samples the residual signal and reduces resolution. An entropy coding unit(412) encodes the down-sampled residual signal.
Abstract:
A motion estimation encoding/decoding apparatus and a method thereof are provided to reduce bits wasted due to the reflection of an amount of illumination change by compressing an amount of the illumination change using spatial closeness of illumination change occurrence areas. An illumination change compensating module(320) differentiates a pixel average value of a present block and a pixel average value of a reference block to perform illumination change compensation. A residual signal generator(330) generates a residual signal by differentiating the present block having been subject to the illumination change compensation the reference block having been subject to the illumination change corresponding to a motion vector. An illumination change predicting module(340) sets an illumination change amount of a neighboring block, which has been subject to the illumination change compensation, as the prediction value of the illumination change amount of the present block. The illumination change predicting module performs a DPCM(Differential Pulse Code Modulation) based on the illumination change amount of the present block and the prediction value of the illumination change amount.
Abstract:
본 발명은 기존 MPEG-4에서 정의하고 있는 MAC을 이용하여 스테레오스코픽 비디오를 부호화 및 복호화한다. 스테레오스코픽 비디오에 대하여, 한쪽 영상을 하나의 비디오 객체로 정하고, 다른 한쪽 영상을 비디오 객체로 정해진 영상에 대한 보조 정보로서 수평 변이 맵, 수직 변이 맵, 휘도 차분 텍스쳐, 색차 차분 텍스쳐로 분리하여 영상의 중요도 및 복잡도에 따라 MAC의 보조 요소에 각각 할당하여 부호화하여 단일의 부호화 스트림으로 출력한다. 스테레오스코픽 비디오, MPEG-4, MAC, 부호화
Abstract:
1. 청구범위에 기재된 발명이 속한 기술분야 본 발명은 3차원 디지털 멀티미디어 방송 시스템(3D DMB)에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은 양안식 3차원 영상 및 3차원 음향을 종래의 DMB 시스템 구조를 이용하여 처리함으로써, 종래의 DMB 시스템과 호환성을 유지하며 사용자에게 보다 현실감 있는 3차원 AV 서비스를 제공하기 위한 3차원 디지털 멀티미디어 방송 시스템을 제공하는데 그 목적이 있음. 3. 발명의 해결방법의 요지 본 발명은, 3차원 디지털 멀티미디어 방송 송신 시스템으로서, 양안식 3차원 영상의 비디오 신호를 입력받아 부호화하기 위한 비디오 부호화 수단; 3차원 음향의 오디오 신호를 입력받아 부호화하기 위한 오디오 부호화 수단; 상기 부호화된 비디오 신호 및 오디오 신호를 SL(Sync Layer) 패킷으로 패킷화하기 위한 패킷화 수단; 및 상기 패킷화 수단에 의해 패킷화된 SL 패킷을 변환 및 다중화하여 출력하기 위한 다중화 수단을 포함함. 4. 발명의 중요한 용도 본 발명은 디지털 멀티미디어 방송 기반으로 3차원 AV를 서비스하기 위한 시스템 등에 이용됨. DMB, 디지털 방송, MPEG-2, MPEG-4, 3D AV
Abstract:
1. 청구범위에 기재된 발명이 속하는 기술분야 본 발명은, 양안식 입체 영상 전송 장치 및 그 방법과 그를 이용한 양안식 입체 영상 렌더링 장치 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은, 3차원 카메라 등에서 영상 및 그에 따른 부가 깊이 정보를 획득하여, 영상은 종래 방식대로 부호화하고, 부가 깊이 정보는 외부로부터 선택받은 이산코사인변환(DCT) 계수를 이용하여 부호화한 후, 상기 부호화한 영상과 부가 깊이 정보를 다중화하여 하나의 전송스트림(TS)으로 전송함으로써 부가 깊이 정보 전송에 필요한 비트율을 크게 감소시키는 한편, 양안식 입체 영상을 렌더링하기 위한 장치에서는 상기 3차원 카메라 등으로부터 전달받은 전송스트림(TS)을 역다중화하여 영상과 부가 깊이 정보를 분리하여 각각 복호화하고, 상기 복호화한 영상 및 부가 깊이 정보를 이용하여 양안식 입체 영상을 생성하되, 상기 복호화한 부가 깊이 정보를 비등방 확산 방식을 이용하여 전처리(필터링)한 후 불연속 경계의 변화율을 약화시켜 양안식 입체 영상을 생성함으로써, 렌더링시 발생하는 홀의 개수 및 그 영역을 감소시켜 화질 및 입체감을 개선하기 위한, 양안식 입체 영상 전송 장치 및 그 방법과 그를 이용한 양안식 입체 영상 렌더링 장치 및 그 방법을 제공하는데 그 목적이 있음. 3. 발명의 해결 방법의 요지 본 발명은, 양안식 입체 영상 전송 장치에 있어서, 양안식 입체 영상을 생성하기 위한 기준 영상 및 부가 깊이 정보를 획득하기 위한 영상 획득 수단; 및 상기 영상 획득 수단에서 획득한 영상을 부호화하고, 상기 영상 획득 수단에서 획득한 부가 깊이 정보를 외부로부터 입력받은 변수에 따라 선택한 부호화 계수를 이용하여 부호화한 후, 상기 부호화한 영상 및 부가 깊이 정보를 다중화하여 출력시키기 위한 부호화 수단을 포함함. 4. 발명의 중요한 용도 본 발명은 양안식 입체 영상 렌더링 시스템 등에 이용됨. 양안식 입체 영상, 렌더링, 부가 깊이 정보, 이산코사인변환(DCT : Discrete Cosine Transform) 계수, 다중화
Abstract:
1. 청구범위에 기재된 발명이 속한 기술분야 본 발명은 입체 방송 서비스를 위한 디지털 방송 송신 장치 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은 3D 방송 서비스의 구성 정보에 대한 기술자(descriptor)를 2D 방송 시스템과 호환되도록 정의함으로써, 기존의 2D 디지털 방송 시스템과 호환되며 3D 방송 서비스가 가능한, 입체 방송 서비스를 위한 디지털 방송 송신 장치 및 그 방법을 제공하는데 그 목적이 있음. 3. 발명의 해결방법의 요지 본 발명은, 기존 2D 디지털 방송 시스템과 호환성을 갖는 디지털 입체 방송 송신 장치에 있어서, 외부로부터 2D(Dimenssion) 영상과 3D 영상을 획득하기 위한 영상 획득 수단; 외부로부터 오디오 신호를 획득하기 위한 오디오 신호 획득 수단; 상기 영상 획득 수단을 통해 획득된 2D 영상을 부호화하기 위한 2D 영상 부호화 수단; 상기 영상 획득 수단을 통해 획득된 3D 영상 정보를 부호화하기 위한 3D 영상 부호화 수단; 상기 오디오 신호 획득 수단을 통해 획득된 오디오 신호를 부호화하기 위한 오디오 신호 부호화 수단; 3D 방송 서비스 구성 정보를 포함하는 기술자를 정의하여 PSI를 생성하기 위한 PSI 생성 수단; 3D 방송 서비스 구성 정보를 포함하는 기술자를 정의하여 PSIP/SI를 생성하기 위한 PSIP/SI 생성 수단; 상기 부호화된 2D 영상, 3D 영상 정보 및 오디오 신호와, 상기 생성된 PSI 및 PSIP/SI를 다중화하기 위한 다중화 수단을 포함함. 4. 발명의 중요한 용도 본 발명은 2D/3D 방송 시스템에 이용됨. 3D 방송, PSI, PSIP, 기술자(descriptor), PMT, VCT
Abstract:
1. 청구범위에 기재된 발명이 속한 기술분야 본 발명은 수평시차 조절 장치와 그를 이용한 자동 주시거리 조절 시스템 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은 영상신호처리 시스템에서 단순화된 양안 에너지 모델을 이용해 입체영상의 국부적인 수평시차를 자동으로 추출하고, 확대 과정에서의 비선형 수평시차 왜곡현상을 자동으로 보정하기 위한 수평시차 조절 장치와 그를 이용한 자동 주시거리 조절 장치 및 그 방법을 제공하는데 그 목적이 있음. 3. 발명의 해결방법의 요지 본 발명은, 영상신호처리 시스템에서의 수평시차 조절 장치에 있어서, 양안 입체영상의 국부적인 수평시차를 자동으로 조절하기 위해, 단순화된 양안 에너지 모델로부터 좌우 수평방향으로 이동시켜야 할 이동 픽셀수를 결정하기 위한 수평시차 계산수단; 및 상기 수평시차 계산수단으로부터 구한 이동 픽셀수와 외부로부터 입력된 입체영상의 크기 정보로부터 실제로 이동시켜야 할 유효 픽셀수를 재계산하기 위한 수평시차 보정수단을 포함한다. 4. 발명의 중요한 용도 본 발명은 평행축 입체 카메라, 입체영상 디스플레이 시스템, 컴퓨터 그래픽 또는 애니메이션을 이용한 입체영상 생성 시스템 등의 영상신호처리 분야에 이용 됨. 수평시차 조절, 평행축 입체 카메라, 주시거리 조절, 양안 에너지 모델, 비선형 수평시차 왜곡
Abstract:
1. 청구범위에 기재된 발명이 속한 기술분야 본 발명은 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은, 다시점 동영상에 양안식 입체 효과를 주기 위하여, 양안에 해당하는 한쌍의 객체 동영상(좌우 두 시점에 해당하는 객체 동영상)에 대하여 디스플레이 방법을 고려하여 각각을 홀수/짝수 필드객체로 분리한 후, 다시점 동영상을 형상과 텍스쳐를 이용한 객체 기반 부호화 및 복호화 방법에 의해 압축 및 복원하기 위한 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법을 제공하고자 함. 3. 발명의 해결방법의 요지 본 발명은, 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치에 있어서, 다시점 동영상의 형상 정보 추출을 위하여, 외부로부터 좌영상 객체 동영상(L)과 우영상 객체 동영상(R)을 입력받아 각 시점 동영상의 좌객체 형상(LS) 및 우객체 형상(RS)을 각각 추출하기 위한 형상 추출수단; 다시점 동영상의 디스플레이 방식에 필요한 비트스트림을 교환할 수 있도록, 외부로부터 전달되는 좌/우 영상 객체 동영상(L/R) 및 상기 형상 추출수단으로부터 전달되는 좌/우 객체 형상(LS/RS) 정보를 홀수 및 짝수 필드 객체로 분리하기 위한 데이터 분리수단; 상기 데이터 분리수단을 통해 각각 홀수 및 짝수 필드로 분리된 형상 정보((LO, LE)/(RO, RE) 객체의 형상)의 왜곡을 보정하기 위한 형상 보정수단; 및 홀수 및 짝수 라인으로 분리된 객체 단위의 데이터를 부호화하기 위하여, 상기 형상 보정수단을 통해 입력되는 객체 기반 정보와 상기 데이터 분리수단을 통해 입력되는 객체 기반 정보를 전달받아 계층(LO 스트림, LE 스트림, RO 스트림, RE 스트림)으로 구성하여 형상 부호화와 형상 텍스쳐에 의한 움직임 및 시차 예측을 수행하기 위한 객체 기반 부호화수단을 포함함. 4. 발명의 중요한 용도 본 발명은 다시점 동영상의 객체 기반 송수신 시스템 등에 이용됨.