Abstract:
다시점 영상의 인식 깊이감 조절 장치 및 방법이 개시된다. 다시점 영상의 인식 깊이감 조절 장치는 다시점 영상 및 상기 다시점 영상의 깊이 데이터를 입력받는 영상정보 입력부, 상기 다시점 영상 및 깊이 데이터를 이용하여 상기 다시점 영상의 시차 데이터를 계산하는 시차 계산부, 상기 시차 데이터를 이용하여 사용자의 요청 깊이 정보에 대응하는 변환시차를 계산하는 시차 변환부 및 상기 변환시차를 이용하여 다시점 변환영상을 생성하는 변환영상 생성부를 포함한다. 다시점, 인식 깊이감, 깊이 데이터, 시차, 변환영상
Abstract:
A multi-view matching method and apparatus for using object or background separation are provided to improve depth discontinuous boundary detection performance by using depth information with color information in object or background separation. The multi-view image received from a multi-view camera and the depth information of a reference viewpoint image received from a depth camera are stored(S101). The object or background area separation of the reference viewpoint image is performed by using the reference viewpoint image and the depth information(S102). The final depth information of the reference viewpoint image is determined(S103). The final depth information of a viewpoint image except a reference viewpoint among multi-view points is determined by using the final depth information of the reference viewpoint image (S104). The final depth information of each multi-view image is recorded as a digital image(S105).
Abstract:
1. 청구범위에 기재된 발명이 속한 기술분야 본 발명은 깊이 정보 기반 스테레오/다시점 영상 정합 장치 및 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은, 한 쌍 이상의 스테레오 영상을 정합하여 얻어지는 기준 영상에 대한 변이 지도의 정확도를 향상시키기 위하여 깊이 카메라 등에 의해 얻어진 기준시점에 대한 깊이 정보를 이용하여 스테레오 정합의 변이 탐색 범위 및 정합 창틀을 적응적으로 결정함으로써 변이 지도의 정확도를 향상시키면서도 변이 탐색 범위를 최소화할 수 있는 스테레오/다시점 영상 정합 장치 및 방법을 제공하는데 그 목적이 있음. 3. 발명의 해결방법의 요지 본 발명은, 다시점 비디오 카메라 및 깊이 정보 획득 장치로부터 획득한 다시점 영상 및 기준 시점에 대한 깊이 정보를 이용하여 변이 지도를 작성하여 3차원 영상 정보를 획득하기 위한 깊이 정보 기반 스테레오/다시점 영상 정합 장치로서, 상기 다시점 영상을 이용하여 각 시점의 카메라 정보를 추출하기 위한 카메라보정수단; 상기 깊이 정보를 기준시점에 대한 변이로 변환하기 위한 깊이정보변환수단; 및 기준 시점에 대한 변이 지도를 계산하기 위하여 상기 다시점 영상을 입력받아 기준 시점 영상과 정합할 대상 영상의 극상선(epipolar line)을 일치시키는 영상 보정(image rectification)을 수행하기 위한 영상보정수단을 포함함. 4. 발명의 중요한 용도 본 발명은 다시점 영상 기반 장면 모델링 시스템 등에 이용됨. 변이 지도, 스테레오 정합, 다시점 영상, 3차원 영상 처리
Abstract:
1. 청구범위에 기재된 발명이 속한 기술분야 본 발명은 다시점 콘텐츠 생성 장치 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은 양안식 및 다안식 입체 영상을 생성함으로써, 입체감과 공간감을 제공하고, 깊이 기반 객체 삽입, 움직임 객체 대치, 배경 대치, 시점 선택 등의 인터랙션을 지원하는 다시점 컨텐츠 생성 장치 및 그 방법을 제공하는데 그 목적이 있음. 3. 발명의 해결방법의 요지 본 발명은, 외부로부터 입력된 다시점 영상 및 깊이/변이 지도 데이터에 대하여 보정 및 잡음 제거 필터링하기 위한 전처리 수단; 카메라 기본 정보 및 상기 전처리 수단으로부터 출력된 보정된 다시점 영상을 이용하여 카메라 파라미터를 계산하고, 에피폴라 영상 보정을 수행하기 위한 카메라 보정 수단; 상기 카메라 보정 수단으로부터 출력된 카메라 파라미터 및 에피폴라 보정된 다시점 영상과, 상기 전처리 수단으로부터 출력된 전처리된 깊이/변이 지도를 이용하여 장면 모델을 생성하기 위한 장면 모델 생성 수단; 상기 전처리 수단으로부터 출력된 보정된 다시점 영상, 상기 카메라 보정 수단으로부터 출력된 카메라 파라미터 및 후단의 사용자 인터페이스 수단으로부터 출력된 관심 객체 설정 정보를 이용하여, 객체 바이너리 마스크, 객체 움직임 벡터 및 객체 중심점 위치를 추출하기 위한 객체 추출/추적 수단; 배경 영상(실사)에 대한 조명 정보를 추출하고, 실사 영상 내에 기 제작된 컴퓨터 그래픽을 삽입할 때 추출한 조명 정보를 적용하며, 상기 기 제작된 컴퓨터 그래픽과 실사를 합성하기 위한 실사/컴퓨터 그래픽 합성 수단; 상기 카메라 보정 수단으로부터 출력된 카메라 파라미터, 후단의 사용자 인터페이스 수단으로부터 출력된 사용자 선택 시점 정보 및 상기 사용자 선택 시점 정보에 해당하는 다시점 영상을 이용하여 스테레오/다안식 영상 및 중간 시점 영상을 생성하기 위한 임의 시점 영상 생성 수단; 및 상기 전처리 수단, 카메라 보정 수단, 장면 모델링 수단, 객체 추출/추적 수단, 실사/컴퓨터 그래픽 합성 수단 및 임의 시점 영상 생성 수단으로 사용자의 요구 사항을 내부 자료로 변환하여 전달하기 위한 사용자 인터페이스 수단을 포함한다. 4. 발명의 중요한 용도 본 발명은 다시점 입체 영상 방송 등에 이용됨. 다시점, 콘텐츠, 깊이/변이 지도, 입체 영상, 장면 모델, 객체 추출
Abstract:
Provided are a contents generating apparatus that can support functions of moving object substitution, depth-based object insertion, background image substitution, and view offering upon a user request and provide realistic image by applying lighting information applied to a real image to computer graphics object when a real image is composited with computer graphics object, and a contents generating method thereof. The apparatus includes: a preprocessing block, a camera calibration block, a scene model generating block, an object extracting/tracing block, a real image/computer graphics object compositing block, an image generating block, and the user interface block. The present invention can provide diverse production methods such as testing for the optimal camera viewpoint and scenic structure before contents are actually authored and compositing two different scenes taken in different places into one scene based on a concept of a three-dimensional virtual studio in the respect of a contents producer.
Abstract:
1. 청구범위에 기재된 발명이 속하는 기술분야 본 발명은 변이지도 및 깊이지도의 융합을 통한 3차원 장면 모델 생성 장치 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은 다시점 스테레오 영상의 변이지도와 깊이 카메라나 3차원 스캐너에 의해 얻어진 깊이지도를 효과적으로 결합하여 보다 정확도가 높은 깊이지도를 얻고, 이를 이용하여 3차원 장면 모델을 생성하기 위한 3차원 장면 모델 생성 장치 및 그 방법을 제공하고자 함. 3. 발명의 해결 방법의 요지 본 발명은, 3차원 장면 모델 생성 장치에 있어서, 적어도 두 개의 비디오 카메라(다시점 카메라)로부터 동일시간에 취득된 다시점 영상에 대해, 인접한 두 영상을 스테레오 영상 쌍으로 선택하여 스테레오 정합 기법을 이용해 변이지도를 생성하기 위한 변이지도 생성수단; 상기 적어도 두 개의 비디오 카메라 중 깊이(depth) 카메라 혹은 3차원 스캐너로부터 동일시간에 취득된 영상에 대해, 적어도 하나의 깊이지도(depth map)를 생성하기 위한 깊이지도 생성수단; 변이지도 데이터 및 깊이지도 데이터를 스케일링하여 깊이 값 범위를 일치하고, 상기 변이지도 데이터와 상기 깊이지도 데이터의 위치를 정렬(registration)하기 위한 스케일링 및 정렬 수단; 정렬된 두 깊이 데이터들을 융합하고, 이때 겹치지 않는 영역에 대해서는 깊이 값이 구해진 깊이지도의 값을 이용하고, 겹침이 발생된 영역에 대해 두 깊이 데이터의 신뢰도를 판단하여 3차원 모델의 오차를 최소화할 수 있는 깊이 값을 선택하는 깊이정보 융합수단; 상기 융합된 깊이지도를 카메라 정보를 이용하여 3차원 깊이정보(3차원 점들의 집합)로 변환하기 위한 깊이정보 변환수단; 및 상기 3차원 점들의 집합을 결합하여 메쉬 모델(3차원 장면 모델)로 만드는 3차원 모델링수단을 포함함. 4. 발명의 중요한 용도 본 발명은 다시점 영상으로 이용한 3차원 장면 모델링 시스템 등에 이용됨.
Abstract:
1. 청구범위에 기재된 발명이 속하는 기술분야 본 발명은 필터링된 환경맵을 이용한 역렌더링 장치 및 그 방법에 관한 것임. 2. 발명이 해결하려고 하는 기술적 과제 본 발명은 필요로 하는 입력 사진의 수를 줄임은 물론, 카메라와 광원의 위치를 정교하게 조정하기 위한 특수한 장치없이 한 영상내의 물체의 BRDF를 계측하고, 이때 입력으로 사용되는 영상내의 모델에 대한 3차원 위치 정보의 양을 최소한으로 줄일 수 있는 역렌더링 장치 및 그 방법을 제공하고자 함. 3. 발명의 해결 방법의 요지 본 발명은, 영상내에 존재하는 모델에 대해 물체의 반사속성(BRDF)을 측정하는 역렌더링 장치에 있어서, 상기 물체에 대한 광원정보로서 사용하기 위해, 반사속성을 얻고자 하는 물체 주변의 환경맵을 디퓨즈(diffuse), 그로시(glossy) 반사속성에 맞춰 필터링하기 위한 환경맵 필터링수단; 상기 디퓨즈 필터링된 환경맵을 이용하여, 상기 영상내의 모델들에 대해 물체의 각 평면에서 디퓨즈 반사속성을 갖는 평면을 찾기 위한 디퓨즈 검사수단; 상기 디퓨즈 필터링된 환경맵 및 상기 그로시(glossy) 필터링된 환경맵을 이용하여, 상기 디퓨즈 평면으로 결정되지 않은 상기 물체의 평면에 대해 그로시 반사속성을 갖는 평면을 찾기 위한 그로시 검사수단; 및 상기 디퓨즈 검사수단에서 디퓨즈 상수를 계산할 때 생성된 디퓨즈 맵(diffuse map)을 사용하여, 상기 디퓨즈 반사속성 및 상기 그로시 반사속성을 갖지 않는 상기 물체의 평면을 디퓨즈 텍스쳐(diffuse texture)로 결정하기 위한 디퓨즈 텍스쳐 정의수단을 포함함. 4. 발명의 중요한 용도 본 발명은 영상내의 물체에 대한 반사속성(BRDF)를 복원하는데 이용됨.
Abstract:
PURPOSE: A vergence controller using signal processing and a parallel-axis stereo camera system using the vergence controller are provided to allow a parallel-axis stereo camera incapable of being vergence-controlled to obtain vergence control effect by signal-processing a captured image. CONSTITUTION: A vergence controller using signal processing includes a memory(211) for receiving and storing an image captured by an external camera, a horizontal signal processor(212) for receiving the stored image and performing horizontal signal processing for the image. The controller further includes a vertical signal processor(213) for receiving the horizontal-signal-processed signal to carry out vertical signal processing for the signal, and an interpolator(214) for interpolating the vertical-signal-processed signal into the original size to perform vergence control.