公开(公告)号：KR101298674B1

公开(公告)日：2013-08-21

申请号：KR1020070096871

申请日：2007-09-21

Applicant: 한국전자통신연구원 ,  주식회사 넷앤티비

Inventor： 정예선 ,  강정원 ,  정원식 ,  차지훈 ,  문경애 ,  홍진우 ,  임영권

IPC: H04N7/08

CPC classification number: H04N21/234318 ,  H04N21/23412 ,  H04N21/83555 ,  H04N21/85403

Abstract: 1. 청구범위에 기재된 발명이 속한 기술분야
장면표현언어를 이용한 디지털 아이템 기술 및 처리 장치 및 그 방법에 관한 것임.
2. 발명이 해결하고자 하는 기술적 과제
MPEG-21 디지털 아이템의 시공간적 관계를 정의하며 상호 작용이 가능한 형태로 멀티미디어 컨텐츠 장면을 표현하는 디지털 아이템 기술 및 처리 장치 및 그 방법을 제공함.
3. 발명의 해결방법의 요지
MPEG-21 표준의 디지털 아이템 선언 언어(Digital Item Declaration Language, DIDL)로 표현되는 디지털 아이템을 처리하는 장치에 있어서, 상기 디지털 아이템에 포함되는 요소 정보에 기초하여 상기 요소를 실행하는 디지털 아이템 방법 엔진(Digital Item Method Engine, DIME) 수단 및 시공간적인 관계를 갖고 상호 작용이 가능한 형태로 상기 디지털 아이템에 포함되는 복수의 미디어 데이터의 장면을 표현하는 장면 표현 수단을 포함하되, 상기 디지털 아이템은 상기 장면의 표현 정보가 포함된 장면표현 정보 및 상기 장면 표현 수단이 상기 장면표현 정보에 기초하여 상기 장면을 표현하기 위해 상기 디지털 아이템 표현 수단이 상기 장 면 표현 수단을 실행시킬 수 있는 호출 정보를 포함하는 디지털 아이템 처리 장치를 제공함.
4. 발명의 중요한 용도
디지털 아이템의 시공간적 관계와 상호 작용이 가능한 장면표현에 이용됨.
MPEG-21, 디지털 아이템, 장면표현

公开(公告)号：KR101289269B1

公开(公告)日：2013-07-24

申请号：KR1020100025906

申请日：2010-03-23

Applicant: 한국전자통신연구원

Inventor： 방건 ,  정원식 ,  엄기문 ,  허남호 ,  신홍창 ,  김진웅 ,  이수인

IPC: H04N13/04 ,  H04N13/02 ,  H04N7/24

CPC classification number: H04N19/597 ,  H04N13/161 ,  H04N2213/003 ,  H04N2213/005

Abstract: 본 발명은 영상 디스플레이 장치 및 방법에 관한 것으로, 보다 구체적으로 영상 시스템에서 영상 디스플레이 장치 및 방법에 관한 것이다.
본 발명의 일 실시 예에 따른 시선 추적 방법은 복수의 영상촬영기기로부터 수신된 한 시점 이상의 컬러 영상들과 깊이 영상들을 인코딩하고, 상기 현재 시점의 인코딩된 깊이 영상과 현재 시점 전후의 인코딩된 컬러 영상 및 깊이 영상을 사전 정의된 방법으로 합성하여 참조 영상을 생성하며, 상기 생성된 참조 영상을 이용하여 현재 시점의 컬러 영상을 디코딩하고, 상기 인코딩된 한 시점 이상의 컬러 영상들과 깊이 영상들을 디코딩하고, 상기 디코딩된 한 시점 이상의 컬러 영상들과 깊이 영상들을 시점별로 구분하여 분리하고, 상기 영상 디스플레이 장치는 상기 분리된 컬러 영상을 수신하여 디스플레이하 하고, 상기 분리된 컬러 영상과 깊이 영상을 사전 정의된 방식으로 렌더링하여 디스플레이하고, 상기 분리된 한 시점 이상의 컬러 영상과 깊� � 영상을 사전 정의된 방식으로 렌더링하여 디스플레이 한다.

公开(公告)号：KR101281961B1

公开(公告)日：2013-07-03

申请号：KR1020090128116

申请日：2009-12-21

Applicant: 한국전자통신연구원

Inventor： 정원식 ,  방건 ,  엄기문 ,  신홍창 ,  허남호 ,  이수인 ,  김진웅

IPC: H04N13/00

CPC classification number: G06T11/60 ,  G06T5/002 ,  G06T7/12 ,  G06T2207/10028 ,  G06T2207/20192

Abstract: 본 발명은 편집할 깊이 영상 프레임 및 이에 대응되는 컬러 영상의 선택을 입력 받는 단계, 상기 컬러 영상에서 관심 객체의 선택을 입력 받는 단계, 상기 관심 객체의 경계 정보를 추출하는 단계, 및 상기 관심 객체의 상기 경계 정보를 이용하여 상기 깊이 영상 프레임의 깊이 값을 수정하는 단계를 포함하는 깊이 영상 편집 방법을 제안한다.
경계 정보, 깊이 값, 깊이 영상 편집

Abstract translation: 提供一种编辑深度图像的方法，包括：接收关于要编辑的深度图像帧的选择和与深度图像帧相对应的彩色图像; 在彩色图像中的兴趣对象上接收选择; 提取兴趣对象的边界信息; 以及使用感兴趣对象的边界信息来校正深度图像帧的深度值。

公开(公告)号：KR1020130068520A

公开(公告)日：2013-06-26

申请号：KR1020110135755

申请日：2011-12-15

Applicant: 한국전자통신연구원

Inventor： 엄기문 ,  신홍창 ,  방건 ,  이현 ,  이응돈 ,  정원식 ,  허남호

IPC: H04N13/00 ,  G06T15/00

CPC classification number: G06T3/0093 ,  G06T7/269 ,  G06T2207/10012

Abstract: PURPOSE: An image warping processing method and a device thereof are provided to maintain depth perception in a depth discontinuous point by calculating displacement by segment unit and calculating gradient between segments. CONSTITUTION: A decoder receives a stereoscopic image and calculates disparity by segment(S200,S210). The decoder calculates disparity a discontinuity point and disparity saliency based on the calculated segment-wise disparity(S225,S230). When a warping target image is an objective mobile image, the decoder updates warping parameters(S250). The decoder generates a three-dimensional stereoscopic image(S255). [Reference numerals] (AA) No; (BB) Yes; (D235) Scene turning point detection; (S200) Stereo image input; (S205) Image part; (S210) Calculation modification; (S215) Segment calculation modification; (S220) Segment amalgamation; (S225) Modification detection; (S230) Important modification calculation; (S240) Image type decision; (S245) Object moving area?; (S250) Warping renewal; (S255) Image creation

Abstract translation: 目的：提供一种图像翘曲处理方法及其装置，通过计算通过段单位的位移和计算段之间的梯度来保持深度不连续点的深度感知。 构成：解码器接收立体图像并通过片段计算视差（S200，S210）。 解码器基于计算出的分段视差来计算不连续点和差异显着性（S225，S230）。 当翘曲目标图像是目标移动图像时，解码器更新翘曲参数（S250）。 解码器产生三维立体图像（S255）。 （附图标记）（AA）否; （BB）是的; （D235）场景转折点检测; （S200）立体声图像输入; （S205）图像部分; （S210）计算修改; （S215）段计算修改; （S220）段合并; （S225）修改检测; （S230）重要修改计算; （S240）图像类型决定; （S245）对象移动区域 （S250）变形更新; （S255）图像创作

公开(公告)号：KR1020130057402A

公开(公告)日：2013-05-31

申请号：KR1020120133063

申请日：2012-11-22

Applicant: 한국전자통신연구원

Inventor： 방건 ,  정원식 ,  허남호 ,  유선미 ,  심동규 ,  남정학 ,  임웅

IPC: H04N13/00 ,  H04N7/24

CPC classification number: H04N13/128 ,  H04N7/24

Abstract: PURPOSE: A multiview video decoding method and a device thereof are provided to improve the quality of a depth image by applying an anisotropic median filter. CONSTITUTION: A decoder determines whether a current pixel area in a restored depth image is an edge area or not(S900). If the current pixel area is the edge area, the decoder classifies pixels in the current pixel area into groups based on a pixel value applied to an anisotropic median filter(S910). The decoder a filtering target pixel value based on a median value of the classified pixels(S920). [Reference numerals] (AA) Start; (BB) End; (S900) Determine an edge area; (S910) Classify pixels within a current pixel area; (S920) Determine a filtering target pixel value

Abstract translation: 目的：提供一种多视点视频解码方法及其装置，通过应用各向异性中值滤波器来提高深度图像的质量。 构成：解码器确定恢复的深度图像中的当前像素区域是否为边缘区域（S900）。 如果当前像素区域是边缘区域，则解码器基于应用于各向异性中值滤波器的像素值将当前像素区域中的像素分组成组（S910）。 解码器基于分类像素的中值的滤波目标像素值（S920）。 （附图标记）（AA）开始; （BB）结束; （S900）确定边缘区域; （S910）对当前像素区域内的像素进行分类; （S920）确定滤波目标像素值

公开(公告)号：KR1020130050722A

公开(公告)日：2013-05-16

申请号：KR1020110115944

申请日：2011-11-08

Applicant: 한국전자통신연구원

Inventor： 방건 ,  정원식 ,  이현 ,  엄기문 ,  신홍창 ,  허남호

IPC: H04N7/24 ,  H04N13/00

CPC classification number: H04N19/597 ,  H04N9/74

Abstract: PURPOSE: A method for encoding and decoding a multi-view video including a color image and a depth image and an encoding and decoding device thereof are provided to supply a free view video by generating a middle view image by transmitting the multi-view video. CONSTITUTION: A decoding device compares the number of views of a color image with the number of views of a depth image(701). The decoding device derives a correspondence relation between the color image and the depth image based on sub information included in a bit stream(702). The decoding device derives view-inter reference structure information based on the sub information in the bit stream(703). The decoding device derives interdependency information with reference to the depth image and the color image(704). The decoding device decodes the bit stream based on reference structure information(705). The decoding device generates a middle view image based on the color image, the depth image, and correspondence relation information(707). [Reference numerals] (701) Compare the number of views; (702) Derive correspondence relation information between color and depth images; (703) Derive intra-view/inter-view reference structure information; (704) Derive interdependency information between the color and depth images; (705) Decode a bit stream; (706) Derive auxiliary information on a reference structure change; (707) Generate a middle view image; (AA) Start; (BB) End

Abstract translation: 目的：提供一种用于对包括彩色图像和深度图像的多视点视频及其编码和解码装置进行编码和解码的方法，以通过发送多视点视频产生中间视图图像来提供自由观看视频。 构成：解码装置将彩色图像的视图数与深度图像的视图数进行比较（701）。 解码装置基于比特流中包含的子信息（702）导出彩色图像与深度图像之间的对应关系。 解码装置基于比特流中的子信息（703）导出视图 - 内部参考结构信息。 解码装置参考深度图像和彩色图像来导出相互依赖性信息（704）。 解码装置基于参考结构信息解码比特流（705）。 解码装置基于彩色图像，深度图像和对应关系信息生成中间视图图像（707）。 （附图标记）（701）比较视图数; （702）导出颜色和深度图像之间的对应关系信息; （703）导出视图内/视图间参考结构信息; （704）导出颜色和深度图像之间的相互依赖信息; （705）解码比特流; （706）引用参考结构变化的辅助信息; （707）生成中间视图图像; （AA）开始; （BB）结束

公开(公告)号：KR1020130021096A

公开(公告)日：2013-03-05

申请号：KR1020110083413

申请日：2011-08-22

Applicant: 한국전자통신연구원

Inventor： 김찬 ,  이진환 ,  정원식 ,  허남호

IPC: H04N13/02

Abstract: PURPOSE: A stereo image photographing method, a stereo image output method, a stereo image photographing device, and a stereo image output device are provided to improve image quality and a three dimensional effect by matching a photographing point with an image outputting point. CONSTITUTION: A stereo image photographing device generates an N frame by using a first camera(S600). After the N frame is generated, the stereo image photographing device generates the N frame by using a second camera(S610). Image quality and a three dimensional effect are improved by a predetermined time difference between the first and the second cameras. [Reference numerals] (AA) Start; (BB) End; (S600) Generating N-th frame using a first camera; (S610) Generating N-th frame using a second camera after a predetermined period

Abstract translation: 目的：提供立体图像拍摄方法，立体图像输出方法，立体图像拍摄装置和立体图像输出装置，以通过使拍摄点与图像输出点匹配来提高图像质量和三维效果。 构成：立体图像拍摄装置通过使用第一相机生成N帧（S600）。 在N帧产生之后，立体图像拍摄装置通过使用第二照相机生成N帧（S610）。 通过第一和第二相机之间的预定时间差来提高图像质量和三维效果。 （附图标记）（AA）开始; （BB）结束; （S600）使用第一相机生成第N帧; （S610）在规定期间后，使用第二照相机生成第N帧

公开(公告)号：KR1020130009670A

公开(公告)日：2013-01-23

申请号：KR1020120076394

申请日：2012-07-13

Applicant: 한국전자통신연구원 ,  연세대학교 원주산학협력단

Inventor： 이진영 ,  서광덕 ,  윤국진 ,  정원식 ,  김현정 ,  허남호

IPC: H04N7/24

CPC classification number: H04L12/56 ,  H04N21/2362 ,  H04N21/242

Abstract: PURPOSE: A packet transmission device in a moving picture experts group media transport(MMT) system, a method, a packet receiving device and a method are provided to utilize MMT clock reference(MCR) time stamp information of a D layer and presentation time stamp(PTS) information of an E layer, thereby effectively expressing time stamp related information necessary for transmitting MMT based media. CONSTITUTION: A MMT packetizing unit(400) generates a MMT packet based on an inputted presentation unit. The MMT packetizing unit generates the MMT packet including at least one of PTS information and MCR information. The PTS is timing information indicating a presentation time of the presentation unit in a header of an E layer. The MCR is time stamp information including information for network jitter measurement and media synchronization in the header in a D layer. [Reference numerals] (410) M-unit generation unit; (420) MMT packet generation unit; (430) Transmitter buffer

Abstract translation: 目的：提供运动图像专家组媒体传输（MMT）系统中的分组传输设备，方法，分组接收设备和方法，以利用D层的MMT时钟参考（MCR）时间戳信息和呈现时间戳 （PTS）信息，从而有效地表达发送基于MMT的媒体所需的时间戳相关信息。 构成：MMT分组单元（400）基于输入的表示单元生成MMT分组。 MMT分组单元生成包括PTS信息和MCR信息中的至少一个的MMT分组。 PTS是表示E层的头部中的呈现单元的呈现时间的定时信息。 MCR是D层中头部的网络抖动测量和媒体同步信息的时间戳信息。 （附图标记）（410）M单元生成单元; （420）MMT分组生成单元; （430）发送器缓冲器

公开(公告)号：KR101218402B1

公开(公告)日：2013-01-03

申请号：KR1020090043585

申请日：2009-05-19

Applicant: 한국전자통신연구원

Inventor： 정원식 ,  남제호 ,  이주영 ,  안상우 ,  신상권 ,  오문균 ,  추현곤 ,  홍진우

IPC: H04N21/235 ,  H04N21/8352

Abstract: 본발명은방송프로그램식별정보의송수신방법및 장치에관한것이다. 본발명의방송프로그램송신방법은, 하나이상의방송프로그램에대한오디오/비디오비트스트림을획득하는단계; 상기방송프로그램에대응하는방송프로그램식별정보를획득하는단계; 상기획득된오디오/비디오비트스트림을암호화하는단계; 메타데이터와상기암호화된오디오/비디오비트스트림을포함하는미디어파일을생성하는단계; 및상기생성된미디어파일을전송하는단계를포함하고, 상기메타데이터는상기획득된방송프로그램식별정보및 상기오디오/비디오비트스트림에대한참조정보를포함한다. 본발명에의하면, 오디오/비디오스트림으로파일에포함되어있는방송프로그램자체를해석하지않고도해당방송프로그램의식별정보를용이하게획득, 사용할수 있는효과가있다.

公开(公告)号：KR1020120103510A

公开(公告)日：2012-09-19

申请号：KR1020120024669

申请日：2012-03-09

Applicant: 한국전자통신연구원

Inventor： 임현정 ,  정광희 ,  권형진 ,  이광순 ,  윤국진 ,  정원식 ,  허남호

IPC: H04N13/00 ,  H04N7/015 ,  H04N7/08

CPC classification number: H04N13/194 ,  H04H20/18 ,  H04H2201/40 ,  H04N13/161 ,  H04N21/2353 ,  H04N21/2362 ,  H04N21/2381 ,  H04N21/43 ,  H04N21/4307 ,  H04N21/4325 ,  H04N21/4344 ,  H04N21/4622 ,  H04N21/6125 ,  H04N21/6543 ,  H04N21/8146 ,  H04N21/816 ,  H04N21/8451

Abstract: PURPOSE: A transmission device for providing a stereoscopic broadcasting service of a program linkage type and a method and a reception device and a method thereof are provided to enable a reference picture to use a 2DTV system, and to deliver an additional picture based on an advanced television systems committee and a network resource table transmission mechanism in non real time, thereby overcoming a limit of a 3D band width and supplying compatibility with a existing 2D broadcasting system. CONSTITUTION: A real time stream encoder(210) generates a real time stream by encoding a reference picture. A non real time stream encoder(230) generates a non real time stream based on an additional picture. A picture synchronization information generator(220) generates a picture synchronization information stream and service signaling for synchronization of the reference picture and the additional picture. A re-multiplexer(240) generates a stereoscopic broadcasting stream of a program linkage type. [Reference numerals] (201) Standard image; (203) Additional image; (205) Transmitting server; (210) Real time stream encoder; (220) Service signaling and image synchronization information generator; (222) 3D contents synchronization information; (234) NRT signaling information encoder; (236) NRT contents encoder; (240) Re-multiplexer; (AA) Real time stream; (BB) Service signaling and image synchronization information; (CC) NRT signaling information; (DD) Non real time stream; (EE) Non real time stream encoder; (FF) Non real time contents managing unit; (GG) Program linkage type stereoscopic broadcasting stream

Abstract translation: 目的：提供一种用于提供节目联动类型的立体广播服务的发送装置，方法和接收装置及其方法，以使得参考图片能够使用2DTV系统，并且基于高级 电视系统委员会和网络资源表传输机制，从而克服3D带宽的限制并提供与现有2D广播系统的兼容性。 构成：实时流编码器（210）通过对参考图像进行编码来生成实时流。 非实时流编码器（230）基于附加图像生成非实时流。 图像同步信息生成器（220）生成用于同步参考图像和附加图像的图像同步信息流和服务信令。 再复用器（240）产生节目链接类型的立体广播流。 （附图标记）（201）标准图像; （203）附加图像; （205）传送服务器; （210）实时流编码器; （220）服务信令和图像同步信息发生器; （222）3D内容同步信息; （234）NRT信令信息编码器; （236）NRT内容编码器; （240）再多路复用器; （AA）实时流; （BB）服务信令和图像同步信息; （CC）NRT信令信息; （DD）非实时流; （EE）非实时流编码器; （FF）非实时内容管理单元; （GG）节目联动型立体广播流