-
公开(公告)号：WO2022080553A1
公开(公告)日：2022-04-21
申请号：PCT/KR2020/015392
申请日：2020-11-05
Applicant: 한국전자기술연구원
Abstract: 본 발명의 증강 현실을 제공하기 위한 3차원 맵을 구성하기 위한 장치는 위치를 이동하면서 촬영된 영상의 제1 프레임 및 제2 프레임을 포함하는 2개의 프레임이 입력되면, 입력된 2개의 프레임으로부터 포즈 정보를 획득하는 포즈획득부와, 심층학습모델을 이용하여 상기 2개의 프레임으로부터 뎁스 맵을 도출하는 뎁스맵산출부와, 상기 포즈 정보 및 상기 뎁스 맵을 기초로 3차원 맵을 생성하는 3차원맵생성부를 포함한다.
-
公开(公告)号：WO2022119039A1
公开(公告)日：2022-06-09
申请号：PCT/KR2020/018407
申请日：2020-12-16
Applicant: 한국전자기술연구원
Abstract: 본 발명은 가상 카메라를 이용한 증강현실 객체 생성 장치 및 방법이 개시된다. 본 발명의 강현실 객체 생성 장치는 가상 카메라에 의해 다각도에서 촬영된 객체가 포함된 복수의 이미지를 입력받는 입력부 및 입력된 복수의 이미지를 포인트 클라우드(PointCloud)로 변환하여 각 이미지별 3차원 포인트 클라우드를 생성하고, 생성된 복수의 3차원 포인트 클라우드를 정합하여 3차원 증강현실 객체를 생성하는 제어부를 포함한다.
-
公开(公告)号：WO2022119038A1
公开(公告)日：2022-06-09
申请号：PCT/KR2020/018406
申请日：2020-12-16
Applicant: 한국전자기술연구원
Abstract: 본 발명은 분할 렌더링 영상 기반의 증강현실 영상을 재생하는 장치 및 방법이 개시된다. 본 발명의 장치는 콘텐츠 서버와 통신을 하는 통신부, 촬영 영상, 사용자의 위치정보 및 자세 정보를 포함하는 센서 정보를 수집하는 센서부 및 콘텐츠 서버로부터 분할 영상정보를 수신하면 수신된 분할 영상정보를 디코딩하여 증강현실 영상정보로 복원하고, 복원된 증강현실 영상정보와 촬영 영상을 알파 블렌딩(alpha-blending)한 후, 맵핑시켜 증강현실 영상을 생성하며, 생성된 증강현실 영상에 포함된 증강현실 콘텐츠의 위치를 보정하는 제어부를 포함한다.
-
公开(公告)号：WO2023075012A1
公开(公告)日：2023-05-04
申请号：PCT/KR2021/018752
申请日：2021-12-10
Applicant: 한국전자기술연구원
IPC: H04N21/81 , H04N21/262 , H04N21/4728 , H04N21/2343 , H04N21/4402 , H04N21/431
Abstract: 사용자의 관심영역 추정이 가능한 저지연 360 VR 스트리밍 방법이 제공된다. 상기 방법은 사용자 디바이스로부터 디바이스 포즈 정보를 수신하는 단계; 상기 디바이스 포즈 정보에 기초하여 사용자의 관심영역을 추출하는 단계; 상기 관심영역에 상응하는 관심영역 타일 정보를 생성하는 단계; 상기 관심영역이 변경될 위치에 상응하는 관심영역 추정 타일 정보를 생성하는 단계; 상기 관심영역 타일 정보 및 관심영역 추정 타일 정보에 상응하는 타일을 스트리밍 서버로 요청하여, 고품질 타일 스트림 및 전체 영상의 저품질 타일 스트림(이하, 저품질 전체 영상 타일 스트림)을 수신하는 단계; 상기 고품질 타일 스트림과 저품질 전체 영상 타일 스트림을 디코딩 및 렌더링하는 단계; 및 상기 렌더링된 영상을 사용자 디바이스로 제공하는 단계를 포함한다.
-
公开(公告)号：WO2022119022A1
公开(公告)日：2022-06-09
申请号：PCT/KR2020/017664
申请日：2020-12-04
Applicant: 한국전자기술연구원
IPC: H04N21/218 , H04N21/222 , H04N21/81 , G06T3/00 , G06T1/20
Abstract: 본 발명은 저지연 콘텐츠 스트리밍을 지원하는 콘텐츠 서버 및 방법이 개시된다. 본 발명의 콘텐츠 서버는 사용자 단말과 통신을 하는 통신부, 사용자 단말의 접속이 감지되면 사용자 단말로부터 수신된 이미지를 포함하는 단말 데이터를 이용하여 현재 사용자의 위치와 카메라 포즈(pose)에 대한 좌표 산출 및 3차원 공간을 생성하고, 생성된 3차원 공간에 객체를 위치시키며, 사용자의 시점에서 재생되는 영상을 2차원 영상으로 렌더링한 후, 분할하여 서버 데이터를 생성하고, 생성된 서버 데이터를 상기 사용자 단말로 전송시키는 제어부를 포함한다.
-
Patent Agency Ranking
公开(公告)号：WO2023075013A1
公开(公告)日：2023-05-04
申请号：PCT/KR2021/018760
申请日：2021-12-10
Applicant: 한국전자기술연구원
IPC: H04N21/81 , H04N21/262 , H04N21/236 , H04N21/438 , H04N21/431 , H04N21/643
Abstract: 엣지 서버와 연동하는 AR 스트리밍 장치가 제공된다. 상기 장치는 카메라 및 소정의 관성 센서를 포함하는 센싱 모듈, AR 영상을 스트리밍하는 디스플레이 모듈, 상기 엣지 서버 및 센싱 모듈과 데이터를 송수신하는 통신모듈, 상기 데이터를 기반으로 AR 스트리밍 서비스를 제공하기 위한 프로그램이 저장된 메모리 및 상기 메모리에 저장된 프로그램을 실행시키는 프로세서를 포함한다. 이때, 상기 프로세서는 상기 프로그램을 실행시킴에 따라, 상기 센싱 모듈을 통해 이미지 데이터 및 관성 데이터를 획득하면, 상기 이미지 데이터 및 관성 데이터를 동기화 및 인코딩을 수행하여 상기 통신모듈을 통해 엣지 서버로 전송하고, 상기 엣지 서버로부터 분할 렌더링 처리된 AR 영상(이하, 분할 렌더링 AR 영상)을 수신하면, 상기 분할 렌더링 AR 영상을 디코딩 및 블렌딩 처리하여, 상기 디스플레이 모듈을 통해 스트리밍되도록 제어한다.
-
公开(公告)号：WO2023074999A1
公开(公告)日：2023-05-04
申请号：PCT/KR2021/017527
申请日：2021-11-25
Applicant: 한국전자기술연구원
IPC: H04N13/271 , H04N13/243 , H04N13/239 , H04N13/257 , H04N13/189 , H04N13/167 , H04N13/139
Abstract: 본 발명은 상기 3D AR 객체 이미지 수집 장치가, 복수의 카메라로부터 피사체에 대한 RGB 이미지 및 Depth 이미지를 획득하는 단계, 상기 피사체 중 적어도 일부 객체에 대응하는 RGB 부분 데이터 및 상기 적어도 일부 객체 대응하는 Depth 부분 데이터를 상기 RGB 이미지 및 상기 Depth 이미지에서 필터링하는 단계, 상기 필터링된 상기 RGB 부분 데이터와 상기 Depth 부분 데이터를 기반으로 3D 포인트 클라우드 데이터를 생성하여 저장하는 단계를 포함하는 3D AR 객체 영상 실시간 획득을 지원하는 3D AR 객체 이미지 수집 장치를 운용하는 방법 및 이 방법이 적용되는 시스템을 개시한다.
-
公开(公告)号：WO2023074998A1
公开(公告)日：2023-05-04
申请号：PCT/KR2021/017526
申请日：2021-11-25
Applicant: 한국전자기술연구원
IPC: H04N21/81 , H04N21/431 , H04N21/45 , H04N21/442
Abstract: 본 발명은 중개 서버가, 접속된 사용자 장치로부터 XR 컨텐츠 재생 요청을 수신하는 경우, 유휴 분할 렌더링 서버를 검색하는 단계, 검색된 유휴 분할 렌더링 서버를 상기 사용자 장치에 할당하는 단계, 상기 사용자 장치로부터 영상 데이터 및 센서 데이터를 수신하는 단계, 상기 수신된 영상 데이터 및 센서 데이터를 기반으로 회전 매트릭스를 생성하는 단계, 상기 회전 매트릭스를 상기 할당된 분할 렌더링 서버에 전송하는 단계를 포함하는 것을 특징으로 하는 XR 스트리밍 서비스를 위한 중개 서버 운용 방법 및 이를 지원하는 XR 스트리밍 시스템을 개시한다.
-
公开(公告)号：WO2022080560A1
公开(公告)日：2022-04-21
申请号：PCT/KR2020/015702
申请日：2020-11-10
Applicant: 한국전자기술연구원
IPC: H04N13/194 , H04N13/161 , H04N13/167 , H04N13/189 , H04N21/81 , G06T19/00
Abstract: 본 발명의 가상현실(VR: Virtual Reality) 영상을 제공하기 위한 에지서버는 가상현실장치와 시야 범위 및 마진을 동기화하는 렌더링동기부와, 전체 가상현실 영상에서 회전 중심을 기준으로 상기 시야 범위에 해당하는 시야 영역 및 상기 마진에 해당하는 마진 영역을 렌더링하여 렌더링 영상을 생성하는 렌더링부와, 상기 마진 영역의 해상도를 스케일링 팩터로 나누어 축소하여 축소 마진 영역을 생성한 후, 상기 시야 영역 및 상기 축소 마진 영역 및 인코딩하여 인코딩된 시야 영역 및 축소 마진 영역을 포함하는 분할 가상현실 영상을 생성하는 인코딩부와, 상기 분할 가상현실 영상을 상기 가상현실장치로 전송하는 스트리밍전송부를 포함한다.
-
公开(公告)号：WO2022080554A1
公开(公告)日：2022-04-21
申请号：PCT/KR2020/015393
申请日：2020-11-05
Applicant: 한국전자기술연구원
Abstract: 본 발명의 스테레오 프레임을 이용한 3차원 맵을 생성하기 위한 서비스서버는 증강현실장치로부터 촬영된 영상의 주 프레임 및 부 프레임을 포함하는 복수의 프레임을 지속적으로 수신하는 통신모듈과, 상기 주 프레임 및 상기 부 프레임으로부터 포즈 정보를 획득하는 포즈도출부와, 심층학습모델을 이용하여 상기 주 프레임 및 상기 부 프레임으로부터 뎁스 맵을 도출하는 뎁스맵산출부와, 상기 포즈 정보 및 상기 뎁스 맵을 기초로 3차원 맵을 생성하고, 생성된 3차원 맵을 상기 통신모듈을 통해 상기 증강현실장치로 전송하는 3차원맵생성부를 포함한다.
-
-
-
-
-
-
-
-
-
Search Results
10
records
(took 0.02 seconds)
