-
公开(公告)号:WO2022080553A1
公开(公告)日:2022-04-21
申请号:PCT/KR2020/015392
申请日:2020-11-05
申请人: 한국전자기술연구원
摘要: 본 발명의 증강 현실을 제공하기 위한 3차원 맵을 구성하기 위한 장치는 위치를 이동하면서 촬영된 영상의 제1 프레임 및 제2 프레임을 포함하는 2개의 프레임이 입력되면, 입력된 2개의 프레임으로부터 포즈 정보를 획득하는 포즈획득부와, 심층학습모델을 이용하여 상기 2개의 프레임으로부터 뎁스 맵을 도출하는 뎁스맵산출부와, 상기 포즈 정보 및 상기 뎁스 맵을 기초로 3차원 맵을 생성하는 3차원맵생성부를 포함한다.
-
公开(公告)号:WO2023090508A1
公开(公告)日:2023-05-25
申请号:PCT/KR2021/017826
申请日:2021-11-30
申请人: 한국전자기술연구원
IPC分类号: H04N19/597 , H04N19/96 , H04N19/423 , H04N19/119 , G06T9/40
摘要: 본 발명은 3개의 축을 가지는 3D 객체에 대한 입력 포인트 클라우드 데이터를 수신하는 단계, 상기 입력 포인트 클라우드 데이터들을 트리 구조로 변환하기 위한 트리 노드들을 생성하는 단계, 상기 생성된 트리 노드들을 배열하여 상기 입력 포인트 클라우드 데이터에 대해 실시간으로 법선을 추정하는 단계, 상기 추정된 법선을 기반으로 상기 입력 포인트 클라우드 데이터에 대한 비디오기반 포인트 클라우드 압축을 수행하는 단계를 포함하는 것을 특징으로 하는 비디오기반 포인트 클라우드 압축 방법 및 이를 지원하는 전자 장치를 개시한다.
-
公开(公告)号:WO2023085493A1
公开(公告)日:2023-05-19
申请号:PCT/KR2021/017529
申请日:2021-11-25
申请人: 한국전자기술연구원
摘要: 본 발명은 적어도 하나의 카메라를 이용하여 피사체에 대한 스트림 파일을 획득하는 단계, 상기 카메라가 획득한 스트림 파일들을 상기 메모리에 저장하는 단계, 상기 메모리에 저장된 스트림 파일들을 토대로 가상공간을 생성하는 단계, 상기 가상공간 상에 배치할 다양한 타입의 콘텐츠들의 목록을 제공하는 단계, 사용자 입력에 의해 선택된 적어도 하나의 콘텐츠를 상기 가상공간 상에 배치하는 단계, 상기 적어도 하나의 콘텐츠 배치 완료에 따라 제작 완료된 영상 제작물을 상기 통신 인터페이스를 통해 방송하는 단계를 포함하는 것을 특징으로 하는 콘텐츠 편집을 지원하는 전자 장치의 운용 방법 및 이를 이용하는 전자 장치를 개시한다.
-
公开(公告)号:WO2022119039A1
公开(公告)日:2022-06-09
申请号:PCT/KR2020/018407
申请日:2020-12-16
申请人: 한국전자기술연구원
摘要: 본 발명은 가상 카메라를 이용한 증강현실 객체 생성 장치 및 방법이 개시된다. 본 발명의 강현실 객체 생성 장치는 가상 카메라에 의해 다각도에서 촬영된 객체가 포함된 복수의 이미지를 입력받는 입력부 및 입력된 복수의 이미지를 포인트 클라우드(PointCloud)로 변환하여 각 이미지별 3차원 포인트 클라우드를 생성하고, 생성된 복수의 3차원 포인트 클라우드를 정합하여 3차원 증강현실 객체를 생성하는 제어부를 포함한다.
-
公开(公告)号:WO2022119038A1
公开(公告)日:2022-06-09
申请号:PCT/KR2020/018406
申请日:2020-12-16
申请人: 한국전자기술연구원
摘要: 본 발명은 분할 렌더링 영상 기반의 증강현실 영상을 재생하는 장치 및 방법이 개시된다. 본 발명의 장치는 콘텐츠 서버와 통신을 하는 통신부, 촬영 영상, 사용자의 위치정보 및 자세 정보를 포함하는 센서 정보를 수집하는 센서부 및 콘텐츠 서버로부터 분할 영상정보를 수신하면 수신된 분할 영상정보를 디코딩하여 증강현실 영상정보로 복원하고, 복원된 증강현실 영상정보와 촬영 영상을 알파 블렌딩(alpha-blending)한 후, 맵핑시켜 증강현실 영상을 생성하며, 생성된 증강현실 영상에 포함된 증강현실 콘텐츠의 위치를 보정하는 제어부를 포함한다.
-
公开(公告)号:WO2023085492A1
公开(公告)日:2023-05-19
申请号:PCT/KR2021/017528
申请日:2021-11-25
申请人: 한국전자기술연구원
摘要: 본 발명은 제1 키넷 장치를 이용하여 피사체에 대한 제1 RGB 이미지 및 제1 Depth 이미지를 획득하면서, 제2 키넷 장치를 이용하여 상기 피사체와 동일한 피사체에 대한 제2 RGB 이미지 및 제2 Depth 이미지를 획득하는 단계, 상기 제1 RGB 이미지 및 상기 제2 RGB 이미지를 이용하여 상기 피사체에 대한 공간 정보를 추출하는 단계, 상기 제1 Depth 이미지 및 상기 제2 Depth 이미지를 이용하여 상기 피사체에 대한 깊이 오차를 검출하는 단계, 상기 검출된 깊이 오차를 이용하여 상기 공간 정보를 보정하여 상기 피사체에 대한 3D 공간 맵을 구성하는 단계를 포함하는 것을 특징으로 하는 키넷 장치들을 이용한 AR 콘텐츠용 3D 공간 맵 지원 방법 및 이를 지원하는 전자 장치를 개시한다.
-
公开(公告)号:WO2023075012A1
公开(公告)日:2023-05-04
申请号:PCT/KR2021/018752
申请日:2021-12-10
申请人: 한국전자기술연구원
IPC分类号: H04N21/81 , H04N21/262 , H04N21/4728 , H04N21/2343 , H04N21/4402 , H04N21/431
摘要: 사용자의 관심영역 추정이 가능한 저지연 360 VR 스트리밍 방법이 제공된다. 상기 방법은 사용자 디바이스로부터 디바이스 포즈 정보를 수신하는 단계; 상기 디바이스 포즈 정보에 기초하여 사용자의 관심영역을 추출하는 단계; 상기 관심영역에 상응하는 관심영역 타일 정보를 생성하는 단계; 상기 관심영역이 변경될 위치에 상응하는 관심영역 추정 타일 정보를 생성하는 단계; 상기 관심영역 타일 정보 및 관심영역 추정 타일 정보에 상응하는 타일을 스트리밍 서버로 요청하여, 고품질 타일 스트림 및 전체 영상의 저품질 타일 스트림(이하, 저품질 전체 영상 타일 스트림)을 수신하는 단계; 상기 고품질 타일 스트림과 저품질 전체 영상 타일 스트림을 디코딩 및 렌더링하는 단계; 및 상기 렌더링된 영상을 사용자 디바이스로 제공하는 단계를 포함한다.
-
公开(公告)号:WO2022119022A1
公开(公告)日:2022-06-09
申请号:PCT/KR2020/017664
申请日:2020-12-04
申请人: 한국전자기술연구원
IPC分类号: H04N21/218 , H04N21/222 , H04N21/81 , G06T3/00 , G06T1/20
摘要: 본 발명은 저지연 콘텐츠 스트리밍을 지원하는 콘텐츠 서버 및 방법이 개시된다. 본 발명의 콘텐츠 서버는 사용자 단말과 통신을 하는 통신부, 사용자 단말의 접속이 감지되면 사용자 단말로부터 수신된 이미지를 포함하는 단말 데이터를 이용하여 현재 사용자의 위치와 카메라 포즈(pose)에 대한 좌표 산출 및 3차원 공간을 생성하고, 생성된 3차원 공간에 객체를 위치시키며, 사용자의 시점에서 재생되는 영상을 2차원 영상으로 렌더링한 후, 분할하여 서버 데이터를 생성하고, 생성된 서버 데이터를 상기 사용자 단말로 전송시키는 제어부를 포함한다.
-
公开(公告)号:WO2023075013A1
公开(公告)日:2023-05-04
申请号:PCT/KR2021/018760
申请日:2021-12-10
申请人: 한국전자기술연구원
IPC分类号: H04N21/81 , H04N21/262 , H04N21/236 , H04N21/438 , H04N21/431 , H04N21/643
摘要: 엣지 서버와 연동하는 AR 스트리밍 장치가 제공된다. 상기 장치는 카메라 및 소정의 관성 센서를 포함하는 센싱 모듈, AR 영상을 스트리밍하는 디스플레이 모듈, 상기 엣지 서버 및 센싱 모듈과 데이터를 송수신하는 통신모듈, 상기 데이터를 기반으로 AR 스트리밍 서비스를 제공하기 위한 프로그램이 저장된 메모리 및 상기 메모리에 저장된 프로그램을 실행시키는 프로세서를 포함한다. 이때, 상기 프로세서는 상기 프로그램을 실행시킴에 따라, 상기 센싱 모듈을 통해 이미지 데이터 및 관성 데이터를 획득하면, 상기 이미지 데이터 및 관성 데이터를 동기화 및 인코딩을 수행하여 상기 통신모듈을 통해 엣지 서버로 전송하고, 상기 엣지 서버로부터 분할 렌더링 처리된 AR 영상(이하, 분할 렌더링 AR 영상)을 수신하면, 상기 분할 렌더링 AR 영상을 디코딩 및 블렌딩 처리하여, 상기 디스플레이 모듈을 통해 스트리밍되도록 제어한다.
-
公开(公告)号:WO2023074999A1
公开(公告)日:2023-05-04
申请号:PCT/KR2021/017527
申请日:2021-11-25
申请人: 한국전자기술연구원
IPC分类号: H04N13/271 , H04N13/243 , H04N13/239 , H04N13/257 , H04N13/189 , H04N13/167 , H04N13/139
摘要: 본 발명은 상기 3D AR 객체 이미지 수집 장치가, 복수의 카메라로부터 피사체에 대한 RGB 이미지 및 Depth 이미지를 획득하는 단계, 상기 피사체 중 적어도 일부 객체에 대응하는 RGB 부분 데이터 및 상기 적어도 일부 객체 대응하는 Depth 부분 데이터를 상기 RGB 이미지 및 상기 Depth 이미지에서 필터링하는 단계, 상기 필터링된 상기 RGB 부분 데이터와 상기 Depth 부분 데이터를 기반으로 3D 포인트 클라우드 데이터를 생성하여 저장하는 단계를 포함하는 3D AR 객체 영상 실시간 획득을 지원하는 3D AR 객체 이미지 수집 장치를 운용하는 방법 및 이 방법이 적용되는 시스템을 개시한다.
-
-
-
-
-
-
-
-
-