Abstract:
본 발명은 이동형 디바이스에 포함된 고화질 카메라 및 광각 카메라를 이용하여 가상현실 콘텐츠에 대한 사용자의 시선을 유도하는 시스템 및 그 방법에 관한 것으로, 이동형 디바이스의 움직임과 사용자 시선의 움직임의 불일치로 인하여 발생되는 문제점을 해결하기 위해, 사용자에게 적절한 사용자 인터페이스와 가상현실 콘텐츠를 동시에 제공할 수 있다.
Abstract:
본 발명은 디스플레이 장치에서 표시되는 3D 이미지에서 사용자의 동작에 의한 이벤트가 발생되면, 상기 사용자의 동작에 대응하는 제1 입체형상의 제1 부분 공간을 획득하는 타겟팅(Targeting)부 및 상기 타겟팅부가 획득한 제1 부분 공간의 범위 내에서 사용자의 제스쳐에 따라 위치와 스케일이 조절되는 제2 입체형상의 제2 부분 공간을 획득하는 개선부를 포함한다.
Abstract:
본 발명은 카메라를 통해 획득된 깊이 정보를 포함하는 3차원 영상을 기반으로 레퍼런스 좌표계(Reference Coordinates)를 생성하는 과정과, 상기 카메라를 통해 획득된 깊이 정보를 포함하는 3차원 이미지로부터 기설정된 오브젝트의 깊이 정보와 색공간(color space) 변환을 기반으로 상기 기설정된 오브젝트에 대응하는 영역을 분할하는 과정과, 분할된 영역의 오브젝트로부터 모션 성분을 가지는 서브 오브젝트를 분리하고, 분리된 상기 서브 오브젝트 및 상기 서브 오브젝트에 연계된 팜(palm) 영역을 기설정된 알고리즘을 기반으로 모델링하여 특징점을 검출하는 과정과, 소정의 유저 인터페이스를 통해 제공되는 오브젝트의 관절 정보를 기반으로 상기 서브 오브젝트의 자세를 추정하여 증강현실 서비스 이용을 위한 3D객체를 제어하는 과정을 포함함을 특징으로 한다.
Abstract:
본 발명에 의한 헤드 마운트 디스플레이(HMD)를 사용하는 협업 방법은, 로컬 영역의 사용자 및 원격 영역의 사용자가 공통 오브젝트를 이용하여 협업할 수 있는 공통 공간을 가상 세계(virtual world)의 영상에 생성하는 단계; 스테레오 카메라로부터 공통 공간을 포함하는 실세계(real world)의 영상을 획득하는 단계; 깊이 센서로부터 획득한 핸드 트랙킹 정보로부터 실세계의 영상 내에서의 사용자의 손의 위치를 결정하는 단계; 핸드 트랙킹 정보를 이용하여, 사용자의 손의 위치에 대응되는 위치에 존재하며, 가상 세계의 영상에 표시되는 마스크 메쉬를 생성하는 단계; 원격 공간 사용자의 HMD 트랙킹 정보 및 핸드 트랙킹 정보를 사용하여, 가상 세계의 영상에 표시될 아바타를 생성하는 단계; 실세계의 영상과 가상세계의 영상을 각각 결합하여, 실세계의 영상에 공통 공간, 마스크 메쉬 및 아바타가 표시되는 출력 영상을 생성하는 단계; 및 HMD에 출력 영상을 표시하는 단계를 포함한다.
Abstract:
본 발명은 HMD(Head Mounted Display)가 구비된 웨어러블(wearable) 디바이스와, 상기 웨어러블 디바이스와 페어링(pairing)되어 GUI 인터페이스를 통해 시나리오 기반 기설정된 플로우(flow)에 대응하는 콘텐츠를 재생하고, 상기 콘텐츠에 형성된 오브젝트에 인터럽트(interrupt) 발생 시 상기 웨어러블 디바이스로부터 뷰잉(viewing) 되는 3차원 공간에 해당 오브젝트를 오버레이(overlay)하여 증강현실 영상을 생성하고, 사용자 제스처(gesture)에 따라 오버레이된 오브젝트별 상태를 변환하고, 움직임 센서를 통해 센싱되는 움직임 정보를 기반으로 상기 오브젝트의 위치 영역을 변환하는 증강현실 서비스 제공 단말과, 자기 센서(magnetic sensor)를 구비하고, 상기 증강현실 서비스 제공 단말로부터 출력되는 오브젝트를 선택하거나 활성화하는 포인팅 디바이스를 포함함을 특징으로 한다.
Abstract:
본 발명은 깊이 이미지에서 적외선 이미지로의 도메인 전이학습을 기반으로 빠른 손 동작에 대한 3차원 손 자세를 추정하는 손 자세 추정 방법 및 시스템에 관한 것으로서, 손 움직임에 대한 깊이 이미지 및 적외선 이미지를 처리하는 단계, 손 이미지 생성기(HIG)를 이용하여 상기 적외선 이미지에서 깊이 맵을 합성하며, 상기 깊이 맵 및 적외선 맵 각각에서 손 관절의 골격 위치를 추정하는 단계 및 상기 골격 위치와 손 깊이 이미지의 중심을 이용하여 3차원 손 자세를 산출하는 단계를 포함한다.
Abstract:
본 발명은 사용자 인터럽트(interrupt)를 통해 잠금 해제 인터페이스를 디스플레이하는 과정과, 상기 잠금 해제 인터페이스를 통해 입력된 잠금 해제 패턴을 수신하는 과정과, 상기 수신된 잠금 해제 패턴을 검출하고 검출된 잠금 해제 패턴에 대응하는 모드를 실행하여 상기 검출된 잠금 해제 패턴에 대응하는 오브젝트의 상태 정도를 측정하는 과정과, 기설정되어 분류된 오브젝트 유형에 따라 유형별 적정 상태 정도 범위가 측정되어 매칭된 룩업 테이블을 호출하여 상기 측정된 오브젝트의 상태 정도를 판단하고, 판단 결과를 상기 잠금 해제 인터페이스를 통해 피드백하는 과정을 포함함을 특징으로 한다.
Abstract:
본 발명은 증강현실 기반 콘텐츠 서비스 제공을 위한 서비스 수행 시 관람 시점 기반 정보 제공 서비스 지원을 위한 저작 모드가 실행되면, 가이드하고자 하는 콘텐츠 내 소정 관람 시점 기반 기설정된 저작 항목 관련 데이터를 수집하는 과정과, 기설정된 증강현실 콘텐츠 서비스 정책을 기반으로 수집된 저작 항목별 데이터를 렌더링하여 해당 관람 시점에 대응하는 메타 데이터에 매칭하여 저장하는 과정과, 뷰어 모드 실행 시 센싱되는 사용자의 상태 정보를 기반으로 기설정된 주기별 뷰잉 영역에 디스플레이되는 콘텐츠의 관람 시점의 메타 데이터를 체크하는 과정과, 체크 결과, 해당 콘텐츠에 대응하는 관람 시점별 메타 데이터와 일치하는 경우 상기 메타 데이터를 상기 뷰잉 영역에 디스플레이되는 콘텐츠에 정합하여 증강하는 과정을 포함하고, 상기 콘텐츠는 사용자의 움직임에 따라 뷰잉(viewing)되는 실제 3차원 공간 혹은 소정 시나리오 기반 가상 현실 공간임을 특징으로 한다.
Abstract:
본 발명은 원격지에 위치한 사용자들이 정보를 실시간으로 공유할 수 있는 증강현실 기반의 디지로그 공간을 생성하는 디지로그 공간 생성기 및 이를 이용한 디지로그 공간 생성 방법에 관한 기술로, 본 발명에 따른 디지로그 공간 생성기는 현재 위치에서 촬영된 이미지를 입력하고, 관심 객체 및 공간의 입력신호를 발생시키고 원격 협업을 위한 증강현실 정보를 표시하는 입출력 장치부, 상기 입출력 장치부에서 전달받은 이미지 및 입력신호를 기반으로 3D 특징맵에서 관심 객체를 모델링 후, 현재 위치의 디지로그 공간을 생성하고, 원격에서 생성된 디지로그 공간 정보를 이용하여, 현재 위치의 디지로그 공간과 결합하는 디지로그 공간 처리부 및 상기 디지로그 공간 처리부에서 생성된 디지로그 공간 및 객체 정보를 관리하는 디지로그 공간 관리부를 포함하는 것을 기술적 특징으로 한다.
Abstract:
본 발명은 복수의 360 이미지를 사용하여 대규모 6-DOF 가상 환경을 구축하고 새로운 시점에서 장면을 합성하는 6 자유도 가상현실을 위한 다중 360 이미지 기반의 자유시점 이미지 합성 방법 및 그 시스템에 관한 것으로, 360 이미지(360 Images)에 대한 3D 재구성 절차를 수행하여 3D 기하학적 정보를 복구하며, 복수의 360 이미지를 하나로 통합하는 가상 데이터 맵을 재구성하는 단계, 상기 가상 데이터 맵에서 추출된 뷰 포인트에서 가장 근접한 기준 이미지를 사용하여 투영 및 정점 워핑(Projection & Vertex Warping)의 뷰 합성 알고리즘을 적용하여 사용자 시점에 해당하는 뷰 이미지를 생성하는 단계 및 상기 기준 이미지의 위치와 상기 뷰 포인트의 위치 사이의 거리에 기초한 내부 분할에 대한 섹션 공식을 통해 6 자유도(DoF)를 위한 상기 뷰 이미지를 혼합하는 단계를 포함한다.