公开(公告)号：WO2018106505A1

公开(公告)日：2018-06-14

申请号：PCT/US2017/063872

申请日：2017-11-30

申请人： SONY CORPORATION ,  SONY INTERACTIVE ENTERTAINMENT INC. ,  SHINTANI, Peter

发明人： SHINTANI, Peter ,  GONZALEZ HERNANDEZ, Jose Omar ,  CLAY, William ,  ESPINOSA, Pablo Antonio ,  ANSFIELD, Fred ,  MOHAPATRA, Bibhudendu ,  RESCH, Keith ,  USAMI, Morio

IPC分类号： G06T5/00 ,  G06T7/521

CPC分类号： H04N13/128 ,  G06T5/002 ,  G06T7/521 ,  G06T2207/10024 ,  G06T2207/10028 ,  H04N13/15

摘要： A camera based depth mapping system. Depth information is coded with colors to make a laser-generated 3D depth map easier to interpret. In the event that the laser illumination is not sufficient, the depth information can have a low signal to noise ratio, i.e., the depth map can be noisy. Color noise reduction techniques are used to alleviate this problem.

公开(公告)号：WO2018006296A1

公开(公告)日：2018-01-11

申请号：PCT/CN2016/088829

申请日：2016-07-06

申请人： SZ DJI TECHNOLOGY CO., LTD.

发明人： YANG, Kang ,  GAO, Mingming

IPC分类号： H04N13/00

CPC分类号： G06T7/593 ,  G06K9/6202 ,  G06K2009/6213 ,  G06T2207/10012 ,  G06T2207/20021 ,  H04N13/128 ,  H04N13/239 ,  H04N2013/0081

摘要： Systems for stereoscopic imaging and methods for making and using same. The system can include one or more processors configured to receive a first image and a second image. A block configuration can be selected from a plurality of block configurations having varying shapes and/or sizes and used for block matching. Points on the first image can be matched with corresponding points on the second image using the selected block configurations, thereby identifying a binocular disparity between the images for depth determination. The present systems and methods are suitable for use aboard mobile platforms such as unmanned aerial vehicles (UAV).

摘要翻译： 立体成像系统及其制造和使用方法。 该系统可以包括被配置为接收第一图像和第二图像的一个或多个处理器。 可以从具有不同形状和/或尺寸的多个块配置中选择块配置并用于块匹配。 可以使用选择的块配置将第一图像上的点与第二图像上的对应点相匹配，由此识别图像之间的双目视差以进行深度确定。 目前的系统和方法适用于诸如无人机（UAV）之类的移动平台上。

公开(公告)号：WO2017195513A1

公开(公告)日：2017-11-16

申请号：PCT/JP2017/014549

申请日：2017-04-07

申请人： ソニー株式会社

发明人： 赤尾　雅人 ,  西堀　一彦

IPC分类号： H04N7/18 ,  G06T19/00 ,  H04N7/14 ,  H04N13/00 ,  H04N13/04

CPC分类号： H04N13/31 ,  G06T15/205 ,  H04N7/147 ,  H04N7/157 ,  H04N13/128 ,  H04N13/368

摘要： 双方向コミュニケーションを実行する情報処理装置間で送受信する仮想視点画像を、より自然な立体画像とする構成を実現する。仮想視点画像の視聴ユーザの視聴位置情報に基づいて、仮想視点画像を撮影する仮想カメラの位置に相当する仮想視点位置を算出する仮想視点位置算出部と、仮想視点位置からの撮影画像に相当する仮想視点画像を生成する仮想視点画像生成部を有する。仮想視点画像生成部は、被写体ユーザを撮影した実カメラの撮影画像に基づいて仮想視点画像を生成する構成であり、被写体ユーザと異なる位置に設定した仮想カメラ撮影方向設定点Ｃに撮影方向を設定した仮想視点画像を生成する。例えば、被写体ユーザの前方位置に設定した仮想カメラ撮影方向設定点Ｃに撮影方向を向けて撮影したと想定される仮想視点画像を生成する。

摘要翻译： 实现其中在执行双向通信的信息处理设备之间发送和接收的虚拟视点图像是更自然的立体图像的配置。 虚拟视点位置计算单元，其基于虚拟视点图像的观看者的观看位置信息，计算与虚拟视点图像的虚像相机的位置相对应的虚拟视点位置; 以及生成虚拟视点图像的虚拟视点图像生成单元。 虚拟视点图像生成器被配置为基于通过拍摄拍摄对象的用户所获得的图像的实际照相机上生成虚拟视点图像，在虚拟相机中设定的拍摄方向与不同位置的对象用户的拍摄方向设定点C组 由此生成虚拟视点图像。 例如，生成应该拍摄方向与虚拟相机拍摄方向设定点C相对的虚拟视点图像，该虚拟相机拍摄方向设定点C被设定在被摄体用户的前方位置。

公开(公告)号：WO2017155825A1

公开(公告)日：2017-09-14

申请号：PCT/US2017/020760

申请日：2017-03-03

申请人： SONY CORPORATION ,  HUANG, Ko-Kai Albert

发明人： HUANG, Ko-Kai Albert ,  LIU, Ming-Chang

IPC分类号： G06T7/285 ,  G06T7/292 ,  G06T7/593 ,  G06T17/05 ,  G06T17/10

CPC分类号： H04N13/282 ,  G06T7/579 ,  G06T7/593 ,  G06T2207/10021 ,  H04N13/111 ,  H04N13/128 ,  H04N13/239 ,  H04N13/243 ,  H04N2013/0081

摘要： A 3D multiview reconstruction method takes a sequence of 2D stereo images from a narrow field-of-view imager (e.g., camera) and reconstructs a 3D representation of the wide field-of-view object or scene. The 3D multiview reconstruction method tracks 2D image pixels across neighboring frames and constraints for frame integration via 3D model construction.

摘要翻译： 3D多视图重建方法从窄视野成像器（例如，相机）获取一系列2D立体图像并且重构宽视野对象或场景的3D表示 。 3D多视图重建方法通过3D模型构建跟踪相邻帧中的2D图像像素和帧集成约束。

公开(公告)号：WO2017143572A1

公开(公告)日：2017-08-31

申请号：PCT/CN2016/074584

申请日：2016-02-25

申请人： INTEL CORPORATION ,  WU, Yi ,  JIANG, Yong

发明人： WU, Yi ,  JIANG, Yong

IPC分类号： H04N13/00

CPC分类号： H04N13/128 ,  H04N13/144 ,  H04N2013/0085

摘要： Techniques are provided for calculating temporally coherent disparity values for pixels in a sequence of image frames. An example method may include calculating initial spatial disparity costs between a pixel of a first image frame from a reference camera and pixels from an image frame from a secondary camera. The method may also include estimating a motion vector for the pixel of the first reference camera image frame to a corresponding pixel from a second reference camera image frame. The method may further include calculating a confidence value for the estimated motion vector based on a measure of similarity between the colors of the pixels of the first and second image frames from the reference camera. The method may further include calculating temporally coherent disparity costs based on the initial spatial disparity costs weighted by the confidence value and selecting a disparity value based on those costs.

摘要翻译： 提供了用于计算图像帧序列中的像素的时间相干视差值的技术。 示例方法可以包括计算来自参考相机的第一图像帧的像素和来自辅助相机的来自图像帧的像素之间的初始空间视差成本。 该方法还可以包括将第一参考相机图像帧的像素的运动矢量估计为来自第二参考相机图像帧的对应像素。 该方法可以进一步包括基于来自参考相机的第一和第二图像帧的像素的颜色之间的相似性度量来计算估计的运动向量的置信度值。 该方法可以进一步包括基于由置信度值加权的初始空间视差成本并且基于那些成本选择视差值来计算时间上一致的视差成本。

公开(公告)号：WO2017095575A1

公开(公告)日：2017-06-08

申请号：PCT/US2016/059964

申请日：2016-11-01

申请人： EMPIRE TECHNOLOGY DEVELOPMENT LLC

发明人： CRONIE, Harm, Stefan

IPC分类号： G06K9/00

CPC分类号： H04N13/271 ,  G01B11/2513 ,  G01C11/06 ,  G06K9/2036 ,  G06K9/46 ,  G06K2009/00583 ,  H04N13/128 ,  H04N13/25 ,  H04N13/254 ,  H04N2013/0081

摘要： Technologies are generally described for coordination of structured light-based image detectors. In some examples, one or more structured light, sources may be configured to project sets of points onto the scene. The sets of points may be arranged into disjoint sets of geometrical shapes such as lines, where each geometrical, shape includes a subset of the points projected by an illumination source. A relative position and or a color of the points in each geometrical shape may encode an identification code with which each illumination source may be identified. Thus, even when the point clouds projected by each of the illumination sources overlap, the geometrical shapes may still be detected, and thereby a corresponding illumination source may be identified. A depth map may then be estimated based on stereovision principles or depth-from-focus principles by one or more image detectors.

摘要翻译： 通常描述技术用于协调结构化的基于光的图像检测器。 在一些示例中，一个或多个结构化光源可以被配置为将多组点投影到场景上。 这些点集合可以被排列成不相交的几何形状集合，例如线条，其中每个几何形状包括由照明源投影的点的子集。 每个几何形状中的点的相对位置和/或颜色可以编码识别码，利用该识别码可以识别每个照明源。 因此，即使当由每个照明源投影的点云重叠时，几何形状仍然可以被检测到，并且由此可以识别相应的照明源。 然后可以基于立体视觉原理或通过一个或多个图像检测器的从焦点深度原理来估计深度图。

公开(公告)号：WO2017079458A1

公开(公告)日：2017-05-11

申请号：PCT/US2016/060364

申请日：2016-11-03

申请人： OCULUS VR, LLC

发明人： TRAIL, Nicholas, Daniel ,  FIX, Alexander, Jobe

IPC分类号： G02B27/01 ,  G02B27/22 ,  G03B35/18

CPC分类号： H04N13/344 ,  G06T19/006 ,  H04N13/128 ,  H04N13/239 ,  H04N13/254

摘要： A an augmented reality (AR) headset includes a depth camera assembly that combines stereo imaging with structured light (SL) to generate depth information for an area of interest. The depth camera assembly includes at least two image capture devices and a SL illuminator and determines an imaging mode based on a signal to noise ratio or spatial variance of images captured by one or more of the cameras. Different imaging modes correspond to different operation of one or more image capture devices and the SL illuminator. The depth camera assembly includes different ranges of signal to noise ratios that each correspond to an imaging mode, and the depth camera assembly configures the image capture devices and the SL illuminator based on an imaging mode associated with a range of signal to noise ratios including the signal to noise ratio of a captured image.

摘要翻译： 增强现实（AR）头戴式耳机包括深度相机组件，其将立体成像与结构光（SL）组合以生成感兴趣区域的深度信息。 深度相机组件包括至少两个图像捕捉设备和SL照明器，并且基于由一个或多个相机捕捉的图像的信噪比或空间变化来确定成像模式。 不同的成像模式对应于一个或多个图像捕获设备和SL照明器的不同操作。 深度相机组件包括不同范围的信噪比，每个信噪比对应于成像模式，并且深度相机组件基于与一定范围的信噪比相关联的成像模式来配置图像捕捉设备和SL照明器，所述信噪比范围包括 捕获图像的信噪比。

公开(公告)号：WO2017040784A1

公开(公告)日：2017-03-09

申请号：PCT/US2016/049904

申请日：2016-09-01

申请人： NIMS, Jerry ,  KARSZES, William ,  POL, Samuel

发明人： NIMS, Jerry ,  KARSZES, William ,  POL, Samuel

IPC分类号： G03B35/14 ,  G06T7/00 ,  H04N1/00 ,  H04N13/00 ,  H04N13/02

CPC分类号： G03B35/14 ,  G03B35/02 ,  G03B37/04 ,  G03B2206/00 ,  H04N1/00201 ,  H04N13/128 ,  H04N13/194 ,  H04N2013/0081

摘要： A systematic approach to producing multi-dimensional photon images on a computer platform having applications to a plurality of input image(s) from various sources, and applications to coordinate and adjust numerous variables which determine the quality of the image, such as the size of the imported images, the output image size, the resolving power of the viewing screen and the width of the resolving elements, the dots per inch of the output device (or pixels per inch), the desired nearest object, the desired furthest object and the determination of the central or the "key subject", rules of interphasing, the number of frames or layers, the minimum parallax, and the maximum parallax, and, thus, provide a digital multi-dimensional image without jumping images or fuzzy features or other visual distortions by creating high quality output images both in the form of a printed hardcopy or as a viewed image on an appropriate viewing device.

摘要翻译： 在计算机平台上产生多维光子图像的系统方法，其具有来自各种来源的多个输入图像的应用，以及用于协调和调整确定图像质量的许多变量的应用，诸如 导入的图像，输出图像大小，观看屏幕的分辨率和分辨率元素的宽度，输出设备的每英寸点数（或每英寸像素），期望的最近对象，期望的最远对象和 确定中央或“关键主体”，间隔规则，帧数或层数，最小视差和最大视差，因此，提供数字多维图像而不跳跃图像或模糊特征或其他 通过在适当的观看设备上以打印的硬拷贝的形式或作为观看图像的形式创建高质量的输出图像来实现视觉失真。

公开(公告)号：WO2017023471A1

公开(公告)日：2017-02-09

申请号：PCT/US2016/040995

申请日：2016-07-05

申请人： INTEL CORPORATION

发明人： LIU, Haowei ,  BEN HIMANE, Mohamed Selim ,  KESELMAN, Leonid M.

IPC分类号： H04N5/225 ,  H04N13/02 ,  H04N5/33 ,  G06T7/00

CPC分类号： H04N13/128 ,  G06T5/005 ,  G06T2207/10021 ,  G06T2207/10028 ,  H04N13/271 ,  H04N2013/0081

摘要： Techniques related to depth image enhancement for hardware generated depth images are discussed. Such techniques may include determining a depth image enhancement indicator for a depth image based on the depth image and a depth image model and generating pixel depth values for missing pixel depth values of the depth image when the depth image enhancement indicator indicates enhancement. The pixel depth values may be generated based on search windows that extend from a position greater than a predetermined disparity position to a maximum disparity position.

摘要翻译： 讨论了与硬件生成的深度图像的深度图像增强相关的技术。 这样的技术可以包括当深度图像增强指示符指示增强时，基于深度图像和深度图像模型确定用于深度图像的深度图像增强指示符，并且为深度图像的缺失像素深度值生成像素深度值。 可以基于从大于预定视差位置的位置延伸到最大视差位置的搜索窗口来生成像素深度值。

公开(公告)号：WO2016190702A1

公开(公告)日：2016-12-01

申请号：PCT/KR2016/005630

申请日：2016-05-27

申请人： 엘지이노텍 주식회사

发明人： 이동현

IPC分类号： F21S8/10 ,  F21S2/00 ,  F21V8/00 ,  F21S10/00

CPC分类号： H04N13/128 ,  B60Q1/0058 ,  F21S2/00 ,  F21S10/00 ,  F21S43/00 ,  F21S43/16 ,  F21S43/239 ,  F21S43/245 ,  F21S43/26 ,  G02B6/0033

摘要： 본 발명은 다양한 입체 효과를 구현할 수 있는 조명장치 및 이를 포함하는 차량 램프에 관한 것으로, 인접하는 광원 모듈에 배치되는 발광층의 여기광의 상호 작용을 통해 최종 출사되는 광 패턴의 부피감, 깊이감, 입체감을 구현할 수 있도록 하여 다양한 3차원 광의 디자인을 구현할 수 있다. 특히, 본 발명의 실시예에 따른 조명을 차량 램프에 적용하는 경우 램프의 발광색 및 형상을 자유롭게 구현할 수 있는 장점이 있다.

摘要翻译： 本发明涉及能够实现各种三维效果的照明装置，以及包括该照明装置的车灯，并且可以通过实施大量的效果，深度效果和三维效果来实现各种三维照明的设计， 通过布置在相邻光源模块上的发光层的激发光的相互作用，最终发射的光图案的三维效果。 特别地，如果将根据本发明的一个实施例的照明应用于车辆灯，则可以自由地实现灯的发光颜色和形式。