CN110581936A - 产生深度图像的图像装置和相关的电子装置 - Google Patents

产生深度图像的图像装置和相关的电子装置 Download PDF

Info

Publication number
CN110581936A
CN110581936A CN201910495324.XA CN201910495324A CN110581936A CN 110581936 A CN110581936 A CN 110581936A CN 201910495324 A CN201910495324 A CN 201910495324A CN 110581936 A CN110581936 A CN 110581936A
Authority
CN
China
Prior art keywords
image
depth
color
depth image
acquirer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910495324.XA
Other languages
English (en)
Inventor
李季峰
陈永纬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eys 3d Co Ltd
Original Assignee
Eys 3d Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eys 3d Co Ltd filed Critical Eys 3d Co Ltd
Publication of CN110581936A publication Critical patent/CN110581936A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85—Stereo camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/97—Determining parameters from multiple pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0266—Details of the structure or mounting of specific components for a display module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/15—Processing image signals for colour aspects of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/957—Light-field or plenoptic cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3225—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title of data relating to an image, a page or a document
    • H04N2201/3254—Orientation, e.g. landscape or portrait; Location or order of the image data, e.g. in memory
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/3201—Display, printing, storage or transmission of additional information, e.g. ID code, date and time or title
    • H04N2201/3274—Storage or retrieval of prestored additional information
    • H04N2201/3277—The additional information being stored in the same storage device as the image data

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Electromagnetism (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开了一种产生深度图像的图像装置和相关的电子装置。所述图像装置包含至少二图像获取器和一旋转装置。当所述旋转装置旋转所述至少二图像获取器时，所述至少二图像获取器所获取的多个图像是用以产生一深度图像，其中所述深度图像所对应的视角不小于所述至少二图像获取器中的每一图像获取器的视角。因此，相较于现有技术，所述图像装置并不会有现有技术的光学中心无法重合的问题。

Description

产生深度图像的图像装置和相关的电子装置
技术领域
本发明涉及一种图像装置和电子装置，尤其涉及一种具有简单机构以产生深度图像的图像装置，以及可根据电子装置的移动显示相对应的深度图像的电子装置。
背景技术
在现有技术中，产生全景深度图像的图像装置通常包含二图像获取组，且每一图像获取组包含二个以上图像获取器，其中所述二图像获取组中的一图像获取组用以获取多个第一图像，以及所述二图像获取组中的另一图像获取组用以获取多个第二图像。然后，所述图像装置内的处理器利用所述多个第一图像和所述多个第二图像产生多个对应不同视角的深度图像，以及拼接所述多个深度图像为一360度全景深度图像。然而，因为所述每一图像获取组所包含的多个图像获取器的光学中心无法完全重合(也就是说所述图像装置的机构具有本质上的缺陷)，所以所述图像装置必须先对所述多个图像获取器所获取的多个图像作图像处理(例如整合所述多个图像获取器的光学中心为一虚拟光学中心)以产生所述360度全景深度图像，否则所述360度全景深度图像的拼接处会产生死角的问题。
另外，现有技术所公开的电子装置在显示360度全景色彩图像时，所述电子装置是以所述电子装置为中心显示360度全景色彩图像，也就是说一用户通过一触控方式控制所述电子装置浏览360度全景色彩图像时，所述电子装置只能改变显示360度全景色彩图像的视角。因此，当所述电子装置平行移动时，所述电子装置无法根据所述电子装置的移动改变所述电子装置所显示的图像。
因此，如何解决上述现有技术的问题成为一项重要议题。
发明内容
本发明的一实施例公开一种产生深度图像的图像装置。所述图像装置包含至少二图像获取器和一旋转装置。当所述旋转装置旋转所述至少二图像获取器时，所述至少二图像获取器所获取的多个图像是用以产生一深度图像，其中所述深度图像所对应的视角不小于所述至少二图像获取器中的每一图像获取器的视角。
本发明的另一实施例公开一种产生深度图像的图像装置。所述图像装置包含至少一图像获取器、至少一光源和一旋转装置。所述至少一光源用以发出一发射光。当所述旋转装置旋转所述至少一图像获取器和所述至少一光源时，所述至少二图像获取器所获取的多个图像和所述发射光是用以产生一深度图像，其中所述深度图像所对应的视角不小于所述至少一图像获取器中的每一图像获取器的视角。
本发明的另一实施例公开一种浏览全景色彩与深度图像的电子装置。所述电子装置包含一显示屏和一处理器。所述处理器是用以读取一360度全景色彩图像和一360度全景深度图像，其中所述360度全景色彩图像对应所述360度全景深度图像。当所述电子装置移动或转动时，所述处理器另用以根据对应所述电子装置的移动或转动的一视角转换所述360度全景色彩图像中对应所述视角的部分色彩图像为一平面色彩图像以及转换所述360度全景深度图像中对应所述视角的部分深度图像为一平面深度图像，结合所述平面色彩图像以及所述平面深度图像以产生对应所述视角的一平面色彩与深度图像，以及根据所述平面色彩与深度图像使所述显示屏显示所述平面色彩图像。
本发明公开一种产生全景深度图像的图像装置和相关的电子装置。因为所述图像装置是利用一旋转装置旋转所述图像装置所包含的多个图像获取器，以及利用一处理器根据所述多个图像获取器所获取的多个图像产生一深度图像，所以相较于现有技术，所述图像装置并不会有现有技术的光学中心无法重合的问题。另外，因为本发明所产生的360度全景色彩与深度图像具有一360度全景深度图像的深度信息，所以相较于现有技术，当所述电子装置显示所述360度全景色彩与深度图像，所述电子装置可根据所述电子装置的移动显示一相对应的平面色彩图像。
附图说明
图1是本发明的第一实施例所公开的一种产生全景深度图像的图像装置的示意图。
图2是图像装置的俯视图。
图3A是本发明的第二实施例所公开的一种产生全景深度图像的图像装置的示意图，图3B是本发明的另一实施例所公开的一种产生全景深度图像的图像装置的示意图，以及图3C是本发明的另一实施例所公开的一种产生全景深度图像的图像装置的示意图。
图4是本发明的第三实施例所公开的一种浏览全景色彩与深度图像的电子装置的示意图。
图5是说明电子装置从一位置平行移动至另一位置的示意图。
图6是说明显示屏的一区块显示所述相对应的左眼色彩图像以及显示屏的另一区块显示所述相对应的右眼色彩图像的示意图。
其中，附图标记说明如下：
100、300、350、370 图像装置
102、104、304、306 图像获取器
106 支撑单元
108 旋转装置
110、404 处理器
112 齿轮
302 光源
400 电子装置
406 惯性传感器
4022、4024 区块
A、B 位置
C1、C2 光学中心
FOV1 第一视角
FOV2 第二视角
FOV3 第三视角
FOV4 第四视角
RA 转轴
具体实施方式
请参照图1，图1是本发明的第一实施例所公开的一种产生全景深度图像的图像装置100的示意图，其中如图1所示，图像装置100包含二图像获取器102、104，一支撑单元106，一旋转装置108和一处理器110，支撑单元106耦接于旋转装置108，处理器110耦接于图像获取器102、104，图像获取器102、104是设置在支撑单元106上，以及图像获取器102、104为非鱼眼图像获取器。但在本发明的另一实施例中，图像获取器102、104为鱼眼图像获取器。另外，本发明并不受限于图像装置100包含图像获取器102、104，也就是说图像装置100可包含超过二图像获取器。另外，本技术领域的技术人员应当熟知图像获取器102、104中的每一图像获取器至少包含镜头和图像传感器(例如电荷耦合组件(Charge-coupled device,CCD)图像传感器或互补金属氧化物半导体图像传感器(Complementary Metal-Oxide-Semiconductor Image Sensor))。另外，在本发明的另一实施例中，处理器110是设置在图像装置100外的一主机内。
如图1所示，旋转装置108的转轴RA通过图像获取器102的光学中心C1和图像获取器104的光学中心C2，且旋转装置108可通过支撑单元106旋转图像获取器102、104，其中旋转装置108是由一齿轮112所带动，然而在本发明的另一实施例中，旋转装置108是由一马达所带动。当旋转装置108旋转图像获取器102、104时，如果图像获取器102所获取的多个第一图像所对应的视角的总和不小于360度(图像获取器104所获取的多个第二图像所对应的视角的总和不小于360度)，则处理器110可根据现有技术所公开的根据一特征点匹配法或一固定角度法，拼接所述多个第一图像以产生一第一360度全景色彩图像以及拼接所述多个第二图像以产生一第二360度全景色彩图像。例如当旋转装置108旋转图像获取器102、104时，图像获取器102可获取4个第一图像IM11-IM14以及图像获取器104可获取4个第二图像IM21-IM24，其中第一图像IM11和第二图像IM21对应一第一视角FOV1，第一图像IM12和第二图像IM22对应一第二视角FOV2，第一图像IM13和第二图像IM23对应一第三视角FOV3，第一图像IM14和第二图像IM24对应一第四视角FOV4，第一视角FOV1，第二视角FOV2，第三视角FOV3，和第四视角FOV4可参照图2，以及第一视角FOV1，第二视角FOV2，第三视角FOV3，和第四视角FOV4都等于90度。但在本发明的另一实施例中，第一视角FOV1，第二视角FOV2，第三视角FOV3，和第四视角FOV4可不相同。另外，因为图2为图像装置100的俯视图，所以图2并不会显示图像获取器104。因此，在图像获取器102获取4个第一图像IM11-IM14以及图像获取器104获取4个第二图像IM21-IM24后，处理器110即可根据所述特征点匹配法(例如第一图像IM11-IM14的特征点和第二图像IM21-IM24的特征点)或所述固定角度法(例如第一视角FOV1，第二视角FOV2，第三视角FOV3，和第四视角FOV4)，拼接第一图像IM11-IM14以产生所述第一360度全景色彩图像以及拼接第二图像IM21-IM24以产生所述第二360度全景色彩图像。另外，在处理器110产生所述第一360度全景色彩图像以及所述第二360度全景色彩图像后，处理器110可利用所述第一360度全景色彩图像以及所述第二360度全景色彩图像产生一360度全景深度图像，其中在本发明的一实施例中，所述360度全景深度图像中的每一深度值是对应光学中心C1或光学中心C2。但在本发明的另一实施例中，所述360度全景深度图像中的每一深度值是对应光学中心C1和光学中心C2所在的平面。另外，在本发明的另一实施例中，处理器110可根据第一图像IM11和第二图像IM21产生对应第一视角FOV1的第一深度图像，根据第一图像IM12和第二图像IM22产生对应第二视角FOV2的第二深度图像，根据第一图像IM13和第二图像IM23产生对应第三视角FOV3的第三深度图像，以及根据第一图像IM14和第二图像IM24产生对应第四视角FOV4的第四深度图像。然后，处理器110根据所述特征点匹配法或所述固定角度法，拼接所述第一深度图像、所述第二深度图像、所述第三深度图像和所述第四深度图像以产生所述360度全景深度图像。另外，在本发明的另一实施例中，当旋转装置108旋转图像获取器102、104时，图像获取器102可获取多个第一图像以及图像获取器104可获取多个第二图像，其中所述多个第一图像对应所述多个第二图像，所述多个第一图像对应的视角介于360度和图像获取器102(或图像获取器104)的视角之间。因此，处理器110拼接所述多个第一图像(或拼接所述多个第二图像)所产生的色彩图像所对应的视角也介于360度和图像获取器102(或图像获取器104)的视角之间。此时，处理器110根据所述多个第一图像和所述多个第二图像所产生的深度图像所对应的视角也介于360度和图像获取器102(或图像获取器104)的视角之间。
在处理器110产生所述360度全景深度图像后，处理器110可结合所述第一360度全景色彩图像(或所述第二360度全景色彩图像)和所述360度全景深度图像以产生一360度全景色彩与深度图像，且处理器110根据一标准压缩格式(例如联合图像专家小组(JointPhotographic Experts Group,JPEG)格式)压缩所述第一360度全景色彩图像(或所述第二360度全景色彩图像)以及根据一有损(Lossy)或无损(Lossless)格式压缩或不压缩所述360度全景深度图像以整合所述360度全景色彩与深度图像为一档案，其中所述360度全景深度图像档案是储存在所述档案的档头(header)内，也就是说所述360度全景深度图像档案通常会储存在用户定义的文件头(user defined header)区块内。另外，所述标准压缩格式并不受限于使用JPEG，也可使用PNG、MPEG1、MPEG2、MPEG4、H.264、H.265等其他标准多媒体图像或影片格式。
请参照图3A，图3A是本发明的第二实施例所公开的一种产生全景深度图像的图像装置300的示意图，其中如图3A所示，图像装置300和图像装置100的差别在于图像装置300另包含一光源302，一图像获取器304是用以获取包含光源302所产生的发射光的多个第二图像，处理器110是耦接于光源302，图像获取器304和图像获取器102，以及光源302，图像获取器102，和图像获取器304是设置在支撑单元106上。另外，所述发射光是一结构光(或所述发射光包含一随机图案(random pattern))，且光源302是利用一准直镜(collimator)、至少一激光光束(例如至少一红外线激光光束)和至少一光学组件(例如至少一绕射光学组件(Diffraction Optical Element,DOE)产生所述发射光。但在本发明的另一实施例，光源302不须所述准直镜。如图3A所示，当旋转装置108旋转光源302，图像获取器102，和图像获取器304时，图像获取器102所获取的多个第一图像是用以形成一360度全景色彩图像，图像获取器304所获取包含所述发射光的多个第二图像是用以产生一360度全景深度图像，其中所述多个第一图像所对应的视角的总和不小于360度，以及所述多个第二图像所对应的视角的总和也不小于360度。另外，在本发明的一实施例中，处理器110可根据图像装置300所处环境的亮度、所述360度全景深度图像的质量对应光源302开启与关闭时的差异的其中至少一项开启光源302。另外，在本发明的另一实施例中，当光源302是一垂直腔面发射激光(Vertical-Cavity Surface-Emitting Laser,VCSEL)时，光源302是选择地包含所述准直镜和所述至少一光学组件，也就是说所述准直镜和所述至少一光学组件对光源302而言是非必须的。另外，在本发明的另一实施例中，光源302可以是任何形式与波长的光源。
另外，在本发明的另一实施例中，处理器110可根据所述多个第二图像的每一第二图像的亮度和一目标值选择性地调整光源302的强度，其中所述目标值是根据一人体皮肤对光源302的发射光的反射系数而设定。例如处理器110可根据所述每一第二图像产生对应所述每一第二图像的亮度分布图，以及根据所述亮度分布图中大于所述目标值的至少一亮度值中的最大亮度值所在的面积占所述每一第二图像的百分比，选择性地调整光源302的强度。另外，在本发明的另一实施例中，处理器110是根据所述每一第二图像的平均亮度和所述目标值，选择性地调整光源302的强度。另外，在本发明的另一实施例中，处理器110是根据所述每一第二图像产生对应于所述每一第二图像的多个像素的亮度直方图，以及根据所述亮度直方图的中位数和所述目标值或所述亮度直方图的特定位数和所述目标值，选择性地调整光源302的强度。
另外，在本发明的另一实施例中，当光源302开启后，处理器110可根据所述每一第二图像中的至少一预定对象与图像获取器304(或图像获取器102)之间的距离和一第一查阅表，选择性地动态调整光源302的强度，其中所述第一查阅表储存对象距离与光源302的强度之间的关系。另外，在本发明的另一实施例中，处理器110一直侦测在光源302关闭的情况下图像装置300所处环境的亮度，当所述环境的亮度越亮时，则根据一第二查阅表增加光源302开启时的强度，其中所述第二查阅表储存光源302开启时的强度与所述环境的亮度之间的关系。
另外，在上述实施例中，当处理器110利用一连续模式(continuous mode)的第一脉波宽度调变信号(pulse width modulation signal)调整所述发射光的强度时，处理器110可通过改变所述第一脉波宽度调变信号的占空比(duty cycle)调整所述发射光的强度；在上述实施例中，当处理器110利用一间歇模式(burst mode)的第二脉波宽度调变信号调整所述发射光的强度时，处理器110可通过改变所述第二脉波宽度调变信号的启用时间(enabling time)ET1调整所述发射光的强度；在上述实施例中，当控制器108利用所述第一脉波宽度调变信号和所述第二脉波宽度调变信号调整所述发射光的强度时，控制器108可同时通过改变所述第二脉波宽度调变信号的启用时间和所述第一脉波宽度调变信号的占空比调整所述发射光的强度。
另外，图像装置300的其余操作原理可参照图像装置100的操作原理，在此不再赘述。
另外，在本发明的另一实施例中，光源302是应用于一飞行时间(Time of Flight(TOF))，其中当光源302是应用于所述飞行时间时，所述发射光是一漫射(diffused)光，也就是所述发射光是一均匀光。因此，处理器110即可根据图像获取器304接收一反射光的接收时间与对应所述发射光的发射时间之间的时间差，产生所述360度全景深度图像，其中所述反射光是由至少一对象反射所述发射光所产生，且此时图像获取器304为一飞行时间传感器。另外，当光源302是应用于所述飞行时间时，处理器110决定是否调整所述发射光的强度的操作原理可参照上述相关说明，在此不再赘述。
另外，因为上述处理器110的功能已被充分公开，所以本技术领域的技术人员应当可轻易地根据上述处理器110的功能的相关说明利用一具有上述处理器110的功能的现场可编程逻辑门阵列(Field Programmable Gate Array,FPGA)，或是一具有上述处理器110的功能的专用集成电路(Application-specific integrated circuit,ASIC)，或是一具有上述处理器110的功能的软件模块，或是一具有上述处理器110的功能的模拟集成电路实现处理器110。因此，处理器110的相关电路架构在此不再赘述。
另外，在本发明的另一实施例中，图像获取器102和图像获取器304可做为一立体摄像机(或一深度摄像机)，以及光源302产生的所述发射光用以辅助所述立体摄像机。处理器110可利用一分时多任务方式控制光源302。当处理器110控制光源302产生所述发射光时，所述立体摄像机是做为所述立体摄像机，以及当处理器110关闭光源302时，图像获取器102和图像获取器304所获取的图像是用以产生一色彩图像。
另外，请参照图3B，图3B是本发明的另一实施例所公开的一种产生全景深度图像的图像装置350的示意图，其中如图3B所示，图像装置350和图像装置300的差别在于图像装置350另包含一图像获取器306，其中图像获取器102和图像获取器304可做为一立体摄像机(或一深度摄像机)，光源302产生的所述发射光用以辅助所述立体摄像机，以及图像获取器306所获取的图像是用以产生一色彩图像(也就是说图像获取器306仅做为一色彩传感器且具有一红外光滤光片)。另外，图像获取器102和图像获取器304的操作原理以及图像获取器306的操作原理可参照上述相关说明，在此不再赘述，
另外，请参照图3C，图3C是本发明的另一实施例所公开的一种产生全景深度图像的图像装置370的示意图，其中如图3C所示，图像装置370和图像装置300的差别在于图像装置370不包含图像获取器304。如图3C所示，当所述发射光为一结构光时，图像获取器102为一结构光深度传感器。另外，图像获取器102可以是一飞行时间传感器，此时所述发射光为一漫射光，图像获取器102的操作原理可参照上述相关说明，在此不再赘述。
请参照图4，图4是本发明的第三实施例所公开的一种浏览全景色彩与深度图像的电子装置400的示意图，其中如图4所示，电子装置400包含一显示屏402、一处理器404和一惯性传感器406，处理器404耦接于显示屏402和惯性传感器406(因为处理器404和惯性传感器406是设置于电子装置400内，所以处理器404、惯性传感器406以及相关耦接线路以虚线表示)，以及惯性传感器406可为一陀螺仪、一加速器、一微机电***(Microelectromechanical Systems,MEMS)等。另外，电子装置400可为一智能手机或一平板计算机。但本发明并不受限于电子装置400可为一智能手机或一平板计算机。如图4所示，当处理器404接收到来自图像装置100(或图像装置300)所产生的一360度全景色彩与深度图像后，处理器404可先读取所述360度全景色彩与深度图像为一360度全景色彩图像和一360度全景深度图像，或接收其他图像装置时可分别读取一360度全景色彩图像和一360度全景深度图像，其中所述360度全景深度图像中的每一深度值是对应以电子装置400为虚拟光学中心的深度值。
当电子装置400移动或转动(如图5所示，电子装置400从一位置A移动至一位置B)时，惯性传感器406可根据电子装置400的移动或转动，决定对应电子装置400的移动的一视角(也就是说所述视角对应位置B)。在惯性传感器406决定所述视角后，处理器404可根据所述视角转换所述360度全景色彩图像中对应所述视角的部分色彩图像为一平面色彩图像以及转换所述360度全景深度图像中对应所述视角的部分深度图像为一平面深度图像，以及利用现有技术所公开的一深度图像绘图法(depth-image-based rendering,DIBR)结合所述平面色彩图像以及所述平面深度信息以产生对应所述视角的一平面色彩图像，其中当显示屏402显示所述平面色彩图像时，因为所述平面色彩图像具有所述平面深度图像的深度信息，所以所述平面色彩与深度图像可使一观看所述平面色彩图像的观看者感觉所述平面色彩图像具有立体感。另外，所述平面深度图像中的每一深度值是对应以电子装置400所在的一虚拟平面的深度值。另外，在本发明的另一实施例中，电子装置400的用户是利用一鼠标或触控显示屏402改变显示屏402用以显示所述360度全景色彩与深度图像的视角。另外，在本发明的另一实施例中，所述360度全景色彩图像和所述360度全景深度图像对应两不同的光学中心，处理器404可利用现有技术在显示屏402显示所述平面色彩图像时补偿所述两不同的光学中心的偏移。
另外，因为所述平面色彩与深度图像具有所述平面深度图像的深度信息，所以当电子装置400应用于虚拟现实(Virtual Reality,VR)，扩增实境(Augmented Reality,AR)，替代实境(Substitutional Reality,SR)，以及混合实境(Mixed Reality,MR)时，处理器404可根据所述平面深度图像的深度信息和所述深度图像绘图法，转换所述平面色彩与深度图像为一相对应的左眼色彩图像和一相对应的右眼色彩图像，其中如图6所示，显示屏402的区块4022显示所述相对应的左眼色彩图像以及显示屏402的区块4024显示所述相对应的右眼色彩图像。因此，当电子装置400安装成一头戴式显示器(Head Mount Display)时，所述观看者即可通过所述头戴式显示器和所述电子装置400观看所述虚拟现实，所述扩增实境，所述替代实境，以及所述混合实境的内容。另外，在本发明的另一实施例中，显示屏402的区块4022独立于显示屏402的区块4024，也就是说区块4022和区块4024为二独立显示器。
另外，因为上述处理器404的功能已被充分公开，所以本技术领域的技术人员应当可轻易地根据上述处理器404的功能的相关说明利用一具有上述处理器404的功能的现场可编程逻辑门阵列，或是一具有上述处理器404的功能的专用集成电路，或是一具有上述处理器404的功能的软件模块，或是一具有上述处理器404的功能的模拟集成电路实现处理器404。因此，处理器404的相关电路架构在此不再赘述。
综上所述，因为所述图像装置是利用所述旋转装置旋转所述些图像获取器，以及利用所述处理器根据所述些图像获取器所获取的多个图像产生一360度全景深度图像，所以相较于现有技术，所述图像装置并不会有现有技术的光学中心无法重合的问题。另外，因为本发明所产生的360度全景色彩与深度图像具有一360度全景深度图像的深度信息，所以相较于现有技术，当所述电子装置显示所述360度全景色彩与深度图像，所述电子装置可根据所述电子装置的移动或转动显示一相对应的平面色彩图像。
以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (16)

1.一种产生深度图像的图像装置，其特征在于包含：
至少二图像获取器；及
一旋转装置，其中当所述旋转装置旋转所述至少二图像获取器时，所述至少二图像获取器所获取的多个图像是用以产生一深度图像，其中所述深度图像所对应的视角不小于所述至少二图像获取器中的每一图像获取器的视角。
2.如权利要求1所述的图像装置，其特征在于另包含：
一支撑单元，耦接于所述旋转装置，其中所述至少二图像获取器是设置在所述支撑单元上。
3.如权利要求1所述的图像装置，其特征在于：所述旋转装置的转轴通过所述每一图像获取器的光学中心。
4.如权利要求1所述的图像装置，其特征在于：一处理器根据一特征点匹配法或一固定角度法，拼接所述至少二图像获取器中的一图像获取器所获取的多个第一图像以产生一色彩图像，根据所述特征点匹配法或所述固定角度法拼接所述至少二图像获取器中异于所述图像获取器的另一图像获取器所获取的多个第二图像以产生所述深度图像。
5.如权利要求4所述的图像装置，其特征在于：所述处理器位于所述图像装置内或位于所述图像装置外。
6.如权利要求4所述的图像装置，其特征在于：所述色彩图像与所述深度图像被整合成一色彩与深度图像，且所述色彩与深度图像被储存成一档案。
7.如权利要求6所述的图像装置，其特征在于：当所述色彩与深度图像被储存成所述档案时，所述色彩图像是根据一联合图像专家小组格式压缩以及所述深度图像是根据一无损格式压缩，且压缩后的深度图像是储存在所述档案的档头内。
8.一种产生深度图像的图像装置，其特征在于包含：
至少一图像获取器；
至少一光源，用以发出一发射光；及
一旋转装置；
其中当所述旋转装置旋转所述至少一图像获取器和所述至少一光源时，所述至少一图像获取器所获取的多个图像和所述发射光是用以产生一深度图像，其中所述深度图像所对应的视角不小于所述至少一图像获取器中的每一图像获取器的视角。
9.如权利要求8所述的图像装置，其特征在于：当所述旋转装置旋转所述至少一图像获取器和所述至少一光源时，所述至少二图像获取器中的一图像获取器所获取包含所述发射光的多个图像或对应所述发射光从所述至少一光源经由每一对象反射至所述另一图像获取器的飞行时间是用以产生所述深度图像。
10.如权利要求9所述的图像装置，其特征在于：当所述多个图像是用以产生所述深度图像时，所述发射光是一结构光。
11.如权利要求8所述的图像装置，其特征在于另包含：
一支撑单元，耦接于所述旋转装置，其中所述至少一图像获取器和所述至少一光源是设置在所述支撑单元上。
12.如权利要求8所述的图像装置，其特征在于：所述旋转装置的转轴通过所述至少一图像获取器中的每一图像获取器的光学中心。
13.一种浏览全景色彩与深度图像的电子装置，其特征在于包含：
一显示屏；及
一处理器，用以读取一360度全景色彩图像和一360度全景深度图像，其中所述360度全景色彩图像对应所述360度全景深度图像；
其中当所述电子装置移动或转动时，所述处理器另用以根据对应所述电子装置的移动或转动的一视角转换所述360度全景色彩图像中对应所述视角的部分色彩图像为一平面色彩图像以及转换所述360度全景深度图像中对应所述视角的部分深度图像为一平面深度图像，结合所述平面色彩图像以及所述平面深度图像以产生对应所述视角的一平面色彩与深度图像，以及根据所述平面色彩与深度图像使所述显示屏显示所述平面色彩图像。
14.如权利要求13所述的电子装置，其特征在于另包含：
一惯性传感器，用以根据所述电子装置的移动或旋转，决定对应所述电子装置的移动或旋转的所述视角。
15.如权利要求13所述的电子装置，其特征在于：所述360度全景深度图像中的每一深度值是对应以所述电子装置为虚拟光学中心的深度值，以及所述平面深度图像中的每一深度值是对应以所述电子装置所在的一虚拟平面的深度值。
16.如权利要求13所述的电子装置，其特征在于：当所述处理器结合所述平面色彩图像以及所述平面深度图像以产生所述平面色彩与深度图像，所述处理器会转换所述平面深度图像为对应一虚拟光学平面的深度信息以使所述平面色彩与深度图像具有所述深度信息。
CN201910495324.XA 2018-06-07 2019-06-10 产生深度图像的图像装置和相关的电子装置 Pending CN110581936A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201862681683P 2018-06-07 2018-06-07
US62/681,683 2018-06-07

Publications (1)

Publication Number Publication Date
CN110581936A true CN110581936A (zh) 2019-12-17

Family

ID=68764333

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910492688.2A Active CN110580718B (zh) 2018-06-07 2019-06-06 图像装置的校正方法及其相关图像装置和运算装置
CN201910495324.XA Pending CN110581936A (zh) 2018-06-07 2019-06-10 产生深度图像的图像装置和相关的电子装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910492688.2A Active CN110580718B (zh) 2018-06-07 2019-06-06 图像装置的校正方法及其相关图像装置和运算装置

Country Status (3)

Country Link
US (5) US20190387165A1 (zh)
CN (2) CN110580718B (zh)
TW (2) TWI761684B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115278067A (zh) * 2022-07-19 2022-11-01 Oppo广东移动通信有限公司 相机、电子设备、拍摄方法及存储介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190387165A1 (en) * 2018-06-07 2019-12-19 Eys3D Microelectronics, Co. Image device for generating depth images and related electronic device
EP3817683A4 (en) * 2018-07-03 2022-04-20 Covidien LP SYSTEMS, METHODS AND COMPUTER READABLE MATERIALS FOR DETECTING IMAGE DEGRADATION DURING SURGICAL PROCEDURES
US11215828B1 (en) * 2018-08-03 2022-01-04 Rockwell Collins, Inc. In field visor characterization for visor projected displays
WO2021216037A1 (en) * 2020-04-20 2021-10-28 Hewlett-Packard Development Company, L.P. Image rendering
CN116406461B (zh) * 2020-10-13 2023-10-20 弗莱瑞尔公司 通过自动分析传感器数据生成物理结构和环境的测量结果

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308018A (zh) * 2008-05-30 2008-11-19 汤一平 基于双目全方位视觉传感器的立体视觉测量装置
CN101577795A (zh) * 2009-06-17 2009-11-11 深圳华为通信技术有限公司 一种实现全景图像的实时预览的方法和装置
CN102812497A (zh) * 2011-03-03 2012-12-05 松下电器产业株式会社 能够提供随后体验影像的影像提供装置、影像提供方法、影像提供程序
CN202838179U (zh) * 2012-09-26 2013-03-27 天津游奕科技有限公司 一种实现全景视频交互的***
CN103081476A (zh) * 2010-06-08 2013-05-01 Sk普兰尼特有限公司 利用深度图信息转换三维图像的方法和设备
CN108401551B (zh) * 2012-10-26 2015-02-04 北京理工大学 双镜头微光立体全景成像装置及其超大视场测距方法
CN104602129A (zh) * 2015-01-27 2015-05-06 三星电子（中国）研发中心 互动式多视角视频的播放方法及***
CN104966225A (zh) * 2015-07-08 2015-10-07 深圳爱布丁梦想科技有限公司 基于移动终端和3d全景图像浏览的房屋租赁方法及***
CN105282375A (zh) * 2014-07-24 2016-01-27 钰创科技股份有限公司 附着式立体扫描模块
CN105530431A (zh) * 2015-12-16 2016-04-27 景好 一种反射式全景成像***及方法
CN105866966A (zh) * 2016-06-14 2016-08-17 昆山罗伯斯特机器人科技有限公司 一种自动切换视角的全景三维立体眼镜
CN106157358A (zh) * 2015-03-26 2016-11-23 成都理想境界科技有限公司 基于视频图像的对象融合方法及终端
US20160360183A1 (en) * 2015-06-02 2016-12-08 Etron Technology, Inc. Monitor system and operation method thereof
CN106921824A (zh) * 2017-05-03 2017-07-04 丁志宇 环绕式混合光场成像装置及方法
CN107105219A (zh) * 2017-05-26 2017-08-29 碰海科技（北京）有限公司 多深度摄像头紧凑型全景扫描设备
CN107465907A (zh) * 2017-08-16 2017-12-12 维沃移动通信有限公司 一种拍摄方法及移动终端
CN107852487A (zh) * 2015-08-07 2018-03-27 三星电子株式会社 用于生成360度三维图像的电子设备及用于该电子设备的方法

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6028795A (en) * 1985-09-24 2000-02-22 Hitachi, Ltd. One chip semiconductor integrated circuit device having two modes of data write operation and bits setting operation
US6552730B1 (en) * 1984-10-05 2003-04-22 Hitachi, Ltd. Method and apparatus for bit operational process
US4988984A (en) * 1988-10-31 1991-01-29 International Business Machines Corporation Image interpolator for an image display system
US5111192A (en) * 1989-12-20 1992-05-05 Xerox Corporation Method to rotate a bitmap image 90 degrees
US5986672A (en) * 1997-10-14 1999-11-16 Minnesota, Mining And Manufacturing 3M Center Method and system for forming a rotated image on an imaging element using limited system resources
US6563535B1 (en) * 1998-05-19 2003-05-13 Flashpoint Technology, Inc. Image processing system for high performance digital imaging devices
US6137491A (en) 1998-06-05 2000-10-24 Microsoft Corporation Method and apparatus for reconstructing geometry using geometrically constrained structure from motion with points on planes
DE60237834D1 (de) * 2001-08-15 2010-11-11 Koninkl Philips Electronics Nv 3d videokonferenzsystem
JP4227468B2 (ja) * 2002-06-24 2009-02-18 キヤノン株式会社 画像形成装置及び方法、並びに制御プログラム
US6958757B2 (en) * 2003-07-18 2005-10-25 Microsoft Corporation Systems and methods for efficiently displaying graphics on a display device regardless of physical orientation
JP4130207B2 (ja) * 2003-09-16 2008-08-06 富士通株式会社 画像処理表示装置および画像処理表示方法
US7643038B2 (en) * 2005-06-29 2010-01-05 Qualcomm Incorporated Virtual device buffer for embedded device
CA2553473A1 (en) * 2005-07-26 2007-01-26 Wa James Tam Generating a depth map from a tw0-dimensional source image for stereoscopic and multiview imaging
US7535474B1 (en) * 2005-12-09 2009-05-19 Advanced Micro Devices, Inc. System and method for rotating rasterized image data
US7876977B2 (en) * 2006-02-15 2011-01-25 Conexant Systems, Inc. Image processor and method of image rotation
JP2009100342A (ja) 2007-10-18 2009-05-07 Sanyo Electric Co Ltd カメラ校正装置及び方法、並びに、車両
JP2009135686A (ja) * 2007-11-29 2009-06-18 Mitsubishi Electric Corp 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置
JP2010114576A (ja) * 2008-11-05 2010-05-20 Seiko Epson Corp 画像処理装置
CN101894366B (zh) 2009-05-21 2014-01-29 北京中星微电子有限公司 一种获取标定参数的方法、装置及一种视频监控***
US8670149B2 (en) * 2009-08-03 2014-03-11 Printable Technologies Inc. Apparatus and methods for image processing optimization for variable data printing
CN101710932B (zh) 2009-12-21 2011-06-22 华为终端有限公司 图像拼接方法及装置
KR101051509B1 (ko) 2010-06-28 2011-07-22 삼성전기주식회사 카메라의 광량 제어 장치 및 방법
US8947551B2 (en) * 2011-07-29 2015-02-03 Aptina Imaging Corporation Method and apparatus for frame rotation in the JPEG compressed domain
JP2013038454A (ja) * 2011-08-03 2013-02-21 Sony Corp 画像処理装置および方法、並びにプログラム
US8542933B2 (en) 2011-09-28 2013-09-24 Pelican Imaging Corporation Systems and methods for decoding light field image files
JP2013090031A (ja) * 2011-10-14 2013-05-13 Sony Corp 画像処理装置、画像処理方法およびプログラム
US10848731B2 (en) * 2012-02-24 2020-11-24 Matterport, Inc. Capturing and aligning panoramic image and depth data
US10674135B2 (en) 2012-10-17 2020-06-02 DotProduct LLC Handheld portable optical scanner and method of using
JP5982298B2 (ja) * 2013-02-21 2016-08-31 シャープ株式会社 障害物検出装置および障害物検出方法
US10237528B2 (en) * 2013-03-14 2019-03-19 Qualcomm Incorporated System and method for real time 2D to 3D conversion of a video in a digital camera
TWI498526B (zh) 2013-06-05 2015-09-01 Nat Univ Chung Cheng Environment depth measurement method and its image acquisition device
CN104581136B (zh) * 2013-10-14 2017-05-31 钰立微电子股份有限公司 图像校准***和立体摄像机的校准方法
CN103729883B (zh) 2013-12-30 2016-08-24 浙江大学 一种三维环境信息采集与重构***及方法
KR102265109B1 (ko) 2014-01-24 2021-06-15 삼성전자주식회사 영상 처리 방법 및 장치
CN104811680B (zh) * 2014-01-28 2017-04-12 聚晶半导体股份有限公司 图像获取装置及其图像形变校正方法
CN103984037B (zh) 2014-04-30 2017-07-28 深圳市墨克瑞光电子研究院 基于视觉的移动机器人障碍物检测方法和装置
US10027948B2 (en) * 2014-05-20 2018-07-17 Nextvr Inc. Methods and apparatus including or for use with one or more cameras
US10306211B2 (en) 2014-05-27 2019-05-28 Telefonaktiebolaget Lm Ericsson (Publ) Remote control of pivotable stereoscopic camera
CN104077585B (zh) * 2014-05-30 2017-09-22 小米科技有限责任公司 图像校正方法、装置及终端
US9992483B2 (en) 2014-09-03 2018-06-05 Intel Corporation Imaging architecture for depth camera mode with mode switching
TWI577172B (zh) * 2014-09-10 2017-04-01 鈺立微電子股份有限公司 影像校正系統和立體照相機的校正方法
JP6531367B2 (ja) * 2014-09-30 2019-06-19 セイコーエプソン株式会社 印刷装置、制御装置および画像処理方法
US10356383B2 (en) * 2014-12-24 2019-07-16 Reald Spark, Llc Adjustment of perceived roundness in stereoscopic image of a head
CN105744254B (zh) * 2014-12-30 2017-12-29 钰立微电子股份有限公司 校正导引***和校正导引***的操作方法
JP6657500B2 (ja) 2015-03-31 2020-03-04 エスゼット ディージェイアイ テクノロジー カンパニー リミテッドＳｚ Ｄｊｉ Ｔｅｃｈｎｏｌｏｇｙ Ｃｏ．，Ｌｔｄ モバイルプラットフォームの制御方法およびシステム
US9958266B2 (en) 2015-07-09 2018-05-01 Mitutoyo Corporation Chromatic range sensor including dynamic intensity compensation function
CN106534828A (zh) * 2015-09-11 2017-03-22 钰立微电子股份有限公司 应用于立体图像获取装置的控制器与立体图像获取装置
US11263461B2 (en) 2015-10-05 2022-03-01 Pillar Vision, Inc. Systems and methods for monitoring objects at sporting events
CN105609087B (zh) * 2015-12-23 2018-11-16 天地伟业技术有限公司 一种图像缩放器处理图像的方法
CN113867662A (zh) * 2016-01-15 2021-12-31 华为技术有限公司 一种显示的方法及终端
TWI584634B (zh) 2016-03-08 2017-05-21 聚晶半導體股份有限公司 適於產生深度圖的電子裝置與方法
US20170372452A1 (en) * 2016-06-22 2017-12-28 Qualcomm Incorporated Image rotation method and apparatus
TWI592020B (zh) 2016-08-23 2017-07-11 國立臺灣科技大學 投影機的影像校正方法及影像校正系統
US20180108150A1 (en) * 2016-10-17 2018-04-19 Dsi Assignments, Llc Systems and methods for in-field stereocamera calibration
CN107167996A (zh) 2017-06-05 2017-09-15 深圳奥比中光科技有限公司 自适应调整的激光投影模组及深度相机
EP3531376B1 (en) 2018-02-21 2020-09-30 Ficosa Adas, S.L.U. Calibrating a camera of a vehicle
US20190387165A1 (en) * 2018-06-07 2019-12-19 Eys3D Microelectronics, Co. Image device for generating depth images and related electronic device

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308018A (zh) * 2008-05-30 2008-11-19 汤一平 基于双目全方位视觉传感器的立体视觉测量装置
CN101577795A (zh) * 2009-06-17 2009-11-11 深圳华为通信技术有限公司 一种实现全景图像的实时预览的方法和装置
CN103081476A (zh) * 2010-06-08 2013-05-01 Sk普兰尼特有限公司 利用深度图信息转换三维图像的方法和设备
CN102812497A (zh) * 2011-03-03 2012-12-05 松下电器产业株式会社 能够提供随后体验影像的影像提供装置、影像提供方法、影像提供程序
CN202838179U (zh) * 2012-09-26 2013-03-27 天津游奕科技有限公司 一种实现全景视频交互的***
CN108401551B (zh) * 2012-10-26 2015-02-04 北京理工大学 双镜头微光立体全景成像装置及其超大视场测距方法
CN105282375A (zh) * 2014-07-24 2016-01-27 钰创科技股份有限公司 附着式立体扫描模块
CN104602129A (zh) * 2015-01-27 2015-05-06 三星电子（中国）研发中心 互动式多视角视频的播放方法及***
CN106157358A (zh) * 2015-03-26 2016-11-23 成都理想境界科技有限公司 基于视频图像的对象融合方法及终端
US20160360183A1 (en) * 2015-06-02 2016-12-08 Etron Technology, Inc. Monitor system and operation method thereof
CN104966225A (zh) * 2015-07-08 2015-10-07 深圳爱布丁梦想科技有限公司 基于移动终端和3d全景图像浏览的房屋租赁方法及***
CN107852487A (zh) * 2015-08-07 2018-03-27 三星电子株式会社 用于生成360度三维图像的电子设备及用于该电子设备的方法
CN105530431A (zh) * 2015-12-16 2016-04-27 景好 一种反射式全景成像***及方法
CN105866966A (zh) * 2016-06-14 2016-08-17 昆山罗伯斯特机器人科技有限公司 一种自动切换视角的全景三维立体眼镜
CN106921824A (zh) * 2017-05-03 2017-07-04 丁志宇 环绕式混合光场成像装置及方法
CN107105219A (zh) * 2017-05-26 2017-08-29 碰海科技（北京）有限公司 多深度摄像头紧凑型全景扫描设备
CN107465907A (zh) * 2017-08-16 2017-12-12 维沃移动通信有限公司 一种拍摄方法及移动终端

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115278067A (zh) * 2022-07-19 2022-11-01 Oppo广东移动通信有限公司 相机、电子设备、拍摄方法及存储介质

Also Published As

Publication number Publication date
US20190379842A1 (en) 2019-12-12
US20190378301A1 (en) 2019-12-12
TW202013956A (zh) 2020-04-01
US20210160438A1 (en) 2021-05-27
US20230231965A1 (en) 2023-07-20
US20190387165A1 (en) 2019-12-19
US11438525B2 (en) 2022-09-06
TWI723419B (zh) 2021-04-01
TW202011731A (zh) 2020-03-16
TWI761684B (zh) 2022-04-21
US11582402B2 (en) 2023-02-14
CN110580718B (zh) 2023-08-08
CN110580718A (zh) 2019-12-17
US10708520B2 (en) 2020-07-07

Similar Documents

Publication Publication Date Title
US11438525B2 (en) Image device for generating depth images and related electronic device
TWI557491B (zh) 組合式可見光及非可見光投影系統
EP3018903B1 (en) Method and system for projector calibration
US9325968B2 (en) Stereo imaging using disparate imaging devices
TWI668997B (zh) 產生全景深度影像的影像裝置及相關影像裝置
US11049476B2 (en) Minimal-latency tracking and display for matching real and virtual worlds in head-worn displays
TWI692967B (zh) 影像裝置
JP7185434B2 (ja) 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法
JP5014979B2 (ja) 個人用電子機器の３次元情報取得及び表示システム
US20170287221A1 (en) Virtual cues for augmented-reality pose alignment
EP2824923B1 (en) Apparatus, system and method for projecting images onto predefined portions of objects
US7137707B2 (en) Projector-camera system with laser pointers
EP2386898A1 (en) Stereoscopic imaging apparatus and method
EP2328125A1 (en) Image splicing method and device
JP2010113720A (ja) 距離情報を光学像と組み合わせる方法及び装置
WO2019047985A1 (zh) 图像处理方法和装置、电子装置和计算机可读存储介质
US20150256764A1 (en) Active-tracking based systems and methods for generating mirror image
CN104285442B (zh) 用于可携带的图像投影仪的具有双色激光二极管的激光模块
JP2003134375A (ja) 画像撮影システム
WO2017118662A1 (en) Spherical virtual reality camera
JP2021097348A (ja) 撮像装置、制御方法およびプログラム
US11792511B2 (en) Camera system utilizing auxiliary image sensors
KR100736565B1 (ko) 파노라마 영상 촬영 방법 및 이를 수행하기 위한이동통신단말기
CN109005316B (zh) 影像感测模块
KR101746809B1 (ko) 회전 스크린을 이용하는 3차원 디스플레이 장치 및 그 동작 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191217

RJ01 Rejection of invention patent application after publication