CN108881883A - 信息处理装置 - Google Patents

信息处理装置 Download PDF

Info

Publication number
CN108881883A
CN108881883A CN201810324300.3A CN201810324300A CN108881883A CN 108881883 A CN108881883 A CN 108881883A CN 201810324300 A CN201810324300 A CN 201810324300A CN 108881883 A CN108881883 A CN 108881883A
Authority
CN
China
Prior art keywords
subject
processing unit
information processing
public
visual field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810324300.3A
Other languages
English (en)
Inventor
吉田英明
原田久之
林寿
林寿一
冈田圭司
野中修
土持裕
土持裕一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN108881883A publication Critical patent/CN108881883A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Automatic Focus Adjustment (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

提供信息处理装置,在三维图像拍摄时能够简单地确认公共视野。信息处理装置具有:视野判定部(122),其根据从进行三维拍摄的多个摄像部取得的视差不同的2个图像,判定规定的被摄体距离处的视差不同的2个图像的公共视野范围;以及显示控制部(138),其在显示部中显示与判定出的所述公共视野范围有关的信息。

Description

信息处理装置
技术领域
本发明涉及对三维拍摄进行辅助的信息处理装置。
背景技术
数字照相机的图像数据即使是数百张~数千张单位的图像,也能够容易地管理。由此,频繁利用数字照相机进行的工程现场的施工状态的拍摄,作为表示正确进行了施工的证据。
通过这种施工状态的拍摄,例如,所使用的施工部件、特别是使用了正确直径的钢筋、或以正确间隔配置了钢筋作为图像证据而被保留。以往,在这种钢筋图像的拍摄时,在钢筋部分配置量度(measure),通过在各钢筋配置作为记号的标记,能够从图像中确认钢筋直径和钢筋间隔的尺寸。
但是,与钢筋相邻地配置量度或在各钢筋设置标记这样的准备作业是额外作业。根据建筑物的规模而不同,但是,在一个现场以数百张~数千张为单位进行拍摄的情况下,该准备作业花费较多时间,作业量庞大。因此,提出了如下方法:在这种钢筋图像的拍摄时,通过配置2个摄像部并以带视差的方式进行拍摄的所谓三维(3D)拍摄来取得钢筋图像(例如专利文献1)。
通过在钢筋检测中利用三维拍摄,能够正确地检测被摄体的距离,因此,不需要在钢筋上安装量度或标记,能够大幅缩短一次拍摄所需要的时间。根据三维拍摄,能够在2个摄像部的公共视野区域内检测被摄体,能够根据2个摄像部的检测位置之差以几何学方式计算被摄体的距离。能够根据被摄体的距离计算被摄体的大小。
即,为了在三维拍摄中正确地判定被摄体的大小,需要使被摄体存在于公共视野区域内。因此,在三维拍摄时,优选2个摄像部的公共视野区域较宽。
现有技术文献
专利文献
专利文献1:日本特开2015-1146号公报
发明内容
发明要解决的课题
在建筑现场的钢筋拍摄中,为了提高拍摄效率,作为被摄体的钢筋不仅一根,一般一次拍摄多根钢筋。在钢筋的三维拍摄时,也需要在多根钢筋收于公共视野内的状态下进行拍摄。但是,与单镜头照相机不同,在三维拍摄照相机中,确认公共视野的范围并不简单。在工程现场等,为了容易进行三维拍摄,要求能够简单地确认公共视野。
本申请发明的目的在于,鉴于上述课题,提供在三维图像拍摄时能够简单地确认公共视野的信息处理装置。
用于解决课题的手段
为了实现上述目的,本实施方式的信息处理装置具有:视野判定部,其根据从进行三维拍摄的多个摄像部取得的视差不同的2个图像,判定规定的被摄体距离处的视差不同的2个图像的公共视野范围;以及显示控制部,其在显示部中显示与判定出的所述公共视野范围有关的信息。
发明效果
根据本发明,能够提供在三维图像拍摄时能够简单地确认公共视野的信息处理装置。
附图说明
图1是工程现场的拍摄时的状况。
图2是示出基于透镜和摄像元件的视野范围的图。
图3是示出左右的摄像部的公共的视野范围的关系的图。
图4是照相机和信息处理装置的功能框图。
图5是信息处理装置的硬件框图。
图6是说明显示引导画面的处理的步骤的流程图。
图7是示出参数设定的处理的步骤的子程序。
图8A是示出被摄体距离和公共视野率的要求值的关系的图。
图8B是第1引导画面。
图8C是第1引导画面的变形例。
图9A是示出被摄体距离、公共视野率的要求值和要求精度等的关系的图。
图9B是第2引导画面。
图10是第3引导画面。
具体实施方式
下面,根据附图对本发明的实施方式进行说明。在以下实施方式中,对在工程拍摄中利用本发明的信息处理装置的例子进行说明。工程拍摄是用于在工程现场取得工程内容的证据照片等的拍摄。图1是示出工程拍摄的状况的图。
图1是在工程现场、例如将多个钢筋H作为拍摄对象而使用三维拍摄***1的例子。三维拍摄***1由拍摄设备和信息处理装置100构成。拍摄设备是设置在三脚架上的照相机10。拍摄者通过信息处理装置100对照相机10进行控制来执行拍摄,在信息处理装置100中取得所拍摄的图像数据。照相机10可以是立体照相机10a或设置在三脚架上的2台单镜头照相机10b中的某一种。
信息处理装置100和照相机10通过有线(例如USB缆线)或无线(例如无线LAN(Local Area Network))方式进行连接。所拍摄的三维图像数据可以从信息处理装置100经由网络NW发送到外部设置的服务器5并进行蓄积。另外,信息处理装置100也可以是与照相机10成为一体的信息处理装置。
三维图像拍摄的基本原理是,通过在2个(一对)摄像部的公共视野范围内检测被摄体,根据2个摄像部的检测图像的位置的差异以几何学方式进行计算。因此,如果2个摄像部的公共视野范围较宽,则能够高效地进行三维拍摄。
图2是示出立体照相机10a的左右任意一个摄像部20的镜头22和摄像元件24与视野范围(设为宽度方向)的关系的图。这里,摄像部20设为定焦***。各参数设为拍摄范围W、摄像元件24的像面长度的水平长度X0、镜头22的视场角镜头22的像面距离F、被摄体距离D。在被摄***于无限远位置的情况下,像面距离F等于焦距。
图3是示出照相机10的左右的摄像部20(右摄像部20R、左摄像部20L)中的单镜头的拍摄范围与左右的摄像部20的公共视野范围的关系的图。在图3中,以一维方式进行说明(这是因为,在视差仅为一个方向这样的意思中,双镜头立体摄像基本上是一维***)。另外,在统称摄像部的情况下,表记为摄像部20。
在照相机10中,设为以使视线(拍摄光轴)为水平的方式并列配置左右的摄像部20。并且,右摄像部20R和左摄像部20L为同一规格。因此,在无限远的被摄体的摄像时,公共视野率为100%。在图3中,设为像面距离F、被摄体距离D1或D2、摄像元件24(摄像元件24R、摄像元件24L)的像面长度的水平长度X0(参照图2)、基线长度B、视场角公共视野范围(长度)V。
根据成像***的绘图,使用三角形的相似关系,通过W1/D1=X0/F,被摄体距离D1(被摄体平面)处的单镜头拍摄范围(长度)W1成为
W1=D1·X0/F …式(1)。
从W1缩小基线长度B,因此,被摄体距离(被摄体平面)处的公共视野范围V1成为
V1=W1-B或V1=(D1·X0/F)-B …式(2)。
被摄体距离D2处的单镜头的拍摄范围W2和公共视野范围(长度)V2也同样。另外,式(2)的未知数仅为D,其他是规定量,因此,如果通过相位差测距等求出被摄体距离D,则能够容易地进行运算。另外,下面,将单镜头的拍摄范围W1、W2称为整体的拍摄范围W1、W2。
并且,设公共视野率为Rv,如果将公共视野率Rv定义为利用W对(×100,成为%)V进行归一化而得到的值,则成为
Rv=V/W=1-B/W=1-B·F/(D·X0) …式(3)。
并且,成为
如上所述,式(1)~(4)中的F是该定焦***的像面距离。如果进行补充,则众所周知将焦距定义为无限远的被摄体的成像距离,因此,针对无限远被摄体,像面距离F等于焦距。而且,针对有限距离的被摄体,像面距离F成为在焦距中加上与对焦相伴的规定的像面移动量而得到的值。因此,在具有焦点调节功能的***中,像面距离F通常成为被摄体距离的函数。并且,在定焦***中,像面距离F成为常数而与被摄体距离无关。
如上所述,公共视野范围V根据被摄体距离D而变化。根据图3可知,在近距离(D1)和远距离(D2)处,远距离处的整体的拍摄范围W2大于近距离处的整体的拍摄范围W1,并且,远距离的视野在1个摄像部的视野中占据的公共视野范围的比例也较大,能够进行三维拍摄的区域增加。并且,在建筑现场的钢筋拍摄等中,为了提高拍摄效率,不是仅拍摄一根作为被摄体的钢筋,一般一次拍摄多根钢筋。即,一般以规定以上的被摄体距离进行拍摄。
图4是照相机10和信息处理装置100的功能框图。下面,设立体照相机10a为照相机10。照相机10具有对右视点图像进行拍摄的右摄像部20R、对左视点图像进行拍摄的左摄像部20L、三维图像生成部32和通信部34。
右摄像部20R具有镜头22R、摄像元件24R、控制部30R。镜头22R使被摄体像在摄像元件24R上成像。摄像元件24R对被摄体像进行光电转换。控制部30R对右摄像部20R整体的动作进行控制,将从摄像元件24R输出的信号转换为图像数据。左摄像部20L具有镜头22L、摄像元件24L、控制部30L。左摄像部20L与右摄像部20R相同,因此省略说明。
三维图像生成部32对来自右摄像部20R和左摄像部20L的图像数据进行合成,生成三维图像。通信部34通过有线或无线方式而与外部设备进行数据的发送接收。通信部34输入来自信息处理装置100的拍摄指示等。并且,通信部34将右摄像部20R的图像数据(称为右图像)、左摄像部20L的图像数据(称为左图像)和三维图像输出到信息处理装置100。并且,通信部34根据来自信息处理装置100的请求,向信息处理装置100发送照相机10的性能信息、配置信息或拍摄的距离信息。
信息处理装置100具有控制部110、存储部140、通信部150、显示部152、触摸面板154和扬声器156。控制部110对信息处理装置100整体进行总括控制。控制部110通过读入了控制程序的CPU的软件处理来执行各种处理。
控制部110具有图像取得部112、照相机信息取得部114、被摄体检测部116、距离信息取得部120、视野判定部122、视野计算部124、计测部130、测定分辨率计算部132、距离计算部134和显示控制部138。
图像取得部112经由通信部150从照相机10取得右图像、左图像和三维图像。照相机信息取得部114向照相机10请求各种信息,取得从照相机10发送的各种信息。各种信息是后述配置信息140a或性能信息140b。另外,照相机信息取得部114也可以从照相机10取得由照相机10检测到的拍摄距离信息。
被摄体检测部116从由图像取得部112取得的图像中检测预先指定的被摄体。在本例中,预先登记钢筋作为被摄体,钢筋的图像信息被存储在存储部140中。被摄体检测部116参照钢筋的图像信息,通过图案匹配等从所取得的图像中检测钢筋。
距离信息取得部120根据右图像与左图像的相位差取得被摄体距离D。即,距信息取得部120在右图像和左图像中分别确定由被摄体检测部116检测到的被摄体在画面上的位置。然后,距离信息取得部120根据右图像和左图像中分别确定的位置的差,取得被摄体距离D。另外,距离信息取得部120也可以将来自所述照相机10的拍摄距离信息设为被摄体距离D。
视野判定部122判定被摄体距离D处的右图像和左图像的公共视野范围V。视野判定部122根据由距离信息取得部120取得的被摄体距离D和摄像部20的规格(配置信息140a、性能信息140b),使用所述式(2)判定公共视野范围V。
视野计算部124计算由距离信息取得部120取得的被摄体距离D处的整体的拍摄范围W与由视野判定部122判定出的公共视野范围V之比作为公共视野率Rv。视野计算部124使用所述式(3)计算公共视野率Rv。并且,视野计算部124也可以在判定为公共视野率Rv成为规定的值以下(例如后述要求值P以下)时进行警告。视野计算部124可以进行显示部152的画面的警告或扬声器156的声音的警告中的至少任意一方作为警告。
计测部130根据所拍摄的图像计测钢筋直径或钢筋彼此的间隔,输出计测值。测定分辨率计算部132根据被摄体距离D计算计测部130的测定分辨率。
当设为测定分辨率Ro、摄像元件24上的分辨率ri、被摄体距离D时,成为
Ro=D×ri/F …式(5)。
这里,摄像元件24上的分辨率ri可根据其计测原理或方式而不同,但是,能够通过包含仿真的逻辑计算或实验评价等而另外求出,这里,使用这样得到的值。
根据式(5),可知被摄体平面上的测定分辨率(计测精度)Ro与被摄体距离D的关系。即,D越小、换言之越接近被摄体,则计测精度越高(测定分辨率Ro越小)。这里,当设为计测的要求精度Q(必要分辨率)时,为了得到可靠的计测结果,Q≧Ro即可,因此,将其应用于式(5)而得到的
D≦F×Q/ri …式(6)
成为其条件。
并且,测定分辨率计算部132计算满足针对测定分辨率的要求精度Q的最大的距离Dq。要求精度Q是由拍摄者输入设定的,例如为2mm。如果增大被摄体距离D,则拍摄范围较宽,能够统一拍摄多个部件,但是,计测的精度降低。即,在要求较高的计测精度的情况下,需要接近拍摄。公共视野率Rv的要求值P和计测的要求精度Q相对于被摄体距离D成为相反的关系。
距离计算部134根据公共视野率Rv的要求值P计算对应的距离Dp。公共视野率Rv的要求值P是由拍摄者输入的,例如为80%。距离计算部134使用式(3),计算与公共视野率Rv的要求值P对应的距离Dp。
进而,距离计算部134根据与公共视野率Rv的要求值P对应的距离Dp和与计测的要求精度Q对应的距离Dq,计算满足公共视野和计测精度双方的推荐距离Dr。例如,距离计算部134在Dp<Dq的情况下,将距离Dp与距离Dq的中间位置((Dp+Dq)/2)计算为推荐距离Dr。
显示控制部138在显示部152中显示所拍摄的图像和表示适合于拍摄者的被摄体距离的引导画面。在引导画面中显示实时取景图像以及公共视野率Rv、要求值P、要求精度Q。
存储部140存储控制程序和各种数据。并且,存储部140存储配置信息140a、性能信息140b、距离信息140c和公共视野率信息140d。
配置信息140a是表示右摄像部20R与左摄像部20L的相对配置位置的坐标信息。但是,如果通过一个三脚架等设置各摄像部,则可以忽略右摄像部20R与左摄像部20L的高度方向之差和被摄体方向之差。该情况下,配置信息140a仅成为右摄像部20R与左摄像部20L的一维的距离信息(宽度方向之差即基线长度B)。这样,能够减少信息量而进行输入。配置信息140a是计算公共视野率Rv所需要的信息。
性能信息140b是与右摄像部20R和左摄像部20L的光学特性的性能有关的信息,例如是各摄像部20的视场角焦距等后面计算公共视野率Rv所需要的信息。
距离信息140c是由距离信息取得部120取得的被摄体距离D的信息。公共视野率信息140d是与由视野计算部124计算出的公共视野率Rv有关的信息。
通信部150通过有线或无线方式而与外部设备进行数据的发送接收。显示部152例如是LCD,通过显示控制部138的控制来显示拍摄图像和引导画面。触摸面板154是与显示部152一体设置的操作部,输入来自拍摄者的各种指示。扬声器156通过控制部110的控制而输出警告音等声音。
图5是信息处理装置100的硬件框图的例子。信息处理装置100具有CPU(CentralProcessing Unit)180、RAM(Random Access Memory)182、非易失性存储器184、通信部150、显示部152、触摸面板154、扬声器156和闪存190。
CPU180读入非易失性存储器184中存储的控制程序并执行,通过软件处理进行信息处理装置100的控制。RAM182提供暂时存储控制程序和各种数据的工作区。RAM182例如是DRAM(Dynamic Random Access Memory)。
非易失性存储器184非易失地存储控制程序和各种数据表。非易失性存储器184是闪存或HDD(Hard Disk Drive)。存储部140由非易失性存储器184构成。控制部110由CPU180、RAM182和非易失性存储器184构成。
闪存190存储所拍摄的图像和各种数据。前面已经叙述了通信部150、显示部152、触摸面板154和扬声器156,因此省略说明。CPU180通过总线192而与RAM182等连接。
图6是说明显示引导画面的处理的步骤的流程图。引导画面是对拍摄者引导适当的拍摄位置的画面。以下的处理主要由控制部110来执行。
视野判定部122判定存储部140中是否存储有性能信息140b(步骤S10)。如上所述,性能信息140b是与摄像部20的光学特性有关的性能的信息。视野判定部122判定为存储部140中未存储性能信息140b时(步骤S10:否),进入步骤S14。
视野判定部1222判定为存储部140中存储有性能信息140b时(步骤S10:是),判定存储部140中是否存储有配置信息140a(步骤S12)。如上所述,配置信息140a是表示多个摄像部20的相对配置位置的三维坐标信息。
视野判定部122判定为存储部140中未存储配置信息140a时(步骤S12:否),进入步骤S14。另外,在未存储性能信息140b和配置信息140a等参数的情况下,显示控制部138也可以在显示部152中进行“未输入性能信息(或配置信息)”等注意显示。然后,转移到图7中说明的参数设定。
图7是示出步骤S14的参数设定的处理的步骤的子程序。照相机信息取得部114向照相机10请求各摄像部20的视场角、焦距等与计算公共视野率Rv所需要的性能有关的信息(以下称为性能信息),取得这些信息。照相机信息取得部114根据从照相机10取得的性能信息设定性能信息140b(步骤S100),将其存储在存储部140中。
另外,照相机信息取得部114也可以预先将记载有该照相机10所具有的性能信息的数据表(未图示)存储在存储部140中,从数据表中读出性能信息。例如,在数据表中记载有照相机10的型号和该照相机的性能信息的情况下,照相机信息取得部114也可以根据所输入的照相机10的型号,从数据表中读出对应的性能信息。并且,照相机信息取得部114也可以经由因特网从服务器5得到该照相机10的性能信息。
在照相机10为立体照相机10a的情况下,照相机信息取得部114从照相机10取得基线长度B并设定配置信息140a(步骤S102),将其存储在存储部140中。并且,在照相机10为2个单镜头照相机10b的情况下,照相机信息取得部114也可以使拍摄者输入多个摄像部20配置在空间上的哪个位置这样的三维坐标信息。另外,该情况下,如果通过一个三脚架等设置2个单镜头照相机10b,则可以忽略高度方向的偏移和被摄体方向的偏移,仅输入2个单镜头照相机10b的基线长度B。
控制部110根据来自拍摄者的输入进行要求规格的设定(步骤S104)。具体而言,要求规格是公共视野率Rv的要求值P和测定分辨率的要求精度Q。控制部110将拍摄者从触摸面板154输入的要求值P和要求精度Q存储在存储部140中。关于这些要求规格,拍摄者进行设定是很麻烦的,因此,可以将标准的初始值作为表保存在存储部140中,此后能够进行变更。并且,在未输入要求值P和要求精度Q的情况下,也可以设定默认值。在步骤S104之后,返回步骤S10。
返回图6。视野判定部122判定为存储部140中存储有配置信息140a时(步骤S12:是),进入步骤S16。图像取得部112从照相机10取得所拍摄的实时取景图像。显示控制部138在显示部152中显示所取得的实时取景图像(步骤S16)。所显示的实时取景图像可以是左右的摄像部20中的任意一方,也可以是所生成的三维图像。或者,作为实时取景图像,也可以分别并列配置左右的图像并进行显示。
被摄体检测部116检测实时取景图像中是否存在被摄体(步骤S18)。本例的被摄体是钢筋。在被摄体检测部116未在实时取景图像中检测到被摄体的情况下(步骤S18:否),显示控制部138显示“不存在被摄体”或“请将照相机朝向被摄体”等错误消息或引导消息(步骤S42),提示拍摄者注意。控制部110也可以结合错误显示而从扬声器156发送声音的警告。在步骤S42之后,返回步骤S16。
在被摄体检测部116在当前显示的实时取景图像内检测到被摄体的情况下(步骤S18:是),控制部110判定拍摄者是否在触摸面板154进行了触摸操作(步骤S20)。
控制部110判定为拍摄者在触摸面板154进行了触摸操作时(步骤S20:是),判定拍摄者的触摸位置是否存在被摄体(在本例中为钢筋)(步骤S22)。即,控制部110判定拍摄者的触摸位置是否包含在由被摄体检测部116检测到的被摄体的位置内。
控制部110判定为拍摄者的触摸位置不存在被摄体时(步骤S22:否),显示控制部138进行错误显示(步骤S42)。例如,显示控制部138在显示部152中显示“触摸部分不存在被摄体”“当前未触摸被摄体”“误触摸显示部(注意非意图的触摸)”等错误消息。另外,该情况下,由于利用被摄体检测部116检测到被摄体,因此,显示控制部138也可以显示引导拍摄者正确确定被摄体这样的消息。例如,显示控制部138可以对检测到的被摄体进行轮廓强调显示(闪烁)。
控制部110判定为拍摄者的触摸位置存在被摄体时(步骤S22:是),将触摸位置的被摄体设定为对象(步骤S24)。即,即使画面中存在多个钢筋,也仅将拍摄者选择出的钢筋作为对象。距离信息取得部120计算与设定为对象的被摄体之间的距离(被摄体距离D)(步骤S26)。例如,距离信息取得部120根据左右的图像的相位差计算被摄体距离D。
返回步骤S20,控制部110判定为拍摄者未在触摸面板154进行触摸操作时(步骤S20:否),作为自动检测模式,被摄体检测部116检测图像内的全部被摄体(步骤S30)。即,检测画面内的全部钢筋。距离信息取得部120计算检测到的全部被摄体各自的被摄体距离D(步骤S32)。
距离信息取得部120对计算出的多个被摄体距离D进行比较,选择与规定条件对应的被摄体作为代表被摄体。距离信息取得部120将与选择出的代表被摄体之间的距离设定为被摄体距离D(步骤S34)。代表被摄体例如是最接近摄像部20的被摄体(最近的被摄体)。除了最近的被摄体以外,例如,在被摄体存在特征(对钢筋赋予了标记等)的情况下,距离信息取得部120也可以检测该特征并将该被摄体设定为代表被摄体。
另外,在上述中设为对代表被摄体进行选择,但是,也可以是那里不存在作为实体的被摄体的情况。即,在步骤S34中,作为被摄体距离D,也可以设定代表多个被摄体距离的距离(例如,在被摄场深度内包含作为实体的被摄体的距离)。控制部110将代表被摄体设定为对象。
视野判定部122判定对象是否存在于公共视野范围V内(步骤S40)。视野判定部122判定为对象未存在于公共视野范围V内时(步骤S40:否),显示控制部138显示“对象不在能够进行三维测定的位置”、“请远离对象”或“请将对象朝向画面的中心”等错误消息(步骤S42),返回步骤S16。也可以与错误消息一起,发出警告音。
视野判定部122判定为对象存在于公共视野范围V内时(步骤S40:是),视野计算部124根据对象的被摄体距离D计算公共视野率Rv(步骤S44)。显示控制部138在引导画面中显示与计算出的公共视野率Rv有关的信息(步骤S46)。另外,也可以在公共视野率Rv成为规定值以下的情况下,显示控制部138进行错误显示,并且控制部110发出错误警告。
使用图8~图10对包含与公共视野率Rv有关的信息的引导画面的例子进行说明。图8A、图8B、图8C是在测距仪上显示所计算出的公共视野率Rv的例子。根据所述式(3)可知,如果照相机10的各值(基线长度B、水平长度等)固定,则公共视野率Rv仅由被摄体距离D决定。被摄体距离D越大,则公共视野率Rv也越大。对于拍摄者来说,与公共视野率Rv相比,被摄体距离D是感觉上更容易熟悉的参数。因此,在引导画面中显示表示当前的被摄体距离D的测距仪,在该测距仪中示出与公共视野率Rv的要求值P对应的距离。
图8A是示出将钢筋H设为被摄体的拍摄的状态的图。设从照相机10到钢筋H的被摄体距离为Da。设与公共视野率Rv的要求值P相当的距离为Dp。即,如果拍摄者在比Dp更远的位置进行拍摄,则满足要求值P。
图8B是显示部152中显示的第1引导画面200。在第1引导画面200的左侧显示实时取景图像220。在实时取景图像220中显示3根钢筋H。另外,实时取景图像220也可以是左右任意一个图像。
在第1引导画面200的右侧显示测距仪210。测距仪210是显示当前的被摄体距离Da的仪表。测距仪210通过使灰色部分上升下降来显示被摄体距离Da。当照相机10远离钢筋H时,被摄体距离Da增大,灰色部分上升。当照相机10接近钢筋H时,被摄体距离Da减小,灰色部分下降。
标记Mp表示与公共视野率Rv的要求值P对应的距离,显示在测距仪210的对应位置。即,拍摄者决定照相机10的位置,以使得在测距仪210中,灰色部分大于标记Mp即可。在图8B的例子中,当前的被摄体距离Da位于超越标记Mp的位置,因此,如果是当前的拍摄位置,则满足要求值P。根据第1引导画面200的显示,能够直观地确认满足公共视野率Rv的要求值的距离。通过以距离为基准的仪表显示,现场的拍摄者容易进行判断。
图8C是第1引导画面200的变形例。图8C的第1引导画面201是重叠显示左侧的实时取景图像220L和右侧的实时取景图像220R的例子。并且,也可以不显示两个实时取景图像,仅在一个实时取景图像中重叠显示另一个图像框。图像框的位置可知,由此,能够通过目视来判断左右的图像的重叠范围。即,根据图8C这样的引导画面201,能够直观地掌握左右的图像的重叠情况。由此,能够简单地防止在步骤S20中说明的对象被摄体的指定时指定公共视野部分以外的被摄体。由此,操作性进一步提高。
图9A、图9B是在公共视野率Rv的要求值P中加入针对测定分辨率的要求精度Q的引导画面的例子。在三维计测中,不仅确保公共视野率Rv是重要的,计测的精度也是重要的。这是因为,如式(5)和(6)等中说明的那样,当照相机10与被摄体的距离较远时,测定分辨率降低,不满足拍摄者希望的对象被摄体的检测精度。
图9A是示出将钢筋H设为被摄体的拍摄的状态的图。设从照相机10到钢筋H的当前的被摄体距离为Da、与公共视野率Rv的要求值P相当的距离为Dp、与要求精度Q相当的距离为Dq。设满足公共视野率Rv的要求值P和要求精度Q双方的推荐距离为Dr。推荐距离例如是Dp与Dq的中间值。
图9B是显示部152中显示的第2引导画面202。与图8B同样,在第2引导画面202中显示实时取景图像220和测距仪210。在测距仪210的右侧分别显示表示与公共视野率Rv的要求值P对应的距离的位置的标记Mp、表示与要求精度Q对应的距离的位置的标记Mq、表示与推荐距离对应的位置的标记Mr。
拍摄者调整拍摄位置,以使得在引导画面202中,测距仪210的灰色部分接近标记Mr,由此,能够容易地进行满足公共视野率Rv的要求值P和要求精度Q双方的三维图像拍摄。
图10是显示部152中显示的第3引导画面203。第3引导画面203在测距仪210中加入公共视野率仪表212、公共视野率212b和精度仪表214而进行显示。在公共视野率仪表212和公共视野率212b双方中显示当前的公共视野率Rv。在公共视野率212b中直接显示当前的公共视野率作为数值。在公共视野率仪表212中,当照相机10远离被摄体时,公共视野率Rv增大,灰色部分上升进行显示。
在测距仪210中,与图9B同样,当照相机100远离被摄体时,灰色部分上升进行显示。精度仪表214是表示计测精度的高低的仪表。上侧的位置表示计测精度较高。即,当照相机100接近被摄体而使被摄体距离Da减小时,计测精度提高,灰色部分上升。另外,在第3引导画面203中,与图9B同样,也可以在公共视野率仪表212和精度仪表214的旁边,在对应位置显示标记Mp和标记Mq。
并且,在第2引导画面202和第3引导画面203中示出了Dp<Dq的情况,但是,还可能存在Dp>Dq的情况。是不存在满足公共视野率Rv的要求值P和要求精度Q双方的被摄体距离的情况。该情况下,控制部110也可以发出错误显示或错误警告,向拍摄者进行警告。
以上,根据本实施方式,在三维图像拍摄时,显示进行引导以满足规定的公共视野率的引导画面,因此,能够简单地进行适当的三维图像拍摄。并且,显示进行引导以满足公共视野率和规定的计测精度的引导画面,因此,还能够容易地进行计测用的三维图像拍摄。
另外,作为三维拍摄的照相机,说明了左右配置2个摄像部20的例子,但是,也可以上下配置2个摄像部20。并且,说明了控制部110的各功能通过软件处理实现,但是,一部分也可以通过门阵列等硬件实现。
另外,本发明不限于上述实施方式,能够在实施阶段在不脱离其主旨的范围内对结构要素进行变形而具体化。并且,通过上述实施方式所公开的多个结构要素的适当组合,能够形成各种发明。例如,可以适当组合实施方式所示的全部结构要素。进而,可以适当组合不同实施方式的结构要素。当然能够在这种不脱离发明主旨的范围内进行各种变形和应用。
标号说明
1:三维拍摄***;10:照相机;20R:右摄像部;20L:左摄像部;22R、22L:镜头;24R、24L:摄像元件;30R、30L:控制部;32:三维图像生成部;34:通信部;100:信息处理装置;110:控制部;112:图像取得部;114:照相机信息取得部;116:被摄体检测部;120:距离信息取得部;122:视野判定部;124:视野计算部;130:计测部;132:测定分辨率计算部;134:距离计算部;138:显示控制部;140:存储部;140a:配置信息;140b:性能信息;140c:距离信息;140d:公共视野率信息;150:通信部;152:显示部;154:触摸面板;156:扬声器。

Claims (14)

1.一种信息处理装置,其特征在于,所述信息处理装置具有:
视野判定部,其根据从进行三维拍摄的多个摄像部取得的视差不同的2个图像,判定规定的被摄体距离处的视差不同的2个图像的公共视野范围;以及
显示控制部,其在显示部中显示与判定出的所述公共视野范围有关的信息。
2.根据权利要求1所述的信息处理装置,其特征在于,
所述信息处理装置具有视野计算部,该视野计算部计算所述多个摄像部中的一个摄像部在所述规定的被摄体距离处的视野范围整体与判定出的所述公共视野范围之比作为公共视野率,
所述显示控制部显示所述公共视野率作为与所述公共视野范围有关的信息。
3.根据权利要求2所述的信息处理装置,其特征在于,
所述信息处理装置具有:
距离信息取得部,其取得被摄体距离;以及
距离计算部,其计算与所述公共视野率的要求值对应的被摄体距离,
所述显示控制部在表示被摄体距离的远近的轴上显示由所述距离信息取得部取得的被摄体距离和由所述距离计算部计算出的与所述要求值对应的被摄体距离。
4.根据权利要求3所述的信息处理装置,其特征在于,
所述信息处理装置具有测定分辨率计算部,该测定分辨率计算部针对要求精度,计算与该要求精度对应的被摄体距离,其中,该要求精度是针对根据图像进行计测时的测定分辨率的精度而设定的,
所述显示控制部在表示所述被摄体距离的远近的轴上显示与所述要求值对应的被摄体距离和与所述要求精度对应的被摄体距离。
5.根据权利要求4所述的信息处理装置,其特征在于,
所述显示控制部显示与如下的推荐距离有关的信息,该推荐距离满足针对所述公共视野率设定的要求值和针对所述测定分辨率的精度设定的要求精度双方。
6.根据权利要求1所述的信息处理装置,其特征在于,
所述信息处理装置具有距离信息取得部,该距离信息取得部取得被摄体距离,
所述距离信息取得部取得从所述多个摄像部到代表被摄体的被摄体距离,该代表被摄体是与规定条件对应的被摄体,
所述视野判定部根据针对所述代表被摄体的被摄体距离,判定所述公共视野范围。
7.根据权利要求6所述的信息处理装置,其特征在于,
所述代表被摄体是最接近所述多个摄像部的被摄体。
8.根据权利要求1所述的信息处理装置,其特征在于,
所述信息处理装置具有:
距离信息取得部,其取得被摄体距离;以及
触摸面板,其设置在所述显示部上,
所述距离信息取得部取得相对于所述显示部所显示的被摄体中通过所述触摸面板指定的被摄体的距离。
9.根据权利要求2所述的信息处理装置,其特征在于,
所述显示控制部以仪表形式显示所述公共视野率。
10.根据权利要求2所述的信息处理装置,其特征在于,
所述视野计算部在判定为所述公共视野率为规定值以下的情况下进行警告。
11.根据权利要求10所述的信息处理装置,其特征在于,
所述视野计算部进行所述显示部的画面中的警告和基于声音的警告中的至少任意一方作为所述警告。
12.根据权利要求1所述的信息处理装置,其特征在于,
所述多个摄像部是设置在立体照相机中的一对摄像部。
13.一种显示方法,使取得三维拍摄图像的信息处理装置显示引导画面,其特征在于,该显示方法包含以下步骤:
根据从进行三维拍摄的多个摄像部取得的视差不同的2个图像,判定规定的被摄体距离处的视差不同的2个图像的公共视野范围;以及
在所述信息处理装置的显示部中显示引导画面,该引导画面包含与判定出的所述公共视野范围有关的信息。
14.一种计算机可读取的记录介质,其记录有使取得三维拍摄图像的信息处理装置的计算机执行引导画面显示的程序,其中,该程序包含以下步骤:
根据从进行三维拍摄的多个摄像部取得的视差不同的2个图像,判定规定的被摄体距离处的视差不同的2个图像的公共视野范围;以及
显示引导画面,该引导画面包含与判定出的所述公共视野范围有关的信息。
CN201810324300.3A 2017-05-09 2018-04-12 信息处理装置 Pending CN108881883A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017093038A JP2018189544A (ja) 2017-05-09 2017-05-09 情報処理装置
JP2017-093038 2017-05-09

Publications (1)

Publication Number Publication Date
CN108881883A true CN108881883A (zh) 2018-11-23

Family

ID=64096296

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810324300.3A Pending CN108881883A (zh) 2017-05-09 2018-04-12 信息处理装置

Country Status (3)

Country Link
US (1) US10554895B2 (zh)
JP (1) JP2018189544A (zh)
CN (1) CN108881883A (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020134393A (ja) * 2019-02-22 2020-08-31 株式会社フジタ 配筋検査システムおよび配筋検査方法
JP7163238B2 (ja) * 2019-03-29 2022-10-31 鹿島建設株式会社 配筋計測システム,配筋計測方法,配筋計測プログラム
JP7158329B2 (ja) * 2019-03-29 2022-10-21 鹿島建設株式会社 配筋検査システム

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120182403A1 (en) * 2004-09-30 2012-07-19 Eric Belk Lange Stereoscopic imaging
EP2608552A1 (en) * 2009-01-19 2013-06-26 Minoru Inaba Stereoscopic video imaging display system
KR101638919B1 (ko) * 2010-09-08 2016-07-12 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어방법
JP2012123296A (ja) * 2010-12-10 2012-06-28 Sanyo Electric Co Ltd 電子機器
WO2012137454A1 (ja) * 2011-04-01 2012-10-11 パナソニック株式会社 立体映像出力装置及び立体映像出力方法
KR101978760B1 (ko) * 2011-12-13 2019-05-16 삼성전자 주식회사 3차원 이미지의 표시 기능을 구비한 단말기에서 사용자 인터페이스 방법 및 장치
JP5948856B2 (ja) * 2011-12-21 2016-07-06 ソニー株式会社 撮像装置とオートフォーカス方法並びにプログラム
WO2014145722A2 (en) * 2013-03-15 2014-09-18 Digimarc Corporation Cooperative photography
JP6083091B2 (ja) 2013-06-18 2017-02-22 株式会社竹中工務店 鉄筋検査支援装置およびプログラム
JP6373671B2 (ja) 2014-07-11 2018-08-15 東芝映像ソリューション株式会社 電子機器、方法及びプログラム
JP6596278B2 (ja) * 2015-09-14 2019-10-23 オリンパス株式会社 情報処理装置、情報処理装置の制御方法、及び情報処理プログラム
JP2018117329A (ja) * 2017-01-20 2018-07-26 オリンパス株式会社 情報取得装置
JP6779150B2 (ja) * 2017-02-03 2020-11-04 鹿島建設株式会社 情報取得装置

Also Published As

Publication number Publication date
US20180332229A1 (en) 2018-11-15
JP2018189544A (ja) 2018-11-29
US10554895B2 (en) 2020-02-04

Similar Documents

Publication Publication Date Title
JP5018980B2 (ja) 撮像装置、長さ測定方法、及びプログラム
US10776937B2 (en) Image processing apparatus and image processing method for setting measuring point to calculate three-dimensional coordinates of subject image with high reliability
WO2011125937A1 (ja) キャリブレーションデータ選択装置、選択方法、及び選択プログラム、並びに三次元位置測定装置
US9633450B2 (en) Image measurement device, and recording medium
JP2012142791A (ja) 三次元モデル作成システム、サーバ、及び、プログラム
JP5067477B2 (ja) 撮像パラメータ取得装置、撮像パラメータ取得方法、及び、プログラム
JP2017102085A (ja) 情報処理装置、情報処理方法及びプログラム
CN108881883A (zh) 信息处理装置
JP2010239564A (ja) 撮像装置、撮像制御方法、及びプログラム
JP2004286465A (ja) 画像による対象物の計測方法および撮像装置
US10432916B2 (en) Measurement apparatus and operation method of measurement apparatus
WO2019045089A1 (ja) 情報処理装置、長さ測定システム、長さ測定方法およびプログラム記憶媒体
CN108260360B (zh) 场景深度计算方法、装置及终端
JP7504688B2 (ja) 画像処理装置、画像処理方法およびプログラム
JP7121269B2 (ja) 測距カメラ
JP2020088840A (ja) 監視装置、監視システム、監視方法、監視プログラム
JP6581280B1 (ja) 監視装置、監視システム、監視方法、監視プログラム
JP2024116329A (ja) 画像処理装置、画像処理方法およびプログラム
JP6091092B2 (ja) 画像処理装置、及び画像処理方法
JP7256368B2 (ja) 測距カメラ
JP7328589B2 (ja) 測距カメラ
JP5743710B2 (ja) 撮像装置およびその制御方法
KR20220035185A (ko) 화상처리장치, 화상처리방법, 프로그램 및 기억 매체
JP2019125946A (ja) 制御装置、撮像装置、制御方法、及びプログラム
JP6292785B2 (ja) 画像処理装置、画像処理方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20181123

WD01 Invention patent application deemed withdrawn after publication