CN112385207B - 拍摄计划提示装置及方法 - Google Patents

拍摄计划提示装置及方法 Download PDF

Info

Publication number
CN112385207B
CN112385207B CN201980042874.4A CN201980042874A CN112385207B CN 112385207 B CN112385207 B CN 112385207B CN 201980042874 A CN201980042874 A CN 201980042874A CN 112385207 B CN112385207 B CN 112385207B
Authority
CN
China
Prior art keywords
imaging
plan
shooting
unit
range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980042874.4A
Other languages
English (en)
Other versions
CN112385207A (zh
Inventor
堀田修平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of CN112385207A publication Critical patent/CN112385207A/zh
Application granted granted Critical
Publication of CN112385207B publication Critical patent/CN112385207B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B37/00Panoramic or wide-screen photography; Photographing extended surfaces, e.g. for surveying; Photographing internal surfaces, e.g. of pipe
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)

Abstract

本发明提供一种可根据核查所需的图像的条件和已拍摄的图像的拍摄范围向用户提示拍摄计划的拍摄计划提示装置及方法。在拍摄部(14)进行的拍摄结束后,拍摄计划更新部(15)判断是否利用未拍摄区域指定部(151)指定了未拍摄区域。在Yes的情况下,拍摄计划更新部(15)基于未拍摄的拍摄范围更新拍摄计划,并重新生成与未拍摄的拍摄范围对应的拍摄计划。然后,拍摄计划提示部(13)基于重新生成的拍摄计划,向用户提示接下来应拍摄的拍摄范围。

Description

拍摄计划提示装置及方法
技术领域
本发明涉及一种拍摄计划提示装置及方法,特别是涉及一种用于向用户提示拍摄计划的拍摄计划提示装置及方法。
背景技术
以往,存在有为了对桥梁、道路、堤坝、建筑物等结构物进行核查而拍摄图像、并从图像中检测结构物的损伤的技术。
文献1公开了在制作核查用的结合图像时,求出相邻图像的重叠率,并基于该重叠率判断是否需要重新拍摄。
专利文献2公开了基于劣化推断制作第一核查计划,并在基于第一核查计划实施检查之后,基于第一核查计划的核查项目的结果实施更详细的第二核查计划。
以往技术文献
专利文献
专利文献1:日本特许6120037号公报
专利文献2:日本特开2017-71972号公报
发明内容
发明要解决的技术课题
为了从图像中检测结构物的损伤,需要一定程度的分辨率。因此,需要将结构物的被摄体分割来进行拍摄。当通过手动一部分一部分地拍摄高大的结构物时,用户有时不知道现在拍摄的是哪个位置、或者能够拍摄至哪个位置。例如,当将桥梁的桥面板表面一部分一部分地分割来进行拍摄时,由于桥面板表面特征少且重复相同的图案,因此会变得不知道拍摄的是哪个位置。
另外,可认为在不知道这些分割拍摄图像是否确保了检测结构物损伤所需的区域的情况下,会拍摄超过所需数量的许多图像,用户的负担增加。
在专利文献1及专利文献2中,未向用户提示根据已拍摄的图像只要拍摄哪个部分即可。
本发明是鉴于这种问题点而完成的,其目的在于提供一种能够根据核查所需的图像的条件和已拍摄的图像的拍摄范围向用户提示拍摄计划的拍摄计划提示装置及方法。
用于解决技术课题的手段
本发明的第一方面所涉及的拍摄计划提示装置具备:拍摄条件获取部,其获取检测结构物的损伤所需的拍摄条件;拍摄计划生成部,其基于拍摄条件获取部所获取的拍摄条件生成结构物的核查部位整体的拍摄计划;以及拍摄计划提示部,其向用户提示拍摄计划,拍摄计划生成部基于结构物的核查部位的实际拍摄结果,重新生成与结构物的核查部位的末拍摄区域对应的拍摄计划。
在本发明的第二方面所涉及的拍摄计划提示装置中,拍摄计划提示部生成使覆盖结构物的核查部位整体的拍摄的次数最少的拍摄计划。
在本发明的第三方面所涉及的拍摄计划提示装置中,拍摄计划提示部生成用于覆盖结构物的核查部位整体的拍摄的摄像装置的移动距离最短的拍摄计划。
在本发明的第四方面所涉及的拍摄计划提示装置中,拍摄条件包括结构物的尺寸、拍摄图像的像素数、分辨率及不同图像彼此的重叠率。
在本发明的第五方面所涉及的拍摄计划提示装置中,拍摄计划是与将结构物的核查部位的表面分割为多个区域而得到的分割区域对应的拍摄范围,拍摄计划生成部根据分辨率和像素数计算每一张拍摄图像的拍摄实际尺寸,并生成以重叠率以上覆盖结构物的核查部位表面的拍摄范围作为拍摄计划。
在本发明的第六方面所涉及的拍摄计划提示装置中,拍摄计划包括分割区域的拍摄顺序,拍摄计划生成部生成使用于按照拍摄顺序的拍摄的摄像装置的移动距离最短的拍摄计划。
在本发明的第七方面所涉及的拍摄计划提示装置中,拍摄计划提示部将拍摄范围重叠提示在结构物的图上。
在本发明的第八方面所涉及的拍摄计划提示装置中,拍摄计划提示部将拍摄范围重叠提示在显示于显示器的结构物的图上。
在本发明的第九方面所涉及的拍摄计划提示装置中,拍摄计划提示部利用投影仪将拍摄范围重叠提示在结构物的核查部位上。
在本发明的第十方面所涉及的拍摄计划提示装置中,拍摄计划提示部利用增强现实设备将拍摄范围重叠提示在结构物的核查部位的拍摄图像上。
在本发明的第十一方面所涉及的拍摄计划提示装置中,拍摄计划提示部具备用户引导部,所述用户引导部基于摄像装置的位置信息或从摄像装置到结构物的测距信息向拍摄位置引导用户。
本发明的第十二方面所涉及的拍摄计划提示装置具备:实际尺寸获取部,其获取结构物的核查部位的实际尺寸;以及全景图像制作部,其通过对拍摄结构物的核查部位而得到的多个图像进行全景合成来制作全景图像,拍摄计划生成部基于实际尺寸获取部所获取的结构物的核查部位的实际尺寸和全景图像制作部所制作的全景图像指定未拍摄区域,并重新生成与指定的未拍摄区域对应的拍摄计划。
本发明的第十三方面所涉及的拍摄计划提示装置具备:整景图像获取部,其获取结构物的核查部位的整景图像;以及局部图像获取部,其获取拍摄结构物的核查部位的一部分而得到的多个局部图像,拍摄计划生成部通过将整景图像与多个局部图像进行对照来指定未拍摄区域,并重新生成与指定的未拍摄区域对应的拍摄计划。
本发明的第十四方面所涉及的拍摄计划提示装置具备实际拍摄条件获取部,所述实际拍摄条件获取部获取包括实际拍摄结构物的核查部位而得到的图像的拍摄位置、拍摄方向、拍摄距离、焦距及传感器尺寸中的至少一个的实际拍摄条件,拍摄计划生成部基于实际拍摄条件指定未拍摄区域,并重新生成与指定的未拍摄区域对应的拍摄计划。
本发明的第十五方面所涉及的拍摄计划提示方法包括由计算机执行:获取检测结构物的损伤所需的拍摄条件的步骤、基于拍摄条件生成结构物的核查部位整体的拍摄计划的步骤、向用户提示拍摄计划的步骤、以及基于结构物的核查部位的实际拍摄结果重新生成与结构物的核查部位的未拍摄区域对应的拍摄计划的步骤。
用于使计算机执行上述拍摄计划提示方法的拍摄计划提示程序也包含在本发明的方面中。
发明效果
根据本发明,由于根据未拍摄区域更新拍摄计划,并向用户示出接下来应拍摄的拍摄范围,因此用户能够容易地拍摄未拍摄部分,能够在所需范围内拍遍检查对象的被摄体。
附图说明
图1是拍摄计划提示装置100的框结构图。
图2是表示拍摄条件的一例的图。
图3是表示拍摄计划的一例的图。
图4是表示拍摄范围的显示例的图。
图5是表示对检查对象将拍摄范围实时重叠显示在实时取景中的情形的图。
图6是表示拍摄范围X1与检查对象的实时取景X2从不一致的状态变为一致的状态的情形的图。
图7是拍摄计划提示处理的流程图。
具体实施方式
图1是本发明的优选实施方式所涉及的拍摄计划提示装置100的框结构图。拍摄计划提示装置100具备拍摄条件信息获取部11、拍摄计划生成部12、拍摄计划提示部13、拍摄部14、拍摄计划更新部15及全景合成部16。这些各部可由一个或多个处理器构成。处理器包括CPU(Central Processing Unit)、ASIC(Application Specific Integrated Circuit)、GPU(Graphics Processing Unit)等。拍摄计划提示装置100由智能手机、平板电脑终端、数码相机等移动信息终端或个人计算机等构成。此外,拍摄部14和/或全景合成部16可以与拍摄计划提示装置100成为一体,也可以不是一体。
拍摄条件信息获取部11从内置的传感器或外部的终端(在检查现场的用户所拥有的智能手机)等中获取拍摄条件信息。拍摄条件信息包括检查现场的条件即检查现场的位置信息、当前时刻、天气、成为检查对象的结构物(被摄体)的尺寸、从被摄体到相机的拍摄距离、相机的拍摄条件即焦距、像素数、数码相机的图像传感器的尺寸、所需的被摄体的分辨率等。被摄体的尺寸例如是桥梁的格间的尺寸(格间的纵横尺寸)、桥墩的高度和宽度等。拍摄距离是从相机到被摄体的距离,例如是从相机到桥面板的距离。检查现场的位置信息可通过GPS(Global Positioning System)获取。
拍摄计划生成部12基于拍摄条件信息,生成包括诸如覆盖成为检查对象的被摄体的各核查部位整体那样的拍摄范围的集合的拍摄计划。例如,计算满足期望的被摄体分辨率的每一张的拍摄实际尺寸,并以该拍摄实际尺寸且不同图像间的重叠率为规定的重叠率以上的方式生成覆盖各核查部位的拍摄范围。
作为一例,如图2所示,设为
P:图像传感器Y的横向像素数(pixel)(此外,也可以是纵向像素数)
S:图像传感器Y的横向尺寸(mm)(此外,也可以是纵向尺寸)
F:焦距(mm)
L:拍摄距离(mm)
R:被摄体X的被摄体分辨率(mm/pixel)。
P、S由数码相机的规格确定,L根据拍摄现场条件确定。此时,为了满足期望的被摄体分辨率R,可用以下式计算焦距。
F=(L×S)/(R×P)
当该F值处于所使用的数码相机的透镜Z的焦距范围外时,无法生成满足拍摄条件的拍摄计划。
作为具体的数值例,若设为
P=6000、S=23.6、L=5000、R=0.3,则
F=65.56。
因此,例如透镜Z的焦距范围为18mm~55mm时,无法生成满足拍摄条件的拍摄计划。另一方面,例如透镜Z的焦距范围为18mm~135mm时,可生成满足拍摄条件的拍摄计划。
作为另一例,如果被摄体分辨率=0.3mm/pixel、像素数=6000*4000像素,则每一张的拍摄实际尺寸为1800*1200mm。另外,作为一例,设为规定的重叠率=30%。更优选的是,生成满足规定的重叠率(30%等)且拍摄张数最少的拍摄计划。在满足拍摄条件的范围内无法生成拍摄计划时,也可以将“拍摄距离过远”、“所使用的透镜的焦距无法满足规定的被摄体分辨率”这样的警告显示于拍摄计划提示装置100的显示器等来向用户通知,促使重新设定拍摄条件信息。重叠率可在全景合成部16能够将各拍摄范围合成为全景图像的范围内任意设定。
拍摄计划至少包括拍摄范围和像素数。由于用户可任意调整焦距、拍摄距离及拍摄位置以与拍摄范围相匹配,因此拍摄计划可以包括焦距、拍摄距离及拍摄位置,也可以不包括。
拍摄计划提示部13向用户示出本次应拍摄的拍摄范围。拍摄范围的提示方法可列举:向拍摄计划提示装置100的内置显示器上的显示、向AR(Augmented Reality:增强现实)设备的显示器上的显示、投影仪进行的对被摄体的投影等。也可以将拍摄范围重叠显示在成为检查对象的被摄体的设计图等上。
拍摄部14由数码相机等构成,是生成并输出拍摄被摄体即结构物的各核查部位的拍摄范围而得到的图像数据(局部图像)的装置。拍摄部14可以内置于拍摄计划提示装置100,也可以不内置。例如,拍摄部14可以是与拍摄计划提示装置100独立的数字静态相机。在该情况下,拍摄部14与拍摄计划提示装置100进行无线通信,将拍摄得到的图像数据发送到拍摄计划提示装置100。
此外,成为拍摄对象的结构物并不特别限定于桥梁的桥面板、路面、堤坝的坝体混凝土表面、隧道的衬砌混凝土表面、建筑物的外壁等。
拍摄计划更新部15包括未拍摄区域指定部151和未拍摄区域拍摄计划生成部152。未拍摄区域指定部151基于拍摄计划生成部12所生成的拍摄计划和拍摄部14所输出的图像,指定未拍摄的拍摄范围。未拍摄区域拍摄计划生成部152基于未拍摄区域指定部151所指定的未拍摄的拍摄范围来更新拍摄计划,并重新生成与未拍摄的拍摄范围对应的拍摄计划。
例如,未拍摄区域指定部151将对按照拍摄计划拍摄的局部图像进行全景合成而得到的全景图像的拍摄范围从被摄体分辨率或图像中的尺寸已知的被摄体的实际尺寸规格换算为实际尺寸。另一方面,未拍摄区域指定部151获取检查对象的被摄体整体的实际尺寸的测量值或从图中得到的实际尺寸信息作为检查对象的被摄体的实际尺寸。未拍摄区域指定部151将全景图像的实际尺寸与检查对象的被摄体的实际尺寸进行比较,将这些不一致部分指定为未拍摄区域。
或者,未拍摄区域指定部151通过块匹配等将对按照拍摄计划拍摄的局部图像进行全景合成而得到的全景图像和被摄体整景进行对照,将这些成为差分的区域指定为未拍摄区域。
或者,未拍摄区域指定部151获取按照拍摄计划拍摄的图像的拍摄条件信息(拍摄位置信息、拍摄方向、拍摄距离、焦距、图像传感器的尺寸等)。这些是与已拍摄的拍摄范围对应的拍摄条件信息。然后,将与已拍摄的拍摄范围对应的拍摄条件信息和拍摄计划的拍摄条件信息进行比较,从这些不一致部分中指定未拍摄区域。
拍摄计划更新部15所重新生成的拍摄计划由拍摄计划提示部13再次提示给用户。用户可基于该拍摄计划继续进行所需拍摄范围的拍摄。
图3表示拍摄计划的一例。在该图中,成为检查对象的被摄体的***位是桥梁的桥面板的一面R。拍摄计划包括具有规定的重叠率D的拍摄范围R1~R12。R1~R12是以从第一到第十二的最短拍摄顺序(以最短距离)分别拍摄检查对象的被摄体整景(所有核查部位)的范围。利用由拍摄部14等构成的整景图像获取部,预先用一张图像拍摄被摄体整景。由于不是检测细微的裂纹,因此被摄体整景的拍摄分辨率是任意的。
拍摄顺序优选以使拍摄的移动距离变为最短的方式生成拍摄计划。另外,由于各种情况,在拍摄位置的移动方向固定、或者对移动顺序赋予了优选顺位时,优选按照该移动方向或移动顺序等规则生成拍摄计划。
图4是拍摄计划提示的一例。如图4所示,在由平板电脑、数码相机、智能手机等带相机的移动信息终端的显示器构成的拍摄计划提示装置100的拍摄计划提示部13中,重叠显示被摄体的实时取景图像W和拍摄范围Rk。此时,可以基于通过GPS(Global PositioningSystem)获取的带相机的移动信息终端的位置信息,计算出应显示在由显示器构成的拍摄计划提示部13中的拍摄范围。
或者,可以在用户利用诸如头戴式显示器的AR(Augmented Reality:增强现实)设备看到的现实的被摄体的实时取景中重叠显示拍摄范围。
如图5所示,拍摄计划提示装置100获取利用由数字静态相机构成的拍摄部14拍摄的实时取景图像,并从该图像中进行物体识别。拍摄计划提示装置100实时识别检查对象,对该识别的检查对象将拍摄范围实时重叠在实时取景图像上,并用AR设备进行显示。这样的话,即使拍摄计划提示装置100移动而引起拍摄位置或拍摄角度等拍摄条件发生变化,也可追随其显示拍摄范围。
而且,如图6所示,通过拍摄部14的拍摄距离或焦距的调整,当拍摄范围X1与检查对象的实时取景X2从不一致的状态变为一致的状态时,从拍摄计划提示装置100向拍摄部14发送拍摄开始指示,拍摄部14可以按照该指示进行拍摄。这样的话,当按照拍摄计划在拍摄范围内捕捉到应拍摄的检查对象时,可自动进行拍摄,较便利。
或者,当拍摄范围X1与检查对象的实时取景X2变为一致的状态时,可以在AR设备等的显示器上显示“拍摄OK”等消息或者进行语音回放,或者激活移动电话的振动功能,向用户通知该状态,促使开始拍摄。
此外,在此所说的“拍摄范围X1与检查对象的实时取景X2一致”包括完全一致的情况以及X1与X2以在规定的容许范围的阈值内(移位部分的面积在拍摄范围的面积的5%以内等)移位的状态重叠的情况。在拍摄范围X1与检查对象的实时取景X2不一致的状态下,也可以显示“拍摄NG”等消息。
或者,也可以在成为检查对象的被摄体上,利用投影仪直接投影本次应拍摄的拍摄范围的视频。此外,也可以将本次应拍摄的拍摄范围和下次以后应拍摄的拍摄范围与拍摄顺序相匹配地进行投影。
或者,也可以使用GPS(Global Positioning System)终端或内置有测距计的全站仪等可测定距基准物体的距离及角度的装置(用户引导部),朝向可捕捉拍摄范围的拍摄位置、拍摄角度及拍摄方向,通过视频或语音引导用户。如果拍摄部14的拍摄方向、拍摄距离、焦距等不发生变动,则仅向拍摄位置引导用户即可。也可以利用全站仪等装置,将相机引导到拍摄位置。
图7是拍摄计划提示处理的流程图。用于使各种计算机(处理器)执行该处理的程序被记录在SDRAM、ROM、CD-ROM等各种计算机(处理器)可读记录介质中。
在S1中,拍摄条件信息获取部11从内置的传感器或外部的终端等获取拍摄条件信息。该拍摄条件信息包括结构物的尺寸、拍摄图像的像素数、分辨率及不同图像彼此的重叠率,所述结构物的尺寸包括结构物的核查部位的实际尺寸。
在S2中,拍摄计划生成部12基于拍摄条件信息,生成包括诸如覆盖成为检查对象的被摄体整体(所有核查部位)那样的每一次拍摄的拍摄范围的拍摄计划。
在S3中,拍摄计划提示部13基于拍摄计划,通过显示器、语音、振动等向用户示出应拍摄的拍摄范围。
在S4中,拍摄部14输出拍摄拍摄范围的被摄体而得到的图像数据(局部图像)。在输入了用户指示时,或者在处理器判断为规定的拍摄条件充足(拍摄范围X1与检查对象的实时取景X2一致等)时,进行由拍摄部14进行的被摄体的拍摄。
在S5中,在拍摄部14进行的拍摄结束后,拍摄计划更新部15判断是否利用未拍摄区域指定部151指定了未拍摄区域。在Yes的情况下,进入S6,在No的情况下,结束处理。
在S6中,拍摄计划更新部15基于未拍摄的拍摄范围更新拍摄计划,并重新生成与未拍摄的拍摄范围对应的拍摄计划。然后返回到S3,拍摄计划提示部13基于重新生成的拍摄计划,向用户示出接下来应拍摄的拍摄范围。此外,全景合成部16可以对按照拍摄计划拍摄的局部图像进行合成而制作全景图像。
这样,由于根据未拍摄区域更新拍摄计划,并向用户示出接下来应拍摄的拍摄范围,因此用户能够容易地拍摄未拍摄部分,能够在所需范围内拍遍检查对象的被摄体。另外,由于拍摄计划被以最短的移动距离生成,因此能够使拍摄時间最短。
符号说明
11 拍摄条件信息获取部
12 拍摄计划生成部
13 拍摄计划提示部
14 拍摄部
15 拍摄计划更新部
16 全景合成部
100 拍摄计划提示装置
151 未拍摄区域指定部
152 未拍摄区域拍摄计划生成部

Claims (18)

1.一种拍摄计划提示装置,其中,
具备:
拍摄条件获取部,其获取检测结构物的损伤所需的拍摄条件;
拍摄计划生成部,其基于所述拍摄条件获取部所获取的拍摄条件生成所述结构物的核查部位整体的拍摄计划,所述拍摄计划是与将所述结构物的核查部位的表面分割为多个区域而得到的分割区域对应的拍摄范围;
拍摄计划提示部,其向用户提示所述拍摄计划;以及
拍摄计划更新部,其基于所述结构物的核查部位的实际拍摄结果来指定未拍摄的拍摄范围,并基于所指定的未拍摄的拍摄范围来更新拍摄计划,重新生成与所述结构物的核查部位的未拍摄区域对应的拍摄计划,
所述拍摄计划提示部向用户提示所述拍摄计划更新部所重新生成的拍摄计划。
2.根据权利要求1所述的拍摄计划提示装置,其中,
所述拍摄计划提示部基于所述拍摄计划更新部所重新生成的拍摄计划,向用户提示接下来应拍摄的拍摄范围。
3.根据权利要求1或2所述的拍摄计划提示装置,其中,
所述拍摄计划生成部生成使覆盖所述结构物的核查部位整体的拍摄的次数最少的拍摄计划。
4.根据权利要求1或2所述的拍摄计划提示装置,其中,
所述拍摄计划生成部生成用于覆盖所述结构物的核查部位整体的拍摄的摄像装置的移动距离最短的拍摄计划。
5.根据权利要求1或2所述的拍摄计划提示装置,其中,
所述拍摄条件包括所述结构物的尺寸、拍摄图像的像素数、分辨率及不同图像彼此的重叠率。
6.根据权利要求5所述的拍摄计划提示装置,其中,
所述拍摄计划生成部根据所述分辨率和所述像素数计算每一张拍摄图像的拍摄实际尺寸,并生成以所述重叠率以上覆盖所述结构物的核查部位表面的拍摄范围作为拍摄计划。
7.根据权利要求6所述的拍摄计划提示装置,其中,
所述拍摄计划包括分割区域的拍摄顺序,
所述拍摄计划生成部生成使用于按照所述拍摄顺序的拍摄的摄像装置的移动距离最短的拍摄计划。
8.根据权利要求6或7所述的拍摄计划提示装置,其中,
所述拍摄计划提示部将所述拍摄范围重叠提示在所述结构物的图上。
9.根据权利要求6或7所述的拍摄计划提示装置,其中,
所述拍摄计划提示部将所述拍摄范围重叠提示在显示于显示器的所述结构物的图上。
10.根据权利要求6或7所述的拍摄计划提示装置,其中,
所述拍摄计划提示部利用投影仪将所述拍摄范围重叠提示在所述结构物的核查部位上。
11.根据权利要求6或7所述的拍摄计划提示装置,其中,
所述拍摄计划提示部利用增强现实设备将所述拍摄范围重叠提示在所述结构物的核查部位的拍摄图像上。
12.根据权利要求6或7所述的拍摄计划提示装置,其中,
所述拍摄计划提示部具备用户引导部,所述用户引导部基于摄像装置的位置信息或从所述摄像装置到所述结构物的测距信息向拍摄位置引导用户。
13.根据权利要求1或2所述的拍摄计划提示装置,其中,
具备:
实际尺寸获取部,其获取所述结构物的核查部位的实际尺寸;以及
全景图像制作部,其通过对拍摄所述结构物的核查部位而得到的多个图像进行全景合成来制作全景图像,
所述拍摄计划更新部基于所述实际尺寸获取部所获取的所述结构物的核查部位的实际尺寸和所述全景图像制作部所制作的全景图像指定未拍摄区域,并重新生成与指定的所述未拍摄区域对应的拍摄计划。
14.根据权利要求1或2所述的拍摄计划提示装置,其中,
具备:
整景图像获取部,其获取所述结构物的核查部位的整景图像;以及
局部图像获取部,其获取拍摄所述结构物的核查部位的一部分而得到的多个局部图像,
所述拍摄计划更新部通过将所述整景图像与所述多个局部图像进行对照来指定未拍摄区域,并重新生成与指定的所述未拍摄区域对应的拍摄计划。
15.根据权利要求1或2所述的拍摄计划提示装置,其中,
具备实际拍摄条件获取部,所述实际拍摄条件获取部获取包括实际拍摄所述结构物的核查部位而得到的图像的拍摄位置、拍摄方向、拍摄距离、焦距及传感器尺寸中的至少一个的实际拍摄条件,
所述拍摄计划更新部基于所述实际拍摄条件指定未拍摄区域,并重新生成与指定的所述未拍摄区域对应的拍摄计划。
16.一种拍摄计划提示方法,其由计算机执行:
获取检测结构物的损伤所需的拍摄条件的步骤;
基于所述拍摄条件生成所述结构物的核查部位整体的拍摄计划的步骤,所述拍摄计划是与将所述结构物的核查部位的表面分割为多个区域而得到的分割区域对应的拍摄范围;
向用户提示所述拍摄计划的步骤;
基于所述结构物的核查部位的实际拍摄结果来指定未拍摄的拍摄范围,并基于所指定的未拍摄的拍摄范围来更新拍摄计划,重新生成与所述结构物的核查部位的未拍摄区域对应的拍摄计划的步骤;以及
向用户提示重新生成的所述拍摄计划的步骤。
17.根据权利要求16所述的拍摄计划提示方法,其中,
向用户提示重新生成的所述拍摄计划的步骤包括基于重新生成的所述拍摄计划,向用户提示接下来应拍摄的拍摄范围的步骤。
18.一种记录介质,其是非暂时性计算机可读记录介质,在通过计算机读取了存储于所述记录介质的指令时,使计算机执行权利要求16或17所述的拍摄计划提示方法。
CN201980042874.4A 2018-07-03 2019-06-26 拍摄计划提示装置及方法 Active CN112385207B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018-126941 2018-07-03
JP2018126941 2018-07-03
PCT/JP2019/025340 WO2020008973A1 (ja) 2018-07-03 2019-06-26 撮影計画提示装置および方法

Publications (2)

Publication Number Publication Date
CN112385207A CN112385207A (zh) 2021-02-19
CN112385207B true CN112385207B (zh) 2022-04-12

Family

ID=69059604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980042874.4A Active CN112385207B (zh) 2018-07-03 2019-06-26 拍摄计划提示装置及方法

Country Status (5)

Country Link
US (2) US11528411B2 (zh)
EP (1) EP3820139B1 (zh)
JP (1) JP6965450B2 (zh)
CN (1) CN112385207B (zh)
WO (1) WO2020008973A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111684267B (zh) * 2018-02-02 2024-06-28 富士胶片株式会社 图像处理装置及图像处理方法
CN112887619A (zh) * 2021-01-28 2021-06-01 维沃移动通信有限公司 拍摄方法、装置及电子设备
WO2022249864A1 (ja) * 2021-05-24 2022-12-01 富士フイルム株式会社 撮像支援装置、撮像システム、撮像支援方法、及びプログラム
WO2023127313A1 (ja) * 2021-12-28 2023-07-06 富士フイルム株式会社 撮像支援装置、撮像支援方法、及びプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101815171A (zh) * 2009-02-24 2010-08-25 华晶科技股份有限公司 图像撷取装置及其自动指示拍摄位置的方法
KR20140030444A (ko) * 2012-08-29 2014-03-12 한국과학기술연구원 마커리스 증강현실 서비스 제공 장치 및 이를 위한 촬영 위치 추정 방법
JP2017071972A (ja) * 2015-10-08 2017-04-13 株式会社ニコン 点検支援方法および点検支援システム
JP6120037B1 (ja) * 2016-11-30 2017-04-26 国際航業株式会社 点検装置、及び点検方法
EP3410689A1 (en) * 2016-01-26 2018-12-05 FUJIFILM Corporation Photography assistance device and photography assistance method

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS59158483A (ja) 1983-02-28 1984-09-07 Toshiba Corp 文字読取方法
US7418320B1 (en) * 2005-01-24 2008-08-26 International Business Machines Corporation Navigating a UAV having an on-board digital camera to capture desired geographic area
US20070129626A1 (en) * 2005-11-23 2007-06-07 Prakash Mahesh Methods and systems for facilitating surgical procedures
JP4715913B2 (ja) * 2008-12-17 2011-07-06 ソニー株式会社 撮像装置、画像処理装置、ズーム制御方法およびズーム制御プログラム
JP5268025B2 (ja) 2009-02-27 2013-08-21 株式会社リコー 撮影装置
US9955068B2 (en) * 2013-07-15 2018-04-24 Samsung Electronics Co., Ltd. Apparatus and method for operating a composition of a picture in a portable terminal
KR102246645B1 (ko) * 2013-07-15 2021-04-30 삼성전자주식회사 영상 획득을 위한 장치 및 방법
CN104243814B (zh) * 2014-07-28 2018-02-02 小米科技有限责任公司 图像中物体布局的分析方法、图像拍摄提示方法及装置
JP6835536B2 (ja) * 2016-03-09 2021-02-24 株式会社リコー 画像処理方法、表示装置および点検システム
WO2017155005A1 (en) * 2016-03-09 2017-09-14 Ricoh Company, Ltd. Image processing method, display device, and inspection system
JP6619761B2 (ja) * 2017-03-13 2019-12-11 ヤンマー株式会社 無人飛行撮影装置
GB201709199D0 (en) * 2017-06-09 2017-07-26 Delamont Dean Lindsay IR mixed reality and augmented reality gaming system
CN108702444B (zh) * 2017-08-31 2021-07-06 深圳市大疆创新科技有限公司 一种图像处理方法、无人机及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101815171A (zh) * 2009-02-24 2010-08-25 华晶科技股份有限公司 图像撷取装置及其自动指示拍摄位置的方法
KR20140030444A (ko) * 2012-08-29 2014-03-12 한국과학기술연구원 마커리스 증강현실 서비스 제공 장치 및 이를 위한 촬영 위치 추정 방법
JP2017071972A (ja) * 2015-10-08 2017-04-13 株式会社ニコン 点検支援方法および点検支援システム
EP3410689A1 (en) * 2016-01-26 2018-12-05 FUJIFILM Corporation Photography assistance device and photography assistance method
JP6120037B1 (ja) * 2016-11-30 2017-04-26 国際航業株式会社 点検装置、及び点検方法

Also Published As

Publication number Publication date
JP6965450B2 (ja) 2021-11-10
EP3820139B1 (en) 2023-09-13
CN112385207A (zh) 2021-02-19
JPWO2020008973A1 (ja) 2021-09-09
WO2020008973A1 (ja) 2020-01-09
EP3820139A4 (en) 2021-08-25
US20230072448A1 (en) 2023-03-09
EP3820139A1 (en) 2021-05-12
US11528411B2 (en) 2022-12-13
US11895396B2 (en) 2024-02-06
US20210092288A1 (en) 2021-03-25

Similar Documents

Publication Publication Date Title
CN112385207B (zh) 拍摄计划提示装置及方法
US8786718B2 (en) Image processing apparatus, image capturing apparatus, image processing method and storage medium
WO2012114639A1 (ja) オブジェクト表示装置、オブジェクト表示方法及びオブジェクト表示プログラム
US10198796B2 (en) Information processing apparatus, control method of information processing apparatus, and non-transitory storage medium storing information processing program
JP6594180B2 (ja) 撮像装置、撮像装置の制御方法及びプログラム
US9554046B2 (en) Method and image processing device for image stabilization of a video stream
JP6656035B2 (ja) 画像処理装置、撮像装置および画像処理装置の制御方法
KR20120012201A (ko) 파노라마 사진 촬영 방법
US9413952B2 (en) Image processing apparatus, distance measuring apparatus, imaging apparatus, and image processing method
JP2017103688A (ja) 動きベクトル検出装置およびその制御方法
JP2004228824A (ja) スタックプロジェクション装置及びその調整方法
JP2010106495A (ja) トンネル壁面撮影装置
JP2007122328A (ja) 歪曲収差補正装置及び歪曲収差補正方法
JP2009239392A (ja) 複眼撮影装置およびその制御方法並びにプログラム
JP7245757B2 (ja) 建築物側面図作成システム及び建築物側面図作成方法
KR102040435B1 (ko) 원거리 구조물 점검 시스템 및 그 시스템을 이용한 구조물 점검방법
KR101415145B1 (ko) 항공기 탑재용 eo/ir 장비 자동임무 수행을 위한 촬영표적좌표 생성방법
JP2009258846A (ja) 画像処理方法、画像処理システム、画像処理装置及び画像処理プログラム
JP6433154B2 (ja) 画像処理装置および撮像装置
JP2019095358A (ja) 鉄道車両の画像生成装置及び鉄道車両の外観検査システム
JP6611687B2 (ja) 画像補正装置および画像補正方法
WO2023135910A1 (ja) 撮像装置、撮像方法、及びプログラム
JP5621089B2 (ja) 移動体の振動状態下における画像補正方法
US20200296280A1 (en) Image processing apparatus that retouches and displays picked-up image, image processing method, and storage medium
JP2006304047A (ja) 画像処理装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant