CN105493503A - 产业机械的监视图像显示装置 - Google Patents
产业机械的监视图像显示装置 Download PDFInfo
- Publication number
- CN105493503A CN105493503A CN201580001771.5A CN201580001771A CN105493503A CN 105493503 A CN105493503 A CN 105493503A CN 201580001771 A CN201580001771 A CN 201580001771A CN 105493503 A CN105493503 A CN 105493503A
- Authority
- CN
- China
- Prior art keywords
- image
- mentioned
- industrial machine
- video camera
- monitor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 17
- 230000000007 visual effect Effects 0.000 claims description 16
- 230000033001 locomotion Effects 0.000 claims description 5
- 230000007246 mechanism Effects 0.000 claims description 5
- 238000000034 method Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 claims description 4
- 230000002194 synthesizing effect Effects 0.000 claims description 2
- 108010066278 cabin-4 Proteins 0.000 description 12
- 238000012552 review Methods 0.000 description 10
- 230000009471 action Effects 0.000 description 9
- 238000009412 basement excavation Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 239000004576 sand Substances 0.000 description 7
- 238000009434 installation Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000005065 mining Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000009987 spinning Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/24—Safety devices, e.g. for preventing overload
-
- E—FIXED CONSTRUCTIONS
- E02—HYDRAULIC ENGINEERING; FOUNDATIONS; SOIL SHIFTING
- E02F—DREDGING; SOIL-SHIFTING
- E02F9/00—Component parts of dredgers or soil-shifting machines, not restricted to one of the kinds covered by groups E02F3/00 - E02F7/00
- E02F9/26—Indicating devices
- E02F9/261—Surveying the work-site to be treated
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
- B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/304—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
- B60R2300/305—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
- B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mining & Mineral Resources (AREA)
- Civil Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Structural Engineering (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Component Parts Of Construction Machinery (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
在产业机械中减少监视器所显示的图像的死角而进一步提高作业安全性。为了取得监视用图像而将监视用摄像机(15F,15B,15L,15R)在作为产业机械的液压挖掘机(1)上设于上部回转体(3)的各处,将这些摄像机所取得的摄像机图像(21F,21B,21L,21R)与使液压挖掘机(1)插图图像化的标志图像(21C)一并显示于监视器(20),摄像机(15F,15L,15R)设于支撑臂(40F,40L,40R)的前端,并设于从上部回转体(3)的回转体本体(3a)突出的位置,能够使在上部回转体(3)上设置的窄道(14)的下部的隐蔽部进入视野。
Description
技术领域
本发明涉及一种产业机械的监视图像显示装置,其特别在包含矿山用的大型液压挖掘机、自卸车和道路施工机械等的产业机械工作时对其周围进行监视。
背景技术
产业机械例如液压挖掘机,其具有下部行驶体和在该下部行驶体上可回转地连结设置的上部回转体。在上部回转体上设置前作业机即作业单元。前作业机具有动臂及斗杆,动臂可俯仰动作地设于上部回转体,斗杆可在上下方向上转动地连结于动臂的前端。在斗杆的前端设置前附件。前附件在进行挖掘作业时可采用铲斗。
以往公知有在驱动作业单元即前作业机进行土砂挖掘等作业时,为了确保作业安全而设置对上部回转体的周围状况进行监视的周围监视装置的技术。该周围监视装置构成为,在上部回转体上装设摄像机,并且在驾驶室中供操作者就坐的驾驶席的前方位置上设置监视器。摄像机的摄影图像为动画状态的影像而在监视器画面上显示。为了在液压挖掘机行驶时或挖掘等作业时确保安全性等,上部回转体后方及左右两侧方的视野都是需要的。以往为了在作为产业机械的液压挖掘机的周围获得广范围的视野,采用在回转体上装设多个摄像机的结构。由此,能够在回转体的大致全周范围消除死角,确保作业安全并提高产业机械的操作性。
专利文献1公开了一种技术,其构成为对由多个摄像机取得的产业机械的周围图像以成为上方视点的方式进行视点变换,在监视器画面上显示为平面投影的俯视监视图像。在专利文献1中,为了取得周围监视图像,在液压挖掘机的上部回转体上设置多个摄像机,将来自该各摄像机的图像合成并在监视器画面上显示。
摄像机设置在液压挖掘机的后部位置和左右的两侧部位置的3个部位上,使该各摄像机的摄像透镜的光轴朝向斜下方。由各摄像机拍摄的图像是透明图像,而为了获得监视图像,可对该贯穿图像进行视点变换处理。进行该变换的视点是上方视点,由此可得从液压挖掘机上方投影的3枚上方视点图像。
上方视点图像显示在监视器画面上,但是此时构成为在监视器画面上显示将液压挖掘机象征化的插图图像(具体而言为液压挖掘机的平面插图图像),由各摄像机取得的上方视点图像配置在该插图图像的周围。更具体而言,是在监视器画面的中心位置显示插图图像,在该插图图像的后方区域及左右的侧方区域排列各上方视点图像,显示周围监视用的俯瞰图像。
现有技术文献
专利文献
专利文献1:日本特开2010-204821号公报
发明内容
发明所要解决的课题
另外,液压挖掘机也可用于矿山采矿。该矿山用的液压挖掘机为大型装备,下部行驶体是具有左右履带的履带式结构。在下部行驶体上经由回转装置装设的上部回转体距离地面为1.8m以上,在上部回转体上设置的摄像机在上部回转体的车体框架的下部位置存在较大的空间。在液压挖掘机周围进行作业的作业者,有时会进入到上部回转体的车体框架的下部位置,而无法在周围监视用的摄像机的视野中捕捉到。
为了使产业机械的周围监视更加有效,需要减少监视用摄像机的死角部位,希望理想地消除死角。当然,对产业机械的动作无影响的远离位置是当然的,而且作业者等不会进入的狭窄部位、或者构成下部行驶体的履带朝向地面的踏面不是监视对象,然而特别是在大型的产业机械中,需要尽量使上部回转体的框架以及从该框架突出的部位的下部区域尽量进入监视摄像机的视野。
本发明是针对以上需求提出的,其目的是扩展监视摄像机的视野范围而进一步提高周围监视的实效性。
用于解决课题的手段
为了解决以上课题,本发明是一种产业机械的监视图像显示装置,具备:设于在至少一部分上具有可动机构的产业机械,以该产业机械的周围为视野,至少一部分设于从外形区域突出的位置的1个或多个监视用摄像机;由上述监视用摄像机生成从上方向下看的俯视图像的图像生成单元;生成上述产业机械的平面即至少使轮郭线图形化了的标志图像的标志图像生成单元;以将由上述图像生成单元取得的图像显示在由上述标志图像生成单元生成的上述标志图像的周围的方式进行合成处理的图像合成单元;以及以由图像合成单元合成的上述俯视图像部分地包含隐蔽在上述标志图像的显示区域内侧的部位的方式进行显示的图像显示单元。
本发明的产业机械的监视图像显示装置是在产业机械中用于对其动作时的周围进行安全确认等的装置,产业机械至少在一部分上具有可动机构。具体的而言是作业单元或行驶单元等。为了使这样构成的可动机构安全地动作而利用图像进行监视。图像在图像显示单元即监视器上显示。显示样态是将该产业机械的平面像显示为标志图像。标志图像以轮郭线表示。
将标志图像与监视摄像机的图像一并显示。因此,监视摄像机的图像为俯视图像。因此,通过将监视摄像机配置于高处并使光轴朝向下方而能够获得俯视图像。监视摄像机在至少1处或多处设置,并优选为了对产业机械的周围整体地进行摄影而设置4处或更多的监视摄像机。多个监视摄像机以视野相互重叠的方式配置,在进行显示时剪切图像而在彼此邻接的图像间保持连续性。
产业机械就构造而言在其外形的下部位置生成空间。例如在产业机械为大型液压挖掘机时设置供操作者等通行的窄道,该窄道以从作为构造体的上部回转体的框架向外方突出的方式设置。为了能够监视到该窄道的下部区域,在标志图像内部显示隐蔽部位的图像。
相对于窄道等构成机械外形的部位将监视摄像机的位置设定在较高的位置。并且,相对于构造体的轮郭线将监视摄像机配置在向外侧突出的位置。由此,地表的图像能够显示到外形内侧的部位。为了将视野扩展到更内侧,摄像机的位置比规定外形的部位更高,并且使从外形部突出的长度更长。但是,如果使向上方及侧方突出的量增大,则相应地与其它物体发生碰撞的可能性会增加。因此对突出量有限制。
在如液压挖掘机那样将上部回转体在下部行驶体上可回转地设置时,上部回转体的回转半径成为摄像机的装设位置的突出长度的限界位置。为了安全地回转,需要避免在上部回转体的回转半径内与其它物体等发生碰撞,即避免其它物体等在工作时进入回转半径内。因此,能够将摄像机的装设位置的突出长度的限界位置设定在上部回转体的回转半径内。并且可构成为,在液压挖掘机的构成上部回转体的回转体本体的规定位置上装设支撑臂,在该支撑臂的前端装设摄像机。另外,为了能够对摄像机的装设位置进行调整,也可以构成为能够对支撑臂进行长度调节。但是,在如液压挖掘机那样可能发生较大振动时,需要避免摄像机的装设位置发生偏移,因此优选将支撑臂牢固地装设。
另外,在液压挖掘机中为了挖掘土砂而在上部回转体上设有前作业机即作业单元。前作业机构成为包括:在上部回转体的回转框架上可俯仰动作地设置的动臂、在该动臂的前端可向上下方向转动的斗杆、在斗杆的前端经由关节机构连结的铲斗。在挖掘时使铲斗咬入地面。因此,在挖掘动作时铲斗接地的部位是危险区域,需要防止其它车辆或作业者进入。
因此,当液压挖掘机位于规定位置时,即上部回转***于规定的角度位置时,将利用铲斗进行挖掘的区域显示于监视器对于作业安全性很重要。特别是在不搭乘操作者而通过遥控操作进行挖掘作业时,将要进行挖掘的位置显示于监视器对于作业安全性或效率都特别重要。
发明的效果
在液压挖掘机等产业机械中,减少监视器所显示的图像的死角而进一步提高作业安全性。
附图说明
图1是作为产业机械一例的液压挖掘机的主视图。
图2是图1的液压挖掘机的俯视图。
图3是图1的液压挖掘机的左侧视图。
图4是示意地表示图3位置上的摄像机视野范围的说明图。
图5是示意地表示图2位置上的摄像机视野范围的说明图。
图6是表示监视器的画面部上的各图像的显示区域的一例的图。
图7是表示在监视器上显示的标志图像的一例的俯视图。
图8是表示监视器的显示控制器的结构的框图。
图9是使窄道下部的隐蔽部进入摄影视野的原理说明图。
图10是表示包含铲斗可挖掘范围的监视器图像样态的另一例的说明图。
具体实施方式
以下参照附图对本发明的实施方式进行说明。首先在图1至图3中示出作为产业机械一例的液压挖掘机1的结构。图1是液压挖掘机1的主视图、图2是俯视图、图3是左侧视图。这里,在图2及图3中省略后述的前作业机5进行表示。
液压挖掘机1具有:具有履带式行驶单元的下部行驶体2、在该下部行驶体2上可回转地设置的上部回转体3。在上部回转体3上设有驾驶室4,该驾驶室4用于搭乘操作者来操作机械,并且设有作业单元即前作业机5,该前作业机5进行土砂挖掘等作业。另外,前作业机5的具体结构是公知的,因此省略图示及详细说明。
因此,在作为产业机械的液压挖掘机1中,进行下部行驶体2的行驶、上部回转体3的回转以及由前作业机5执行的作业等动作。利用液压缸或液压马达进行上述各动作部的驱动,由可动部及其驱动部构成可动机构。并且,有时也采用电动马达等其它的执行器。
液压挖掘机1的可动机构由操作者进行操作,驾驶室4装设于上部回转体3的前方位置。在该驾驶室4的右手、大致并列的位置设有前作业机5。在上部回转体3的驾驶室4及前作业机5的后方位置设有构成机械室的机房6,由此构成回转体本体3a。另外,在最后端部设有对重7。
虽然图示省略,前作业机5构成为包括:在上部回转体3的回转体本体3a上可俯仰动作地设置的动臂、在该动臂的前端可向上下方向转动地连结的斗杆、在该斗杆的前端可转动地连结的进行土砂挖掘等作业的铲斗,这些动臂、斗杆及铲斗由液压缸驱动。另外,该前作业机5的具体结构是以往公知的结构。
在回转体本体3a上还设有梯子13以供操作者进入或离开驾驶室4,并且还具备构成通道的窄道14。窄道14在回转体本体3a的侧部、高度方向的中间位置向侧方突出地配置,该窄道14的下部位置为空间。另外,梯子13以与窄道14相连的方式配置。这里,回转体本体3a是框架构造,窄道14及梯子13为从回转体本体3a突出的部分。
液压挖掘机1具有上述可动机构,为了在该可动机构动作时确保周围的安全而设有周围监视装置。该周围监视装置设于上部回转体3,由可进行动画摄影的多个视频摄像机构成。即,在图4及图5中,15F是前方摄像机、15B是后方摄像机、15L,15R是左右的侧方摄像机。由这些摄像机15F,15B,15L,15R监视液压挖掘机1的周围。另外,在以下说明中总称摄像机监视用摄像机时使用符号15。
摄像机15F,15B,15L,15R设于上部回转体3的回转体本体3a并配置于高处,其光轴朝向下方或斜下方。即,如图4所示,由各摄像机15得到的图像是从上方向下看的俯视图像。各摄像机15的配设位置设定为能够监视液压挖掘机1的全周的位置关系。在图5中示出摄像机15F,15B,15L,15R的配置的一例。
如以上这样,由各摄像机15F,15B,15L,15R取得的图像,如图6所示,在作为图像显示单元的监视器20上显示。这里,监视器20在驾驶室4内配置在从操作者就坐进行液压挖掘机1的操作的驾驶席能够目视的位置。
在监视器20上显示的来自各摄像机15F,15B,15L,15R的图像是俯视图像,监视器20的画面分割为多个区域,对上述各俯视图像进行剪切而使其处于规定的范围,在监视器20上设定的各显示区域上显示摄像机图像21F,21B,21L,21R。另外,在画面中央设定有标志图像21C的显示区域,在该标志图像21C的显示区域上,如图7所示将液压挖掘机1的平面像进行象征化显示。这里,标志图像21C将作为监视对象的产业机械即液压挖掘机简化,在图中显示了液压挖掘机1的上部回转体3、前作业机5以及窄道14,这些结构的符号也在图9中标记。
在图8中示出对监视器20上的图像进行显示控制的显示控制器30的结构。显示控制器30具有图像校正部31,利用该图像校正部31基于摄像机光学系参数等对从各摄像机15F,15B,15L,15R输入的摄像机图像进行像差校正、对比度校正、色彩校正等通常的图像信号处理,从而提高各输入的图像的画质。
监视器20分配为摄像机图像21F,21B,21L,21R的显示区域进行显示,因此显示控制器30具备图像剪切处理部32,由各摄像机15F,15B,15L,15R取得的摄像机图像21F,21B,21L,21R分别剪切为能够在各显示区域上显示的尺寸及形状。
在监视器20上一并显示4处的摄像机图像21F,21B,21L,21R和标志图像21,而标志图像21C由标志图像生成部33生成。并且,由图像合成部33对各摄像机图像21F,21B,21L,21R和标志图像21C进行合成显示。标志图像21C在监视器20的中央位置显示,各摄像机图像21F,21B,21L,21R配置在该标志图像21C的周围。图像合成部34的输出数据向显示图像生成部35输入,按照来自该显示图像生成部34的输出将上述各图像向各位置分配进行显示。
摄像机15F,15B,15L,15R以使光轴朝向大概垂直方向的状态进行摄影,因此取得的摄像机图像均为俯视图像。并且,标志图像21C也是使液压挖掘机1平面化的图像。因此,在监视器20上以平面状态显示液压挖掘机1及其周围的状况,因此能够使操作者容易识别液压挖掘机1工作时的状况。
在上部回转体3上设置的摄像机15到地面的光路上有时会存在各种部件或机构等遮蔽物。因此,无法获得这些遮蔽物下方位置的图像。例如,在设有驾驶室4的上部回转体3左侧的部位,在驾驶室4的下部位置与构成下部行驶体2的接地面的履带2的地面之间存在有较大的空间。并且,在驾驶室4的后方侧设有窄道14及梯子13,其下部位置也存在有较大空间。这些空间在俯视上部回转体3时,存在被驾驶室4及窄道14或梯子13等遮蔽的较大的隐蔽部。并且,在这种隐蔽部空间内部不仅存在操作者或其它作业者等进入的可能性,而且有时会配置工具或其它设备,并且在大型液压挖掘机时还有车辆等进入的余地。因此,从液压挖掘机1的周边监视等观点来看,希望能够在监视摄像机的视野内捕捉到上述隐蔽部的空间。
因此,如图9所示,对该区域进行摄影的摄像机15L并非在回转体本体3a上安装,设有从回转体本体3a向侧方突出的支撑臂40L,摄像机15L被支撑在支撑臂40L的前端。因此,装设于该支撑臂40L的摄像机15L的光轴位于比窄道14的外端部靠外侧尺寸p的位置。并且,摄像机15L位于从地上起高度为h的位置,因此在地表面及其近旁的高度位置,能够实质地使到构成下部行驶体2的履带的位置进入视野。并且,摄像机15L配置在比装设有梯子13的窄道14的位置靠近前方的位置,因此该窄道14的下部位置也能够进入视野。
右侧方摄像机15R及前方摄像机15F也同样地装设于从回转体本体3a向规定的方向突出的支撑臂40R,40F,能够扩展这些部位的视野范围。并且,在监视器20上,相对于字符图像21C,扩展视野范围而形成透视状态进行显示。此时,在标志图像21C上显示的液压挖掘机1的象征图像,即使部分地成为透视状态,也能够显示其外形的轮郭。因此,在以下说明中总称支撑臂时使用符号40。
这样,通过将摄像机15装设于从回转体本体3a突出地设置的支撑臂40的前端,能够使上部回转体3的隐蔽部进入视野范围。这里,支撑臂40的装设位置及突出长度可以按照上部回转体3的结构适当地设定,而只要突出长度以图2所示回转半径R为基准位于该回转半径R内侧,则即使从回转体本体3a较大地突出也不会与其它物体发生碰撞等。并且,支撑臂40优选以刚体构成,将摄像机15牢固地固定而不会因振动等发生位置偏移。
这里,作为本发明的实施例,在左侧面上设置的摄像机15L的支撑臂40L延设于侧方,摄像机15F及摄像机15R的支撑臂40F,40R延设于前方,但是基于在监视器20上显示的隐蔽部的位置来设定延设方向。并且,摄像机15B如图所示,在对重7的上部位置没有特别设置支撑臂。但是,该摄像机15B也设置为被支撑臂支撑。
通过以上这样构成,不仅在液压挖掘机1周围的部位,而且在窄道14的下部位置等被上部回转体3所覆盖隐蔽的部位也能够显示于监视器20。并且,在装设有摄像机15的上部回转体3上,在从该视野隐蔽的部位,能够将作业者等可能进入的部位显示于监视器20,提高作为周围监视的实效性。
在构成上部回转体3的回转体本体3a的下部位置,将隐蔽部透视显示是在人等可能进入的部位,例如履带接地面等人等不会进入的部位则不必显示,因此装设摄像机15的支撑臂40的高度位置及突出长度,可以按照需要进行透视显示的隐蔽部的位置和宽度适当地进行设定。
另外,液压挖掘机1进行土砂挖掘等作业时则前作业机5动作。在利用该前作业机5进行土砂挖掘时,在其前端设置的铲斗从上方挖入土砂进行动作,因此当人或物***于铲斗的可动轨迹范围内时,则存在与其发生碰撞的可能性。在该作业中需要进行保护以避免前作业机5与人或物体等发生碰撞。当然,搭乘于驾驶室4的操作者能够识别前作业机的动作。因此,能够如图10所示在前作业机5的可及范围内,将存在该铲斗接地的可能性的范围作为可挖掘范围B显示于监视器20。
前作业机5设于上部回转体3,在该上部回转体3旋转动作时,前作业机5也同步回转。并且,监视用摄像机15F,15B,15L,15R也设于上部回转体3,因此在这些摄像机15F,15B,15L,15R的图像上与前作业机5的位置关系不会变化。因此,在监视器20上一并显示以标志图像21C为中心的摄像机图像21F,21B,21L,21R和存在前作业机5接地的可能性的可挖掘范围B,但是可挖掘范围B由铲斗的宽度尺寸及其最大可及长度来决定。铲斗具有宽度尺寸不同的多种,因此实际中优选根据在液压挖掘机12上装设的前作业机5的结构来改变可挖掘范围B。
这样,在监视器20上显示可挖掘范围B,从而在行驶及回转来选定挖掘部位时,能够以该可挖掘范围B为基准来驱动液压挖掘机1,容易进行挖掘部位的位置调整。因此,通过在监视器20上显示可挖掘范围B,不仅能够确保作业安全而且能够提高作业效率。
符号说明
1-液压挖掘机;2-下部行驶体;3-上部回转体;3a-回转体本体;4-驾驶室;5-前作业机;15,15F,15B,15L,15R-摄像机;20-监视器;21,21F,21B,21L,21R-摄像机图像;21C-标志图像。
Claims (3)
1.一种产业机械的监视图像显示装置,其特征在于,具备:
设于在至少一部分上具有可动机构的产业机械(1),以该产业机械(1)的周围为视野,至少一部分设于从外形区域突出的位置的1个或多个监视用摄像机(15,15F,15B,15L,15R);
由上述监视用摄像机(15,15F,15B,15L,15R)生成从上方向下看的俯视图像的图像生成单元(35);
生成上述产业机械(1)的平面即至少使轮郭线图形化了的标志图像(21C)的标志图像生成单元(33);
以将由上述图像生成单元(35)取得的图像显示在由上述标志图像生成单元(33)生成的上述标志图像(21C)的周围的方式进行合成处理的图像合成单元(34);以及
以由图像合成单元合成的上述俯视图像部分地包含隐蔽在上述标志图像(21C)的显示区域内侧的部位的方式进行显示的图像显示单元(20)。
2.根据权利要求1所述的产业机械的监视图像显示装置,其特征在于,
上述产业机械(1)具有可回转的框架(3),上述标志图像(21C)以轮郭线显示包含上述框架(3)及从该框架(3)向外方突出的突出部的区域,上述监视用摄像机(15)位于比构成上述轮郭线的部位靠上方的位置,且以比该轮郭线向外侧突出的方式设置。
3.根据权利要求1所述的产业机械的显示装置,其特征在于,
上述产业机械(1)具有从上述框架(3)突出的可动的作业机构(5),上述标志图像(21C)具有显示上述作业机构(5)的移动轨迹的可动区域显示部(B)。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014-027536 | 2014-02-17 | ||
JP2014027536A JP6095592B2 (ja) | 2014-02-17 | 2014-02-17 | 油圧ショベルの監視画像表示装置 |
PCT/JP2015/051402 WO2015122245A1 (ja) | 2014-02-17 | 2015-01-20 | 産業機械の監視画像表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105493503A true CN105493503A (zh) | 2016-04-13 |
CN105493503B CN105493503B (zh) | 2018-08-24 |
Family
ID=53799993
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580001771.5A Active CN105493503B (zh) | 2014-02-17 | 2015-01-20 | 液压挖掘机 |
Country Status (7)
Country | Link |
---|---|
US (2) | US20160217331A1 (zh) |
EP (1) | EP3110142B1 (zh) |
JP (1) | JP6095592B2 (zh) |
CN (1) | CN105493503B (zh) |
AU (1) | AU2015216409B2 (zh) |
CA (1) | CA2923033C (zh) |
WO (1) | WO2015122245A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109255335A (zh) * | 2018-09-28 | 2019-01-22 | 广州希华通讯设备有限公司 | 用于建筑工地挖掘机的识别监控*** |
CN109564086A (zh) * | 2016-08-18 | 2019-04-02 | 株式会社神户制钢所 | 工程机械 |
CN115013386A (zh) * | 2022-05-30 | 2022-09-06 | 燕山大学 | 基于视觉识别的液压***防护装置控制方法及其控制装置 |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10781572B2 (en) * | 2015-03-31 | 2020-09-22 | Komatsu Ltd. | Working machine |
US9871968B2 (en) * | 2015-05-22 | 2018-01-16 | Caterpillar Inc. | Imaging system for generating a surround-view image |
JP6713190B2 (ja) * | 2015-10-09 | 2020-06-24 | 住友重機械工業株式会社 | ショベル操作装置及びショベル操作方法 |
JP2017081238A (ja) * | 2015-10-23 | 2017-05-18 | 株式会社小松製作所 | 表示システムおよび作業車両 |
JP2017082415A (ja) * | 2015-10-23 | 2017-05-18 | 株式会社小松製作所 | 表示システム |
CN108431338B (zh) | 2015-12-28 | 2020-12-11 | 住友建机株式会社 | 铲土机 |
EP3246474B1 (en) * | 2016-03-29 | 2021-11-10 | Komatsu Ltd. | Work vehicle |
US10070071B2 (en) * | 2016-08-30 | 2018-09-04 | Caterpillar Inc. | Method of imaging a machine environment and machine system implementing same |
JP2018050119A (ja) * | 2016-09-20 | 2018-03-29 | 国立大学法人 東京大学 | 作業車両の表示システム |
JP7522532B2 (ja) * | 2016-11-01 | 2024-07-25 | 住友建機株式会社 | 建設機械用安全管理システム、管理装置 |
KR20180078970A (ko) * | 2016-12-30 | 2018-07-10 | 화남전자 주식회사 | 건설장비의 주변부 모니터링을 위한 카메라 배치 구조 |
US10250812B2 (en) | 2017-05-17 | 2019-04-02 | Caterpillar Inc. | Display system for machine |
US10889958B2 (en) * | 2017-06-06 | 2021-01-12 | Caterpillar Inc. | Display system for machine |
US10662603B2 (en) * | 2017-08-18 | 2020-05-26 | Independence Excavating, Inc. | Slope roller assembly |
JP6958216B2 (ja) * | 2017-10-17 | 2021-11-02 | 株式会社タダノ | 作業車両 |
JP7143578B2 (ja) * | 2017-10-17 | 2022-09-29 | 株式会社タダノ | 作業車両 |
CN111052734B (zh) * | 2017-10-17 | 2021-06-01 | 株式会社多田野 | 作业车辆 |
US10883256B2 (en) * | 2018-05-25 | 2021-01-05 | Deere & Company | Object responsive control system for a work machine |
US12035048B2 (en) | 2019-09-20 | 2024-07-09 | Wise Automotive Corporation | Front image generation device for heavy equipment |
WO2021054757A1 (ko) * | 2019-09-20 | 2021-03-25 | 주식회사 와이즈오토모티브 | 건설장비용 전방 영상 생성 장치 |
WO2021054758A1 (ko) * | 2019-09-20 | 2021-03-25 | 주식회사 와이즈오토모티브 | 건설장비용 전방 영상 생성 장치 |
US11231501B2 (en) | 2019-09-26 | 2022-01-25 | Baidu Usa Llc | Front and side three-LIDAR design for autonomous driving vehicles |
US11898332B1 (en) * | 2022-08-22 | 2024-02-13 | Caterpillar Inc. | Adjusting camera bandwidth based on machine operation |
CN116347240A (zh) * | 2023-01-13 | 2023-06-27 | 北京天玛智控科技股份有限公司 | 煤矿综采工作面的视频监控方法、装置、电子设备和介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103025581A (zh) * | 2011-06-07 | 2013-04-03 | 株式会社小松制作所 | 自卸卡车 |
CN103141090A (zh) * | 2010-09-29 | 2013-06-05 | 日立建机株式会社 | 作业机械的周围监视装置 |
WO2013105597A1 (ja) * | 2012-01-12 | 2013-07-18 | 日立建機株式会社 | 自走式産業機械の周囲監視装置 |
WO2013172172A1 (ja) * | 2012-05-15 | 2013-11-21 | 日立建機株式会社 | 自走式産業機械の表示装置 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2913230B2 (ja) * | 1991-10-23 | 1999-06-28 | 日立建機株式会社 | 大型建設機械の照明装置 |
JPH10237900A (ja) * | 1997-02-28 | 1998-09-08 | Hitachi Constr Mach Co Ltd | ラダ−を有する建設機械 |
JP4196368B2 (ja) * | 1999-12-20 | 2008-12-17 | 株式会社小松製作所 | 建設機械の昇降用ラダー装置 |
KR100892269B1 (ko) * | 2001-06-15 | 2009-04-09 | 가부시키가이샤 고마쓰 세이사쿠쇼 | 건설기계 |
JP3980565B2 (ja) * | 2004-02-16 | 2007-09-26 | 松下電器産業株式会社 | 運転支援装置 |
KR100966288B1 (ko) * | 2009-01-06 | 2010-06-28 | 주식회사 이미지넥스트 | 주변 영상 생성 방법 및 장치 |
JP4951639B2 (ja) | 2009-03-02 | 2012-06-13 | 日立建機株式会社 | 周囲監視装置を備えた作業機械 |
KR101751405B1 (ko) * | 2010-10-22 | 2017-06-27 | 히다치 겡키 가부시키 가이샤 | 작업 기계의 주변 감시 장치 |
KR101735116B1 (ko) * | 2011-01-24 | 2017-05-15 | 두산인프라코어 주식회사 | 건설중장비의 운행정보 기록장치 |
WO2012157438A1 (ja) * | 2011-05-13 | 2012-11-22 | 日立建機株式会社 | 油圧ショベルの後方視野表示装置 |
EP2712969A4 (en) * | 2011-05-13 | 2015-04-29 | Hitachi Construction Machinery | DEVICE FOR MONITORING THE AREA OF A WORKING MACHINE |
JP5888956B2 (ja) * | 2011-12-13 | 2016-03-22 | 住友建機株式会社 | ショベル及び該ショベルの周囲画像表示方法 |
JP2013253402A (ja) * | 2012-06-06 | 2013-12-19 | Hitachi Constr Mach Co Ltd | 作業機械の周囲監視装置 |
WO2013183536A1 (ja) * | 2012-06-08 | 2013-12-12 | 日立建機株式会社 | 自走式産業機械の表示装置 |
-
2014
- 2014-02-17 JP JP2014027536A patent/JP6095592B2/ja active Active
-
2015
- 2015-01-20 EP EP15748978.2A patent/EP3110142B1/en active Active
- 2015-01-20 CA CA2923033A patent/CA2923033C/en active Active
- 2015-01-20 CN CN201580001771.5A patent/CN105493503B/zh active Active
- 2015-01-20 AU AU2015216409A patent/AU2015216409B2/en active Active
- 2015-01-20 US US14/916,058 patent/US20160217331A1/en not_active Abandoned
- 2015-01-20 WO PCT/JP2015/051402 patent/WO2015122245A1/ja active Application Filing
-
2018
- 2018-10-12 US US16/158,346 patent/US10650251B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103141090A (zh) * | 2010-09-29 | 2013-06-05 | 日立建机株式会社 | 作业机械的周围监视装置 |
CN103025581A (zh) * | 2011-06-07 | 2013-04-03 | 株式会社小松制作所 | 自卸卡车 |
WO2013105597A1 (ja) * | 2012-01-12 | 2013-07-18 | 日立建機株式会社 | 自走式産業機械の周囲監視装置 |
WO2013172172A1 (ja) * | 2012-05-15 | 2013-11-21 | 日立建機株式会社 | 自走式産業機械の表示装置 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109564086A (zh) * | 2016-08-18 | 2019-04-02 | 株式会社神户制钢所 | 工程机械 |
CN109564086B (zh) * | 2016-08-18 | 2020-12-15 | 株式会社神户制钢所 | 工程机械 |
US11028553B2 (en) | 2016-08-18 | 2021-06-08 | Kobe Steel, Ltd. | Construction machine |
CN109255335A (zh) * | 2018-09-28 | 2019-01-22 | 广州希华通讯设备有限公司 | 用于建筑工地挖掘机的识别监控*** |
CN115013386A (zh) * | 2022-05-30 | 2022-09-06 | 燕山大学 | 基于视觉识别的液压***防护装置控制方法及其控制装置 |
CN115013386B (zh) * | 2022-05-30 | 2023-06-23 | 燕山大学 | 基于视觉识别的液压***防护装置控制方法及其控制装置 |
Also Published As
Publication number | Publication date |
---|---|
CN105493503B (zh) | 2018-08-24 |
WO2015122245A1 (ja) | 2015-08-20 |
AU2015216409A1 (en) | 2016-03-17 |
EP3110142A4 (en) | 2017-11-29 |
JP2015151794A (ja) | 2015-08-24 |
EP3110142A1 (en) | 2016-12-28 |
EP3110142B1 (en) | 2021-12-22 |
JP6095592B2 (ja) | 2017-03-15 |
AU2015216409B2 (en) | 2017-10-19 |
CA2923033A1 (en) | 2015-08-20 |
US10650251B2 (en) | 2020-05-12 |
US20160217331A1 (en) | 2016-07-28 |
US20190042858A1 (en) | 2019-02-07 |
CA2923033C (en) | 2021-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105493503A (zh) | 产业机械的监视图像显示装置 | |
CN106031167B (zh) | 旋转式作业机的周围显示装置 | |
JP7108750B2 (ja) | システムおよび方法 | |
JP6014664B2 (ja) | 自走式産業機械の表示装置 | |
US10044933B2 (en) | Periphery monitoring device for work machine | |
JP6071786B2 (ja) | 作業機械の周囲監視装置 | |
CN103547747A (zh) | 作业机械的周围监视装置 | |
JP2013253402A (ja) | 作業機械の周囲監視装置 | |
CN103563358A (zh) | 作业机械的周围监视装置 | |
JP6106754B2 (ja) | 作業機械の周囲監視装置 | |
CN104041018A (zh) | 自行式工业机械的周围监视装置 | |
JP6917167B2 (ja) | 建設機械用俯瞰画像表示装置 | |
JP6256874B2 (ja) | 建設機械用俯瞰画像表示装置 | |
JP6433664B2 (ja) | 建設機械用俯瞰画像表示装置 | |
WO2020080294A1 (ja) | 油圧ショベル | |
JP6188858B2 (ja) | 作業機械の周囲監視装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |