JP6507660B2 - Vision support device - Google Patents

Vision support device Download PDF

Info

Publication number
JP6507660B2
JP6507660B2 JP2015006174A JP2015006174A JP6507660B2 JP 6507660 B2 JP6507660 B2 JP 6507660B2 JP 2015006174 A JP2015006174 A JP 2015006174A JP 2015006174 A JP2015006174 A JP 2015006174A JP 6507660 B2 JP6507660 B2 JP 6507660B2
Authority
JP
Japan
Prior art keywords
image
display
camera
mark
failure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015006174A
Other languages
Japanese (ja)
Other versions
JP2016134657A (en
Inventor
渡辺 章博
章博 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2015006174A priority Critical patent/JP6507660B2/en
Publication of JP2016134657A publication Critical patent/JP2016134657A/en
Application granted granted Critical
Publication of JP6507660B2 publication Critical patent/JP6507660B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Description

本発明は、カメラによって撮影した撮影画像を表示部に表示する視界支援装置に関するものである。   The present invention relates to a visual field support device that displays a photographed image photographed by a camera on a display unit.

従来、カメラ装置によって撮影された画像を、サーバ装置およびクライアント装置の表示部に表示させるカメラシステムの故障検出に係る技術が、例えば、特許文献1に記載されている。   Conventionally, for example, Patent Document 1 describes a technique related to failure detection of a camera system that causes an image captured by a camera device to be displayed on a display unit of a server device and a client device.

特許文献1のカメラシステムでは、遠隔地に配置されたカメラ装置は、サーバ装置によってカメラのパン、チルト、ズーム等が制御される。カメラ装置によって撮影された画像は、サーバ装置に出力され、更に、サーバ装置からネットワークを介してクライアント装置に送信され、サーバ装置およびクライアント装置の表示部に表示されるようになっている。これにより、サーバ装置およびクライアント装置の管理者は、カメラ装置による遠隔監視が可能となっている。   In the camera system of Patent Document 1, the camera apparatus disposed at a remote place is controlled by the server apparatus to control pan, tilt, zoom and the like of the camera. An image captured by the camera device is output to the server device, and further transmitted from the server device to the client device via the network, and displayed on the display unit of the server device and the client device. Thus, the administrator of the server device and the client device can remotely monitor the camera device.

特許文献1では、サーバ装置は、カメラの故障判定を行うにあたって、一定時間、黒い画像が続いたときに、それが昼間の時間帯のときであると、故障と判定し、また、夜の時間帯のときであり且つカメラの首ふりができないと、故障と判定する。あるいは、黒い画像が発生すると、カメラを4カ所にパンして、4カ所とも黒い画像であると、故障と判定し、サーバ装置の表示部、更には、ネットワークを介してクライアント装置の表示部に、故障の内容を表示するようになっている。これにより、サーバ装置、クライアント装置の管理者は、カメラ装置の故障の有無を確認することができるようになっている。   In Patent Document 1, when performing a camera failure determination, when a black image continues for a certain period of time, the server device determines that it is a failure during the daytime time zone, and the night time If it is a band and the camera can not be swung, it is determined that a failure has occurred. Alternatively, when a black image is generated, the camera is panned to four locations, and it is determined that all four locations are black images as a failure, and the display unit of the server device and the display unit of the client device via the network. , Is to display the contents of the failure. As a result, the administrator of the server apparatus and the client apparatus can confirm the presence or absence of a failure of the camera apparatus.

特開2001−36927号公報JP 2001-36927 A

しかしながら、特許文献1では、上記のような故障判定のための手段、および故障表示のための手段の設定を必要としている。よって、サーバ装置、あるいはクライアント装置の管理者は、カメラ装置に故障があっても、サーバ装置による故障判定に基づく故障表示が成されるまでは、故障の発生を認識することができない。例えば、各管理者は、夜間時において、表示部に表示される画像が、カメラ装置の正常時の暗闇の画像なのか、カメラ装置の故障による黒い画像なのかをタイムリーに認識することができない。   However, in patent document 1, the setting of the means for the above failure determinations and the means for a failure display is required. Therefore, even if there is a failure in the camera device, the manager of the server device or the client device can not recognize the occurrence of the failure until the failure display based on the failure determination by the server device is made. For example, at night time, each administrator can not timely recognize whether the image displayed on the display unit is an image of darkness when the camera device is normal or a black image due to a failure of the camera device. .

あるいは、夜間時において、サーバ装置、クライアント装置の表示部に故障があると、表示部は黒い画像となってしまい故障表示は成されないので、管理者は、暗闇の画像なのか、故障に伴う黒い画像なのかを認識することができない。   Alternatively, at night time, if there is a failure in the display unit of the server device or the client device, the display unit will be a black image and no failure display will be made. I can not recognize if it is an image.

本発明の目的は、上記問題に鑑み、簡素な構成で、視認者が故障の有無をすぐに認識できる視界支援装置を提供することにある。   An object of the present invention is, in view of the above problems, to provide a visual field support device that allows a viewer to immediately recognize the presence or absence of a failure with a simple configuration.

本発明は上記目的を達成するために、以下の技術的手段を採用する。   The present invention adopts the following technical means to achieve the above object.

本発明では、周囲の撮影を行い、撮影画像を形成するカメラ(110)と、
撮影画像に対して所定の画像処理を行い、表示用画像とする画像処理部(120)と、
表示用画像を表示する表示部(130)と、を備える視界支援装置であって、
カメラ(110)は、撮影画像に正常作動を示すためのマーク画像を付加して、画像処理部(120)に出力するようになっており、
前記マーク画像は、前記撮影画像の周囲の少なくとも一部に配置される枠状の画像、あるいは動きを伴う画像であることを特徴としている。
In the present invention, a camera (110) for photographing the surroundings and forming a photographed image;
An image processing unit (120) that performs predetermined image processing on the captured image to obtain a display image;
And a display unit (130) for displaying a display image, the view support apparatus comprising:
The camera (110) adds a mark image for indicating normal operation to the photographed image, and outputs the image to the image processing unit (120).
The mark image is characterized in that it is a frame-shaped image arranged at least at a part of the periphery of the photographed image, or an image with motion .

この発明によれば、マーク画像が付加された撮影画像が、カメラ(110)から画像処理部(120)に出力されると、画像処理部(120)は、撮影画像に対して所定の画像処理を行い、マーク画像はそのまま維持される。よって、表示部(130)には、画像処理された表示用画像にマーク画像が付加されたものが表示される。   According to the present invention, when the captured image to which the mark image is added is output from the camera (110) to the image processing unit (120), the image processing unit (120) performs predetermined image processing on the captured image. And the mark image is maintained as it is. Therefore, the display unit (130) displays an image-processed display image to which a mark image is added.

ここで、カメラ(110)、画像処理部(120)、および表示部(130)が正常に作動している場合で、カメラ(110)が夜間における暗闇を撮影した場合は、表示部(130)には、暗闇の画像にマーク画像が付加されたものが表示される。この場合は、表示用画像が黒い画像であっても、マーク画像が付加されていることから、視認者は、カメラ(110)、画像処理部(120)、および表示部(130)が正常に作動しており、暗闇を撮影したものとして認識することができる。つまり、マーク画像は、表示される画像が故障を思わすようなものであっても、視界支援装置(100)が、正常に作動をしていることを示すマークとなる。   Here, when the camera (110), the image processing unit (120), and the display unit (130) operate normally, and the camera (110) captures the darkness at night, the display unit (130) Shows the image of the dark with the mark image added. In this case, even if the display image is a black image, the mark image is added, so that the viewer normally operates the camera (110), the image processing unit (120), and the display unit (130). It is activated and can be recognized as a picture of darkness. That is, the mark image is a mark indicating that the visual field support device (100) is operating normally even if the displayed image seems to be a failure.

一方、カメラ(110)の画像出力部、画像処理部(120)、および表示部(130)の少なくとも1つが故障している場合は、マーク画像の設けられた出力画像の正しい処理が行われない。よって、表示部(130)には、故障に伴う黒い画像のみが表示されることになり、視認者は、マーク画像がないことから、この黒い画像は故障によるものであることを認識できる。   On the other hand, when at least one of the image output unit of the camera (110), the image processing unit (120), and the display unit (130) is broken, the correct processing of the output image provided with the mark image is not performed . Therefore, only the black image associated with the failure is displayed on the display unit 130, and the viewer can recognize that the black image is due to the failure because there is no mark image.

このように、カメラ(110)によって撮影画像にマーク画像を付加するといった、極めて簡単な構成で、撮影画像に対する異常判定を不要として、視認者は視界支援装置における故障の有無をすぐに認識することができる。   As described above, the viewer can immediately recognize the presence or absence of a failure in the visual field support device with an extremely simple configuration in which a mark image is added to the captured image by the camera (110) and the abnormality determination on the captured image is unnecessary. Can.

尚、上記各手段の括弧内の符号は、後述する実施形態記載の具体的手段との対応関係を示すものである。   In addition, the code | symbol in the parenthesis of each said means shows correspondence with the specific means of embodiment description later mentioned.

視界支援装置の全体構成を示すブロック図である。FIG. 1 is a block diagram showing an entire configuration of a visibility support device. TFTを用いた表示部を示す斜視図である。It is a perspective view which shows the display part using TFT. 他の例として有機ELを用いた表示部を示す斜視図である。It is a perspective view which shows the display part which used organic EL as another example. 第1実施形態における正常時の暗闇画像におけるマーク画像を示す説明図である。It is explanatory drawing which shows the mark image in the dark image at the time of normality in 1st Embodiment. 第1実施形態における故障時の表示状態(黒い画像)を示す説明図である。It is explanatory drawing which shows the display state (black image) at the time of a failure in 1st Embodiment. 第2実施形態におけるマーク画像を示す説明図である。It is explanatory drawing which shows the mark image in 2nd Embodiment. 第3実施形態における正常時の暗闇画像におけるマーク画像を示す説明図である。It is explanatory drawing which shows the mark image in the dark image at the time of normality in 3rd Embodiment. 第3実施形態における故障時(フリーズ時)の表示状態を示す説明図である。It is explanatory drawing which shows the display state at the time of a failure (at the time of a freeze) in 3rd Embodiment.

以下に、図面を参照しながら本発明を実施するための複数の形態を説明する。各形態において先行する形態で説明した事項に対応する部分には同一の参照符号を付して重複する説明を省略する場合がある。各形態において構成の一部のみを説明している場合は、構成の他の部分については先行して説明した他の形態を適用することができる。各実施形態で具体的に組み合わせが可能であることを明示している部分同士の組み合わせばかりではなく、特に組み合わせに支障が生じなければ、明示していなくても実施形態同士を部分的に組み合せることも可能である。   Hereinafter, a plurality of modes for carrying out the present invention will be described with reference to the drawings. The same referential mark may be attached | subjected to the part corresponding to the matter demonstrated by the form preceded in each form, and the overlapping description may be abbreviate | omitted. When only a part of the configuration is described in each form, the other forms described above can be applied to other parts of the configuration. Not only combinations of parts which clearly indicate that combinations are possible in each embodiment, but also combinations of embodiments even if not explicitly specified, unless any problem occurs in the combinations. It is also possible.

(第1実施形態)
第1実施形態における視界支援装置100について図1〜図5を用いて説明する。本実施形態の視界支援装置100は、車両に適用されたものとなっている。視界支援装置100は、従来の光学ミラー(ドアミラー)に代えて、カメラ110を用いて、例えば、車両の後側方を撮影し、その撮影した画像を車室内に設けられた表示器130に表示することで、運転者(視認者)に対する後側方確認の支援を可能とするものとなっている。視界支援装置100は、図1に示すように、カメラ110、描画回路120、および表示器130等を備えている。
First Embodiment
The visual field support device 100 according to the first embodiment will be described with reference to FIGS. The visibility support device 100 of the present embodiment is applied to a vehicle. For example, using the camera 110 instead of the conventional optical mirror (door mirror), the field-of-view support device 100 captures the rear side of the vehicle and displays the captured image on the display 130 provided in the vehicle compartment By doing this, it is possible to support the driver (viewer) to check the rear side. The visual field support device 100 includes a camera 110, a drawing circuit 120, and a display 130 as shown in FIG.

カメラ110は、車両の後側方の景色(周囲)を撮影するものであり、車両の側面に設けられている。ここでは、カメラ110は、例えば右ハンドル車において、運転席側(車両右側)のフロントドアの前方、および助手席側(車両左側)のフロントドアの前方で、それぞれ上下方向の中間部近傍(従来のドアミラー位置近傍)に設けられている。左右2つのカメラ110は、それぞれ、車両の運転席側の後側方、および助手席側の後側方を撮影するようになっており、基本的には同一の機能を備えるので、以下、助手席側に設けられるカメラ110を主体として説明していく。   The camera 110 is for photographing a scene (surrounding) on the rear side of the vehicle, and is provided on the side of the vehicle. Here, the camera 110 is, for example, in the vicinity of the middle in the vertical direction in front of the front door on the driver's seat side (vehicle right side) and in front of the front door on the passenger seat side (vehicle left side) In the vicinity of the door mirror position of The two left and right cameras 110 respectively capture the rear side of the driver's seat side of the vehicle and the rear side of the passenger seat side, and basically have the same functions. The description will be made mainly with the camera 110 provided on the seat side.

カメラ110は、広角レンズ(魚眼レンズ)を搭載しており、自車の一部(車両側面の一部)、および車両の後側方の広い範囲にわたる景色を撮影可能となっている。カメラ110によって撮影された画像(テレビや映画のような映像)は、撮影画像として取得される。そして、カメラ110は、撮影画像にマーク画像110aを付加した出力画像を作成して、信号線111を介して、後述する描画回路120に出力するようになっている(詳細後述)。   The camera 110 is equipped with a wide-angle lens (fish-eye lens), and can capture a part of the vehicle (a part of the side of the vehicle) and a wide range of scenery behind the vehicle. An image (video such as a television or a movie) captured by the camera 110 is acquired as a captured image. Then, the camera 110 creates an output image in which the mark image 110a is added to the photographed image, and outputs it to a drawing circuit 120 described later via the signal line 111 (details will be described later).

描画回路120は、カメラ110から出力される出力画像(映像信号)に対して所定の画像処理を行う画像処理部であり、例えば、運転席前のインストルメントパネルの内部に設けられている。   The drawing circuit 120 is an image processing unit that performs predetermined image processing on an output image (video signal) output from the camera 110, and is provided, for example, inside an instrument panel in front of a driver's seat.

描画回路120の行う所定の画像処理とは、例えば、広角レンズによって撮影された画像の歪み補正、撮影画像をあたかも通常のドアミラー(光学ミラー)に写されるような画像とするための視点変換(ここでは鏡反転)、必要部位の切り出し、必要部位の合成、あるいは拡大縮小、等の処理となっている。また、所定の画像処理としては、得られる撮影画像によっては、その撮影画像をそのまま維持する場合もある。また、所定の画像処理としては、各種車両センサ等から得られる信号を描画回路120に入力して、センサ信号に基づく注意、警告等のコメント情報を撮影画像に合成する場合もある。   The predetermined image processing performed by the drawing circuit 120 includes, for example, distortion correction of an image captured by a wide-angle lens, viewpoint conversion for converting the captured image into an image as if it were captured as a normal door mirror (optical mirror) Here, processing such as mirror inversion), extraction of the necessary part, synthesis of the necessary part, or scaling is performed. In addition, as predetermined image processing, depending on the obtained captured image, the captured image may be maintained as it is. In addition, as predetermined image processing, signals obtained from various vehicle sensors or the like may be input to the drawing circuit 120, and comment information such as a warning or a warning based on the sensor signal may be combined with the photographed image.

描画回路120は、上記のような処理をした画像を、表示用画像として、信号線121を介して、後述する表示器130に出力するようになっている。   The drawing circuit 120 is configured to output the image processed as described above to a display 130 described later via the signal line 121 as a display image.

表示器130は、描画回路120で作成された表示用画像を運転者に対してデジタル画像によって表示するディスプレイとなっている。表示器130は、本発明の表示部に対応する。表示器130は、例えば、インストルメントパネルにおいて運転者の見やすい位置に設けられている。表示器130は、図2に示すように、例えば、薄膜状のトランジスタを利用したTFT(Thin Film Transistor)液晶ディスプレイ131が使用されている。   The display 130 is a display that displays the display image created by the drawing circuit 120 as a digital image to the driver. The display 130 corresponds to the display unit of the present invention. The display 130 is provided, for example, at a position easy for the driver to see on the instrument panel. As the display 130, as shown in FIG. 2, for example, a TFT (Thin Film Transistor) liquid crystal display 131 using a thin film transistor is used.

TFT液晶ディスプレイ131の運転者とは反対側には、TFT液晶ディスプレイ131を背面側から透過照明するバックライト132が設けられている。バックライト132は、発光ダイオードのような発光体および拡散板を有しており、TFT液晶ディスプレイ131をムラなく照明するようになっている。バックライト132から放出される光と、TFT液晶ディスプレイ131とによって、表示器130には表示用画像が発光表示されるようになっている。   On the opposite side to the driver of the TFT liquid crystal display 131, a backlight 132 for transmitting and illuminating the TFT liquid crystal display 131 from the back side is provided. The backlight 132 has a light emitter such as a light emitting diode and a diffusion plate, and illuminates the TFT liquid crystal display 131 uniformly. A light for display is displayed on the display unit 130 by the light emitted from the backlight 132 and the TFT liquid crystal display 131.

表示器130における表示領域は、使用されるカメラ110が複数ある場合には、各カメラ110に応じて分割されて、複数の表示用画像を表示するようになっている。ここでは、例えば、表示器130の右側に、車両の右後側方の表示用画像が、また、表示器130の左側に車両の左後側方の表示用画像が表示されるようになっている。上記描画回路120、および表示器130は、電子ミラー101を形成している。   When there are a plurality of cameras 110 to be used, the display area of the display 130 is divided according to each camera 110 to display a plurality of display images. Here, for example, the display image for the right rear side of the vehicle is displayed on the right side of the display 130, and the display image for the left rear side of the vehicle is displayed on the left side of the display 130, for example. There is. The drawing circuit 120 and the display 130 form an electronic mirror 101.

尚、表示器130としては、上記TFT液晶ディスプレイ131、およびバックライト132を用いたものに対して、図3に示すように、有機化合物を用いた層状の構造体から成る有機ELディスプレイ133としてもよい。有機ELディスプレイ133は、例えば、低温環境下における表示機能にも優れており、そのような環境下での使用に適している。   As the display 130, as shown in FIG. 3, an organic EL display 133 having a layered structure using an organic compound is used as opposed to the display using the TFT liquid crystal display 131 and the backlight 132 described above. Good. The organic EL display 133 is also excellent in, for example, a display function in a low temperature environment, and is suitable for use in such an environment.

本実施形態では、カメラ110は、撮影画像に、視界支援装置100の正常作動を示すためのマーク画像110aを付加して、描画回路120に出力するようになっている。マーク画像110aは、例えば、撮影画像に対する運転者の視認性を阻害せずに、且つ、夜間での撮影画像に対して有目性を有する画像が選択されている。本実施形態では、マーク画像110aは、例えば、図4に示すように、所定の太さを持って、撮影画像の周囲に配置される枠状の画像となっている。   In the present embodiment, the camera 110 adds the mark image 110 a for indicating the normal operation of the visibility supporting apparatus 100 to the photographed image, and outputs it to the drawing circuit 120. As the mark image 110a, for example, an image having eyesight to a photographed image at night is selected without impairing the driver's visibility to the photographed image. In the present embodiment, for example, as shown in FIG. 4, the mark image 110 a is a frame-shaped image arranged around the photographed image with a predetermined thickness.

以上のように構成される視界支援装置100の作動について、以下、説明する。   Hereinafter, the operation of the visual field support device 100 configured as described above will be described.

視界支援装置100が作動されると、カメラ110は、常時、後側方の景色を撮影し、撮影画像を形成すると共に、撮影画像の周囲にマーク画像110a(枠状の画像)を付加して、出力画像として描画回路120に出力していく。   When the field of view assistance device 100 is activated, the camera 110 always shoots a landscape on the rear side, forms a shot image, and adds a mark image 110a (frame-like image) around the shot image. , And output to the drawing circuit 120 as an output image.

描画回路120は、出力画像のうち、撮影画像に対して、上記で説明した所定の画像処理を行う。このとき、マーク画像110aは、所定の画像処理は行われず、そのまま維持されて、処理された画像とマーク画像110aとによって、表示用画像が形成される。そして、描画回路120は、この表示用画像を表示器130に出力する。表示器130は、マーク画像110aが付加された表示用画像を表示する。   The drawing circuit 120 performs the predetermined image processing described above on the photographed image among the output images. At this time, the mark image 110a is not subjected to predetermined image processing, and is maintained as it is, and a display image is formed by the processed image and the mark image 110a. Then, the drawing circuit 120 outputs the display image to the display 130. The display 130 displays a display image to which the mark image 110a is added.

運転者は、表示器130に表示される表示用画像を見ることで、死角となる車両の後側方の確認が可能となる。併せて、運転者は、表示用画像にマーク画像110aを視認することができる。   By looking at the display image displayed on the display 130, the driver can confirm the rear side of the vehicle which is a blind spot. In addition, the driver can visually recognize the mark image 110 a in the display image.

ここで、視界支援装置100において、カメラ110、信号線111、描画回路120、信号線121、および表示器130が正常に作動している場合で、カメラ110が夜間における暗闇を撮影した場合は、表示器130には、図4に示すように、暗闇の画像にマーク画像110aが付加されたものが表示される。この場合は、表示用画像が黒い画像であっても、マーク画像110aが付加されていることから、運転者は、視界支援装置100の各構成は正常に作動しており、暗闇を撮影したものとして認識することができる。つまり、マーク画像110aは、表示される画像が故障を思わすようなものであっても、視界支援装置100が、正常に作動をしていることを示すマークとなる。   Here, if the camera 110, the signal line 111, the drawing circuit 120, the signal line 121, and the display 130 are operating normally in the field-of-view assistance device 100, and the camera 110 photographs the darkness at night, As shown in FIG. 4, the display 130 displays an image of the dark with the mark image 110 a added. In this case, even if the display image is a black image, since the mark image 110a is added, the driver operates the respective components of the visibility support device 100 normally and photographs the darkness. It can be recognized as That is, the mark image 110a is a mark indicating that the visual field support device 100 is operating normally even if the displayed image seems to be a failure.

一方、カメラ110の出力画像形成後の画像出力部、信号線111、描画回路120、信号線121、および表示器130の少なくとも1つが故障している場合は、マーク画像110aの設けられた出力画像の正しい処理が行われない。よって、表示器130には、図5に示すように、故障に伴う黒い画像のみが表示されることになり、運転者は、表示器130の画面にマーク画像110aがないことから、この黒い画像は故障によるものであることを認識できる。   On the other hand, when at least one of the image output unit after formation of the output image of the camera 110, the signal line 111, the drawing circuit 120, the signal line 121, and the display 130 has failed, the output image provided with the mark image 110a Is not processed correctly. Therefore, as shown in FIG. 5, only the black image associated with the failure is displayed on the display 130, and the driver does not have the mark image 110a on the screen of the display 130. It can be recognized that is due to a failure.

このように、本実施形態では、カメラ110によって撮影画像にマーク画像110aを付加するといった、極めて簡単な構成で、撮影画像に対する異常判定(異常判定の制御)を不要として、運転者は視界支援装置100における故障の有無をすぐに認識することができる。   As described above, in the present embodiment, with the extremely simple configuration in which the mark image 110a is added to the captured image by the camera 110, the driver does not need the abnormality determination (control of the abnormality determination) to the captured image. The presence or absence of a failure at 100 can be recognized immediately.

また、本実施形態では、マーク画像110aは、撮影画像の視認性を阻害せずに、且つ、夜間での撮影画像に対して有目性を有するものとしている。具体的には、例えば、マーク画像110aは、撮影画像の周囲の少なくとも一部に配置される枠状の画像としている。   Further, in the present embodiment, the mark image 110a is assumed to have merit for the photographed image at night without disturbing the visibility of the photographed image. Specifically, for example, the mark image 110a is a frame-shaped image arranged at least at a part of the periphery of the captured image.

これにより、表示器130に表示される表示用画像において、マーク画像110aによって本来の表示用画像の視認性が低下することがなく、運転者は、表示用画像を確実に認識することができる。また、運転者は、マーク画像110aにも目が行くので、異常の有無を明確に認識することができる。   As a result, in the display image displayed on the display 130, the visibility of the original display image is not reduced by the mark image 110a, and the driver can reliably recognize the display image. In addition, since the driver also looks at the mark image 110a, the driver can clearly recognize the presence or absence of an abnormality.

(第2実施形態)
上記第1実施形態では、マーク画像110aは、枠状の画像としたが、これに限らず、図6に示すように、例えば、星形の画像のように、所定の図形を用いたマーク画像110bとしてもよい。この場合、マーク画像110bは、最初の撮影画像のいずれかの隅に配置されるものとするのがよい。マーク画像110bは、例えば、赤色等とすることができる。これにより、上記第1実施形態と同様の効果を得ることができる。
Second Embodiment
In the first embodiment, the mark image 110a is a frame-like image. However, the present invention is not limited to this. As shown in FIG. 6, for example, a mark image using a predetermined figure like a star-like image It is good also as 110b. In this case, the mark image 110 b may be placed at any corner of the first captured image. The mark image 110 b can be, for example, red or the like. Thereby, the same effect as that of the first embodiment can be obtained.

(第3実施形態)
第3実施形態のマーク画像110cを図7、図8に示す。第3実施形態は、上記第1実施形態に対して、マーク画像110cに動きを持たせたものとしている。
Third Embodiment
The mark image 110c of the third embodiment is shown in FIG. 7 and FIG. In the third embodiment, the mark image 110c has a motion relative to the first embodiment.

マーク画像110cは、例えば、四角形の画像としており、撮影画像の下側に配置されるものとなっている。そして、マーク画像110cは、動きを伴うものとなっている。ここでは、マーク画像110cは、図7に示すように、例えば、撮影画像の下側で、時間経過と共に右側から左側にコマ送りのように順に移動するものとなっている。マーク画像110cは、左端まで移動すると、また右側から左側に向けて移動を繰り返すようになっている。   The mark image 110 c is, for example, a quadrilateral image and is disposed below the captured image. The mark image 110c is accompanied by a motion. Here, as shown in FIG. 7, for example, the mark image 110c sequentially moves from the right to the left like time-lapse as the time passes on the lower side of the photographed image. When the mark image 110c moves to the left end, the mark image 110c repeats moving from the right to the left.

視界支援装置100において、カメラ110、信号線111、描画回路120、信号線121、および表示器130が正常に作動している場合で、カメラ110が夜間における暗闇を撮影した場合は、表示器130には、図7に示すように、暗闇の画像にマーク画像110cが付加されたものが表示される。マーク画像110cは、右側から左側へ移動するような動きを持って表示される。この場合は、表示用画像が黒い画像であっても、マーク画像110cが付加され、且つ移動するように表示されることから、運転者は、視界支援装置100の各構成は正常に作動しており、暗闇を撮影したものとして認識することができる。つまり、マーク画像110cは、表示される画像が故障を思わすようなものであっても、視界支援装置100が、正常に作動をしていることを示すマークとなる。   When the camera 110, the signal line 111, the drawing circuit 120, the signal line 121, and the display 130 are operating normally in the field-of-view support device 100, and the camera 110 captures the dark at night, the display 130 As shown in FIG. 7, a display in which the mark image 110 c is added to the dark image is displayed. The mark image 110c is displayed with a movement that moves from the right to the left. In this case, even if the display image is a black image, the mark image 110c is added and displayed so as to move, so that the driver operates each configuration of the visibility support device 100 normally. It can be recognized as having photographed the darkness. That is, the mark image 110c is a mark indicating that the visual field support device 100 is operating normally, even if the displayed image seems to be a failure.

一方、カメラ110の出力画像形成後の画像出力部、信号線111、描画回路120、信号線121、および表示器130の少なくとも1つが故障している場合は、マーク画像110cの設けられた出力画像の正しい処理が行われない。よって、表示器130には、上記第1実施形態で説明したように(図5)、故障に伴う黒い画像のみが表示されることになり、運転者は、表示器130の画面にマーク画像110cがないことから、この黒い画像は故障によるものであることを認識できる。   On the other hand, when at least one of the image output unit after formation of the output image of the camera 110, the signal line 111, the drawing circuit 120, the signal line 121, and the display 130 has failed, the output image provided with the mark image 110c Is not processed correctly. Therefore, as described in the first embodiment (FIG. 5), only the black image associated with the failure is displayed on the display 130, and the driver can display the mark image 110c on the screen of the display 130. It can be recognized that this black image is due to a failure.

更に、表示用画像が暗闇の画像を表示しているものの、フリーズしてしまったような場合は、図8に示すように、マーク画像110cの動きは、フリーズした時点で停止状態となる。よって、運転者は、マーク画像110cが停止していることから、フリーズによる故障状態であることを認識できる。このように、本実施形態では、表示用画像自体が表示されない故障に加えて、フリーズによる故障も認識することが可能となる。   Furthermore, when the display image displays an image of darkness but freezes, as shown in FIG. 8, the movement of the mark image 110c is stopped when it is frozen. Therefore, the driver can recognize that the failure is caused by the freeze because the mark image 110c is stopped. As described above, in this embodiment, in addition to the failure that the display image itself is not displayed, it is possible to recognize the failure due to the freeze.

尚、マーク画像110cは、四角形を成して、右から左へ移動し、また右へ戻る動きとしたが、これに限定されるものではない。マーク画像110cの形状は、他の図形、記号等とすることができる。またマーク画像110cの動きは、右から左、左から右への移動を繰り返すもの、また、移動軌跡が上下方向線、円、波を描くもの、色や明るさが変化するもの等、時間とともにマーク画像110cが変化するものであれば各種変更可能である。   The mark image 110c is a square, and moves from right to left and then returns to the right. However, the present invention is not limited to this. The shape of the mark image 110c can be another figure, a symbol or the like. In addition, the movement of the mark image 110c repeats movement from right to left and left to right, and the movement locus draws vertical direction lines, circles, waves, waves with changes in color and brightness, etc. with time. Various changes can be made as long as the mark image 110c changes.

(その他の実施形態)
更に、マーク画像としては、上記第1実施形態の枠状の画像に対して、四角い枠のうち、一辺のみを採用したもの、二辺のみを採用したもの、あるいは三辺のみを採用したもの等とすることも可能である。更に、マーク画像として、文字、記号等を用いたものとしてもよい。
(Other embodiments)
Furthermore, as the mark image, for the frame-like image of the first embodiment, one having only one side, one having only two sides, or one having only three sides, among square frames, etc. It is also possible. Furthermore, characters, symbols, etc. may be used as mark images.

また、上記各実施形態では、カメラ110が車両の両側面に設けられるものとしたが、これに限らず、車両の前部、後部、上部(天井部)等の他の部位に設けられるものとしてもよい。要は、車両における視界支援のための画像が得られる位置、方向等を任意に設定して、対応するものとすることができる。   In each of the above-described embodiments, the camera 110 is provided on both sides of the vehicle. However, the present invention is not limited to this. The camera 110 may be provided on other parts such as the front, rear, and upper (ceiling) of the vehicle. It is also good. The point is that the position, the direction, and the like at which an image for visual field assistance in a vehicle can be obtained can be arbitrarily set to correspond.

また、上記各実施形態では、本視界支援装置を車両用として説明したが、車両に限定されることなく、建物周り、建物の入口付近等における人等の動きを監視するもの(防犯カメラ等)に活用することも可能である。   Moreover, although the said visibility support device was demonstrated for vehicles in said each embodiment, it is not limited to a vehicle, but monitors movement of people etc. in a building periphery, the entrance vicinity of a building, etc. (security camera etc.) It is also possible to

100 視界支援装置
110 カメラ
120 描画回路(画像処理部)
130 表示器(表示部)
100 Vision Support Device 110 Camera 120 Drawing Circuit (Image Processing Unit)
130 Display (display section)

Claims (3)

周囲の撮影を行い、撮影画像を形成するカメラ(110)と、
前記撮影画像に対して所定の画像処理を行い、表示用画像とする画像処理部(120)と、
前記表示用画像を表示する表示部(130)と、を備える視界支援装置であって、
前記カメラ(110)は、前記撮影画像に正常作動を示すためのマーク画像を付加して、前記画像処理部(120)に出力するようになっており、
前記マーク画像は、前記撮影画像の周囲の少なくとも一部に配置される枠状の画像であることを特徴とする視界支援装置。
A camera (110) for photographing the surroundings and forming a photographed image;
An image processing unit (120) that performs predetermined image processing on the captured image to obtain a display image;
And a display unit (130) for displaying the display image.
The camera (110) adds a mark image for indicating a normal operation to the captured image, and outputs the image to the image processing unit (120).
The visual field support device according to claim 1, wherein the mark image is a frame-like image arranged at least at a part of the periphery of the photographed image .
周囲の撮影を行い、撮影画像を形成するカメラ(110)と、
前記撮影画像に対して所定の画像処理を行い、表示用画像とする画像処理部(120)と、
前記表示用画像を表示する表示部(130)と、を備える視界支援装置であって、
前記カメラ(110)は、前記撮影画像に正常作動を示すためのマーク画像を付加して、前記画像処理部(120)に出力するようになっており、
前記マーク画像は、動きを伴う画像であることを特徴とする視界支援装置。
A camera (110) for photographing the surroundings and forming a photographed image;
An image processing unit (120) that performs predetermined image processing on the captured image to obtain a display image;
And a display unit (130) for displaying the display image.
The camera (110) adds a mark image for indicating a normal operation to the captured image, and outputs the image to the image processing unit (120).
The visual field support device characterized in that the mark image is an image accompanied by a motion .
前記マーク画像は、前記撮影画像の視認性を阻害せずに、且つ、夜間での前記撮影画像に対して有目性を有することを特徴とする請求項1または請求項2に記載の視界支援装置。 The visual field support according to claim 1 or 2, wherein the mark image does not impair the visibility of the photographed image and has an eye appearance to the photographed image at night. apparatus.
JP2015006174A 2015-01-15 2015-01-15 Vision support device Active JP6507660B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015006174A JP6507660B2 (en) 2015-01-15 2015-01-15 Vision support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015006174A JP6507660B2 (en) 2015-01-15 2015-01-15 Vision support device

Publications (2)

Publication Number Publication Date
JP2016134657A JP2016134657A (en) 2016-07-25
JP6507660B2 true JP6507660B2 (en) 2019-05-08

Family

ID=56464603

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015006174A Active JP6507660B2 (en) 2015-01-15 2015-01-15 Vision support device

Country Status (1)

Country Link
JP (1) JP6507660B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6925848B2 (en) * 2017-04-13 2021-08-25 アルパイン株式会社 Display control device, display control method and camera monitoring system
DE102017207792A1 (en) * 2017-05-09 2018-11-15 Continental Automotive Gmbh Apparatus and method for checking a reproduction of a video sequence of a mirror-replacement camera
JP2019147451A (en) * 2018-02-27 2019-09-05 株式会社Jvcケンウッド Vehicular display control device, vehicular display system, vehicular display control method and program
JP2019147525A (en) * 2018-02-28 2019-09-05 株式会社Jvcケンウッド Vehicular display control device, vehicular display system, vehicular display control method and program
EP3533667B1 (en) * 2018-03-01 2020-09-16 KNORR-BREMSE Systeme für Nutzfahrzeuge GmbH Apparatus and method for monitoring a vehicle camera system
DE102018213082B3 (en) * 2018-08-06 2019-08-08 Audi Ag Method for operating a display arrangement of a motor vehicle, motor vehicle
JP6857695B2 (en) 2018-09-14 2021-04-14 シャープ株式会社 Rear display device, rear display method, and program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013253397A (en) * 2012-06-06 2013-12-19 Hitachi Constr Mach Co Ltd Operation support device for work machine
US10518701B2 (en) * 2012-07-26 2019-12-31 Kyocera Corporation Image monitoring apparatus, movable object, program and failure determining method

Also Published As

Publication number Publication date
JP2016134657A (en) 2016-07-25

Similar Documents

Publication Publication Date Title
JP6507660B2 (en) Vision support device
WO2018030285A1 (en) Vehicle monitoring system employing plurality of cameras
JP5093611B2 (en) Vehicle periphery confirmation device
US8035680B2 (en) Panoramic viewing system especially in combat vehicles
US10723266B2 (en) On-vehicle display controller, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
JP2010179850A (en) Vehicular display device
US20100033564A1 (en) Vehicle monitoring system
JP6857695B2 (en) Rear display device, rear display method, and program
CN103119511A (en) Display control method for viewfinder device and device thereof
KR101778744B1 (en) Monitoring system through synthesis of multiple camera inputs
JP2009278234A (en) Display system
JP2009035162A (en) Rear view monitoring device
JPH10206789A (en) Head-mounted display device for vehicle
JP2019001325A (en) On-vehicle imaging device
JP2011213185A (en) Electronic rear view mirror device
JP2015085879A (en) Vehicular display device
JP2015186058A (en) Imaging apparatus
JP2007133418A (en) Display device
WO2016060268A1 (en) Vehicle image display system
KR101061868B1 (en) Monitoring system using dual surveillance camera
TW200925024A (en) Wide angle vehicle monitoring system
JP2009098231A (en) Display device
US20150130938A1 (en) Vehicle Operational Display
KR102170690B1 (en) Surveillance Camera Apparatus
US11064137B2 (en) Dual-view image device for monitoring heat source and image processing method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170526

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180315

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180821

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181001

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190318

R151 Written notification of patent or utility model registration

Ref document number: 6507660

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250