JP2009214795A - Onboard image presenting device and method - Google Patents
Onboard image presenting device and method Download PDFInfo
- Publication number
- JP2009214795A JP2009214795A JP2008062425A JP2008062425A JP2009214795A JP 2009214795 A JP2009214795 A JP 2009214795A JP 2008062425 A JP2008062425 A JP 2008062425A JP 2008062425 A JP2008062425 A JP 2008062425A JP 2009214795 A JP2009214795 A JP 2009214795A
- Authority
- JP
- Japan
- Prior art keywords
- blinking
- video
- vehicle
- unit
- video presentation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Description
本発明は、車両周囲の映像を撮影して車室内の表示装置に表示する車載映像提示装置及び映像提示方法に関する。 The present invention relates to an in-vehicle video presentation device and a video presentation method for capturing a video around a vehicle and displaying it on a display device in a vehicle interior.
従来より、サイドミラーやルームミラーでは視認できない死角を運転者が視認できるように、車両後部に設置した後部カメラにより撮影された映像を車室内のモニタに表示する車載映像提示装置が知られている(特許文献1参照)。
LED(Light Emitting Diode)により構成されたヘッドライトは、肉眼では点灯しているように見えるが、実際にはPWM(Pulse Width Modulation)制御により肉眼では認識できない周波数で点滅している。このため、従来の車載映像提示装置によってLEDにより構成されたヘッドライトを撮影した場合、PWM制御の周波数と映像のフレームレートの関係によってはヘッドライトが肉眼で認識できる周波数で点滅表示され、運転者が煩わしさを感じることがある。 Headlights composed of LEDs (Light Emitting Diodes) appear to be lit with the naked eye, but actually blink at a frequency that cannot be recognized with the naked eye by PWM (Pulse Width Modulation) control. For this reason, when a headlight composed of LEDs is photographed by a conventional in-vehicle image presentation device, the headlight blinks at a frequency that can be recognized by the naked eye depending on the relationship between the PWM control frequency and the frame rate of the image. May feel annoying.
本発明は、このような課題を解決するためになされたものであり、その目的は、肉眼では認識できない周期で点滅している点滅対象物が点滅表示されることによって乗員が煩わしさを感じることを抑制可能な車載映像提示装置及び映像提示方法を提供することにある。 The present invention has been made to solve such a problem, and the purpose of the present invention is to make an occupant feel annoyed by blinking a blinking object blinking at a cycle that cannot be recognized by the naked eye. It is an object to provide an in-vehicle video presentation device and a video presentation method capable of suppressing the above-described problem.
本発明に係る車載映像提示装置及び映像提示方法は、車両周囲の映像に含まれる点滅周期が所定周期未満の点滅領域が連続して点灯表示されるように映像を加工して表示する。 The in-vehicle video presentation apparatus and video presentation method according to the present invention process and display a video so that flashing regions having a flashing cycle less than a predetermined cycle included in a video around the vehicle are continuously lit and displayed.
本発明に係る車載映像提示装置及び映像提示方法によれば、肉眼では認識できない周期で点滅している点滅対象物が点灯表示されるので、点滅表示によって感じる煩わしさを抑制できる。 According to the vehicle-mounted image presentation device and the image presentation method according to the present invention, the blinking object blinking at a cycle that cannot be recognized by the naked eye is lit and displayed, so that annoyance caused by the blinking display can be suppressed.
以下、図面を参照して、本発明の実施形態となる車載映像提示装置の構成及びその動作について説明する。 Hereinafter, with reference to the drawings, a configuration and operation of an in-vehicle video presentation device according to an embodiment of the present invention will be described.
〔車載映像提示装置の構成〕
本発明の実施形態となる車載映像提示装置1は、車両に搭載され、図1に示すように、撮像部2と、点滅認識部3と、映像処理部4と、表示部5を主な構成要素として備える。撮像部2は、CCD(Charge Coupled Device)カメラ等の公知の撮像装置により構成されている。本実施形態では、撮像部2は、図2に示すように車両11の後部に設置され、例えば図3に示すような車両11の後方領域12の映像(図3参照)を撮影する。点滅認識部3と映像処理部4は、公知の画像処理プロセッサにより構成され、撮像部2により撮影された映像のデジタルデータが入力される。点滅認識部3と映像処理部4の機能については後述する。表示部5は、液晶ディスプレイ等の公知の表示装置により構成され、車室内の前部インスツルメントパネル内等の運転者が視認可能な位置に設置されている。表示部5は、映像処理部4から出力される映像を表示する。
[Configuration of in-vehicle video presentation device]
An in-vehicle
〔映像提示処理〕
LEDにより構成されたヘッドライトは、肉眼では点灯しているように見えるが、実際にはPWM制御により肉眼では認識できない周波数で点滅している。このため、PWM制御の周波数が映像のフレームレートより大きい際、換言すれば、図4(a)に示すようにPWM制御の周期ΔT1が映像のフレームレートの逆数ΔT2未満である際にLEDにより構成されたヘッドライトを撮影した場合、図4(b)に示すようにヘッドライトが肉眼で認識できる周波数で点滅表示され、運転者が煩わしさを感じることがある。そこで本発明の実施形態となる車載映像提示装置1は、以下に示す映像提示処理を実行することにより、肉眼では認識できない周期で点滅する点滅対象物が点灯表示されることによって運転者が煩わしさを感じることを抑制する。以下、図5に示すフローチャートを参照して、この映像提示処理を実行する際の車載映像提示装置1の動作について説明する。
[Video presentation processing]
The headlight composed of LEDs appears to be lit with the naked eye, but actually blinks at a frequency that cannot be recognized with the naked eye by PWM control. Therefore, when the PWM control frequency is higher than the video frame rate, in other words, as shown in FIG. 4A, the PWM control cycle ΔT1 is less than the inverse of the video frame rate ΔT2. When the captured headlight is photographed, as shown in FIG. 4B, the headlight blinks at a frequency that can be recognized with the naked eye, and the driver may feel annoyed. Therefore, the vehicle-mounted
図5に示すフローチャートは、撮像部2が映像のデジタルデータを点滅認識部4に入力したタイミングで開始となり、映像提示処理はステップS1の処理に進む。なお以下に示す各処理は撮像部2から入力された映像を構成する各画素について行われるとするが、撮像部2から入力された映像の中で他車両のヘッドランプが存在する可能性がある映像領域を構成する画素についてのみ実行して計算量を低減するようにしてもよい。また点滅認識部3の処理負荷を低減するために、撮像部2から入力された映像の中に車両が含まれるか否かを形状認識によって判別し、映像の中に車両が含まれる場合にこの映像提示処理を実行するようにしてもよい。
The flowchart shown in FIG. 5 starts at the timing when the
ステップS1の処理では、点滅認識部3が、輝度が所定値L以上になったか否かを判別することにより輝度の立ち上がりが検出されたか否かを判別する。そして輝度が所定値L以上になったタイミング(例えば図6に示す時刻T=T1)で、点滅認識部3は、輝度の立ち上がりが検出されたと判断し、映像提示処理をステップS2の処理に進める。
In the process of step S1, the
ステップS2の処理では、点滅認識部3が、輝度の立ち上がりが検出済みであることを示すHI検出済みフラグ(オン:検出済み,オフ:未検出)をオン状態に設定する。これにより、ステップS2の処理は完了し、映像提示処理はステップS3の処理に進む。
In the process of step S2, the
ステップS3の処理では、点滅認識部3が、ステップS1の処理において輝度の立ち上がりを検出した時刻(例えば図6に示す時刻T=T1)から所定時間内に輝度が所定値L以下になったか否かを判別することにより輝度の立ち下がりが検出されたか否かを判別する。判別の結果、輝度が所定値L以下にならなかった場合、点滅認識部3は、輝度の立ち下がりが検出されなかったと判断し、映像提示処理をステップS9の処理に進める。一方、輝度が所定値L以下になった場合には、点滅認識部3は、輝度の立ち下がりが検出されたと判断し、映像提示処理をステップS4の処理に進める。なお一般に車両のウィンカーの点滅速度は60〜120回/分程度である。従ってウィンカーを肉眼では認識できない点滅対象物と誤認識してしまうことを防止するために、上記所定時間は0.3秒程度に設定することが望ましい。これにより、ウィンカーよりも速い点滅速度を有する点滅対象物のみを認識することができる。
In the process of step S3, whether or not the luminance has fallen below the predetermined value L within a predetermined time from the time when the
ステップS4の処理では、点滅認識部3が、輝度の立ち下がりが検出済みであることを示すLO検出済みフラグ(オン:検出済み,オフ:未検出)をオン状態に設定する。これにより、ステップS4の処理は完了し、映像提示処理はステップS5の処理に進む。
In the process of step S4, the
ステップS5の処理では、点滅認識部3が、ステップS1の処理において輝度の立ち上がりを検出した時刻(例えば図6に示す時刻T=T1)から所定時間(例えば0.5秒)内に輝度が所定値L以上になったか否かを判別することにより輝度の立ち上がりが検出されたか否かを判別する。判別の結果、輝度が所定値L以上にならなかった場合、点滅認識部3は、輝度の立ち上がりが検出されなかったと判断し、映像提示処理をステップS9の処理に進める。一方、輝度が所定値L以上になった場合(例えば図6に示す時刻T=T3)には、点滅認識部3は、輝度の立ち上がりが検出されたと判断し、映像提示処理をステップS6の処理に進める。
In the process of step S5, the luminance is predetermined within a predetermined time (for example, 0.5 seconds) from the time when the
ステップS6の処理では、点滅認識部3が、その画素は肉眼では認識できない点滅対象物の点灯状態を示す映像を構成するものであると判断し、点滅対象物が点灯状態にあることを示す点滅中(HI)フラグ(オン:点灯している,オフ:点灯していない)をオン状態に設定する。また点滅認識部3は、この画素が肉眼では認識できない点滅対象物の点灯状態を示す映像を構成するものであることを通知する。これにより、ステップS6の処理は完了し、映像提示処理はステップS7の処理に進む。
In the process of step S6, the
ステップS7の処理では、点滅認識部3が、ステップS5の処理において輝度の立ち上がりを検出した時刻から所定時間(例えば0.3秒)内に輝度が所定値L以下になったか否かを判別することにより輝度の立ち下がりが検出されたか否かを判別する。判別の結果、輝度が所定値L以下にならなかった場合、点滅認識部3は、輝度の立ち下がりが検出されなかったと判断し、映像提示処理をステップS9の処理に進める。一方、輝度が所定値L以下になった場合(例えば図6に示す時刻T=T4)には、点滅認識部3は、輝度の立ち下がりが検出されたと判断し、映像提示処理をステップS8の処理に進める。
In the process of step S7, the
ステップS8の処理では、点滅認識部3が、その画素は肉眼では認識できない点滅対象物の消灯状態を示す映像を構成するものであると判断し、点滅中(HI)フラグをオン状態からオフ状態に切り換えた後、点滅対象物が消灯状態であることを示す点滅中(LO)フラグ(オン:消灯している,オフ:消灯していない)をオン状態に設定する。また点滅認識部3は、この画素が肉眼では認識できない点滅対象物の消灯状態を示す映像を構成するものであることを通知する。これにより、ステップS8の処理は完了し、映像提示処理はステップS5の処理に戻る。
In the process of step S8, the
ステップS9の処理では、点滅認識部3が、HI検出済みフラグ,LO検出済みフラグ,点滅中(HI)フラグ,及び点滅中(LO)フラグの全てのフラグをオフ状態に設定する。これにより、ステップS9の処理は完了し、映像提示処理はステップS1の処理に戻る。
In the process of step S9, the blinking
このようにして点滅認識部3は、撮像部2から入力された映像の中から肉眼では認識できない点滅周期が所定周期未満の点滅対象物を検出する。そして点滅対象物が検出されると、映像処理部4は、点滅中(HI)フラグ及び点滅中(LO)フラグがオフ状態である画素についてはそのままその輝度値を表示部5に出力する。一方、点滅中(HI)フラグ又は点滅中(LO)フラグがオン状態である画素については、映像処理部4は、図6(b)に示すように過去の連続する幾つかの映像フレームの平均輝度値を算出し、算出された平均輝度値をその画素の輝度値として表示部5に出力する。
In this way, the blinking
以上説明したように、本実施の形態においては、点滅認識部3によって検出された点滅対象物の点滅周期が所定周期未満であるか否かを判別し、点滅周期が所定周期未満である場合、点滅対象物が連続して表示部5で点灯表示されるようにしたため、肉眼では認識できない周期で点滅している点滅対象物の点滅表示による煩わしさを抑制することができる。
As described above, in the present embodiment, it is determined whether or not the blinking cycle of the blinking object detected by the blinking
また本実施の形態においては、撮像部2から入力された映像の中に車両が含まれるか否かを形状認識によって判別し、映像の中に車両が含まれる場合に、その車両に該当する領域のみに対して、点滅対象物を検出するようにしたため、点滅認識部3の処理負荷を低減することができる。
In the present embodiment, whether or not a vehicle is included in the video input from the
以上、本発明者によってなされた発明を適用した実施の形態について説明したが、この実施形態による本発明の開示の一部をなす記述及び図面により本発明は限定されることはない。例えば本実施形態では、映像処理部4は、画素の輝度値に関係なく過去の連続する幾つかの映像フレームの平均輝度値により点滅対象物を連続して点灯表示したが、図6(c)に示すように画素の輝度がHigh状態にある場合はその画素の輝度値をそのまま出力し、画素の輝度がLow状態にある場合においてのみ平均輝度値により点滅対象物を点灯表示するようにしてもよい。このように本実施形態に基づいて当業者等によりなされる他の実施の形態、実施例及び運用技術等は全て本発明の範疇に含まれる。 As mentioned above, although embodiment which applied the invention made by this inventor was described, this invention is not limited by the description and drawing which make a part of indication of this invention by this embodiment. For example, in the present embodiment, the video processing unit 4 displays the blinking object continuously lit and displayed according to the average luminance value of several consecutive video frames in the past regardless of the luminance value of the pixel. As shown in the figure, when the luminance of the pixel is in the high state, the luminance value of the pixel is output as it is, and only when the luminance of the pixel is in the low state, the blinking object is lit and displayed with the average luminance value. Good. As described above, other embodiments, examples, operation techniques, and the like made by those skilled in the art based on the present embodiment are all included in the scope of the present invention.
1:車載映像提示装置
2:撮像部
3:点滅認識部
4:映像処理部
5:表示部
11:車両
12:車両後方映像
1: vehicle-mounted video presentation device 2: imaging unit 3: blinking recognition unit 4: video processing unit 5: display unit 11: vehicle 12: vehicle rear image
Claims (5)
前記撮像部により撮影された映像の中から点滅領域を検出する点滅認識部と、
前記点滅認識部により検出された点滅領域の点滅周期が所定周期未満であるか否かを判別し、点滅周期が所定周期未満である場合、当該点滅領域が連続して点灯表示されるように前記撮像部により撮像された映像を加工する映像処理部と、
車室内に設けられ、前記映像処理部により加工された映像を表示する表示部と
を備えることを特徴とする車載映像提示装置。 An imaging unit that captures images around the vehicle;
A blinking recognition unit for detecting a blinking region from the video imaged by the imaging unit;
It is determined whether or not the blinking period of the blinking area detected by the blinking recognition unit is less than a predetermined period. When the blinking period is less than the predetermined period, the blinking area is continuously lit and displayed. A video processing unit that processes the video captured by the imaging unit;
A vehicle-mounted video presentation apparatus, comprising: a display unit provided in a vehicle interior and displaying a video processed by the video processing unit.
前記映像処理部は、前記点滅領域が点灯しているタイミングでは点滅領域の輝度、点滅領域が消灯しているタイミングでは前記平均輝度でそれぞれ連続して点灯表示されるように前記撮像部により撮像された映像を加工することを特徴とする車載映像提示装置。 The in-vehicle video presentation device according to claim 2,
The video processing unit is imaged by the imaging unit so that the luminance of the blinking region is continuously displayed at the timing when the blinking region is lit, and the average luminance is continuously displayed at the timing when the blinking region is turned off. In-vehicle video presentation device characterized by processing the video.
前記点滅認識部は、前記撮像部により撮影された映像の中に車両が含まれるか否かを形状認識によって判別し、映像の中に車両が含まれる場合、前記点滅領域を検出することを特徴とする車載映像提示装置。 The in-vehicle video presentation device according to any one of claims 1 to 3,
The blinking recognition unit determines whether or not a vehicle is included in the image captured by the imaging unit by shape recognition, and detects the blinking region when the vehicle is included in the image. In-vehicle video presentation device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008062425A JP5266812B2 (en) | 2008-03-12 | 2008-03-12 | In-vehicle video presentation device and video presentation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008062425A JP5266812B2 (en) | 2008-03-12 | 2008-03-12 | In-vehicle video presentation device and video presentation method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009214795A true JP2009214795A (en) | 2009-09-24 |
JP5266812B2 JP5266812B2 (en) | 2013-08-21 |
Family
ID=41187129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008062425A Active JP5266812B2 (en) | 2008-03-12 | 2008-03-12 | In-vehicle video presentation device and video presentation method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5266812B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160373684A1 (en) * | 2015-06-22 | 2016-12-22 | Gentex Corporation | System and method for processing streamed video images to correct for flicker of amplitude-modulated lights |
WO2018031466A1 (en) * | 2016-08-08 | 2018-02-15 | Gentex Corporation | System and method for processing video data to detect and eliminate flickering light sources through dynamic exposure control |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002254985A (en) * | 2001-02-28 | 2002-09-11 | Auto Network Gijutsu Kenkyusho:Kk | Device for visible identification around vehicle |
JP2007161189A (en) * | 2005-12-16 | 2007-06-28 | Auto Network Gijutsu Kenkyusho:Kk | On-vehicle camera and drive recorder |
-
2008
- 2008-03-12 JP JP2008062425A patent/JP5266812B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002254985A (en) * | 2001-02-28 | 2002-09-11 | Auto Network Gijutsu Kenkyusho:Kk | Device for visible identification around vehicle |
JP2007161189A (en) * | 2005-12-16 | 2007-06-28 | Auto Network Gijutsu Kenkyusho:Kk | On-vehicle camera and drive recorder |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021002869A (en) * | 2015-06-22 | 2021-01-07 | ジェンテックス コーポレイション | Video Stream Image Processing System and Method for Amplitude Modulated Light Flicker Correction |
WO2016209877A1 (en) * | 2015-06-22 | 2016-12-29 | Gentex Corporation | System and method for processing streamed video images to correct for flicker of amplitude-modulated lights |
CN107709096A (en) * | 2015-06-22 | 2018-02-16 | 金泰克斯公司 | For handling streaming transmitting video image to correct the system and method for the flickering of amplitude modulated light |
KR20180019189A (en) * | 2015-06-22 | 2018-02-23 | 젠텍스 코포레이션 | Systems and methods for processing streamed video images to compensate for the flicker of amplitude-modulated light |
JP2018526851A (en) * | 2015-06-22 | 2018-09-13 | ジェンテックス コーポレイション | Video stream image processing system and method for flicker correction of amplitude modulated light |
KR102135427B1 (en) * | 2015-06-22 | 2020-07-17 | 젠텍스 코포레이션 | Systems and methods for processing streamed video images to correct flicker of amplitude-modulated light |
US20160373684A1 (en) * | 2015-06-22 | 2016-12-22 | Gentex Corporation | System and method for processing streamed video images to correct for flicker of amplitude-modulated lights |
US11178353B2 (en) * | 2015-06-22 | 2021-11-16 | Gentex Corporation | System and method for processing streamed video images to correct for flicker of amplitude-modulated lights |
JP7060958B2 (en) | 2015-06-22 | 2022-04-27 | ジェンテックス コーポレイション | Video Stream Image Processing System and Method for Amplitude Modulated Light Flicker Correction |
JP7296350B2 (en) | 2015-06-22 | 2023-06-22 | ジェンテックス コーポレイション | Video stream image processing system and method for flicker correction of amplitude modulated light |
WO2018031466A1 (en) * | 2016-08-08 | 2018-02-15 | Gentex Corporation | System and method for processing video data to detect and eliminate flickering light sources through dynamic exposure control |
CN109496187A (en) * | 2016-08-08 | 2019-03-19 | 金泰克斯公司 | For handling video data to control the system and method to detect and eliminate flickering light source by dynamic exposure |
US10412312B2 (en) | 2016-08-08 | 2019-09-10 | Gentex Corporation | System and method for processing video data to detect and eliminate flickering light sources through dynamic exposure control |
Also Published As
Publication number | Publication date |
---|---|
JP5266812B2 (en) | 2013-08-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11052823B2 (en) | Vehicle rear monitoring system | |
US9123179B2 (en) | Surrounding image display system and surrounding image display method for vehicle | |
JP5056831B2 (en) | Head-up display device | |
KR102135427B1 (en) | Systems and methods for processing streamed video images to correct flicker of amplitude-modulated light | |
JP2019125920A (en) | Monitor display system and display method | |
JP2014116756A (en) | Periphery monitoring system | |
JP5109750B2 (en) | Driver state detection device, consciousness state detection method | |
US11163517B2 (en) | Display device for a vehicle having migration of image display | |
JP2017034615A (en) | Display device for vehicle and display method | |
JP2012194404A (en) | Display control device, image display system and display control method | |
JP5948170B2 (en) | Information display device, information display method, and program | |
JP5266812B2 (en) | In-vehicle video presentation device and video presentation method | |
JP2007282022A (en) | Image display device | |
JP2006226682A (en) | Apparatus and method for infrared photographing and display of vehicle | |
JP2007028540A (en) | System and method for presenting situation outside vehicle | |
JP4782491B2 (en) | Imaging device | |
CN110199518B (en) | Driving support system and driving support method | |
JP2006287513A (en) | System for presenting status outside vehicle | |
JP6565795B2 (en) | Display device | |
JP2010208372A (en) | Brightness adjusting device | |
JP2005219583A (en) | Method for enhancing visibility of front view, and vehicular display device | |
JP2008193504A (en) | Night vision device | |
JP2005033709A (en) | Vehicle perimeter monitoring apparatus | |
JP2011257554A (en) | Image display device | |
JP2007288328A (en) | Peripheral image display system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121030 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121031 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130409 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130422 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 5266812 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |