TW201226234A - Image type obstacle detection car reversing warning system and method - Google Patents

Image type obstacle detection car reversing warning system and method Download PDF

Info

Publication number
TW201226234A
TW201226234A TW99146425A TW99146425A TW201226234A TW 201226234 A TW201226234 A TW 201226234A TW 99146425 A TW99146425 A TW 99146425A TW 99146425 A TW99146425 A TW 99146425A TW 201226234 A TW201226234 A TW 201226234A
Authority
TW
Taiwan
Prior art keywords
image
obstacle
warning
horizontal line
height
Prior art date
Application number
TW99146425A
Other languages
English (en)
Other versions
TWI417207B (zh
Inventor
yu-xiang Wu
Jia-Zeng Chen
ming-feng Xie
Yi-Feng Su
Original Assignee
Automotive Res & Testing Ct
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Automotive Res & Testing Ct filed Critical Automotive Res & Testing Ct
Priority to TW99146425A priority Critical patent/TWI417207B/zh
Priority to US13/033,154 priority patent/US8913128B2/en
Publication of TW201226234A publication Critical patent/TW201226234A/zh
Application granted granted Critical
Publication of TWI417207B publication Critical patent/TWI417207B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Description

201226234 六、發明說明: 【發明所屬之技術領域】 本發明是關於一種障礙物偵測警示系統及方法,特別是一種利用影像 、 技術作為障礙物偵測的警示系統及方法。 . 【先前技術】 對於國内大为的駕駛人來說,要在車水馬龍的市區道路上開車並非 牛谷易的事要在擁擠街道上好好地的將車子倒入狹窄的停車格内更是 •讓人❹!手忙魏’衫的缺H會發生車滅接障補或是因為 沒有良好的警示系統可㈣時崎示駕驶人騎致發生不幸的意外事故。 所幸,隨著汽車工業的進步,許多停車導引系統(Parking Guid_ System PGS)和停車辅助系統(parking Assistance System,pAs>_#I% 因應產生’但是在過去-般的停車導引系統大多使用如雷達、超音波作為 感測元件會因為無法辨識環境而降低辨識率,而且還有電磁功率過高對人 體產生傷害關題,因此雷達、超音波_測元件_逐射被市場所接 ! 受。 受惠於現代科技進步使然,我們可以選擇使用影像_,其相關應用 前案如大陸公钱CN刪3_所揭示障礙物分财法及裝置使用邊緣 與直線檢測來侧障礙物,歧如大陸公告號⑶⑺細所揭示以視頻感 知的障礙物防撞方法與裝置,使用水平掃猫線與障礙物陰影以及反射光亮 度遞減特性來偵測障礙物。一般而言,影像技術可使用單攝影機或複數攝 丨影機作為影賴取單元,單攝影機影像技術具有高度整合性功能,價格競 爭優勢且絲4 4卩無法建立二維場景,無法突破翻震動或肖度變化, 201226234 使用複輯频料《統運算量大且不易架設
降低生產成本。 【發明内容】 所造成的距離估測錯誤 等缺失產生,其影傻虑
偵測警示系統及方法, ’ &供駕駛人更直接且完整之道路資訊, ’使用單攝影 機除了價格競爭優勢之収安裝容易,可進—步降低生產成本。 本發明另-目的在於提出一種有效率的處理技術简方法來偵測 障礙物’其顺率更甚於使用複數攝韻所建立的三料景效果,並且降 低系統誤判或過錄之機率,更可避賴為使用複數攝影機會導致系統運 异量大且不㈣設等缺失產生,本發明更進—步彻影像處理與電腦視覺 技術取代雷達或超音波陋習,搭配使用警示裝置所顯示的環境晝面讓駕駛 者可以直接且清楚的看到目前車輛及車體周圍環境的相對位置關係,當障 礙物存在時處理裝置則適時又適當地提出相關性的警示,增加了停車倒車 的便利性和安全性,並且在有危險性存在時作出警示通知,這將會有效降 低意外事故的發生。 本發明之影像式障礙物偵測警示系統’包括至少一影像操取裝置或是 再選擇性地搭配至少一外部訊號擷取單元、至少一處理裝置及至少一警示 裝置,影像擷取裝置譬如設置於車後方,以偵測有一定高度的障礙物。 201226234 本發明之影像式障礙物_警示方法,域縣置_水平線镇測演 算法、障礙物高度與寬度偵測演算法、障礙物距離演算法做為執行程序決 策核心’在定義地平線與定義高度區間(R0I_H)和地面區間(R〇i々之後進行 判斷兩度區間水平線訊號遮斷、障礙物輪廓侧、依水平邊緣位置與高产 判斷是否為障礙物以及地面區間障礙物距離估算,當系統侧到有障礙物 時,可透過警示裝置提出警示並顯示障礙物離車輛的距離。 以下將藉由具體實施例配合所附的圖式詳加說明,更容易瞭解本發明 0 之目的、技術内容、特點及其所達成之功效。 【實施方式】 請參閱第1 ®,說明本發明之系統架構方塊圖,影像式障礙物债測警 不系統10由至少一影像擷取單元u電性連接處理裝置14,做為擷取影像 的感測元件,影像擷取單元U可使用如電荷耦合元件(Charge_c〇upied Device,CCD)或是互補式金屬-氧化-半導體元件((:〇师丨抓邮^ Metal_Oxide-Semiconductor ’ CMOS),處理裝置14可選擇性的電性連接至 痛|少一外部訊號擷取單元12來接收如車速訊號、檔位訊號或方向盤轉角等外 ;部訊號以提供參考。處理裝置I4具有至少一運算處理單元144電性連接至 少一说號/貝算單元142’其中運算處理卓元144可使用如中央處理器(centraj Processing Unit,CPU)、微處理器(Micro Processor,μρ 或 uP)或單片微型電 腦(Single-Chip Microcomputer)以接收並處理外部訊號,並且内建一水平線 價測次算法、一障礙物南度與寬度彳貞測演算法、一障礙物距離演算法做為 執行程序處理核心’訊號演异單元142使用數位訊號處理器signai Processor,DSP)連接影像擷取單元11以轉換影像並產生警示訊號^處理裝 201226234 置14電性連接警示裝置16將已判斷的訊號傳送至警示裝置16適時地發出 警示來提醒駕駛人’其中警示裝置16可藉由顯示單元1ό2來顯示障礙物與 車輔之間距離與系統的狀態、⑽單元164警示系統狀態、揚聲單元166 則用來發出語音訊號來告知駕駛人目前障礙物與車輛逼近狀況,警示裝置 16可以使用顯示單元162、㈣單元164、揚聲單元脱其中之一, 或疋選擇性的交蹄使帛,顯示單元162可應麟有顯示的相關產 品,如陰極射線管(Cathode ray tube,CRT),液晶顯示器
Display ’ LCD)或是電漿顯示器(Plasma Display Pane卜 PDP),LED 單元 164 可以使用發光二極體(Light-Emitting Diode,LED)或是有機發光二極體 (Organic Light-Emitting Diode ’ OLED),揚聲單元166可單獨使用蜂鳴器或 揚聲器,亦可選擇性的交互搭配使用蜂鳴器或揚聲器。影像式障礙物偵測 警示系統10可整合應用在停車導引系統斤址㈣Guidance System,pGS)和 停車輔助系統(Parking Assistance System ’ PAS),給予駕驶人適當的警示。 本發明之方法的各步驟流程請同時一併參閱第1圖〜第8圖,如第2 圖所示,說明影像式障礙物偵測警示方法,如步驟sl〇與步驟S12所示, 系統啟動後,處理裝置14開始擷取一道路影像,隨後依據道路影像中之至 少一車道線所決疋開始定義水平線與定義興趣區間(Region Of Interest, ROI),其中興趣區間設定方法與設定範圍可參閱第3A圖〜第3D圖,如第 3A圖中所示為定義水平線,如第3B圖,興趣區間再預設一消失點水平線 訊號之高度區間(1^8丨〇11〇〇1^阳1-1^邮,11〇141)以偵測障礙物之高度, 興趣區間再設置一地面區間(Region Of Interest-Ground,ROI-G)以偵測障礙 物位置,如第3C圖’本發明所設置之影像擷取單元u採用一般視角13〇 201226234 i度之攝影機,當中的設定範圍’由於水平線會因影像擷取單元u架設位置 |與俯仰角的不同,造成晝面中水平線消失點位置隨之不同,因為行進中的 i車輛實際操作時因為路面不平之情形產生晃動,或是因為偵測目標也有可 -1丨能是-面牆面與地面的垂直夾角,因此使料—線段料產生位置改變, -!如第3D圖,影像擷取單元11所設定的角度、焦距與預設水平線位置關係, j 可由公式(1)說明實際操作時如何取得各函數值: # 其中,β係以影像擷取單元11透鏡之中心軸作旋轉之夾角,6為影像 I平面中的預設消失點位置;《為影像平面中的消失驗置,故,3為水平 丨丨線位移量;f為影像操取單元11之透鏡至影像平面間之距離,亦即為焦距。 | 當水平線位置設定完成之後,再由水平線為基準線往上、往下設定消 1丨失點水平線個區域大約各佔晝面5%〜10%(本發明之影像拍員取單元u I 3〇pixels為7·5%)的範設定30〜35Pixels,以解決偵測如牆面與地面垂直 夾角的問題。 , 如第4A圖〜第40圖以及第5A圖〜第5D圖所示,說明不同的距離所 ' j產生的不同遮蔽結果,處理裝置14利用成像幾何原理由影像擁取單元u = '取得的焦距推測出障礙物距離與影像中像素大小,藉此設定所需之預設閥 1值與消失點水平偵測範圍。因此,障礙物寬度設定的實施方式如下:以障 丨丨礙物距離3公尺,寬為10公分為初始偵測設定值,在3公尺處為偵測1〇 !公分大小之障礙物,設定為lOpixels為預設閥值,在I·5公尺處,1〇pixds 則可偵測7.5公分大小之障礙物(IS017386建議之障礙物為直徑75毫米, 高1000毫米之圓管),障礙物高度設定以障礙物距離3公尺,高為3〇公分 201226234 為初始設定值’設定為3公尺距離可侧寬度為3G公分之障礙物,(攝影機 安裝高度約為25CM ’ 3GCM已高於攝影機與消失點之連線,因此會遮斷消 失點連線),障礙物位置以影像操取單元11架設完成後,經由校正所得之影 像擷取單元11參數,鮮影像娜單元11參數與距賴何關係,可得障 礙物位置。 當處理裝置14定義水平線與興趣區間定義完成之後開始進行障礙物偵 測如步驟S14 ’處理裝置M進行判斷水平線訊號是否存在?如第6A圖 〜第6C圖所示’本發明偵測方法係利用Sobel遮罩或Canny遮罩等高頻影 像之邊緣資tfl進行水平㈣直邊緣進行邊緣影祕理,分別⑽脹與侵姓 運算來強化所需邊緣’水平邊緣娜至水伟之後轉換成直謂,如第6A 圖’說明本發明之實景標示記錄示意圖,如第6β冑,說明本發明之灰階影 像標示記錄示_,其中所得_水平邊緣做為高度關水平線訊號連線 遮斷依據’如第6C圖,當有障礙物遮斷時會產生如圖所示之直方圖缺口, 處理裝置Μ將小於閥值之直方圖位置進行統計判斷是否存在?並且標記符 合障礙物條件之區域加以記錄直方圖缺口之高度及寬度以利後續處理。接 續乂驟S14 ’處理裝置Μ依據喊水平線彻彳演算法進行判斷高度區間之 、’線Η*號疋否存在?當〶度區間水平線訊號是存在時’判斷無障礙物, 程序返回步驟1G;當高起間水平雜號不存在時,觸可能㈣障礙物, 則繼續進行步驟S16。如步驟S16,判斷高度區間之水平線訊號是否完全遮 + 卜元王遮蔽時,依據障礙物高度與寬度^貞測演算法進行步驟S18進 行遮斷之水平線訊號障礙物上下輪廓_並且紀錄每個障礙物之底部位置 、、鬲度資。代,g尚度區間之水平線訊號為完全遮蔽時,處理裝置14依先 201226234 前已定義之水平線進行步驟S22以高度區間之水平線訊號中心為設定範圍 向下搜尋水平邊緣。如步驟S20,利用興趣區間再增設預設閥值做為邊緣摘 測判斷輪廓偵測之障礙物高度與寬度是否大於預設閥值?並與之前已做記 錄的直方圖缺口高度及寬度和預設閥值做一比較分析,其中判斷方式可以 偵測障礙物之高度為主,再以偵測障礙物之寬度為輔的方式進行,如第7A 圖,說明本發明之障礙物與預設閥值關係實景偵測狀況,如第7B圖,當偵 測到的障礙物高度與寬度大於預設閥值時,判斷此障礙物有一定夠大的體 積會阻礙車輛的行進,因此處理《 Η依麟礙物轉演算法進行判斷步 驟S28地面區間之障礙物距離估算;如第%圖,為本發明之障礙物小於預 設閥值示意圖當障礙物高度與寬度並非大於於預設閥值時,(因為其偵測到 的目標有可能是標線或是牆面與地面_直夹肖),判斷此障礙物體積尚不 足以阻礙車輛的行進,程序返回步驟ω。如步驟si6,當高度區間之水平 線訊號為完全遮蔽時,處理裝置14依先前已定義之水平線進行步驟S22以 问度區間之水平線訊號中心為設定範圍向下搜尋水平邊緣,顧影像高頻 貝錢订步驟似標示並紀錄障礙物遮蔽水平線之上下邊緣,紀錄障礙物 之底雜置與其高度資訊(請參考第S剛,依據步驟伽水平邊緣位置與言 度判斷是否為障礙物?處理裝置M判斷為障礙物時進行步細地面區間 障礙物距雜算;若水平邊緣與高度騎非為障礙物,_序返回步 驟10田步驟S2〇 _障礙物之高度與寬度大於閥值以及步驟伽依水平 邊緣位置與喊判斷為障礙物時,進行步驟卿地面區間障礙物輯 障礙物雜轉未_奴細時,辦细辣ig;軸祕離估 到設定範圍時,進行步驟咖警示。如步驟_,當障礙物距離估算達設定 201226234 範園時,警示裝置16開私你也&产 4始作動,程序返回步驟1G並持續進行障礙物偵測 動作。 參閱第9 ® ’其巾辣Sl4 水怖猶骑在更包括 步職〜S4G ’請同時參考第1圖〜第2圖,树置14於步驟1〇擷取 k路祕中之後進订步驟從,如步驟如,設定消失點水平線侧範圍 之後進行步驟S34,如步驟S34,水平邊緣處理消失點水平線偵測範圍之後 進行步驟S36,如步驟S36,齡影像垂直投影至水平軸,隨後進行步驟 S38,如步獅直她計。如烟4G,細、娜顺之直方圖是 否存在?若綱’物障雜,峨喫H);辩在時,處理 裝L4結能出現障礙物’進行步娜判斷高度區間之水平線訊號是 否完全遮蔽》 …參閱第Η)圖,其中步驟S18障礙物輪廓_更包括步_〜⑽, 明同時參考第!圖〜第2圖,如步驟s42,處理裝置Μ利用驗 遮罩料頻影像之邊緣資訊做一邊緣處理後,進行步驟泌邊賴 =_先响義w輯増及下半部卿财心分界線, ^::均之转驟⑽上半部職,斜朴㈣下稱之為步驟 驟⑽’如步驟⑽,上半部影像進行步驟撕垂直邊緣估算與步 估編進行步請相減,再如步⑽,取下半部影 =步物水恤估算隨後糊步驟⑽膨脹和侵糾 參閱第11 mt S76,社 步驟您叹心岸失點水平線谓測範園更包括步驟⑽〜 °”時參考第1嶋9圖,如步_,_料道線影像特性 201226234 進行車道線辨識流程’再經過步驟S62的高灰階值辨識,步驟⑽的車道 線邊緣特性辨識’以及步驟S66的車道寬度辨識,分析道路影像内容取得 輪車道線特徵點(圖未示),且配合R〇I方式將道路縣下半部由下而上等 分成多區域掃描,即時修正更新車道線特徵點最新位置;此時,若是僅偵 測到道路’有車道線特徵點,則可建立一即時車道線,即進入步驟咖, 右疋在道路_都有觸到車道線特徵點,就表示處理裝置μ可以同時建 立二即時車道線W2,也就是進人步驟S72中,特別說明的是,許多鄉 ^路並非糊設標線’為顧及此狀況的發生,是以持續—段時間都未 偵側到車道線特徵點的情況下,進入步鄉別。 驟叫她置14僅建立起單側即時車道線,在此以右側 ,此時’如步驟S7G,將已取得之該即時車道線z,加上預 得二建立—虛擬即時車道線12 ’也就等同於步驟s72取 t _㈣姻,咖⑽細,軸㈣車道㈣ =虛擬科車道^取得延道軸叙瞬㈣絲^ 餅 時車道線亦可設定為任一與該即時車道線 ' 匕卜該虛擬即 延伸於道路遠端之瞬時消失抓’舰柯取得二者 當道路树財左車觀或右車道線任何—轉 失點A,此時,即必須利_ $了取付車鍋 至少—虛擬車觀,树^恤^嗔處理建立 圏所示ϋ#物進_翻;丨4輸序,配合第13 車道特徵點,徵._得,::= 車耗或者路邊建築物等影像, 201226234 透過該等平行排列於車行方向之物體,接著步驟s82,利用霍式轉換分析車 道特徵點並進行特徵轉換,此後在步驟S84進行直線偵測,將對應複數虛 擬車道線舰點取出,連財後每—麵車道線特徵點,藉此,建立起— 或複數虛擬㈣車道線,透過估算所有虛擬車道線延伸於遠方之一交會 點,也就會形成步驟S76需要的瞬時消失點'。 參閱第MA圖〜第14D圖,並且請同時參考第2圖、第8圖及第1〇 圖’如第14A圖’障礙物輪_則其細節步驟為利用—開始定義之水平線, 將畫面喊水平線之上的上半部以及水平狀下的下半部影像兩部 份’如第_,上半部影像蝴貞測障礙物水平邊緣之高度(如第8圖所 示),如第14C圖’上半部影像主要以找出障礙物垂直邊緣之高度(如第8 圖所示)’如第MD ®,下梅嫩要_障礙物之底部位置,以找出障 礙物水平邊緣-底(如第8圖所示),其中上半部影像針對之前所處理之水平 邊緣與垂直邊緣來進行高度判斷分取膨脹與錢運算麵化所需邊緣, 再將垂直親離水平雜,訂主轉直雜,下铸影像财平邊緣 進行膨脹與侵鱗·底部邊緣,當上半部影像及下半部影像所記錄之高 度與距離皆大於設定之預設閥值時,將所標記可麟礙物邊緣投影到垂直 轴並進行直方圖統計,其中上半部影像由上往下掃_最上方的邊緣,加以 標π、紀錄障礙物最高位置’計算障礙物高度是否超過預設閥值,下半部 影像由上往下掃BS最上方的邊緣,加以標示軸物的底部位置,計算障礙 物底部位Ϊ之麟’最後將距離與警示f訊在加回原始f彡像上,顯示在责 面上。 最後,請參閱第15圖,本發明障礙物距離估算公式(2)為d = η哼/ 12 201226234 W其中D=軸取單元_障礙物之距離 安裝高度卡影像操取單元„焦距,〇v=影像中心刚取早凡 底部位置⑽處理裝置14可 定’ V:謝之障礙物 太發明所接即巨離叹疋給予相關的警示方式。 蛛 ^ 可餘高且_鱗佳㈣像辦雜_逛示系 或過靈敏之解,錢進—Γ^Γ有轉礙細鶴統職生的誤判 視營難驗贴 步蛛升了 m可減,影錢理與電腦 2覺技棘代财的雷觀料麵_仙細,驗者可 楚的看到目她鱗咖魏_觸係,更進—步 上的便利性。 雖然’本發明前述之實施例揭露如上,然其並非用以限定本發明。在 不脫離本發明之精神和範圍内所為之更動與潤飾,均屬於本發明專利範圍 之主張。關於本發明所界定之專利範圍請參考所附之申請專利範園。 【圖式簡單說明】 第1圖為本發明之系統架構方塊圖。 Φ 第2圖為本發明之方法流程圖。 第3A圖為本發明之定義水平線示意圖。 第3B圖為本發明之定義R〇I示意圖。 第3C圖為本發明之尺〇1預設範圍示意圖。 第3D圖為本發明之影像操取單元焦距與預設水平線關係示意圖。 第4A圖為本發明之無障礙物示意圖。 第4B圖為本發明之障礙物距離3公尺示意圖。 第4C圖為本發明之障礙物距離1公尺示意圖。 201226234 第4D圖為本發明之障礙物距離0.5公尺示意圖。 第5A圖為本發明之無障礙物灰階示意圖。 第5B圖為本發明之障礙物距離3公尺灰階示意圖。 第5C圖為本發明之障礙物距離1公尺灰階示意圖。 第5D圖為本發明之障礙物距離0.5公尺灰階示意圖。 第6A圖為本發明之實景標示記錄示意圖。 第6B圖為本發明之灰階影像標示記錄示意圖。 第6C圖為本發明之直方圖標示記錄示意圖。 第7A圖為本發明之障礙物與預設閥值關係實景圖。 第7B圖為本發明之障礙物大於預設閥值示意圖。 第7C圖為本發明之障礙物小於預設閥值示意圖。 第8圖為本發明之垂直軸直方圖統計示意圖。 第9圖為本發明之進行水平線連線偵測的流程圖。 第10圖為本發明之進行障礙物輪廓偵測的流程圖。 第11圖為本發明之車道線辨識流程圖 第12圖為本發明之遠端瞬時消失點示意圖。 第13圖為本發明之虛擬即時車道線之流程圖。 第14A圖為本發明之上下半部影像偵測之示意圖。 第14B圖為本發明之上半部影像水平邊緣高示意圖。 第14C圖為本發明之上半部影像垂直邊緣高示意圖。 第14D圖為本發明之下半部影像水平邊緣底示意圖。 第15圖為本發明之系統架構示意圖。 14 201226234 【主要元件符號說明】 10 影像式障礙物偵測警示系統 11 影像擷取單元 . 12 外部訊號擷取單元 . 14 處理裝置 142訊號演算單元 144運算處理單元 φ 16 警示裝置 162 顯示單元 164 LED單元 166揚聲單元 20 車輛 30 障礙物 L' 右側即時車道線 φ L2 虛擬即時車道線 . Η 基準水平線 Ρχ 瞬時消失點 15

Claims (1)

  1. 201226234 七、申請專利範圍: 1. 一種影像式障礙物偵測警示系統,包括: 至少一影像掏取單元,以擷取一道路影像; 至少-處理裝置,電性連接郷像娜單元,依據道路影像以定義出一 清失點水平線訊號之高度關,使該處理裝置判_高度區間之水平 線訊號是碎在或呈現不連續魏㈣以及判_地面關的障礙物 距離估算,以據此作為偵測障礙物之一警示訊號;以及 至少-警示裝置,接收該處理裝置之該警示訊號並做出相關警示作用。 2·如申請專利範圍第丨項所述之影像式障礙物侧警示系統,其中該處理 裝置更利用-遮斷之水平線訊號障礙物上下輪義測作為偵測障礙物之 該警示訊號。 3·如申4專利第1項所述之影像式障礙縫_轉示祕,更包括 -外部訊賴取單元,祕連接雜理裝置,以擷取—外部訊號,以提 供給該處理裝置參考’該外部訊號可絲速訊號、触訊號或方向盤轉 角訊號。 4·如申請專概圍第1項所述之影像式障礙物侧警示系統,其中該消失 點水平線訊號之高度區間係由該處理單元所預設。 5·如申請專難圍第1項所叙影像式障礙物侧警示线,其中該消失 點水平線喊之高度區間係由該道路影像巾之至少—車道線所決定。 6· -種影像式障礙物偵轉示方法,包括下列步驟: (a) 擷取一道路影像; (b) 依據該道路影像定義出—消失點水平線減之高度區間; 201226234 (C)判斷位概高度區間之關失點水平線減是骑在,若是返回步 驟⑻,若否則進行步驟(d); ⑹於該π度區間之水平線職賴是否完全被遮蔽,若是進行步驟 ()右否則於该向度區間之水平線訊號非完全遮蔽時進行障礙物輪 廓備測’關_麵侧之障錄高度與紐是否大於預設闊 值,若否返回步驟(a),若是則直接進行步驟(h); (e)以該π度區間之水平線訊號中心、為設定範圍向下搜尋水平邊緣; • (ί)於該水平邊財找出並標示遮蔽該高度區間之水平線訊號連線之障 礙物上下邊緣; (g) 依據該水平邊緣位置與高度判岐否為障礙物,若砂回步驟⑻, 若是進行步驟(h); (h) 進灯障礙触雜算,若非在該地面區狀制㈣细步驟⑻, 若是進行步驟⑴;以及 (1)進行警示,同時持續步驟(a)。 籲7.如申請專利範圍第6項所述之影像式障礙物侧警示方法,其中該步驟 (c)更包括下列步驟: (cl)於該操取影像中設定消失點水平線偵測範圍; (c2)水平邊緣處理該消失點水平線偵測範圍; (c3)將該擷取影像垂直投影至水平軸; (c4)進行直方圖統計;以及 ⑽判斷小於該預設閥值之該直方圖是否存在,若是返回步驟⑼,若否 進行步驟(d)。 201226234 8.如申明專利細第6項所述之影像式障礙物偵測警示方法,其中該步驟 ⑷之障礙物輪_败包括下列步驟: ⑷)邊緣勤j,彳貞測上半部影像及伽彳下半部影像,· (d2)該上半部縣進㈣直邊緣轉與水平邊雜算並械,該下半部 影像則進行水平邊緣估算;以及 (d3)利用膨脹和侵姓加以增強該影像。 9·如申請專利細第6項所述之影像式障礙物偵測警示方法,其中步驟⑼ 中該消失點水平線訊號之高度區間係由該處理單元所預設。 參 10·如申請專利顧第6項所述之影像續礙物_警示方法,其中步驟⑼ 中該消失點水平線訊號之高度區間係由該道路影像中之至少一車道線所 決定。
TW99146425A 2010-12-28 2010-12-28 Image - based obstacle detection reversing warning system and method TWI417207B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW99146425A TWI417207B (zh) 2010-12-28 2010-12-28 Image - based obstacle detection reversing warning system and method
US13/033,154 US8913128B2 (en) 2010-12-28 2011-02-23 Image-based barrier detection and warning system and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW99146425A TWI417207B (zh) 2010-12-28 2010-12-28 Image - based obstacle detection reversing warning system and method

Publications (2)

Publication Number Publication Date
TW201226234A true TW201226234A (en) 2012-07-01
TWI417207B TWI417207B (zh) 2013-12-01

Family

ID=46316217

Family Applications (1)

Application Number Title Priority Date Filing Date
TW99146425A TWI417207B (zh) 2010-12-28 2010-12-28 Image - based obstacle detection reversing warning system and method

Country Status (2)

Country Link
US (1) US8913128B2 (zh)
TW (1) TWI417207B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI596361B (zh) * 2015-12-07 2017-08-21 Metal Ind Res And Dev Centre Using structured light sensing barrier reversing warning method
WO2018134677A1 (en) * 2017-01-23 2018-07-26 Hangzhou Zero Technology Co., Ltd Multi-camera system and method of use
US10358214B2 (en) 2015-01-04 2019-07-23 Hangzhou Zero Zro Technology Co., Ltd. Aerial vehicle and method of operation
US10435144B2 (en) 2016-04-24 2019-10-08 Hangzhou Zero Zero Technology Co., Ltd. Aerial system propulsion assembly and method of use
US10824167B2 (en) 2015-01-04 2020-11-03 Hangzhou Zero Zero Technology Co., Ltd. System and method for automated aerial system operation
US10824149B2 (en) 2015-01-04 2020-11-03 Hangzhou Zero Zero Technology Co., Ltd. System and method for automated aerial system operation

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112012006758T5 (de) * 2012-07-31 2015-08-27 Harman International Industries, Incorporated System und Verfahren zum Erkennen von Hindernissen unter Verwendung einer einzigen Kamera
EP2933790B1 (en) * 2012-12-12 2017-09-27 Nissan Motor Co., Ltd Moving object location/attitude angle estimation device and moving object location/attitude angle estimation method
TWI561418B (en) 2014-03-19 2016-12-11 Altek Autotronics Corp Obstacle detection device
US9916508B2 (en) 2015-03-12 2018-03-13 Toyota Jidosha Kabushiki Kaisha Detecting roadway objects in real-time images
US9576204B2 (en) * 2015-03-24 2017-02-21 Qognify Ltd. System and method for automatic calculation of scene geometry in crowded video scenes
TWI570674B (zh) 2015-12-17 2017-02-11 合盈光電科技股份有限公司 交通運輸工具之影像偵測系統
TWI605963B (zh) * 2017-01-23 2017-11-21 威盛電子股份有限公司 行車輔助方法及裝置
EP3309707A1 (en) * 2016-10-13 2018-04-18 Conti Temic microelectronic GmbH Device and method for gradient-based object recognition of an input image
GB2556911A (en) * 2016-11-25 2018-06-13 Continental Automotive Gmbh Object recognition system and object recognition method
JP7119317B2 (ja) * 2016-11-28 2022-08-17 株式会社リコー 情報処理装置、撮像装置、機器制御システム、移動体、情報処理方法、及び、情報処理プログラム
WO2018097331A1 (en) * 2016-11-28 2018-05-31 Ricoh Company, Ltd. Information processing apparatus, imaging apparatus, apparatus control system, movable object, information processing method, and information processing program
US11328822B2 (en) * 2017-02-01 2022-05-10 Conflu3Nce Ltd Multi-purpose interactive cognitive platform
CN106953977B (zh) * 2017-03-22 2019-02-12 北京字节跳动科技有限公司 一种基于移动终端的监测方法及***
KR102047303B1 (ko) * 2018-06-01 2019-11-21 엘지전자 주식회사 저조도 영상 내 소실점에 기반하여 방향을 추정하는 로봇 및 방법
CN113734048B (zh) * 2020-05-29 2024-05-07 广州汽车集团股份有限公司 一种倒车预警方法和装置
US11634124B2 (en) * 2020-08-26 2023-04-25 Carvi Inc. Method of recognizing median strip and predicting risk of collision through analysis of image

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4205825B2 (ja) * 1999-11-04 2009-01-07 本田技研工業株式会社 対象物認識装置
JP3904988B2 (ja) * 2002-06-27 2007-04-11 株式会社東芝 画像処理装置およびその方法
CN1782668A (zh) 2004-12-03 2006-06-07 曾俊元 以视频感知的障碍物防撞方法与装置
US7720580B2 (en) * 2004-12-23 2010-05-18 Donnelly Corporation Object detection system for vehicle
US8108119B2 (en) * 2006-04-21 2012-01-31 Sri International Apparatus and method for object detection and tracking and roadway awareness using stereo cameras
US20110115912A1 (en) * 2007-08-31 2011-05-19 Valeo Schalter Und Sensoren Gmbh Method and system for online calibration of a video system
JP4622001B2 (ja) * 2008-05-27 2011-02-02 トヨタ自動車株式会社 道路区画線検出装置および道路区画線検出方法
CN101436300B (zh) 2008-12-10 2012-10-31 东软集团股份有限公司 障碍物分割方法及装置

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10358214B2 (en) 2015-01-04 2019-07-23 Hangzhou Zero Zro Technology Co., Ltd. Aerial vehicle and method of operation
US10824167B2 (en) 2015-01-04 2020-11-03 Hangzhou Zero Zero Technology Co., Ltd. System and method for automated aerial system operation
US10824149B2 (en) 2015-01-04 2020-11-03 Hangzhou Zero Zero Technology Co., Ltd. System and method for automated aerial system operation
TWI596361B (zh) * 2015-12-07 2017-08-21 Metal Ind Res And Dev Centre Using structured light sensing barrier reversing warning method
US9963069B2 (en) 2015-12-07 2018-05-08 Metal Industries Research & Development Centre Alarm method for reversing a vehicle by sensing obstacles using structured light
US10435144B2 (en) 2016-04-24 2019-10-08 Hangzhou Zero Zero Technology Co., Ltd. Aerial system propulsion assembly and method of use
US11027833B2 (en) 2016-04-24 2021-06-08 Hangzhou Zero Zero Technology Co., Ltd. Aerial system propulsion assembly and method of use
WO2018134677A1 (en) * 2017-01-23 2018-07-26 Hangzhou Zero Technology Co., Ltd Multi-camera system and method of use
US10303185B2 (en) 2017-01-23 2019-05-28 Hangzhou Zero Zero Technology Co., Ltd. Multi-camera system and method of use

Also Published As

Publication number Publication date
US8913128B2 (en) 2014-12-16
TWI417207B (zh) 2013-12-01
US20120162415A1 (en) 2012-06-28

Similar Documents

Publication Publication Date Title
TW201226234A (en) Image type obstacle detection car reversing warning system and method
US8810653B2 (en) Vehicle surroundings monitoring apparatus
KR101842811B1 (ko) 차량의 주변을 표시하는 운전자 보조 시스템
JP4267657B2 (ja) 車両周辺監視装置
JP3934119B2 (ja) 車両周辺監視装置
JP4263737B2 (ja) 歩行者検知装置
JP2007234019A (ja) 車両画像領域特定装置およびその方法
WO2013058128A1 (ja) 車両周辺監視装置
JP5904925B2 (ja) 車両周辺監視装置
TW201116431A (en) Method and system for asisting driver
CN102170558A (zh) 障碍物侦测警示***及方法
JPWO2014017302A1 (ja) 車載用周囲環境認識装置
US9877011B2 (en) Image display apparatus and image display method
JP2003296736A (ja) 障害物検知装置及びその方法
JP5547160B2 (ja) 車両周辺監視装置
JP2007293627A (ja) 車両の周辺監視装置、車両、車両の周辺監視方法、および車両の周辺監視用プログラム
US8660737B2 (en) Vehicle handling assistant apparatus
JPWO2012029382A1 (ja) 車両周辺監視装置
CN105303157B (zh) 延伸用于avm停止线检测的检测范围的算法
CN107423675B (zh) 对陷阱和行人进行前部碰撞警告的先进警告***
CN108021849B (zh) 一种行人预警方法及装置
WO2010007718A1 (ja) 車両周辺監視装置
JP2011209896A (ja) 障害物検知装置、障害物検知方法及び障害物検知プログラム
JP2014056295A (ja) 車両周辺監視装置
JP5345992B2 (ja) 車両周辺監視装置