KR20060075311A - 옵티컬 플로우를 이용한 차량 감시 장치 및 방법 - Google Patents
옵티컬 플로우를 이용한 차량 감시 장치 및 방법 Download PDFInfo
- Publication number
- KR20060075311A KR20060075311A KR1020040114083A KR20040114083A KR20060075311A KR 20060075311 A KR20060075311 A KR 20060075311A KR 1020040114083 A KR1020040114083 A KR 1020040114083A KR 20040114083 A KR20040114083 A KR 20040114083A KR 20060075311 A KR20060075311 A KR 20060075311A
- Authority
- KR
- South Korea
- Prior art keywords
- vehicle
- optical flow
- image
- information
- background
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
- G01V8/00—Prospecting or detecting by optical means
- G01V8/10—Detecting, e.g. by using light barriers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B15/00—Special procedures for taking photographs; Apparatus therefor
- G03B15/16—Special procedures for taking photographs; Apparatus therefor for photographing the track of moving objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Life Sciences & Earth Sciences (AREA)
- Geophysics (AREA)
- Image Analysis (AREA)
Abstract
Description
Claims (17)
- 옵티컬 플로우를 이용한 차량 감시 장치에 있어서,카메라를 통해 입력되는 영상을 처리하는 영상 처리부와,상기 입력된 영상으로부터 옵티컬 플로우를 검출하여 배경 옵티컬 플로우 영역을 분리하는 옵티컬 플로우 검출부와,상기 배경 옵티컬 플로우를 제거한 나머지 영역을 템플릿 매칭하여 차량 여부를 판단하는 차량 검출부를 포함함을 특징으로 하는 장치.
- 제 1항에 있어서, 상기 차량 검출부는상기 차량 여부 판단 결과 상기 나머지 영역이 차량에 대한 영역일 경우 차량의 종류를 판별함으로써 차량 검출을 수행함을 특징으로 하는 장치.
- 제 1항에 있어서, 상기 영상 처리부는상기 입력되는 영상을 디지털화하는 영상 입력부와,상기 영상 입력부로부터 출력되는 영상에서 노이즈를 제거하기 위해 필터링을 수행하는 영상보정부를 포함함을 특징으로 하는 장치.
- 제 1항에 있어서, 상기 옵티컬 플로우 검출부는상기 입력된 전체 영상에 대한 옵티컬 플로우를 계산하는 옵티컬 플로우 계산부와,상기 계산된 옵티컬 플로우를 통해 움직이지 않는 영역에 대한 옵티컬 플로우의 패턴과는 다른 패턴이 나타나는 영역에 대한 정보를 저장하는 옵티컬 플로우 분석부를 포함함을 특징으로 하는 장치.
- 제 4항에 있어서, 상기 옵티컬 플로우 분석부는자신에 차량에 대한 핸들 각도 정보 및 차량의 속도 중 적어도 하나 이상의 조건에 대응하는 배경 옵티컬 플로우를 저장하는 옵티컬 플로우 룩업 테이블을 참조하여 상기 전체 영상에서 배경 옵티컬 플로우를 추출함을 특징으로 하는 장치.
- 제 1항에 있어서, 상기 차량 검출부는현재의 자신의 차량에서의 속도와 핸들 각도에 따라 기 저장된 배경 옵티컬 플로우 중 해당 배경 옵티컬 플로우를 탐색하여 정합 과정을 통해 상기 입력된 영상에서 배경을 제거하고 남은 영역을 차량 후보영역으로 추출하는 후보영역 검출부와,상기 배경 옵티컬 플로우가 제거된 차량 후보영역만이 남게되면 상기 차량 후보영역과 기 저장된 차종별 템플릿과의 유사도(correlation) 검사를 수행하여 차량인지의 여부 및 차종을 판별하는 템플릿 매칭부를 포함함을 특징으로 하는 장치.
- 제 1항에 있어서,상기 차량 검출부에 의해 검출된 차량에 대한 정보를 이용하여 차량을 추적하는 차량 추적부를 더 포함함을 특징으로 하는 장치.
- 제 7항에 있어서, 상기 차량 추적부는상기 차량 검출부로부터 차량 정보를 이용하며, 움직이는 차량에 대한 현재의 영상으로부터의 정보와 이전 획득된 영상으로부터의 정보를 통해 후속 프레임에서의 차량이 이동될 지점을 예측하는 차량 정보부와,상기 후속 프레임을 통한 차량의 실제 획득정보와 상기 차량에 대한 예측 정보를 비교함으로써 추적 상태의 결과를 판단하는 추적상태 판단부를 포함함을 특징으로 하는 장치.
- 제 8항에 있어서, 상기 차량 추적부는상기 추적상태 판단부로부터 출력되는 비교 결과 추적상태의 오차범위가 설정치 이내이면 계속적으로 차량 추적을 수행하고,상기 추적 상태의 오차범위가 설정치 이상이면 자동 추적하는 과정을 반복하여 수행함을 특징으로 하는 장치.
- 옵티컬 플로우를 이용한 차량 감시 방법에 있어서,카메라를 통해 입력되는 영상을 전처리하는 과정과,상기 전처리된 영상으로부터 옵티컬 플로우를 검출하여 배경 옵티컬 플로우영역을 분리하는 과정과,상기 배경 옵티컬 플로우를 제거한 나머지 영역을 템플릿 매칭하는 과정과,상기 템플릿 매칭을 통해 상기 나머지 영역이 차량에 대한 움직임을 나타내는 영역일 경우 차량에 대한 정보를 검출하여 차량 검출을 수행하는 과정을 포함함을 특징으로 하는 방법.
- 제 10항에 있어서, 상기 배경 옵티컬 플로우 영역을 분리하는 과정은상기 입력된 전체 영상에 대한 옵티컬 플로우를 계산하는 과정과,상기 계산된 옵티컬 플로우를 옵티컬 플로우 룩업 테이블 내에 기저장된 배경 옵티컬 플로우와 비교하는 과정과,상기 비교 결과 상기 전체 영상에서 해당 배경 옵티컬 플로우를 검출하는 과정을 포함함을 특징으로 하는 방법.
- 제 11항에 있어서, 상기 옵티컬 플로우 룩업 테이블은자신의 차량에 대한 속도 및 핸들 각도에 따라 변화하는 각각의 배경 옵티컬 플로우를 저장함을 특징으로 하는 방법.
- 제 11항에 있어서, 상기 계산된 옵티컬 플로우를 옵티컬 플로우 룩업 테이블 내에 기저장된 배경 옵티컬 플로우와 비교하는 과정은현재 자신의 차량에서의 속도와 핸들 각도에 따라 기저장된 배경 옵티컬 플로우 중 해당 배경 옵티컬 플로우가 있는지 판단하는 과정과,상기 판단 결과 해당 배경 옵티컬 플로우가 있는 경우 상기 전체 입력 영상에서 배경 옵티컬 플로우를 추출하는 과정을 포함함을 특징으로 하는 방법.
- 제 10항에 있어서, 상기 템플릿 매칭하는 과정은상기 전체 입력 영상에서 배경을 제거하고 남은 영역을 차량 후보영역으로 추출하는 과정과,상기 배경 옵티컬 플로우를 제거한 나머지 영역과 기 저장된 차종별 템플릿과의 유사도를 검사하는 과정과,상기 검사 결과에 따라 상기 차량 후보 영역에 대해 차량인지의 여부 및 차종을 판별하는 과정을 포함함을 특징으로 하는 방법.
- 제 10항에 있어서,상기 검출된 차량에 대한 정보를 이용하여 차량을 추적하는 과정을 더 포함함을 특징으로 하는 방법.
- 제 15항에 있어서, 상기 차량을 추적하는 과정은상기 검출된 차량에 대한 정보를 이용하여 움직이는 차량에 대한 현재의 영상으로부터의 정보와 이전 획득된 영상으로부터의 정보를 통해 후속 프레임에서의 차량이 이동될 지점을 예측하는 과정과,상기 후속 프레임을 통한 차량의 실제 획득정보와 상기 차량에 대한 예측 정보를 비교함으로써 추적 상태의 결과를 판단하는 과정을 포함함을 특징으로 하는 방법.
- 제 16항에 있어서, 상기 예측하는 과정은추적 차량에 대한 상대 속도와 움직임 정보를 산출하여 차량이 이동될 지점을 예측하는 과정임을 특징으로 하는 방법.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020040114083A KR100630088B1 (ko) | 2004-12-28 | 2004-12-28 | 옵티컬 플로우를 이용한 차량 감시 장치 및 방법 |
US11/236,236 US20060140447A1 (en) | 2004-12-28 | 2005-09-27 | Vehicle-monitoring device and method using optical flow |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020040114083A KR100630088B1 (ko) | 2004-12-28 | 2004-12-28 | 옵티컬 플로우를 이용한 차량 감시 장치 및 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20060075311A true KR20060075311A (ko) | 2006-07-04 |
KR100630088B1 KR100630088B1 (ko) | 2006-09-27 |
Family
ID=36611565
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020040114083A KR100630088B1 (ko) | 2004-12-28 | 2004-12-28 | 옵티컬 플로우를 이용한 차량 감시 장치 및 방법 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20060140447A1 (ko) |
KR (1) | KR100630088B1 (ko) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9104920B2 (en) | 2012-10-30 | 2015-08-11 | Hyundai Motor Company | Apparatus and method for detecting obstacle for around view monitoring system |
US9418443B2 (en) | 2013-08-27 | 2016-08-16 | Hyundai Motor Company | Apparatus and method for detecting obstacle |
KR20160142137A (ko) * | 2015-06-02 | 2016-12-12 | 에스케이하이닉스 주식회사 | 움직이는 객체 검출 장치 및 방법 |
WO2018097627A1 (ko) * | 2016-11-23 | 2018-05-31 | 엘지이노텍(주) | 차량 주행 정보를 이용한 이미지 분석 방법, 장치, 시스템, 프로그램 및 저장 매체 |
KR20190032488A (ko) * | 2016-07-22 | 2019-03-27 | 로베르트 보쉬 게엠베하 | 주행 보조 방법, 주행 보조 시스템 및 차량 |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7860162B2 (en) * | 2005-09-29 | 2010-12-28 | Panasonic Corporation | Object tracking method and object tracking apparatus |
US8666661B2 (en) * | 2006-03-31 | 2014-03-04 | The Boeing Company | Video navigation |
US8098889B2 (en) * | 2007-01-18 | 2012-01-17 | Siemens Corporation | System and method for vehicle detection and tracking |
DE102007031302A1 (de) * | 2007-07-05 | 2009-01-08 | Robert Bosch Gmbh | Vorrichtung zur Erkennung und/oder Klassifizierung von Bewegungsmustern in einer Bildsequenz von einer Überwachungsszene, Verfahren sowie Computerprogramm |
US8259998B2 (en) * | 2008-09-30 | 2012-09-04 | Mazda Motor Corporation | Image processing device for vehicle |
JP5320331B2 (ja) * | 2010-03-17 | 2013-10-23 | 日立オートモティブシステムズ株式会社 | 車載用環境認識装置及び車載用環境認識システム |
US10018703B2 (en) * | 2012-09-13 | 2018-07-10 | Conduent Business Services, Llc | Method for stop sign law enforcement using motion vectors in video streams |
JP5792091B2 (ja) * | 2012-02-16 | 2015-10-07 | 富士通テン株式会社 | 物体検出装置及び物体検出方法 |
US9317752B2 (en) * | 2013-06-20 | 2016-04-19 | Xerox Corporation | Method for detecting large size and passenger vehicles from fixed cameras |
KR101439052B1 (ko) * | 2013-09-05 | 2014-09-05 | 현대자동차주식회사 | 장애물 검출 장치 및 방법 |
CN104299244B (zh) * | 2014-09-26 | 2017-07-25 | 东软集团股份有限公司 | 基于单目相机的障碍物检测方法及装置 |
EP3057061B1 (en) * | 2015-02-16 | 2017-08-30 | Application Solutions (Electronics and Vision) Limited | Method and device for the estimation of car egomotion from surround view images |
JP6569385B2 (ja) * | 2015-08-20 | 2019-09-04 | 株式会社Jvcケンウッド | 車両検出装置、車両検出システム、車両検出方法、及び車両検出プログラム |
KR20170050028A (ko) * | 2015-10-29 | 2017-05-11 | 삼성에스디에스 주식회사 | 객체의 위치 검색 시스템 및 방법 |
CN106909936B (zh) * | 2017-01-21 | 2020-02-21 | 江苏大学 | 一种基于双车辆可变形部件模型的车辆检测方法 |
US10430671B2 (en) * | 2017-04-22 | 2019-10-01 | Honda Motor Co., Ltd. | System and method for remapping surface areas of a vehicle environment |
KR101976952B1 (ko) | 2017-11-01 | 2019-05-09 | 재단법인 다차원 스마트 아이티 융합시스템 연구단 | 움직임 벡터를 이용한 객체 검출 시스템 및 그 방법 |
JP6587006B2 (ja) * | 2018-03-14 | 2019-10-09 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 動体検出装置、制御装置、移動体、動体検出方法、及びプログラム |
TWI700017B (zh) | 2018-10-17 | 2020-07-21 | 財團法人車輛研究測試中心 | 車輛偵測方法、基於光強度動態之夜間車輛偵測方法及其系統 |
CN109544590B (zh) * | 2018-11-27 | 2020-05-15 | 上海芯仑光电科技有限公司 | 一种目标跟踪方法及计算设备 |
KR102219906B1 (ko) * | 2018-12-20 | 2021-02-24 | 한동대학교 산학협력단 | 기계학습을 위한 학습데이터 자동 생성 방법 및 장치 |
CN111351474B (zh) * | 2018-12-24 | 2022-07-12 | 上海欧菲智能车联科技有限公司 | 车辆移动目标检测方法、装置和*** |
CN112037250B (zh) * | 2020-07-27 | 2024-04-05 | 国网四川省电力公司 | 一种目标车辆矢量轨迹追踪和工程视图建模方法、装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3522317B2 (ja) * | 1993-12-27 | 2004-04-26 | 富士重工業株式会社 | 車輌用走行案内装置 |
JP3395634B2 (ja) | 1998-03-12 | 2003-04-14 | 三菱自動車工業株式会社 | オプティカルフロー式後方情報検出装置 |
JP3580475B2 (ja) * | 1998-09-14 | 2004-10-20 | 矢崎総業株式会社 | 周辺監視装置 |
US6535114B1 (en) * | 2000-03-22 | 2003-03-18 | Toyota Jidosha Kabushiki Kaisha | Method and apparatus for environment recognition |
KR100364582B1 (ko) | 2000-04-28 | 2002-12-16 | 주식회사 네트웍코리아 | 다중 이동물체 추적/감시 시스템 |
JP3888055B2 (ja) | 2000-12-26 | 2007-02-28 | 財団法人鉄道総合技術研究所 | オプティカルフローを利用した列車前方異常検出装置 |
US7266220B2 (en) * | 2002-05-09 | 2007-09-04 | Matsushita Electric Industrial Co., Ltd. | Monitoring device, monitoring method and program for monitoring |
US7248718B2 (en) * | 2004-02-19 | 2007-07-24 | Siemens Corporate Research, Inc. | System and method for detecting a passing vehicle from dynamic background using robust information fusion |
DE102005013920B4 (de) * | 2004-03-26 | 2007-12-13 | Mitsubishi Jidosha Kogyo K.K. | Frontsicht-Überwachungsvorrichtung |
-
2004
- 2004-12-28 KR KR1020040114083A patent/KR100630088B1/ko active IP Right Grant
-
2005
- 2005-09-27 US US11/236,236 patent/US20060140447A1/en not_active Abandoned
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9104920B2 (en) | 2012-10-30 | 2015-08-11 | Hyundai Motor Company | Apparatus and method for detecting obstacle for around view monitoring system |
US9418443B2 (en) | 2013-08-27 | 2016-08-16 | Hyundai Motor Company | Apparatus and method for detecting obstacle |
KR20160142137A (ko) * | 2015-06-02 | 2016-12-12 | 에스케이하이닉스 주식회사 | 움직이는 객체 검출 장치 및 방법 |
KR20190032488A (ko) * | 2016-07-22 | 2019-03-27 | 로베르트 보쉬 게엠베하 | 주행 보조 방법, 주행 보조 시스템 및 차량 |
WO2018097627A1 (ko) * | 2016-11-23 | 2018-05-31 | 엘지이노텍(주) | 차량 주행 정보를 이용한 이미지 분석 방법, 장치, 시스템, 프로그램 및 저장 매체 |
KR20180058046A (ko) * | 2016-11-23 | 2018-05-31 | 엘지이노텍 주식회사 | 차량 주행 정보를 이용한 이미지 분석 방법, 장치, 시스템, 프로그램 및 저장 매체 |
US10909693B2 (en) | 2016-11-23 | 2021-02-02 | Lg Innotek Co., Ltd. | Image analysis method, device, system, and program, which use vehicle driving information, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
US20060140447A1 (en) | 2006-06-29 |
KR100630088B1 (ko) | 2006-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100630088B1 (ko) | 옵티컬 플로우를 이용한 차량 감시 장치 및 방법 | |
Wu et al. | Lane-mark extraction for automobiles under complex conditions | |
Kuo et al. | Vision-based vehicle detection for a driver assistance system | |
US7231288B2 (en) | System to determine distance to a lead vehicle | |
US9047518B2 (en) | Method for the detection and tracking of lane markings | |
US9934442B2 (en) | Passenger counting device, passenger counting method, and program recording medium | |
US10081308B2 (en) | Image-based vehicle detection and distance measuring method and apparatus | |
JP5651414B2 (ja) | 車両検出装置 | |
KR100459476B1 (ko) | 차량의 대기 길이 측정 장치 및 방법 | |
US9626599B2 (en) | Reconfigurable clear path detection system | |
US10867403B2 (en) | Vehicle external recognition apparatus | |
US10565438B2 (en) | Vehicle periphery monitor device | |
JP5136504B2 (ja) | 物体識別装置 | |
CN106022243B (zh) | 一种基于图像处理的机动车道车辆逆行识别方法 | |
EP2713308A2 (en) | Method and system for using fingerprints to track moving objects in video | |
WO2003001473A1 (en) | Vision-based collision threat detection system_ | |
KR101825687B1 (ko) | 차영상을 이용한 장애물 검출장치 및 그 방법 | |
KR20150112656A (ko) | 카메라 캘리브레이션 방법 및 그 장치 | |
KR20210149037A (ko) | 신경망을 훈련 및 이용해 에고 부분 위치를 검출하기 위한 방법 | |
JP5353531B2 (ja) | 車両灯火認識装置及びプログラム | |
Garg et al. | Real-time license plate recognition and speed estimation from video sequences | |
US11120292B2 (en) | Distance estimation device, distance estimation method, and distance estimation computer program | |
US8948449B2 (en) | Selecting visible regions in nighttime images for performing clear path detection | |
CN107256382A (zh) | 基于图像识别的虚拟保险杠控制方法和*** | |
WO2017077261A1 (en) | A monocular camera cognitive imaging system for a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20120830 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20130829 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20140828 Year of fee payment: 9 |
|
FPAY | Annual fee payment |
Payment date: 20150828 Year of fee payment: 10 |
|
FPAY | Annual fee payment |
Payment date: 20160830 Year of fee payment: 11 |
|
FPAY | Annual fee payment |
Payment date: 20170830 Year of fee payment: 12 |
|
FPAY | Annual fee payment |
Payment date: 20180830 Year of fee payment: 13 |