JP6852465B2 - 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム - Google Patents
俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム Download PDFInfo
- Publication number
- JP6852465B2 JP6852465B2 JP2017039675A JP2017039675A JP6852465B2 JP 6852465 B2 JP6852465 B2 JP 6852465B2 JP 2017039675 A JP2017039675 A JP 2017039675A JP 2017039675 A JP2017039675 A JP 2017039675A JP 6852465 B2 JP6852465 B2 JP 6852465B2
- Authority
- JP
- Japan
- Prior art keywords
- bird
- vehicle
- eye view
- view image
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 240000004050 Pentaglottis sempervirens Species 0.000 title claims description 143
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 title claims description 143
- 238000000034 method Methods 0.000 title claims description 35
- 238000006243 chemical reaction Methods 0.000 claims description 42
- 230000002093 peripheral effect Effects 0.000 claims description 29
- 230000002194 synthesizing effect Effects 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 6
- 239000002131 composite material Substances 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
- B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
- B60R2300/605—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint the adjustment being automatic
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
- B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Processing (AREA)
Description
11 第一車外カメラ(カメラ)
12 第二車外カメラ(カメラ)
13 第三車外カメラ(カメラ)
14 第四車外カメラ(カメラ)
20 車両傾きセンサ(センサ)
30 モニタ(表示部)
40 俯瞰映像生成装置
41 映像処理部
42 映像データ取得部
43 俯瞰映像生成部
431 映像視点変換部
432 映像合成部
45 制御部
46 車両傾きデータ取得部(傾きデータ取得部)
47 映像視点決定部
49 記憶部
P 仮想視点
V 車両
Claims (5)
- 車両の周辺を撮影した周辺映像データを取得する映像データ取得部と、
前記車両の傾きを示す傾きデータを取得する傾きデータ取得部と、
前記傾きデータ取得部が取得した傾きデータに応じて、前記車両の鉛直方向の上方を仮想視点の位置として調整する映像視点決定部と、
前記映像データ取得部が取得した周辺映像を、前記映像視点決定部によって調整された仮想視点で視点変換処理を行って合成した俯瞰映像を生成する俯瞰映像生成部と、
を有することを特徴とする俯瞰映像生成装置。 - 前記俯瞰映像生成部は、仮想視点の位置から見た前記車両を模した自車両アイコンを合成した俯瞰映像を生成する、
請求項1に記載の俯瞰映像生成装置。 - 請求項1または2に記載の俯瞰映像生成装置と、
前記車両の周辺を撮影する複数のカメラ、前記俯瞰映像を表示する表示部、前記車両の傾きを検出するセンサの少なくともいずれかと、
を備える、俯瞰映像生成システム。 - 車両の周辺を撮影した周辺映像データを取得する映像データ取得ステップと、
前記車両の傾きを示す傾きデータを取得する傾きデータ取得ステップと、
前記傾きデータ取得ステップによって取得された傾きデータに応じて、前記車両の鉛直方向の上方を仮想視点の位置として調整する映像視点決定ステップと、
前記映像データ取得ステップで取得した周辺映像を、映像視点決定ステップによって調整された仮想視点で視点変換処理を行って合成した俯瞰映像を生成する俯瞰映像生成ステップと、
を含む俯瞰映像生成方法。 - 車両の周辺を撮影した周辺映像データを取得する映像データ取得ステップと、
前記車両の傾きを示す傾きデータを取得する傾きデータ取得ステップと、
前記傾きデータ取得ステップによって取得された傾きデータに応じて、前記車両の鉛直方向の上方を仮想視点の位置として調整する映像視点決定ステップと、
前記映像データ取得ステップで取得した周辺映像を、映像視点決定ステップによって調整された仮想視点で視点変換処理を行って合成した俯瞰映像を生成する俯瞰映像生成ステップと、
を俯瞰映像生成装置として動作するコンピュータに実行させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017039675A JP6852465B2 (ja) | 2017-03-02 | 2017-03-02 | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム |
US15/906,049 US10547815B2 (en) | 2017-03-02 | 2018-02-27 | Bird's-eye view video generation device, bird's-eye view video generation method and non-transitory storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017039675A JP6852465B2 (ja) | 2017-03-02 | 2017-03-02 | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018148314A JP2018148314A (ja) | 2018-09-20 |
JP6852465B2 true JP6852465B2 (ja) | 2021-03-31 |
Family
ID=63355842
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017039675A Active JP6852465B2 (ja) | 2017-03-02 | 2017-03-02 | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10547815B2 (ja) |
JP (1) | JP6852465B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019026332A1 (ja) * | 2017-07-31 | 2019-02-07 | 株式会社Jvcケンウッド | 俯瞰映像生成装置、俯瞰映像生成方法およびプログラム |
KR20200042549A (ko) * | 2018-10-15 | 2020-04-24 | 현대자동차주식회사 | 차량 및 그 제어방법 |
JP7160701B2 (ja) * | 2019-01-23 | 2022-10-25 | 株式会社小松製作所 | 作業機械のシステム及び方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001245131A (ja) * | 2000-02-29 | 2001-09-07 | Matsushita Electric Ind Co Ltd | 画像補正方法および画像補正装置 |
JP2003302235A (ja) * | 2002-04-10 | 2003-10-24 | Matsushita Electric Ind Co Ltd | ナビゲーション表示装置 |
JP2007266930A (ja) | 2006-03-28 | 2007-10-11 | Aisin Aw Co Ltd | 運転支援方法及び運転支援装置 |
JP4796676B2 (ja) | 2006-05-26 | 2011-10-19 | アルパイン株式会社 | 車両上方視点画像表示装置 |
JP2010245821A (ja) * | 2009-04-06 | 2010-10-28 | Denso Corp | 車両用画像表示装置 |
JP5223811B2 (ja) * | 2009-08-06 | 2013-06-26 | 株式会社日本自動車部品総合研究所 | 画像補正装置、画像補正方法、及びそれらに用いられる変換マップ作成方法 |
WO2013109869A1 (en) * | 2012-01-20 | 2013-07-25 | Magna Electronics, Inc. | Vehicle vision system with free positional virtual panoramic view |
WO2014132680A1 (ja) * | 2013-02-28 | 2014-09-04 | アイシン精機株式会社 | 車両の制御装置、及びプログラム |
CN105009574B (zh) * | 2013-03-28 | 2018-07-17 | 爱信精机株式会社 | 周边监视装置及周边监视方法、记录介质 |
JP2015106777A (ja) | 2013-11-29 | 2015-06-08 | 株式会社富士通ゼネラル | 画像処理装置並びに運転支援装置およびナビゲーション装置およびカメラ装置 |
JP6379967B2 (ja) * | 2014-10-09 | 2018-08-29 | 株式会社デンソー | 画像生成装置および画像生成方法 |
JP6380550B2 (ja) * | 2014-11-14 | 2018-08-29 | 日産自動車株式会社 | 表示装置及び表示方法 |
JP6555056B2 (ja) * | 2015-09-30 | 2019-08-07 | アイシン精機株式会社 | 周辺監視装置 |
-
2017
- 2017-03-02 JP JP2017039675A patent/JP6852465B2/ja active Active
-
2018
- 2018-02-27 US US15/906,049 patent/US10547815B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10547815B2 (en) | 2020-01-28 |
JP2018148314A (ja) | 2018-09-20 |
US20180255274A1 (en) | 2018-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5561566B2 (ja) | 運転支援装置 | |
JP5911775B2 (ja) | 画像生成装置、画像表示システム及び画像生成方法 | |
US20220210344A1 (en) | Image display apparatus | |
JP2008027138A (ja) | 車両用監視装置 | |
JPWO2014132680A1 (ja) | 車両の制御装置、及びプログラム | |
JP6614042B2 (ja) | 姿勢変化判定装置、俯瞰映像生成装置、俯瞰映像生成システム、姿勢変化判定方法およびプログラム | |
JP6852465B2 (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム | |
JP6958163B2 (ja) | 表示制御装置 | |
EP3547677B1 (en) | Bird's eye view image generation device, bird's eye view image generation system, bird's eye view image generation method and program | |
JP2018142885A (ja) | 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム | |
JP7013751B2 (ja) | 画像処理装置 | |
JP2016110501A (ja) | 画像生成装置 | |
JP6618778B2 (ja) | 画像処理装置、情報表示システム、画像処理方法およびプログラム | |
US8384779B2 (en) | Display device for vehicle | |
JP2023174682A (ja) | 車両用映像処理装置および車両用映像処理方法 | |
JP4857159B2 (ja) | 車両運転支援装置 | |
US20200231099A1 (en) | Image processing apparatus | |
JP6935970B2 (ja) | 自動二輪車用カメラ装置 | |
KR101659606B1 (ko) | 뒷바퀴 위치 표시 차량 후진 영상 시스템의 영상 표시 방법 | |
JP2009214790A (ja) | 撮像装置および方法、並びに、画像処理装置および方法 | |
JP6760129B2 (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム | |
JP6866765B2 (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法及びプログラム | |
JP6644264B2 (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム | |
JP2018142883A (ja) | 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム | |
JP6730619B2 (ja) | 俯瞰映像生成装置、俯瞰映像表示装置、俯瞰映像生成方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190930 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200805 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200825 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201021 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210209 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210222 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6852465 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |