FI3455823T3 - Förfarande och system för att underlätta transporten av en observatör i ett fordon - Google Patents

Förfarande och system för att underlätta transporten av en observatör i ett fordon Download PDF

Info

Publication number
FI3455823T3
FI3455823T3 FIEP17796493.9T FI17796493T FI3455823T3 FI 3455823 T3 FI3455823 T3 FI 3455823T3 FI 17796493 T FI17796493 T FI 17796493T FI 3455823 T3 FI3455823 T3 FI 3455823T3
Authority
FI
Finland
Prior art keywords
section
observer
vehicle
environment
cameras
Prior art date
Application number
FIEP17796493.9T
Other languages
English (en)
Finnish (fi)
Inventor
Ronny Backström
Original Assignee
Bae Systems Haegglunds Ab
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bae Systems Haegglunds Ab filed Critical Bae Systems Haegglunds Ab
Application granted granted Critical
Publication of FI3455823T3 publication Critical patent/FI3455823T3/sv

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F41WEAPONS
    • F41HARMOUR; ARMOURED TURRETS; ARMOURED OR ARMED VEHICLES; MEANS OF ATTACK OR DEFENCE, e.g. CAMOUFLAGE, IN GENERAL
    • F41H5/00Armour; Armour plates
    • F41H5/26Peepholes; Windows; Loopholes
    • F41H5/266Periscopes for fighting or armoured vehicles
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038Image mosaicing, e.g. composing plane images from plane sub-images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F41WEAPONS
    • F41HARMOUR; ARMOURED TURRETS; ARMOURED OR ARMED VEHICLES; MEANS OF ATTACK OR DEFENCE, e.g. CAMOUFLAGE, IN GENERAL
    • F41H7/00Armoured or armed vehicles
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0181Adaptation to the pilot/driver
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/32Indexing scheme for image data processing or generation, in general involving image mosaicing

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • General Engineering & Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Automobile Manufacture Line, Endless Track Vehicle, Trailer (AREA)

Claims (13)

EP 3455823 PATENTKRAV
1. Ettförfarande (500) for att underlätta transporten av en observatör i ett fordon, dar forfarandet innefattar stegen att: — tillhandahålla (510) videobilder fran ett flertal kameror, varvid nämnda kameror ar orienterade pa sä sätt att videobilderna visar delar av omgivningen av fordonet i vilket observatören transporteras och varvid synfälten av nämnda kameror är delvis overlappande; — detektera (520) en orientering av observatörens huvud; — kombinera (530) nämnda videobilder sä att de kombinerade videobilderna tillhandahäller en första videobild av en första sektion av fordonets omgivning; — —presentera (570) en andra videobild visande en andra sektion av fordonets omgivning till observatören, varvid nämnda andra sektion är en delmängd av nämnda första sektion och varvid nämnda andra sektion av omgivningen motsvarar den detekterade orienteringen av observatörens huvud, kännetecknat av att nämnda andra sektion av omgivningen är en äkta delmängd av omgivningen som kan ses med nämnda flertal kameror sä att nämnda detekterande och nämnda presenterande upprepas efter en förutbestämd tidsperiod som är tillräckligt kort för att inte orsaka yrsel för observatören, varvid förfarandet vidare innefattar steget att: — kombinera (540) nämnda videobilder sä att de kombinerade videobilderna tillhandahäller en tredje videobild av en tredje sektion av fordonets omgivning, varvid nämnda tredje sektion av omgivningen är en äkta delmängd av omgivningen som kan ses med nämnda flertal kameror, varvid en av nämnda första sektion och nämnda tredje sektion av omgivningen är en äkta delmängd av den andra, och varvid den av nämnda första sektion och nämnda tredje sektion som är en äkta delmängd av den andra har en högre kvalitet i den motsvarande videobilden jämfört med videobilden som motsvarar den av nämnda första sektion och nämnda tredje sektion av omgivningen som är en övermängd av den andra, varvid förfarandet vidare innefattar steget att detektera vridhastigheten av observatörens huvud och varvid nämnda tredje sektion har en högre kvalitet ifall vridhastigheten är större än ett förutbestämt tröskelvärde och varvid nämnda första sektion har en högre kvalitet ifall vridhastigheten är lägre än tröskelvärdet.
2. Förfarandet enligt nägot av föregäende patentkrav, varvid upprepandet av nämnda detekterande och nämnda presenterande efter en förutbestämd tidsperiod som är tillräckligt kort för att inte orsaka yrsel för observatören utföres atminstone var 17:e millisekund,
EP 3455823 företrädesvis ätminstone var 14:e millisekund, och mer företrädesvis ätminstone var 12:e eller var 10:e millisekund.
3. Förfarandet enligt nägot av föregäende patentkrav, varvid den horisontella och/eller den vertikala synvinkeln av den första och/eller den tredje sektionen är lägre än 120 grader, företrädesvis lägre än 90 grader.
4. Förfarandet enligt nägot av föregäende patentkrav, varvid bildtagningsfrekvensen av videobilderna frän nämnda flertal kameror är ätminstone 25 Hertz.
5. Ett system for att underlätta transporten av en observatör i ett fordon, där systemet innefattar: — ett flertal kameror (410), anordnade att tillhandahålla videobilder, varvid nämnda kameror är orienterade pa sä sätt att videobilderna visar delar av omgivningen av fordonet i vilket observatören transporteras och varvid synfälten av nämnda kameror är delvist överlappande; — kombineringsmedel (400; 440) anpassat att kombinera nämnda videobilder sä att de kombinerade videobilderna tillhandahaller en första videobild av en första sektion av fordonets omgivning; — detekteringsmedel (420) anpassat att detektera en orientering av observatörens huvud; — —presentationsmedel (430) anpassat att presentera en andra videobild visande en andra sektion av fordonets omgivning till observatören, varvid nämnda andra sektion är en delmängd av nämnda första sektion och varvid nämnda andra sektion av omgivningen motsvarar till den detekterade orienteringen av observatörens huvud, kännetecknat av att nämnda andra sektion av omgivningen är en äkta delmängd av omgivningen som kan ses med nämnda flertal kameror sä att nämnda detekteringsmedel och nämnda presentationsmedel, respektive, är anordnade att upprepa nämnda detektering och presentation efter en förutbestämd tidsperiod som är tillräckligt kort för att inte orsaka yrsel för observatören, varvid: — nämnda kombineringsmedel (400; 440) är vidare anpassat att kombinera nämnda videobilder sä att de kombinerade videobilderna tillhandahäller en tredje videobild av en tredje sektion av fordonets omgivning, och varvid nämnda tredje sektion av omgivningen är en äkta delmängd av omgivningen som kan ses med nämnda flertal kameror, varvid en av nämnda första sektion och nämnda tredje
EP 3455823 sektion av omgivningen är en äkta delmängd av den andra, och varvid den av nämnda första sektion och nämnda tredje sektion av omgivningen som är en äkta delmängd av den andra har en högre kvalitet i den motsvarande videobilden jämfört med videobilden som motsvarar den av nämnda första sektion och nämnda tredje sektion av omgivningen som är en Övermängd av den andra, varvid systemet vidare är anordnat att detektera vridhastigheten av observatörens huvud och varvid nämnda tredje sektion har en högre kvalitet ifall vridhastigheten är större än ett förutbestämt tröskelvärde, och varvid nämnda första sektion har nämnda högre kvalitet ifall vridhastigheten är lägre än tröskelvärdet.
6. Systemet enligt patentkrav 5, varvid nämnda detekteringsmedel och nämnda presentationsmedel, respektive, är anordnade att upprepa nämnda detekterande och nämnda presenterande ätminstone var 17:e millisekund, företrädesvis var 14:e millisekund, och mer företrädesvis ätminstone var 12:e eller var 10:e millisekund.
7. Systemet enligt nägot av patentkrav 5-6, varvid den horisontella och/eller den vertikala synvinkeln av den första och/eller den eventuella tredje sektionen är lägre än 120 grader, företrädesvis lägre än 90 grader.
8. Systemet enligt nägot av patentkrav 5-7, varvid bildtagningsfrekvensen av videobilderna frän nämnda flertal kameror är ätminstone 25 Hertz.
9. Systemet enligt något av patentkrav 5-8, vidare innefattande bestämningsmedel (450) anpassat att bestämma positionen och/eller orienteringen av fordonet.
10. Systemet enligt nägot av patentkrav 5-9, vidare innefattande bestämningsmedel (460) anpassat att bestämma orienteringen av ett torn hos fordonet.
11. Ett datorprogram för att underlätta transport av en observatör i ett fordon, varvid datorprogrammet innehaller programkod for att orsaka att en elektronisk styrenhet eller en dator forbunden med den elektroniska styrenheten utfor stegen enligt nagot av patentkrav
1-4.
12. En datorprogramprodukt innefattande programkod sparad pä ett av en dator läsbart medium för att utföra förfarandestegen enligt nägot av patentkraven 1-4 när datorprogrammet exekveras pä en elektronisk styrenhet eller en dator förbunden med den elektroniska styrenheten.
13. Ett fordon (100) innefattande ett system enligt något av patentkraven 5-10.
FIEP17796493.9T 2016-05-10 2017-05-10 Förfarande och system för att underlätta transporten av en observatör i ett fordon FI3455823T3 (sv)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
SE1650625A SE540058C2 (sv) 2016-05-10 2016-05-10 Method and system for facilitating transportation of an observer in a vehicle
PCT/SE2017/050470 WO2017196241A1 (en) 2016-05-10 2017-05-10 Method and system for facilitating transportation of an observer in a vehicle

Publications (1)

Publication Number Publication Date
FI3455823T3 true FI3455823T3 (sv) 2023-03-14

Family

ID=60267420

Family Applications (1)

Application Number Title Priority Date Filing Date
FIEP17796493.9T FI3455823T3 (sv) 2016-05-10 2017-05-10 Förfarande och system för att underlätta transporten av en observatör i ett fordon

Country Status (11)

Country Link
US (1) US10917585B2 (sv)
EP (1) EP3455823B1 (sv)
AU (1) AU2017264323B2 (sv)
DK (1) DK3455823T3 (sv)
ES (1) ES2938635T3 (sv)
FI (1) FI3455823T3 (sv)
HU (1) HUE061101T2 (sv)
PL (1) PL3455823T3 (sv)
SE (1) SE540058C2 (sv)
SG (1) SG11201809254QA (sv)
WO (1) WO2017196241A1 (sv)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11714285B1 (en) * 2019-07-22 2023-08-01 Apple Inc. Head-mountable device with head securement mechanism

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3720131A (en) * 1971-01-28 1973-03-13 Hughes Aircraft Co Built-in test for tank fire control computer
JP3514947B2 (ja) * 1997-06-05 2004-04-05 シャープ株式会社 3次元画像処理装置及び3次元画像処理方法
KR20020025301A (ko) * 2000-09-28 2002-04-04 오길록 다중 사용자를 지원하는 파노라믹 이미지를 이용한증강현실 영상의 제공 장치 및 그 방법
US9270976B2 (en) * 2005-11-02 2016-02-23 Exelis Inc. Multi-user stereoscopic 3-D panoramic vision system and method
IL189251A0 (en) * 2008-02-05 2008-11-03 Ehud Gal A manned mobile platforms interactive virtual window vision system
US8992318B2 (en) * 2012-09-26 2015-03-31 Igt Wearable display system and method
GB201305402D0 (en) * 2013-03-25 2013-05-08 Sony Comp Entertainment Europe Head mountable display
US10204658B2 (en) * 2014-07-14 2019-02-12 Sony Interactive Entertainment Inc. System and method for use in playing back panorama video content
US9659410B2 (en) * 2014-10-21 2017-05-23 Honeywell International Inc. Low latency augmented reality display
SE538494C2 (sv) * 2014-11-07 2016-08-02 BAE Systems Hägglunds AB Omvärldsuppfattningssystem och förfarande för omvärldsuppfattning i stridsfordon
US20170287219A1 (en) * 2016-03-31 2017-10-05 Adam G. Poulos Electromagnetic tracking of objects for mixed reality

Also Published As

Publication number Publication date
PL3455823T3 (pl) 2023-03-20
EP3455823A4 (en) 2020-01-01
WO2017196241A1 (en) 2017-11-16
US20190149748A1 (en) 2019-05-16
SE540058C2 (sv) 2018-03-06
SE1650625A1 (sv) 2017-11-11
HUE061101T2 (hu) 2023-05-28
AU2017264323A1 (en) 2018-11-15
US10917585B2 (en) 2021-02-09
ES2938635T3 (es) 2023-04-13
SG11201809254QA (en) 2018-11-29
DK3455823T3 (da) 2023-02-20
EP3455823B1 (en) 2022-11-23
AU2017264323B2 (en) 2022-03-10
EP3455823A1 (en) 2019-03-20

Similar Documents

Publication Publication Date Title
CN106470877A (zh) 车辆用显示装置以及车辆用显示方法
WO2016003863A3 (en) System and method of three-dimensional model generation
US10699130B2 (en) Image processing apparatus, monitoring system, image processing method, and program
WO2018025115A3 (en) Method and system for calibrating components of an inertial measurement unit (imu) using scene-captured data
WO2015186002A3 (en) Systems and methods for detecting an object
JP2013101528A5 (sv)
JP2013179397A5 (sv)
WO2016190933A3 (en) Vehicle navigation methods, systems and computer program products
EP4250710A3 (en) Device and method for capturing images
EP2979736A3 (en) Image processing
WO2016109139A3 (en) Scanning display system in head-mounted display for virtual reality
US10564250B2 (en) Device and method for measuring flight data of flying objects using high speed video camera and computer readable recording medium having program for performing the same
US20190279490A1 (en) Eyeglasses-type wearable terminal, control method thereof, and control program
EP2775423A3 (en) Object detection apparatus, vehicle-mounted device control system and carrier medium of program of object detection
EP2635031A3 (en) Systems and methods for image processing
JP2018036956A5 (sv)
JP2015103104A5 (sv)
JP2020008972A5 (sv)
US10755081B2 (en) Method and apparatus for identifying pupil in image
WO2019117717A8 (en) System for detecting persons in an area of interest
JP6398675B2 (ja) 画像生成装置
JP2017028659A5 (sv)
EP3096306A3 (en) Image processing device and image processing method
EP2413610A3 (en) Method and apparatus for displaying a 3-dimensional image
JP2008306602A5 (sv)