WO2024115373A1 - System and method for synchronously acquiring a hyperspectral image, digital images and radiometric spectra of a glazed building - Google Patents

System and method for synchronously acquiring a hyperspectral image, digital images and radiometric spectra of a glazed building Download PDF

Info

Publication number
WO2024115373A1
WO2024115373A1 PCT/EP2023/083143 EP2023083143W WO2024115373A1 WO 2024115373 A1 WO2024115373 A1 WO 2024115373A1 EP 2023083143 W EP2023083143 W EP 2023083143W WO 2024115373 A1 WO2024115373 A1 WO 2024115373A1
Authority
WO
WIPO (PCT)
Prior art keywords
radiometric
acquisition
digital images
building
spectra
Prior art date
Application number
PCT/EP2023/083143
Other languages
French (fr)
Inventor
Olivier DUMOULIN
Vincent ODENT
Laurence PONS DE GUIGUES
Thomas QUINTEN
Marie-Christine DHEUR
Original Assignee
Saint-Gobain Glass France
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Saint-Gobain Glass France filed Critical Saint-Gobain Glass France
Publication of WO2024115373A1 publication Critical patent/WO2024115373A1/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/30—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from X-rays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors

Definitions

  • CN 207442995 U SHENZHEN REAL SCENE TECH CO LTD [CN] 01.06.2018 describes a hybrid panoramic imaging system comprising several conventional cameras and a hypergon lens camera.
  • Conventional cameras are oriented in a direction perpendicular to the astronomical zenith.
  • the hypergonal lens camera is oriented along the astronomical zenith axis.
  • WO 2022135942 A1 SAINT GOBAIN [FR], 06.30.2022 describes a method for evaluating the quality of a simulation by physico-realistic rendering of a glass building or an automobile.
  • a hemispherical hyperspectral image of a real sky under given external light conditions and an image of a glass object are acquired synchronously and subjected to digital processing in a physico-realistic rendering engine in order to evaluate the color differences of the glazed elements between the two images.
  • the appearance of a glazed room may vary depending on the way the sky and other landscape elements are reflected on the glazing depending on the exterior brightness and/or weather conditions
  • the appearance of the interior environment may vary depending on how light is transmitted through the glazing and, possibly, multiple reflections and/or transmissions between the glazing as the light travels through the room.
  • a method as described in claim 1 allows the synchronous acquisition of a hyperspectral image of a landscape surrounding a glass building or an automobile, on the one hand, and digital images and radiometric spectra of the interior of said glass building or said automobile, on the other hand.
  • a system for implementing a method according to the first aspect of the invention.
  • the digital images and the radiometric spectra acquired according to the first aspect of the invention are used to evaluate the quality of a physico-realistic simulation of the interior environment of a glazed building or an automobile when the hyperspectral image of the external appearance of said building or said automobile is used as an environment map in said simulation.
  • a major advantage of the present invention is to provide reference elements for the spectral characteristics of simulated images, in particular by physico-realistic rendering, of the interior environment of a glazed room when the hyperspectral image of the surrounding exterior landscape is used as an environment map in said simulation.
  • the invention makes it possible to verify the realistic rendering of the interior environment of a glass room under a realistic sky.
  • the simulation parameters can be adjusted and/or corrected, in order to make this simulated indoor environment more realistic and/or significantly closer to what a human observer could expect to see if this indoor environment were real.
  • FIG. 1 is a schematic representation of a glass building in a landscape.
  • FIG. 1 is a schematic representation of the interior environment of the glass building of the .
  • FIG. 1 is a flow diagram of a method according to a first embodiment of the first aspect of the invention.
  • FIG. 1 is a flow diagram of a method according to a second embodiment of the first aspect of the invention.
  • FIG. 1 is a flow diagram of a method according to a third embodiment of the first aspect of the invention.
  • FIG. 1 is a detailed schematic representation of an example of a hyperspectral camera of the .
  • hyperspectral imaging is meant hyperspectral imaging as defined in the technical field of imaging. It includes in particular the techniques, devices and/or systems making it possible to construct an image in which each of the individual elements, called pixels, is associated with a reflectance spectrum. Expressed simply, hyperspectral imaging allows exploration of the electromagnetic spectrum beyond the RGB channels of conventional imaging systems. Thus, a hyperspectral image is formed from an assembly of several dozen, or even hundreds, of contiguous spectral bands acquired for each pixel. It generally has a matrix structure and can be represented in the form of a data cube whose first two dimensions represent the spatial dimensions of the image and the third its spectral dimension.
  • radiometric spectrum is meant a spectrum obtained by any radiometric technique or method adapted for the measurement of electromagnetic radiation, including visible light.
  • it may be a spectrum of at least one of the radiometric quantities among electromagnetic energy, energy flow, energy intensity, energy luminance, energy irradiance, energy emitting and energy exposure.
  • the glazed building 1001 may include one or more glazing units 1003 distributed over one or more of its walls. There illustrates the interior 2000 of the same glass building 1001 from a certain angle of view.
  • a method 3000 for synchronously acquiring a hyperspectral image of a landscape 1002 surrounding a glass building 1001 or an automobile, on the one hand, and digital images and radiometric spectra of the interior 2000 of said glazed building 1001 or of said automobile, on the other hand, said method comprises the following steps: - the acquisition 3001 of a hyperspectral image of said landscape 1002 at an angle of 360° in the reference plane of said acquisition; - the acquisition 3002, within the time, t, of acquisition of the hyperspectral image, of at least one digital image of at least part of the interior environment 2000 of said building 1001 or of said automobile at an angle of view given; - the acquisition 3003, within the time, t, of acquisition of the hyperspectral image, of at least one radiometric spectrum of said at least part of the interior environment 2000 of said building 1001 or of said automobile at said angle of view given.
  • the symbols “D” and “F” respectively represent the start and the end of a method 3000, 4000, 5000 according to the first aspect of the invention.
  • the acquisition step 3001 can be carried out using a hyperspectral image acquisition device 1004.
  • This device 1004 may in particular include: - a CCD hyperspectral camera 6001 equipped with a hypergon lens 6002 whose optical axis (AO) is oriented in a direction substantially perpendicular to the vertical astronomical zenith direction (ZA); - a rotating mobile stage 6002 configured to ensure the rotation of said hyperspectral camera 6001 at an angle of 360° in the reference plane of said hyperspectral camera 6001 with, for axis of rotation, the vertical astronomical zenith direction (ZA).
  • AO optical axis
  • ZA vertical astronomical zenith direction
  • the hyperspectral camera can have a spectral range of between 400nm and 1000nm, a spectral resolution of between 2nm and 4nm, a maximum horizontal field angle of 360°, a vertical field angle of at least 170°, an exposure time between 21 ⁇ s and 10s, and, preferably, a standard resolution of at least 900x1600 pixels.
  • Steps 3002, 3003 of acquiring the digital image and the radiometric spectrum can be carried out using a digital photographic device 2001 and a spectroradiometer 2002 respectively.
  • the digital photographic device may be a digital camera equipped with a 24x36mm CMOS sensor, a resolution of 5760x3840 pixels, an ISO sensitivity varying from 100 to 25600, a shutter speed of between 1/ 8000 s and 30 s, and a 20mm lens.
  • the spectroradiometer can have a spectral range varying from 380 nm to 780 nm, a spectral resolution of at least 1 nm, a luminance range varying from 0.1 to 150,000 cd/m2 with an uncertainty of approximately ⁇ 2% at 100 cd /m2.
  • the respective acquisition times of said digital image and the radiometric spectrum are shorter than that of the hyperspectral image, and a plurality of digital images and radiometric spectra are acquired within the acquisition time. of said hyperspectral image.
  • the digital images and the radiometric spectrum are acquired sequentially or in parallel.
  • step 3002 of acquiring the digital image and step 3003 of acquiring the radiometric spectrum are carried out in parallel, for example simultaneously.
  • the time for acquiring the digital image can generally be shorter than that for acquiring the hyperspectral image
  • step 3002 of acquiring the digital image can be carried out at the beginning, during or just before the end of step 3001 of acquiring the hyperspectral image.
  • step 3002 of acquiring the digital image can be carried out several times during step 3003 of acquiring the radiometric spectrum so as to generate several digital images during the acquisition time of the radiometric spectrum.
  • Said step 3002 can, for example, be carried out two, three times or as many times as necessary to cover the acquisition time of the radiometric spectrum.
  • step 3003 of acquiring the radiometric spectrum is carried out several times, for example two or three times, or more during the delay, t, of acquiring the hyperspectral image, while step 3002 acquisition of the digital image is carried out as many times as necessary to cover said same time period t.
  • step 3002 of acquiring the digital image and step 3003 of acquiring the radiometric spectrum are carried out sequentially.
  • step 3002 of acquiring the digital image is carried out before step 3003 of acquiring the radiometric spectrum are carried out sequentially.
  • the chronological order of the two stages is reversed.
  • Step 3002 of acquiring the digital image and step 3003 of acquiring the radiometric spectrum can be respectively subdivided into a plurality of successive steps of 3002a-3002z and 3003a-3003z organized alternately in order chronological order of their execution, for example, a step 3002a, then 3003a, then 3002b, then 3003b, etc.
  • the chronological order of succession of steps 3002a-3002z and 3003a-3003z can be reversed in an equivalent manner, i.e. say that step 3003 is executed before step 3002a and so on.
  • the digital images and the radiometric spectrum are acquired from different viewing angles. Acquisition from several viewing angles makes it possible to establish a more complete map of the variations in light exposure from the interior of the glass building or automobile, in particular through better representation of the light effects of the walls and interior furniture and /or orientation relative to the sun. Digital images and radiometric spectra can constitute more elements of comparison for evaluating the quality of a physico-realistic simulation of the interior environment of a glazed building or an automobile when the hyperspectral image of the external appearance of said building or automobile is used as an environment map in said simulation.
  • the method may further comprise the following steps: - calculating, using data processing means, the luminance from the radiometric spectra; - the comparison, using data processing means, of the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle; - the detection, using data processing means, of luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step.
  • these complementary embodiments it is possible to detect unwanted variations in brightness. If necessary, these variations can be corrected and/or more faithfully simulated during the evaluation of the quality of a physico-realistic simulation of the interior environment of a glass building or an automobile, the hyperspectral image of the external appearance of said building or said automobile being used as an environment map in said simulation.
  • the data processing device may be any device adapted to execute sequences of arithmetic or logical operations automatically in order to perform tasks or actions.
  • This device may include one or more central processing units (CPUs) and at least one control device which are adapted to perform these operations.
  • CPUs central processing units
  • control device which are adapted to perform these operations.
  • the device may also include other electronic components such as input/output interfaces, non-volatile or volatile storage devices, and communications buses for transferring data between electronic components therein and out. exterior of said device.
  • One of the input/output devices may be a user interface for human-machine interaction, for example a graphical user interface for displaying human-understandable information.
  • a first example of a data processing device may be a computer.
  • a second example may be an embedded system, for example a low-power computer card such as a single-board computer.
  • the method implemented by the data processing device may be a computer program comprising instructions which, when the program is executed by said device, causes said device to implement said method.
  • the computer program may be part of a software solution, that is, a collection of executable instructions, codes, scripts or the like and/or databases.
  • the computer program may be stored on a non-transitory computer-readable medium. Accordingly, this readable non-transitory medium includes instructions which, when executed by a computer, cause the computer to execute said method.
  • the digital images can be acquired for different values of at least two, or even three, parameters chosen from the shutter speed, the size of the diaphragm and ISO sensitivity.
  • the acquisition for different values of these parameters allows the obtaining of digital images for different exposures, and therefore a capture of a greater quantity of details, nuances and contrasts of the interior of the glazed building or the automobile.
  • the shutter speed values, expressed in seconds, and aperture sizes can be selected so that the cumulative exposure times of the digital images are less than or equal to the acquisition time of the hyperspectral image.
  • the method may further comprise a step of generating, using data processing means, at least one high dynamic range image from digital images (“High Dynamic Range » or HDR in English).
  • the discontinuities can result from algorithms for compositing or generating a digital image with a high dynamic range from a plurality of digital images acquired at different exposure times. that the exposure times between two consecutive digital images are very different.
  • the method further comprises a step of correction, using data processing means, of discontinuities in the color profiles of digital images.
  • the correction can be carried out using any suitable digital method.
  • a system for synchronous acquisition of a hyperspectral image of a landscape 1002 surrounding a glass building 1001 or an automobile, on the one hand, and digital images and radiometric spectra of the interior 2000 of said glazed building 1001 or said automobile comprising: - a CCD hyperspectral camera 6001 equipped with a hypergon lens 6002 whose optical axis (AO) is oriented in a direction substantially perpendicular to the vertical astronomical zenith direction (ZA); - a rotating mobile stage 6003 configured to ensure the rotation of said hyperspectral camera at an angle of 360° in the reference plane of said hyperspectral camera with, as the axis of rotation, the vertical astronomical zenith direction (ZA); - a digital photographic device 2001; - a 2002 spectrophotometer; in which - said hyperspectral camera 2002 is configured for the acquisition of a hyperspectral image of said landscape; -
  • the system can further be configured to acquire a plurality of digital images and radiometric spectra within the time frame for acquiring a hyperspectral image.
  • the system is configured to sequentially and alternately acquire the digital images and the radiometric spectrum.
  • the system may further comprise data processing means configured to: - calculate a luminance value from each of the radiometric spectra; - compare the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle; - detect luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step; - generate at least one high dynamic range image from digital images.
  • data processing means configured to: - calculate a luminance value from each of the radiometric spectra; - compare the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle; - detect luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step; - generate at least one high dynamic range image from digital images.
  • a method according to the first aspect of the invention can be used to evaluate the quality of a simulation by physico-realistic rendering of the interior of a glazed building or an automobile, in which : - the hyperspectral image of the landscape surrounding said building or said automobile is used as an environment map in a physico-realistic rendering engine; - images of the interior of said glass building or said automobile are simulated using said physico-realistic rendering engine from said environment map; - the spectral characteristics of the simulated images are compared to those of digital images and radiometric spectra.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Image Processing (AREA)

Abstract

The invention relates to a method for synchronously acquiring a hyperspectral image of a landscape surrounding a glazed building or of a motor vehicle, as well as digital images and radiometric spectra of the inside of the glazed building or of the motor vehicle. The method comprises the following steps: - acquiring a hyperspectral image of the landscape through an angle of 360° in the reference plane of the acquisition; - acquiring, within the period t for acquiring the hyperspectral image, at least one digital image of at least one portion of the environment inside the building or the motor vehicle according to a given angle of view; - acquiring, within the period t for acquiring the hyperspectral image, at least one radiometric spectrum of the at least one portion of the environment inside the building or the motor vehicle according to the given angle of view.

Description

Système et méthode d’acquisition synchrone d’une image hyperspectrale, d’images numériques et de spectres radiométriques d’un bâtiment vitré.System and method for synchronous acquisition of a hyperspectral image, digital images and radiometric spectra of a glass building.
L’invention concerne une méthode et un système d’acquisition synchrone d’une image hyperspectrale d’un paysage environnant un bâtiment vitré ou d’une automobile, d’une part, et d’images numériques et de spectres radiométriques de l’intérieur dudit bâtiment vitré de ladite automobile, d’autre part.The invention relates to a method and a system for synchronously acquiring a hyperspectral image of a landscape surrounding a glass building or an automobile, on the one hand, and digital images and radiometric spectra of the interior of said glass building of said automobile, on the other hand.
Arrière-plan techniqueTechnical background
Dans divers domaines industriels, les avancées récentes en simulation assistée par ordinateur permettent de créer des aperçus virtuels réalistes d’articles avant même leur manufacture ou leur rénovation. Ces aperçus peuvent constituer une aide à la décision quant au choix entre différents articles envisagés selon qu’ils satisfont ou non à certaines exigences techniques et/ou esthétiques.In various industrial fields, recent advances in computer-assisted simulation make it possible to create realistic virtual previews of items even before their manufacture or renovation. These overviews can constitute a decision aid regarding the choice between different articles considered depending on whether or not they meet certain technical and/or aesthetic requirements.
Il y a, de nos jours, une demande forte et toujours croissante de la part des clients pour leur fournir des prédictions réalistes de futurs résultats d’opérations complexes de rénovation à partir desquelles ils peuvent fonder, en toute confiance, leur décision de démarrer ou poursuivre ces opérations.There is, nowadays, a strong and ever-increasing demand from customers to provide them with realistic predictions of future results of complex renovation operations on which they can confidently base their decision to start or continue these operations.
A titre d’exemple, dans l’industrie automobile et du bâtiment, il est maintenant de pratique courante d’utiliser des outils de simulation, tels que les méthodes de rendu physico-réaliste ou de tracé de rayons, afin de générer des scènes tridimensionnelles en tant que représentations numériques anticipatrices de caractéristiques physiques et/ou fonctionnelles d’un véhicule automobile ou d’un bâtiment. Dans ces représentations numériques, les objets représentés, par exemple tout ou partie d’un véhicule ou d’un bâtiment, évoluent dans un environnement ou un paysage dont la simulation numérique peut être réalisée à l’aide d’une carte d’environnement projetée comme texture sur la surface d’un objet géométrique, tel qu’une sphère, un cube ou une demi-sphère, utilisé comme support d’un ciel virtuel, et/ou projetée sur les surfaces réfléchissantes de certains éléments ou objets de la scène tridimensionnelle simulée.For example, in the automotive and construction industries, it is now common practice to use simulation tools, such as physico-realistic rendering or ray tracing methods, in order to generate three-dimensional scenes. as anticipatory digital representations of physical and/or functional characteristics of a motor vehicle or a building. In these digital representations, the objects represented, for example all or part of a vehicle or a building, evolve in an environment or a landscape whose digital simulation can be carried out using a projected environment map as a texture on the surface of a geometric object, such as a sphere, cube or half-sphere, used as support for a virtual sky, and/or projected onto the reflective surfaces of certain elements or objects in the scene simulated three-dimensional.
Les images utilisées pour générer la carte d’environnement peuvent être des dessins ou graphiques conçus manuellement ou par ordinateur, ou encore des photographies du monde réel acquises à l’aide d’un dispositif photographique. Dans ce dernier cas, les cartes d’environnement peuvent être acquises à l’aide d’un dispositif photographique panoramique qui est adapté pour l’acquisition d’un paysage complet, y compris le ciel, selon un angle solide défini verticalement par un angle de 180° depuis le zénith jusqu’à l’horizon, et horizontalement par un angle de 360° à l’horizon. Des exemples de tels dispositifs sont les dispositifs photographiques rotatifs à 360°, les dispositifs photographiques à objectif « grand angle » ou encore les dispositifs photographiques à objectif hypergone (« fisheye » en anglais).The images used to generate the environment map may be manually or computer-designed drawings or graphics, or real-world photographs acquired using a photographic device. In the latter case, the environmental maps can be acquired using a panoramic photographic device which is adapted for the acquisition of a complete landscape, including the sky, at a solid angle defined vertically by an angle of 180° from the zenith to the horizon, and horizontally by an angle of 360° to the horizon. Examples of such devices are 360° rotating photographic devices, photographic devices with a “wide angle” lens or photographic devices with a hypergon lens (“fisheye” in English).
CN 207442995 U, SHENZHEN REAL SCENE TECH CO LTD [CN] 01.06.2018 décrit un système hybride d’imagerie panoramique comprenant plusieurs appareils photographiques conventionnels et un appareil photographique à objectif hypergone. Les appareils photographiques conventionnels sont orientés selon une direction perpendiculaire au zénith astronomique. L’appareil photographique à objectif hypergone est quant à lui orienté selon l’axe zénithal astronomique.CN 207442995 U, SHENZHEN REAL SCENE TECH CO LTD [CN] 01.06.2018 describes a hybrid panoramic imaging system comprising several conventional cameras and a hypergon lens camera. Conventional cameras are oriented in a direction perpendicular to the astronomical zenith. The hypergonal lens camera is oriented along the astronomical zenith axis.
JP 2007028272 A, DOMUS INTERNAT LTD [JP] 01.02.2007 décrit un système d’imagerie panoramique comprenant un appareil photographique muni d’un capteur photographique CCD et un objectif hypergone. L’appareil est monté sur une platine mobile rotative et est orienté selon une direction perpendiculaire à la direction zénithale astronomique. Face à l’objectif hypergone est disposé un diaphragme occultant muni d’une fente verticale de sorte que l’appareil photographique acquiert des images selon un arc vertical de 180° depuis le zénith jusqu’à l’horizon. Une photographie panoramique complète est reconstruite par l’assemblage de l’ensemble des images verticales acquises lors de la rotation de la platine mobile rotative.JP 2007028272 A, DOMUS INTERNAT LTD [JP] 01.02.2007 describes a panoramic imaging system comprising a camera equipped with a CCD photographic sensor and a hypergon lens. The device is mounted on a rotating mobile stage and is oriented in a direction perpendicular to the astronomical zenith direction. Facing the hypergon lens is placed an occulting diaphragm equipped with a vertical slit so that the camera acquires images along a vertical arc of 180° from the zenith to the horizon. A complete panoramic photograph is reconstructed by assembling all the vertical images acquired during the rotation of the rotating mobile stage.
En raison de la nature transparent et réfléchissant des vitrages, tels que ceux utilisés en façade des bâtiments, la simulation de représentations réalistes de bâtiments vitrés dans un environnement réel peut être particulièrement difficiles. La manière dont le ciel et d’autres éléments d’un paysage sont réfléchis sur les surfaces vitrées d’un bâtiment dépendent des conditions lumineuses extérieures. L’apparence externe du bâtiment peut considérablement varier selon le moment de la journée et des conditions météorologiques, par exemple selon que la journée est plutôt nuageuse, pluvieuse ou ensoleillée.Due to the transparent and reflective nature of glazing, such as that used on building facades, simulating realistic representations of glazed buildings in a real-world environment can be particularly difficult. The way the sky and other elements of a landscape are reflected on the glass surfaces of a building depends on the exterior light conditions. The external appearance of the building can vary considerably depending on the time of day and weather conditions, for example whether the day is mostly cloudy, rainy or sunny.
US 2004012542 A1, BOWSHER et al. [US] 22.01.2004 décrit un système de rendu d’images d’un bâtiment, dans lequel diverses échelles de couleur sont disponibles pour rendre les couleurs à partir d’une image dudit bâtiment fournie comme donnée d’entrée.US 2004012542 A1, BOWSHER et al. [US] 22.01.2004 describes a system for rendering images of a building, in which various color scales are available to render colors from an image of said building provided as input data.
US 10217242 B1, CERTAIN TEED CORP [US] 26.02.2019 décrit un système et une méthode de rendu d’images d’un bâtiment, dans lesquels les couleurs et la luminosité de chaque matériau du bâtiment sont ajustés à l’aide d’une série d’étapes manuelles d’ajustement jusqu’ils soient conformes à ceux d’une photographie couleur calibrée. US 10217242 B1, CERTAIN TEED CORP [US] 26.02.2019 describes a system and method for rendering images of a building, in which the colors and brightness of each material of the building are adjusted using a series of manual adjustment steps until they conform to those of a calibrated color photograph.
Jan Meseth et al., ‘Verification of rendering quality from measured BTFs’, ACM SIGGRAPH Symposium on Applied Perception in Graphics and Visualization, 2006, p. 127-134, décrit une méthode d’examen du degré de réalisme d’images simulées de l’intérieur d’une automobile à l’aide de fonctions de texture bidirectionnelle (« bidirectional texture functions », BTF) par comparaison de la distribution lumineuse globale entre lesdites images simulées et des photographies du même intérieur. Jan Meseth et al., ‘Verification of rendering quality from measured BTFs’, ACM SIGGRAPH Symposium on Applied Perception in Graphics and Visualization, 2006, p. 127-134, describes a method for examining the degree of realism of simulated images of the interior of an automobile using bidirectional texture functions (BTF) by comparing light distribution global between said simulated images and photographs of the same interior.
WO 2022135942 A1, SAINT GOBAIN [FR], 30.06.2022 décrit une méthode d’évaluation de la qualité d’une simulation par rendu physico-réaliste d’un bâtiment vitré ou d’une automobile. Une image hyperspectrale hémisphérique d’un ciel réel sous conditions lumineuses extérieures données et une image d’un objet vitré sont acquises de manière synchrone et soumises à un traitement numérique dans un moteur de rendu physico-réaliste afin d’évaluer les différences de couleurs des éléments vitrés entre les deux images.WO 2022135942 A1, SAINT GOBAIN [FR], 06.30.2022 describes a method for evaluating the quality of a simulation by physico-realistic rendering of a glass building or an automobile. A hemispherical hyperspectral image of a real sky under given external light conditions and an image of a glass object are acquired synchronously and subjected to digital processing in a physico-realistic rendering engine in order to evaluate the color differences of the glazed elements between the two images.
Outre la simulation de l’enveloppe externe d’un bâtiment vitrée ou d’une automobile, il existe également un besoin de simulation de leur environnement intérieur. Tout comme les façades vitrées, la simulation de représentations réalistes de ces environnements intérieurs demeure un défi mais pour des raisons différentes.In addition to simulating the external envelope of a glass building or an automobile, there is also a need to simulate their interior environment. Much like glass facades, simulating realistic representations of these interior environments remains a challenge but for different reasons.
Si l’apparence externe d’une pièce vitrée peut varier selon la manière dont le ciel et les autres éléments du paysage sont réfléchis sur les vitrages en fonction de la luminosité extérieure et/ou des conditions météorologiques, l’apparence de l’environnement intérieur peut varier selon la manière dont la lumière est transmise au travers des vitrages et, éventuellement, selon les réflexions et/ou transmissions multiples entre les vitrages lorsque la lumière voyage au travers de la pièce.While the external appearance of a glazed room may vary depending on the way the sky and other landscape elements are reflected on the glazing depending on the exterior brightness and/or weather conditions, the appearance of the interior environment may vary depending on how light is transmitted through the glazing and, possibly, multiple reflections and/or transmissions between the glazing as the light travels through the room.
La situation se complique davantage sous l’effet des murs et/ou du mobilier, tel que bureaux, chaises, tableaux, cadres décoratifs, qui peuvent absorber ou réfléchir la lumière selon leurs propriétés de surface, par exemple leur opacité, leur texture ou leur lustre.The situation is further complicated by the effect of walls and/or furniture, such as desks, chairs, paintings, decorative frames, which can absorb or reflect light depending on their surface properties, for example their opacity, their texture or their chandelier.
Solution au problème techniqueSolution to technical problem
Selon un premier aspect de l’invention, il est fourni une méthode telle que décrite dans la revendication 1, les revendications dépendantes étant des modes avantageux de réalisation. La méthode permet l’acquisition synchrone d’une image hyperspectrale d’un paysage environnant un bâtiment vitré ou d’une automobile, d’une part, et d’images numériques et de spectres radiométriques de l’intérieur dudit bâtiment vitré ou de ladite automobile, d’autre part.According to a first aspect of the invention, there is provided a method as described in claim 1, the dependent claims being advantageous embodiments. The method allows the synchronous acquisition of a hyperspectral image of a landscape surrounding a glass building or an automobile, on the one hand, and digital images and radiometric spectra of the interior of said glass building or said automobile, on the other hand.
Selon un deuxième aspect de l’invention, il est fourni un système pour la mise en œuvre d’une méthode selon le premier aspect de l’invention.According to a second aspect of the invention, a system is provided for implementing a method according to the first aspect of the invention.
Selon un troisième aspect de l’invention, les images numériques et les spectres radiométriques acquis selon le premier aspect de l’invention sont utilisés pour évaluer la qualité d’une simulation physico-réaliste de l’environnement intérieur d’un bâtiment vitré ou d’une automobile lorsque l’image hyperspectrale de l’apparence externe dudit bâtiment ou de ladite automobile est utilisée comme carte d’environnement dans ladite simulation.According to a third aspect of the invention, the digital images and the radiometric spectra acquired according to the first aspect of the invention are used to evaluate the quality of a physico-realistic simulation of the interior environment of a glazed building or an automobile when the hyperspectral image of the external appearance of said building or said automobile is used as an environment map in said simulation.
Avantages of the inventionAdvantages of the invention
Un avantage majeur de la présente invention est de fournir des éléments de référence pour les caractéristiques spectrales d’images simulées, notamment par rendu physico-réaliste, de l’environnement intérieur d’une pièce vitrée lorsque l’image hyperspectrale du paysage extérieur environnant est utilisé comme carte d’environnement dans ladite simulation.A major advantage of the present invention is to provide reference elements for the spectral characteristics of simulated images, in particular by physico-realistic rendering, of the interior environment of a glazed room when the hyperspectral image of the surrounding exterior landscape is used as an environment map in said simulation.
Plus précisément, grâce à la comparaison des caractéristiques spectrales des images simulées avec celles des images numériques et du spectre radiométrique, il est possible d’évaluer très précisément la qualité, c’est-à-dire le degré de réalisme, de ladite simulation. Pour exemple, l’invention permet de vérifier si la luminosité intérieure, notamment ses variations journalières, est correctement simulée à partir de l’image hyperspectrale du paysage extérieur environnant utilisée comme carte d’environnement dans ladite simulation. D’autres caractéristiques telles que les couleurs, les jeux d’ombre, la transmission et/ou la réflexion sur ou au travers des vitrages, dans l’image peuvent également être précisément évaluées.More precisely, thanks to the comparison of the spectral characteristics of the simulated images with those of the digital images and the radiometric spectrum, it is possible to very precisely evaluate the quality, that is to say the degree of realism, of said simulation. For example, the invention makes it possible to check whether the interior brightness, in particular its daily variations, is correctly simulated from the hyperspectral image of the surrounding exterior landscape used as an environment map in said simulation. Other characteristics such as colors, shadow play, transmission and/or reflection on or through glazing in the image can also be precisely evaluated.
En d’autres termes, l’invention permet de vérifier le rendu réaliste de l’environnement intérieur d’une pièce vitrée sous un ciel réaliste. Ainsi, les paramètres de simulation peuvent être ajustés et/ou corrigés, afin de rendre cet environnement intérieur simulé davantage réaliste et/ou sensiblement plus proche de ce qu’un observateur humain peut s’attendre à voir si cet environnement intérieur était réel.In other words, the invention makes it possible to verify the realistic rendering of the interior environment of a glass room under a realistic sky. Thus, the simulation parameters can be adjusted and/or corrected, in order to make this simulated indoor environment more realistic and/or significantly closer to what a human observer could expect to see if this indoor environment were real.
est une représentation schématique d’un bâtiment vitré dans un paysage. is a schematic representation of a glass building in a landscape.
est une représentation schématique de l’environnement intérieur du bâtiment vitré de la . is a schematic representation of the interior environment of the glass building of the .
est un diagramme de flux d’une méthode selon un premier mode de réalisation du premier aspect de l’invention. is a flow diagram of a method according to a first embodiment of the first aspect of the invention.
est un diagramme de flux d’une méthode selon un deuxième mode de réalisation du premier aspect de l’invention. is a flow diagram of a method according to a second embodiment of the first aspect of the invention.
est un diagramme de flux d’une méthode selon un troisième mode de réalisation du premier aspect de l’invention. is a flow diagram of a method according to a third embodiment of the first aspect of the invention.
est une représentation schématique détaillée d’un exemple de caméra hyperspectrale de la . is a detailed schematic representation of an example of a hyperspectral camera of the .
Description détaillée de modes de réalisationDetailed description of embodiments
Par « imagerie hyperspectrale », il est entendu l’imagerie hyperspectrale telle que définie dans le domaine technique de l’imagerie. Elle comprend notamment les techniques, les dispositifs et/ou les systèmes permettant de construire une image dont chacun des éléments individuels, dits pixels, est associé à un spectre de réflectance. Exprimée simplement, l’imagerie hyperspectrale permet une exploration du spectre électromagnétique au-delà des canaux RVB des systèmes d’imagerie conventionnelle. Ainsi, une image hyperspectrale est formée à partir d’un assemblage de plusieurs dizaines, voire centaines, de bandes spectrales contiguës acquises pour chacun des pixels. Elle a généralement une structure matricielle et peut être représentée sous la forme d’un cube de données dont les deux premières dimensions représentent les dimensions spatiales de l’image et la troisième sa dimension spectrale.By “hyperspectral imaging” is meant hyperspectral imaging as defined in the technical field of imaging. It includes in particular the techniques, devices and/or systems making it possible to construct an image in which each of the individual elements, called pixels, is associated with a reflectance spectrum. Expressed simply, hyperspectral imaging allows exploration of the electromagnetic spectrum beyond the RGB channels of conventional imaging systems. Thus, a hyperspectral image is formed from an assembly of several dozen, or even hundreds, of contiguous spectral bands acquired for each pixel. It generally has a matrix structure and can be represented in the form of a data cube whose first two dimensions represent the spatial dimensions of the image and the third its spectral dimension.
Par « spectre radiométrique », il est entendu un spectre obtenu par toute technique ou méthode radiométrique adaptée pour la mesure d’un rayonnement électromagnétique, y compris la lumière visible. En particulier, il peut être un spectre d’au moins une des grandeurs radiométriques parmi l’énergie électromagnétique, le flux énergétique, l’intensité énergétique, la luminance énergétique, l’éclairement énergétique, l’exitance énergétique et l’exposition énergétique.By “radiometric spectrum” is meant a spectrum obtained by any radiometric technique or method adapted for the measurement of electromagnetic radiation, including visible light. In particular, it may be a spectrum of at least one of the radiometric quantities among electromagnetic energy, energy flow, energy intensity, energy luminance, energy irradiance, energy emitting and energy exposure.
La illustre un exemple de bâtiment vitré 1001 dans un paysage réel 1002. Le bâtiment vitré 1001 peut comprendre un ou plusieurs vitrages 1003 répartis sur un ou plusieurs de ses murs. La illustre l’intérieur 2000 du même bâtiment vitré 1001 selon un certain angle de vue.There illustrates an example of a glazed building 1001 in a real landscape 1002. The glazed building 1001 may include one or more glazing units 1003 distributed over one or more of its walls. There illustrates the interior 2000 of the same glass building 1001 from a certain angle of view.
Comme expliqué précédemment, l’une des difficultés de la simulation numérique, notamment physico-réaliste, d’un bâtiment ou d’une automobile, concerne la manière dont la lumière est transmise au travers des vitrages et, éventuellement, selon les réflexions et/ou transmissions multiples entre les vitrages lorsque la lumière voyage au travers de la pièce. Les des murs intérieurs et/ou le mobilier, tel que bureaux, chaises, tableaux, cadres décoratifs, peuvent absorber ou réfléchir la lumière selon leurs propriétés de surface, par exemple leur opacité, leur texture ou leur lustre.As explained previously, one of the difficulties of digital simulation, particularly physico-realistic, of a building or an automobile, concerns the way in which light is transmitted through the glazing and, possibly, according to reflections and/or or multiple transmissions between glazing as light travels through the room. Interior walls and/or furniture, such as desks, chairs, pictures, decorative frames, can absorb or reflect light depending on their surface properties, for example their opacity, texture or luster.
Selon un premier aspect de l’invention, en référence aux à , il est fourni une méthode 3000 d’acquisition synchrone d’une image hyperspectrale d’un paysage 1002 environnant un bâtiment vitré 1001 ou d’une automobile, d’une part, et d’images numériques et de spectres radiométriques de l’intérieur 2000 dudit bâtiment vitré 1001 ou de ladite automobile, d’autre part, ladite méthode comprend les étapes suivantes :
- l’acquisition 3001 d’une image hyperspectrale dudit paysage 1002 selon un angle de 360° dans le plan de référence de ladite acquisition ;
- l’acquisition 3002, dans le délai, t, d’acquisition de l’image hyperspectrale, d’au moins une image numérique d’au moins une partie de l’environnement intérieur 2000 dudit bâtiment 1001 ou de ladite automobile selon un angle de vue donné ;
- l’acquisition 3003, dans le délai, t, d’acquisition de l’image hyperspectrale, d’au moins un spectre radiométrique de ladite au moins une partie de l’environnement intérieur 2000 dudit bâtiment 1001 ou de ladite automobile selon ledit angle de vue donné.According to a first aspect of the invention, with reference to the has , a method 3000 is provided for synchronously acquiring a hyperspectral image of a landscape 1002 surrounding a glass building 1001 or an automobile, on the one hand, and digital images and radiometric spectra of the interior 2000 of said glazed building 1001 or of said automobile, on the other hand, said method comprises the following steps:
- the acquisition 3001 of a hyperspectral image of said landscape 1002 at an angle of 360° in the reference plane of said acquisition;
- the acquisition 3002, within the time, t, of acquisition of the hyperspectral image, of at least one digital image of at least part of the interior environment 2000 of said building 1001 or of said automobile at an angle of view given;
- the acquisition 3003, within the time, t, of acquisition of the hyperspectral image, of at least one radiometric spectrum of said at least part of the interior environment 2000 of said building 1001 or of said automobile at said angle of view given.
Sur les à , les symboles « D » et « F » représentent respectivement le début et la fin d’une méthode 3000, 4000, 5000 selon le premier aspect de l’invention.On the has , the symbols “D” and “F” respectively represent the start and the end of a method 3000, 4000, 5000 according to the first aspect of the invention.
A titre d’exemple, en référence aux et , l’étape 3001 d’acquisition peut être réalisée à l’aide d’un dispositif d’acquisition 1004 d’image hyperspectrale. Ce dispositif 1004 peut notamment comprendre :
- une caméra hyperspectrale CCD 6001 munie d’un objectif hypergone 6002 dont l’axe optique (AO) est orienté selon une direction sensiblement perpendiculaire à la direction vertical zénithale astronomique (ZA) ;
- une platine mobile rotative 6002 configurée pour assurer la rotation de ladite caméra hyperspectrale 6001 selon un angle de 360° dans le plan de référence de ladite caméra hyperspectrale 6001 avec, pour axe de rotation, la direction verticale zénithale astronomique (ZA).For example, with reference to And , the acquisition step 3001 can be carried out using a hyperspectral image acquisition device 1004. This device 1004 may in particular include:
- a CCD hyperspectral camera 6001 equipped with a hypergon lens 6002 whose optical axis (AO) is oriented in a direction substantially perpendicular to the vertical astronomical zenith direction (ZA);
- a rotating mobile stage 6002 configured to ensure the rotation of said hyperspectral camera 6001 at an angle of 360° in the reference plane of said hyperspectral camera 6001 with, for axis of rotation, the vertical astronomical zenith direction (ZA).
La caméra hyperspectrale peut présenter un domaine spectral compris entre 400nm et 1000nm, une résolution spectrale comprise entre 2nm et 4nm, un angle maximal de champ horizontal de 360°, un angle vertical de champ d’au moins 170°, un temps d’exposition compris entre 21µs et 10s, et, de préférence, une résolution standard d’au moins 900x1600 pixels.The hyperspectral camera can have a spectral range of between 400nm and 1000nm, a spectral resolution of between 2nm and 4nm, a maximum horizontal field angle of 360°, a vertical field angle of at least 170°, an exposure time between 21µs and 10s, and, preferably, a standard resolution of at least 900x1600 pixels.
Les étapes 3002, 3003 d’acquisition de l’image numérique et du spectre radiométrique peuvent être réalisés à l’aide d’un dispositif photographique numérique 2001 et d’un spectroradiomètre 2002 respectivement. A titre d’exemple, le dispositif photographique numérique peut être un appareil photographique numérique muni d’un capteur CMOS 24x36mm, d’une résolution de 5760x3840 pixels, une sensibilité ISO variant de 100 à 25600, une vitesse d’obturation comprise entre 1/8000 s et 30 s, et un objectif de 20mm.Steps 3002, 3003 of acquiring the digital image and the radiometric spectrum can be carried out using a digital photographic device 2001 and a spectroradiometer 2002 respectively. For example, the digital photographic device may be a digital camera equipped with a 24x36mm CMOS sensor, a resolution of 5760x3840 pixels, an ISO sensitivity varying from 100 to 25600, a shutter speed of between 1/ 8000 s and 30 s, and a 20mm lens.
Le spectroradiomètre peut avoir une gamme spectrale variant de 380 nm jà 780 nm, une résolution spectrale d’au moins 1nm, une gamme de luminance variant de 0,1 à 150000 cd/m² avec une incertitude d’environ ±2% à 100 cd/m².The spectroradiometer can have a spectral range varying from 380 nm to 780 nm, a spectral resolution of at least 1 nm, a luminance range varying from 0.1 to 150,000 cd/m² with an uncertainty of approximately ±2% at 100 cd /m².
Selon certains modes de réalisation, les délais respectifs d’acquisition de ladite image numérique et du spectre radiométrique sont plus courts que celui de l’image hyperspectrale, et une pluralité d’images numériques et de spectres radiométriques sont acquises dans le délai d’acquisition de ladite image hyperspectrale.According to certain embodiments, the respective acquisition times of said digital image and the radiometric spectrum are shorter than that of the hyperspectral image, and a plurality of digital images and radiometric spectra are acquired within the acquisition time. of said hyperspectral image.
Selon certains modes particuliers de réalisation, les images numériques et le spectre radiométrique sont acquis séquentiellement ou en parallèle. According to certain particular embodiments, the digital images and the radiometric spectrum are acquired sequentially or in parallel.
Aussi, selon un premier des modes particuliers de réalisation, en référence à la , l’étape 3002 d’acquisition de l’image numérique et l’étape 3003 d’acquisition du spectre radiométrique sont réalisées en parallèle, par exemple simultanément. Also, according to a first particular embodiment, with reference to the , step 3002 of acquiring the digital image and step 3003 of acquiring the radiometric spectrum are carried out in parallel, for example simultaneously.
Selon un premier exemple, le délai d’acquisition de l’image numérique pouvant être généralement plus court que celui de l’acquisition de l’image hyperspectrale, l’étape 3002 d’acquisition de l’image numérique peut être réalisée au début, pendant ou juste avant la fin de l’étape 3001 d’acquisition de l’image hyperspectrale.According to a first example, the time for acquiring the digital image can generally be shorter than that for acquiring the hyperspectral image, step 3002 of acquiring the digital image can be carried out at the beginning, during or just before the end of step 3001 of acquiring the hyperspectral image.
Selon un deuxième exemple, l’étape 3002 d’acquisition de l’image numérique peut être réalisée plusieurs fois durant l’étape 3003 d’acquisition du spectre radiométrique de manière à générer plusieurs images numériques pendant le temps d’acquisition du spectre radiométrique. Ladite étape 3002 peut, par exemple, être réalisée deux, trois fois ou encore autant de fois que nécessaire pour couvrir le délai d’acquisition du spectre radiométrique.According to a second example, step 3002 of acquiring the digital image can be carried out several times during step 3003 of acquiring the radiometric spectrum so as to generate several digital images during the acquisition time of the radiometric spectrum. Said step 3002 can, for example, be carried out two, three times or as many times as necessary to cover the acquisition time of the radiometric spectrum.
Selon un troisième exemple, l’étape 3003 d’acquisition du spectre radiométrique est réalisée plusieurs fois, par exemple deux ou trois fois, ou davantage pendant le délai, t, d’acquisition du l’image hyperspectrale, tandis que l’étape 3002 d’acquisition de l’image numérique est réalisé autant de fois que nécessaire pour couvrir ledit même délai t.According to a third example, step 3003 of acquiring the radiometric spectrum is carried out several times, for example two or three times, or more during the delay, t, of acquiring the hyperspectral image, while step 3002 acquisition of the digital image is carried out as many times as necessary to cover said same time period t.
Selon un deuxième des modes particuliers de réalisation, en référence à la , les l’étape 3002 d’acquisition de l’image numérique et l’étape 3003 d’acquisition du spectre radiométrique sont réalisées séquentiellement. Selon un exemple, tel que représenté sur ladite , l’étape 3002 d’acquisition de l’image numérique est réalisé avant l’étape 3003 d’acquisition du spectre radiométrique sont réalisées séquentiellement. Selon un autre exemple, l’ordre chronologique des deux étapes est inversé.According to a second particular embodiment, with reference to the , step 3002 of acquiring the digital image and step 3003 of acquiring the radiometric spectrum are carried out sequentially. According to an example, as shown on said , step 3002 of acquiring the digital image is carried out before step 3003 of acquiring the radiometric spectrum are carried out sequentially. According to another example, the chronological order of the two stages is reversed.
Selon un troisième, et préféré, des modes particuliers de réalisation, en référence à la , les images numériques et le spectre radiométrique sont acquis séquentiellement et alternativement. L’étape 3002 d’acquisition de l’image numérique et l’étape 3003 d’acquisition du spectre radiométrique peuvent être respectivement subdivisées en une pluralité d’étapes de 3002a-3002z et 3003a-3003z successives organisées de manière alternative dans l’ordre chronologique de leur exécution, par exemple, une étape 3002a, puis 3003a, puis 3002b, puis 3003b, etc… L’ordre chronologique de succession des étapes 3002a-3002z et 3003a-3003z peuvent être inversée de manière équivalente, c’est-à-dire que l’étape 3003 est exécutée avant l’étape 3002a et ainsi de suite.According to a third, and preferred, particular embodiments, with reference to the , the digital images and the radiometric spectrum are acquired sequentially and alternately. Step 3002 of acquiring the digital image and step 3003 of acquiring the radiometric spectrum can be respectively subdivided into a plurality of successive steps of 3002a-3002z and 3003a-3003z organized alternately in order chronological order of their execution, for example, a step 3002a, then 3003a, then 3002b, then 3003b, etc. The chronological order of succession of steps 3002a-3002z and 3003a-3003z can be reversed in an equivalent manner, i.e. say that step 3003 is executed before step 3002a and so on.
Selon certains modes de réalisation, les images numériques et le spectre radiométrique sont acquis selon différents angles de vue. L’acquisition selon plusieurs angles de vue permet d’établir une cartographie plus complète des variations d’exposition lumineuse de l’intérieur du bâtiment vitrée ou de l’automobile, notamment par une meilleure représentativité des effets lumineux des murs et du mobilier intérieur et/ou de l’orientation par rapport au soleil. Les images numériques et les spectres radiométriques peuvent constituer davantage d’éléments de comparaison pour l’évaluation de la qualité d’une simulation physico-réaliste de l’environnement intérieur d’un bâtiment vitré ou d’une automobile lorsque l’image hyperspectrale de l’apparence externe dudit bâtiment ou de ladite automobile est utilisée comme carte d’environnement dans ladite simulation.According to some embodiments, the digital images and the radiometric spectrum are acquired from different viewing angles. Acquisition from several viewing angles makes it possible to establish a more complete map of the variations in light exposure from the interior of the glass building or automobile, in particular through better representation of the light effects of the walls and interior furniture and /or orientation relative to the sun. Digital images and radiometric spectra can constitute more elements of comparison for evaluating the quality of a physico-realistic simulation of the interior environment of a glazed building or an automobile when the hyperspectral image of the external appearance of said building or automobile is used as an environment map in said simulation.
Durant le délai d’acquisition de l’image hyperspectrale, les conditions météorologiques peuvent évoluer et entraîner des variations de luminosité à l’extérieur et à l’intérieur du bâtiment vitré ou de l’automobile. Ces variations intempestives de luminosité peuvent affecter l’image spectrale au cours de son acquisition. En conséquence, afin d’assurer une représentativité des images numériques et des spectres radiométriques quant à ces variations de luminosité, il est avantageux d’acquérir des images numériques et des spectres radiométriques dans les mêmes conditions lumineuses dans leurs variations.During the acquisition time of the hyperspectral image, weather conditions can change and cause variations in brightness outside and inside the glass building or automobile. These untimely variations in brightness can affect the spectral image during its acquisition. Consequently, in order to ensure that digital images and radiometric spectra are representative of these variations in brightness, it is advantageous to acquire digital images and radiometric spectra under the same light conditions in their variations.
A cet égard, selon certains modes complémentaires de réalisation, la méthode peut comprendre en outre les étapes suivantes :
- le calcul, à l’aide de moyens de traitement de données, de la luminance à partir des spectres radiométriques ;
- la comparaison, à l’aide de moyens de traitement de données, des valeurs de luminance selon la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue ;
- la détection, à l’aide de moyens de traitement de données, des décalages de luminance en fonction de la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue après l’étape de comparaison.In this regard, according to certain complementary embodiments, the method may further comprise the following steps:
- calculating, using data processing means, the luminance from the radiometric spectra;
- the comparison, using data processing means, of the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle;
- the detection, using data processing means, of luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step.
Grâce à ces modes complémentaires de réalisation, il est possible de détecter les variations intempestives de luminosité. Le cas échéant, ces variations peuvent être corrigées et/ou plus fidèlement simulées lors de l’évaluation de la qualité d’une simulation physico-réaliste de l’environnement intérieur d’un bâtiment vitré ou d’une automobile, l’image hyperspectrale de l’apparence externe dudit bâtiment ou de ladite automobile étant utilisée comme carte d’environnement dans ladite simulation.Thanks to these complementary embodiments, it is possible to detect unwanted variations in brightness. If necessary, these variations can be corrected and/or more faithfully simulated during the evaluation of the quality of a physico-realistic simulation of the interior environment of a glass building or an automobile, the hyperspectral image of the external appearance of said building or said automobile being used as an environment map in said simulation.
Le dispositif de traitement de données peut être tout dispositif adapté pour exécuter des séquences d'opérations arithmétiques ou logiques automatiquement afin d’effectuer des tâches ou des actions. Ce dispositif peut comprendre une ou plusieurs unités centrales de traitement (CPU) et au moins un dispositif de commande qui sont adaptés pour effectuer ces opérations. The data processing device may be any device adapted to execute sequences of arithmetic or logical operations automatically in order to perform tasks or actions. This device may include one or more central processing units (CPUs) and at least one control device which are adapted to perform these operations.
Le dispositif peut aussi comprendre d'autres composants électroniques tels que des interfaces d'entrée/sortie, des dispositifs de stockage non volatils ou volatils, et des bus de communication pour le transfert de données entre des composants électroniques à l'intérieur et à l’extérieur dudit dispositif. L'un des dispositifs d'entrée/sortie peut être une interface utilisateur pour l'interaction homme-machine, par exemple une interface utilisateur graphique pour afficher des informations compréhensibles par l'homme. The device may also include other electronic components such as input/output interfaces, non-volatile or volatile storage devices, and communications buses for transferring data between electronic components therein and out. exterior of said device. One of the input/output devices may be a user interface for human-machine interaction, for example a graphical user interface for displaying human-understandable information.
Un premier exemple de dispositif de traitement de données peut être un ordinateur. Un deuxième exemple peut être un système embarqué, par exemple une carte informatique de faible puissance telle qu'un ordinateur mono-carte.A first example of a data processing device may be a computer. A second example may be an embedded system, for example a low-power computer card such as a single-board computer.
La méthode mise en œuvre par le dispositif de traitement de données, peut être un programme informatique comprenant des instructions qui, lorsque le programme est exécuté par ledit dispositif, amène ledit dispositif à mettre en œuvre laite méthode.The method implemented by the data processing device may be a computer program comprising instructions which, when the program is executed by said device, causes said device to implement said method.
Tout type de langage de programmation, compilé ou interprété, peut être utilisé pour mettre en œuvre les étapes de ladite méthode. Le programme informatique peut faire partie d'une solution logicielle, c'est-à-dire d'une collection d'instructions exécutables, de codes, de scripts ou autres et/ou de bases de données.Any type of programming language, compiled or interpreted, can be used to implement the steps of said method. The computer program may be part of a software solution, that is, a collection of executable instructions, codes, scripts or the like and/or databases.
Dans certains modes de réalisation, le programme informatique peut être stocké sur un support non-transitoire lisible par ordinateur. En conséquence, ce support non-transitoire lisible comprend des instructions qui, lorsqu'elles sont exécutées par un ordinateur, font que l'ordinateur exécute ladite méthode.In some embodiments, the computer program may be stored on a non-transitory computer-readable medium. Accordingly, this readable non-transitory medium includes instructions which, when executed by a computer, cause the computer to execute said method.
Selon certains modes de réalisation, pour un angle de vue donnée et des conditions météorologiques constantes, les images numériques peuvent être acquises pour différentes valeurs d’au moins deux, voire trois, paramètres choisis parmi la vitesse d’obturation, la taille du diaphragme et la sensibilité ISO. L’acquisition pour différentes valeurs de ces paramètres permet l’obtention d’image numériques pour différentes expositions, et donc une capture d’une plus grande quantité de détails, de nuances et de contrastes de l’intérieur du bâtiment vitré ou de l’automobile.According to certain embodiments, for a given angle of view and constant weather conditions, the digital images can be acquired for different values of at least two, or even three, parameters chosen from the shutter speed, the size of the diaphragm and ISO sensitivity. The acquisition for different values of these parameters allows the obtaining of digital images for different exposures, and therefore a capture of a greater quantity of details, nuances and contrasts of the interior of the glazed building or the automobile.
Afin d’assurer une meilleure représentativité des images numériques quant aux conditions extérieures de luminosité dans lesquelles l’image hyperspectrale est acquise, selon certains modes avantageux de réalisation, les valeurs de vitesse d’obturation, exprimées en secondes, et de tailles de diaphragme peuvent être sélectionnées de sorte que le cumul des temps d’exposition des images numériques est inférieur ou égal au délai d’acquisition de l’image hyperspectrale.In order to ensure better representativeness of the digital images with regard to the external luminosity conditions in which the hyperspectral image is acquired, according to certain advantageous embodiments, the shutter speed values, expressed in seconds, and aperture sizes can be selected so that the cumulative exposure times of the digital images are less than or equal to the acquisition time of the hyperspectral image.
Plutôt que de se limiter à plusieurs images numériques acquises, il peut être préférable de valoriser les nuances et détails capturés par chacune des images prises à différentes expositions pour construire une unique image numérique plus représentative de la vision humaine. Aussi, selon certains modes avantageux de réalisation, méthode peut comprendre en outre une étape de génération, à l’aide de moyens de traitement de données, d’au moins une image à grande gamme dynamique à partir des images numériques (« High Dynamic Range » ou HDR en anglais).Rather than limiting yourself to several digital images acquired, it may be preferable to enhance the nuances and details captured by each of the images taken at different exposures to construct a single digital image more representative of human vision. Also, according to certain advantageous embodiments, the method may further comprise a step of generating, using data processing means, at least one high dynamic range image from digital images (“High Dynamic Range » or HDR in English).
Il peut arriver, pour différentes raisons, que les images numériques présentent des discontinuités dans leurs profils de couleur, bien que celles-là ne puissent être visibles à l’œil nu. Ces discontinuités peuvent avoir plusieurs origines, notamment des variations brusques de luminosité et/ou des variations intempestives dans la réponse des capteurs CMOS ou CCD de l’appareil photographique utilisé pour l’acquisition des images.It can happen, for various reasons, that digital images have discontinuities in their color profiles, although these cannot be visible to the naked eye. These discontinuities can have several origins, in particular sudden variations in brightness and/or untimely variations in the response of the CMOS or CCD sensors of the camera used for image acquisition.
Dans le cas des images numériques à grande gamme dynamique, les discontinuités peuvent résultats des algorithmes de composition ou de génération d’une image numérique à grande gamme dynamique à partir d’une pluralité d’images numériques acquises à différents temps d’exposition dès lors que les temps d’exposition entre deux images numériques consécutives sont très différents.In the case of digital images with a high dynamic range, the discontinuities can result from algorithms for compositing or generating a digital image with a high dynamic range from a plurality of digital images acquired at different exposure times. that the exposure times between two consecutive digital images are very different.
Dans ce contexte, selon certains modes particuliers et avantageux, la méthode comprend en outre une étape de correction, l’aide de moyens de traitement de données, des discontinuités dans les profils de couleur des images numériques. La correction peut être réalisé à l’aide de toute méthode numérique adaptée. In this context, according to certain particular and advantageous modes, the method further comprises a step of correction, using data processing means, of discontinuities in the color profiles of digital images. The correction can be carried out using any suitable digital method.
Selon un deuxième aspect de l’invention, en référence aux , et , il est fourni système d’acquisition synchrone d’une image hyperspectrale d’un paysage 1002 environnant un bâtiment vitré 1001 ou d’une automobile, d’une part, et d’images numériques et de spectres radiométriques de l’intérieur 2000 dudit bâtiment vitré 1001 ou de ladite automobile, d’autre part, ledit système comprenant :
- une caméra hyperspectrale CCD 6001 munie d’un objectif hypergone 6002 dont l’axe optique (AO) est orienté selon une direction sensiblement perpendiculaire à la direction vertical zénithale astronomique (ZA) ;
- une platine mobile rotative 6003 configurée pour assurer la rotation de ladite caméra hyperspectrale selon un angle de 360° dans le plan de référence de ladite caméra hyperspectrale avec, pour axe de rotation, la direction verticale zénithale astronomique (ZA) ;
- une dispositif photographique numérique 2001 ;
- un spectrophotomètre 2002 ;
dans lequel
- ladite caméra hyperspectrale 2002 est configurée pour l’acquisition d’une image hyperspectrale dudit paysage ;
- le dispositif photographique numérique 2001 est configuré pour l’acquisition, dans le délai d’acquisition de l’image hyperspectrale, d’au moins une image numérique d’au moins une partie de l’environnement intérieur 2000 dudit bâtiment 1001 ou de ladite automobile selon un angle de vue donné ;
- le spectroradiomètre 2001 est configurée pour l’acquisition, dans le délai d’acquisition de l’image hyperspectrale, d’au moins un spectre radiométrique de ladite au moins une partie de l’environnement intérieur 2000 dudit bâtiment 2001 ou de ladite automobile selon ledit angle de vue donné.According to a second aspect of the invention, with reference to the , And , it is provided a system for synchronous acquisition of a hyperspectral image of a landscape 1002 surrounding a glass building 1001 or an automobile, on the one hand, and digital images and radiometric spectra of the interior 2000 of said glazed building 1001 or said automobile, on the other hand, said system comprising:
- a CCD hyperspectral camera 6001 equipped with a hypergon lens 6002 whose optical axis (AO) is oriented in a direction substantially perpendicular to the vertical astronomical zenith direction (ZA);
- a rotating mobile stage 6003 configured to ensure the rotation of said hyperspectral camera at an angle of 360° in the reference plane of said hyperspectral camera with, as the axis of rotation, the vertical astronomical zenith direction (ZA);
- a digital photographic device 2001;
- a 2002 spectrophotometer;
in which
- said hyperspectral camera 2002 is configured for the acquisition of a hyperspectral image of said landscape;
- the digital photographic device 2001 is configured for the acquisition, within the hyperspectral image acquisition time, of at least one digital image of at least part of the interior environment 2000 of said building 1001 or said automobile from a given viewing angle;
- the spectroradiometer 2001 is configured for the acquisition, within the acquisition time of the hyperspectral image, of at least one radiometric spectrum of said at least part of the interior environment 2000 of said building 2001 or of said automobile according to said given viewing angle.
A moins qu’ils ne soient manifestement techniquement incompatibles, tous les modes de réalisation décrits précédemment dans le cadre de la description détaillée de la méthode selon le premier aspect de l’invention sont valables pour le système selon le deuxième aspect de l’invention.Unless they are obviously technically incompatible, all the embodiments described previously in the context of the detailed description of the method according to the first aspect of the invention are valid for the system according to the second aspect of the invention.
En particulier, les exemples de caméras hyperspectrales, de dispositifs photographiques numériques et de spectroradiomètres décrits précédemment s’appliquent audit système.In particular, the examples of hyperspectral cameras, digital photographic devices and spectroradiometers described above apply to said system.
Selon certains modes de réalisation, le système peut en outre être configuré pour l’acquisition d’une pluralité d’images numérique et spectres radiométrique dans le délai d’acquisition d’une image hyperspectrale.According to some embodiments, the system can further be configured to acquire a plurality of digital images and radiometric spectra within the time frame for acquiring a hyperspectral image.
Selon certains modes préférés de réalisation, le système est configuré pour acquérir séquentiellement et alternativement les images numériques et le spectre radiométrique.According to certain preferred embodiments, the system is configured to sequentially and alternately acquire the digital images and the radiometric spectrum.
De préférence, le système peut comprendre en outre des moyens de traitement de données configuré pour :
- calculer une valeur de luminance à partir de chacun des spectres radiométriques ;
- comparer les valeurs de luminance selon la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue ;
- détecter, des décalages de luminance en fonction de la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue après l’étape de comparaison ;
- générer au moins une image à grande gamme dynamique à partir des images numériques.Preferably, the system may further comprise data processing means configured to:
- calculate a luminance value from each of the radiometric spectra;
- compare the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle;
- detect luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step;
- generate at least one high dynamic range image from digital images.
Selon un troisième aspect de l’invention, une méthode selon le premier aspect de l’invention peut être utilisée pour évaluer la qualité d’une simulation par rendu physico-réaliste de l’intérieur d’un bâtiment vitré ou d’une automobile, dans laquelle :
- l’image hyperspectrale du paysage environnant ledit bâtiment ou ladite automobile est utilisé comme carte d’environnement dans un moteur de rendu physico-réaliste ;
- des images de l’intérieur dudit bâtiment vitré ou de ladite automobile sont simulées à l’aide dudit moteur de rendu physico-réaliste à partir de ladite carte d’environnement ;
- les caractéristiques spectrales des images simulées sont comparées à celles des images numériques et des spectres radiométriques.According to a third aspect of the invention, a method according to the first aspect of the invention can be used to evaluate the quality of a simulation by physico-realistic rendering of the interior of a glazed building or an automobile, in which :
- the hyperspectral image of the landscape surrounding said building or said automobile is used as an environment map in a physico-realistic rendering engine;
- images of the interior of said glass building or said automobile are simulated using said physico-realistic rendering engine from said environment map;
- the spectral characteristics of the simulated images are compared to those of digital images and radiometric spectra.
Pour expliquer précédemment, la comparaison des caractéristiques spectrales, telles que la luminosité, les couleurs, les jeux d’ombre, la transmission et/ou la réflexion sur ou au travers des vitrages, des image simulées avec celles des images numériques et du spectre radiométrique, il est possible d’évaluer très précisément la qualité, c’est-à-dire le degré de réalisme, de ladite simulation. Il est alors possible de vérifier le rendu réaliste de l’environnement intérieur d’une pièce vitrée sous un paysage ou ciel réaliste. Les paramètres de simulation peuvent alors être ajustés et/ou corrigés, afin de rendre cet environnement intérieur simulé davantage réaliste.To explain previously, the comparison of spectral characteristics, such as brightness, colors, shadow play, transmission and/or reflection on or through glazing, of simulated images with those of digital images and the radiometric spectrum , it is possible to very precisely evaluate the quality, that is to say the degree of realism, of said simulation. It is then possible to check the realistic rendering of the interior environment of a glass room under a realistic landscape or sky. The simulation parameters can then be adjusted and/or corrected, in order to make this simulated indoor environment more realistic.
Liste des référencesList of references Littérature brevetPatent literature
CN 207442995 U, SHENZHEN REAL SCENE TECH CO LTD [CN] 01.06.2018.CN 207442995 U, SHENZHEN REAL SCENE TECH CO LTD [CN] 01.06.2018.
JP 2007028272 A, DOMUS INTERNAT LTD [JP] 01.02.2007JP 2007028272 A, DOMUS INTERNAT LTD [JP] 01.02.2007
US 2004012542 A1, BOWSHER et al. [US] 22.01.2004.US 2004012542 A1, BOWSHER et al. [US] 01/22/2004.
US 10217242 B1, CERTAIN TEED CORP [US] 26.02.2019.US 10217242 B1, CERTAIN TEED CORP [US] 02/26/2019.
WO 2022135942 A1, SAINT GOBAIN [FR], 30.06.2022WO 2022135942 A1, SAINT GOBAIN [FR], 06.30.2022
Littérature non-brevetNon-patent literature
Jan Meseth et al., ‘Verification of rendering quality from measured BTFs’, ACM SIGGRAPH Symposium on Applied Perception in Graphics and Visualization, 2006, p. 127-134.
Jan Meseth et al., 'Verification of rendering quality from measured BTFs', ACM SIGGRAPH Symposium on Applied Perception in Graphics and Visualization, 2006, p. 127-134.

Claims (11)

  1. Méthode (3000) d’acquisition synchrone d’une image hyperspectrale d’un paysage (1002) environnant un bâtiment vitré (1001) ou d’une automobile, d’une part, et d’images numériques et de spectres radiométriques de l’intérieur (2000) dudit bâtiment vitré (1001) ou de ladite automobile, d’autre part, ladite méthode comprend les étapes suivantes :
    - l’acquisition (3001) d’une image hyperspectrale dudit paysage (1002) selon un angle de 360° dans le plan de référence de ladite acquisition ;
    - l’acquisition (3002), dans le délai, t, d’acquisition de l’image hyperspectrale, d’au moins une image numérique d’au moins une partie de l’environnement intérieur (2000) dudit bâtiment (1001) ou de ladite automobile selon un angle de vue donné ;
    - l’acquisition (3003), dans le délai, t, d’acquisition de l’image hyperspectrale, d’au moins un spectre radiométrique de ladite au moins une partie de l’environnement intérieur (2000) dudit bâtiment (1001) ou de ladite automobile selon ledit angle de vue donné, les délais respectifs d’acquisition de ladite image numérique et du spectre radiométrique étant plus courts que celui de l’image hyperspectrale, et une pluralité d’images numériques et de spectres radiométriques étant acquises dans le délai d’acquisition de ladite image hyperspectrale,
    - le calcul, à l’aide de moyens de traitement de données, de la luminance à partir des spectres radiométriques ;
    - la comparaison, à l’aide de moyens de traitement de données, des valeurs de luminance selon la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue ;
    - la détection, à l’aide de moyens de traitement de données, des décalages de luminance en fonction de la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue après l’étape de comparaison.    Method (3000) for synchronous acquisition of a hyperspectral image of a landscape (1002) surrounding a glass building (1001) or an automobile, on the one hand, and digital images and radiometric spectra of the interior (2000) of said glazed building (1001) or of said automobile, on the other hand, said method comprises the following steps:
    - the acquisition (3001) of a hyperspectral image of said landscape (1002) at an angle of 360° in the reference plane of said acquisition;
    - the acquisition (3002), within the time, t, of acquisition of the hyperspectral image, of at least one digital image of at least part of the interior environment (2000) of said building (1001) or of said automobile from a given viewing angle;
    - the acquisition (3003), within the time, t, of acquisition of the hyperspectral image, of at least one radiometric spectrum of said at least part of the interior environment (2000) of said building (1001) or of said automobile according to said given viewing angle, the respective acquisition times of said digital image and of the radiometric spectrum being shorter than that of the hyperspectral image, and a plurality of digital images and radiometric spectra being acquired in the acquisition time of said hyperspectral image,
    - calculating, using data processing means, the luminance from the radiometric spectra;
    - the comparison, using data processing means, of the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle;
    - the detection, using data processing means, of luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step.
  2. Méthode selon la revendication 1, telle que les images numériques et le spectre radiométrique sont acquis séquentiellement ou en parallèle.Method according to claim 1, such that the digital images and the radiometric spectrum are acquired sequentially or in parallel.
  3. Méthode selon la revendication 2, telle que les images numériques et le spectre radiométrique sont acquis séquentiellement et alternativement.Method according to claim 2, such that the digital images and the radiometric spectrum are acquired sequentially and alternately.
  4. Méthode selon l’une quelconque des revendications 1 à 3, telle que les images numériques et le spectre radiométrique sont acquis selon différents angles de vue.Method according to any one of claims 1 to 3, such that the digital images and the radiometric spectrum are acquired from different viewing angles.
  5. Méthode selon l’une quelconque des revendications 1 à 4, telle que, pour un angle de vue donnée et des conditions météorologiques constantes, les images numériques sont acquises pour différentes valeurs d’au moins deux, voire trois, paramètres choisis parmi la vitesse d’obturation, la taille du diaphragme et la sensibilité ISO.Method according to any one of claims 1 to 4, such that, for a given viewing angle and constant weather conditions, the digital images are acquired for different values of at least two, or even three, parameters chosen from the speed d shutter, aperture size and ISO sensitivity.
  6. Méthode selon la revendication 6, telle que les valeurs de vitesse d’obturation, exprimées en secondes, et de tailles de diaphragme sont sélectionnées de sorte que le cumul des temps d’exposition des images numériques est inférieur ou égal au délai d’acquisition de l’image hyperspectrale.Method according to claim 6, such that the values of shutter speed, expressed in seconds, and aperture sizes are selected so that the accumulation of exposure times of the digital images is less than or equal to the acquisition delay of the hyperspectral image.
  7. Méthode selon l’une quelconque des revendications 6 à 8, telle que la méthode comprend en outre une étape de génération, à l’aide de moyens de traitement de données, d’au moins une image à grande gamme dynamique à partir des images numériques.Method according to any one of claims 6 to 8, such that the method further comprises a step of generating, using data processing means, at least one high dynamic range image from the digital images .
  8. Méthode selon la revendication 7, telle que ladite méthode comprend en outre une étape de correction, l’aide de moyens de traitement de données, des discontinuités dans les profils de couleur des images numériques.Method according to claim 7, such that said method further comprises a step of correcting, using data processing means, discontinuities in the color profiles of digital images.
  9. Système d’acquisition synchrone d’une image hyperspectral d’un paysage (1002) environnant un bâtiment vitré (1001) ou d’une automobile, d’une part, et d’images numériques et de spectres radiométriques de l’intérieur (2000) dudit bâtiment vitré (1001) ou de ladite automobile, d’autre part, ledit système comprenant :
    - une caméra hyperspectrale CCD (6001) munie d’un objectif hypergone (6002) dont l’axe optique (AO) est orienté selon une direction sensiblement perpendiculaire à la direction vertical zénithale astronomique (ZA) ;
    - une platine mobile rotative (6003) configurée pour assurer la rotation de ladite caméra hyperspectrale selon un angle de 360° dans le plan de référence de ladite caméra hyperspectrale avec, pour axe de rotation, la direction verticale zénithale astronomique (ZA) ;
    - une dispositif photographique numérique (2001) ;
    - un spectrophotomètre (2002) ;
    dans lequel
    - ladite caméra hyperspectrale (2002) est configurée pour l’acquisition d’une image hyperspectrale dudit paysage ;
    - le dispositif photographique numérique (2001) est configuré pour l’acquisition, dans le délai d’acquisition de l’image hyperspectrale, d’au moins une image numérique d’au moins une partie de l’environnement intérieur (2000) dudit bâtiment (1001) ou de ladite automobile selon un angle de vue donné ;
    - le spectroradiomètre (2001) est configurée pour l’acquisition, dans le délai d’acquisition de l’image hyperspectrale, d’au moins un spectre radiométrique de ladite au moins une partie de l’environnement intérieur (2000) dudit bâtiment (2001) ou de ladite automobile selon ledit angle de vue donné,
    - ledit système étant en outre configuré pour l’acquisition d’une pluralité d’images numérique et spectres radiométrique dans le délai d’acquisition d’une image hyperspectrale
    et ledit système comprenant des moyens de traitement de données configurer pour :
    - calculer une valeur de luminance à partir de chacun des spectres radiométriques ;
    - comparer les valeurs de luminance selon la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue ;
    - détecter, des décalages de luminance en fonction de la longueur d’onde entre au moins deux spectres radiométriques acquis selon le même angle de vue après l’étape de comparaison ;
    - générer au moins une image à grande gamme dynamique à partir des images numériques.    System for synchronous acquisition of a hyperspectral image of a landscape (1002) surrounding a glass building (1001) or an automobile, on the one hand, and digital images and radiometric spectra of the interior (2000 ) of said glazed building (1001) or of said automobile, on the other hand, said system comprising:
    - a CCD hyperspectral camera (6001) provided with a hypergonal lens (6002) whose optical axis (AO) is oriented in a direction substantially perpendicular to the vertical astronomical zenith direction (ZA);
    - a rotating mobile stage (6003) configured to ensure the rotation of said hyperspectral camera at an angle of 360° in the reference plane of said hyperspectral camera with, as the axis of rotation, the vertical astronomical zenith direction (ZA);
    - a digital photographic device (2001);
    - a spectrophotometer (2002);
    in which
    - said hyperspectral camera (2002) is configured for acquiring a hyperspectral image of said landscape;
    - the digital photographic device (2001) is configured for the acquisition, within the hyperspectral image acquisition time, of at least one digital image of at least part of the interior environment (2000) of said building (1001) or said automobile from a given viewing angle;
    - the spectroradiometer (2001) is configured for the acquisition, within the acquisition time of the hyperspectral image, of at least one radiometric spectrum of said at least part of the interior environment (2000) of said building (2001 ) or of said automobile according to said given viewing angle,
    - said system being further configured for the acquisition of a plurality of digital images and radiometric spectra within the acquisition time of a hyperspectral image
    and said system comprising data processing means configured to:
    - calculate a luminance value from each of the radiometric spectra;
    - compare the luminance values according to the wavelength between at least two radiometric spectra acquired at the same viewing angle;
    - detect luminance shifts as a function of the wavelength between at least two radiometric spectra acquired at the same viewing angle after the comparison step;
    - generate at least one high dynamic range image from digital images.
  10. -Système selon la revendication 9, tel que ledit système est configuré pour acquérir séquentiellement et alternativement les images numériques et le spectre radiométrique.-System according to claim 9, such that said system is configured to sequentially and alternately acquire digital images and the radiometric spectrum.
  11. Utilisation d’une méthode selon l’une quelconque des revendications 1 à 8 pour évaluer la qualité d’une simulation par rendu physico-réaliste de l’intérieur d’un bâtiment vitré ou d’une automobile, dans laquelle
    - l’image hyperspectrale du paysage environnant ledit bâtiment ou ladite automobile est utilisé comme carte d’environnement dans un moteur de rendu physico-réaliste ;
    - des images de l’intérieur dudit bâtiment vitré ou de ladite automobile sont simulées à l’aide dudit moteur de rendu physico-réaliste à partir de ladite carte d’environnement ;
    - les caractéristiques spectrales des images simulées sont comparées à celles des images numériques et des spectres radiométriques.    Use of a method according to any one of claims 1 to 8 for evaluating the quality of a simulation by physico-realistic rendering of the interior of a glazed building or of an automobile, in which
    - the hyperspectral image of the landscape surrounding said building or said automobile is used as an environment map in a physico-realistic rendering engine;
    - images of the interior of said glass building or said automobile are simulated using said physico-realistic rendering engine from said environment map;
    - the spectral characteristics of the simulated images are compared to those of digital images and radiometric spectra.
PCT/EP2023/083143 2022-11-29 2023-11-27 System and method for synchronously acquiring a hyperspectral image, digital images and radiometric spectra of a glazed building WO2024115373A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FRFR2212513 2022-11-29
FR2212513A FR3142642A1 (en) 2022-11-29 2022-11-29 System and method for synchronous acquisition of a hyperspectral image, digital images and radiometric spectra of a glazed building.

Publications (1)

Publication Number Publication Date
WO2024115373A1 true WO2024115373A1 (en) 2024-06-06

Family

ID=85222203

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2023/083143 WO2024115373A1 (en) 2022-11-29 2023-11-27 System and method for synchronously acquiring a hyperspectral image, digital images and radiometric spectra of a glazed building

Country Status (2)

Country Link
FR (1) FR3142642A1 (en)
WO (1) WO2024115373A1 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040012542A1 (en) 2000-07-31 2004-01-22 Bowsher M. William Universal ultra-high definition color, light, and object rendering, advising, and coordinating system
JP2007028272A (en) 2005-07-19 2007-02-01 Domus International Ltd Panorama camera
CN207442995U (en) 2017-08-18 2018-06-01 深圳市实景科技有限公司 Panorama mixes light field imaging device
US10217242B1 (en) 2015-05-28 2019-02-26 Certainteed Corporation System for visualization of a building material
WO2022135942A1 (en) 2020-12-21 2022-06-30 Saint-Gobain Glass France Method for assessing the physically based simulation quality of a glazed object
FR3118523A1 (en) * 2020-12-29 2022-07-01 Thales METHOD FOR DETERMINING POSITION BY AN OPTRONIC SYSTEM IN A SCENE AND ASSOCIATED OPTRONIC SYSTEM

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10742894B2 (en) * 2017-08-11 2020-08-11 Ut-Battelle, Llc Optical array for high-quality imaging in harsh environments

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040012542A1 (en) 2000-07-31 2004-01-22 Bowsher M. William Universal ultra-high definition color, light, and object rendering, advising, and coordinating system
JP2007028272A (en) 2005-07-19 2007-02-01 Domus International Ltd Panorama camera
US10217242B1 (en) 2015-05-28 2019-02-26 Certainteed Corporation System for visualization of a building material
CN207442995U (en) 2017-08-18 2018-06-01 深圳市实景科技有限公司 Panorama mixes light field imaging device
WO2022135942A1 (en) 2020-12-21 2022-06-30 Saint-Gobain Glass France Method for assessing the physically based simulation quality of a glazed object
FR3118523A1 (en) * 2020-12-29 2022-07-01 Thales METHOD FOR DETERMINING POSITION BY AN OPTRONIC SYSTEM IN A SCENE AND ASSOCIATED OPTRONIC SYSTEM

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JAN MESETH ET AL.: "Verification of rendering quality from measured BTFs", ACM SIGGRAPH SYMPOSIUM ON APPLIED PERCEPTION IN GRAPHICS AND VISUALIZATION, 2006, pages 127 - 134, XP058193561, DOI: 10.1145/1140491.1140517

Also Published As

Publication number Publication date
FR3142642A1 (en) 2024-05-31

Similar Documents

Publication Publication Date Title
Stumpfel et al. Direct HDR capture of the sun and sky
EP3401879B1 (en) Method for modelling a three-dimensional object from two-dimensional images of the object taken from different angles
EP1442425B1 (en) Method and system for producing formatted information related to defects of appliances
EP1362255B1 (en) Photographic camera support device
Wetzstein et al. Radiometric compensation through inverse light transport
CN107644453B (en) Rendering method and system based on physical coloring
EP2183633A2 (en) Panoramic projection device and method implemented by said device
LeGendre et al. Practical multispectral lighting reproduction
Bhandari et al. Computational Imaging
WO2007116186A2 (en) Method of processing a relative illumination phenomenon on a digital image and associated processing system
Tominaga et al. Spectral image acquisition, analysis, and rendering for art paintings
WO2024115373A1 (en) System and method for synchronously acquiring a hyperspectral image, digital images and radiometric spectra of a glazed building
FR2821156A1 (en) METHOD AND DEVICE FOR OBTAINING A DIGITAL PANORAMIC IMAGE WITH CONSTANT TINT
EP2502206A2 (en) Method for estimating light scattering
WO2024115376A1 (en) System and method for acquiring a hyperspectral image of a real landscape under sky
CA3057337A1 (en) 3d model texturation process
FR3085519A1 (en) METHOD FOR MEASURING AN INDIVIDUAL'S COLOR SPACE AND METHOD FOR CORRECTING DIGITAL IMAGES ACCORDING TO THE INDIVIDUAL'S COLOR SPACE
WO2023275150A1 (en) Method for converting data between colour spaces
FR3116364A1 (en) Visualization aid solution to simulate a self-exposure process
Stumpfel Hdr lighting capture of the sky and sun
WO2018068870A1 (en) Method for modelling at least one light source
FR3054359A1 (en) METHOD FOR INCRUSTATION OF SOURCE IMAGE IN TARGET IMAGE
FR3134645A1 (en) Skin Tone Prediction Using 3D Face Model
Cheney Image Based Rendering: Using High Dynamic Range Photographs to Light Architectural Scenes
Hudon Active illumination for high speed image acquisition and recovery of shape and albedo

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23814142

Country of ref document: EP

Kind code of ref document: A1