JP6925619B2 - How to measure cloud altitude and wind speed using optical images - Google Patents

How to measure cloud altitude and wind speed using optical images Download PDF

Info

Publication number
JP6925619B2
JP6925619B2 JP2017186398A JP2017186398A JP6925619B2 JP 6925619 B2 JP6925619 B2 JP 6925619B2 JP 2017186398 A JP2017186398 A JP 2017186398A JP 2017186398 A JP2017186398 A JP 2017186398A JP 6925619 B2 JP6925619 B2 JP 6925619B2
Authority
JP
Japan
Prior art keywords
altitude
cloud
angle
wide
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017186398A
Other languages
Japanese (ja)
Other versions
JP2019060754A (en
Inventor
久保田 実
実 久保田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Institute of Information and Communications Technology
Original Assignee
National Institute of Information and Communications Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Institute of Information and Communications Technology filed Critical National Institute of Information and Communications Technology
Priority to JP2017186398A priority Critical patent/JP6925619B2/en
Publication of JP2019060754A publication Critical patent/JP2019060754A/en
Application granted granted Critical
Publication of JP6925619B2 publication Critical patent/JP6925619B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measurement Of Optical Distance (AREA)

Description

この発明は、一対の広角カメラを用いたステレオカメラによる光学画像を用いて、雲の地上高と雲の風速を計測する方法に関する。 The present invention relates to a method of measuring the ground clearance of a cloud and the wind speed of a cloud by using an optical image taken by a stereo camera using a pair of wide-angle cameras.

雲の底面の高さ(雲底高度)は、気象学的に重要なパラメータであるとともに、航空機の離発着においても必要な情報である。現在、雲底高度の標準的な観測手段としてはシーロメータという装置がある。シーロメータは、例えば特許文献1(特表2007−538245号公報)に開示されたライダー(LIDAR)の一種で、レーザー光などの強力な光を上空に射出し、雲底で散乱して戻って来るまでの時間等から高度を計測する。しかし、基本的に上空1点のみの雲底高度を計測するため、全天の同時測定には不向きであり、また装置は複雑で高価である。これに対して、本発明は、広い範囲の雲底高度の分布を、より安価な光学カメラで計測するものである。 The height of the bottom of the cloud (cloud base altitude) is a meteorologically important parameter and is also necessary information for the takeoff and landing of aircraft. Currently, there is a device called a ceilometer as a standard means of observing cloud base altitude. A ceilometer is a type of lidar disclosed in, for example, Patent Document 1 (Japanese Patent Laid-Open No. 2007-538245). It emits strong light such as laser light into the sky, scatters at the cloud base, and returns. Measure the altitude from the time until. However, since it basically measures the cloud base altitude of only one point in the sky, it is not suitable for simultaneous measurement of the whole sky, and the device is complicated and expensive. On the other hand, the present invention measures the distribution of cloud base altitude over a wide range with a cheaper optical camera.

一方、2台のカメラで撮られた画像を用いて、被写体の対象物までの距離を計測する技術としては、例えば特許文献2(特開平10−267618号公報)に開示された距離計測装置がある。これはステレオカメラを用いたもので、一対のカメラの視差情報から対象物までの距離を計測するものである。この計測に当たっては、その一対のカメラによる画像のデジタル信号上の視差を検出するために一対の画像の相関をとり、その視差と上記カメラの位置関係から対象物までの距離を計測する。また、所定の間隔でその計測を行う事で、対象物の移動速度を算出するものである。 On the other hand, as a technique for measuring the distance to an object of a subject using images taken by two cameras, for example, a distance measuring device disclosed in Patent Document 2 (Japanese Unexamined Patent Publication No. 10-267618) is used. be. This uses a stereo camera, and measures the distance from the parallax information of a pair of cameras to an object. In this measurement, in order to detect the parallax of the images by the pair of cameras on the digital signal, the pair of images are correlated, and the distance from the parallax and the positional relationship of the cameras to the object is measured. In addition, the moving speed of the object is calculated by measuring the measurement at predetermined intervals.

特表2007−538245号公報Special Table 2007-538245 特開平10−267618号公報Japanese Unexamined Patent Publication No. 10-267618

2台の天頂に向けた広角カメラで撮像された雲の画像について、その視野にある雲の雲底高度分布を精度よく求めることで、広範囲の雲底高度分布を短時間で計測する。また風速の計測のために、その画像の時間差分から、対象となる雲の移動速度を求める。 A wide range of cloud base altitude distributions can be measured in a short time by accurately determining the cloud base altitude distribution of the clouds in the field of view of the cloud images captured by the wide-angle cameras facing the two zeniths. Also, in order to measure the wind speed, the moving speed of the target cloud is obtained from the time difference of the image.

本発明の光学画像を用いた雲の高度の計測方法は、
所定の基線の両端に設けられた一対の広角カメラを天頂方向に向けたステレオカメラによる光学画像から、被写体の雲の位置や移動速度を計測する方法であって、
上記広角カメラの設置位置の標高、経度および緯度が明らかであり、
上記広角カメラから出力される画像について、撮影時刻、天頂位置、方位角および天頂角が解読できる設定がなされたものであり、
(1)上記ステレオカメラで同時刻に撮影された共通の被写体の各広角カメラによる各画像から該被写体の方位角および天頂角を読み出し、
(2)上記被写体の高度を仮定して、
(3)上記の各画像について、各広角カメラの上記設置位置と上記方位角および天頂角から上記被写体の経度および緯度を求め、
(4)上記被写体の経度および緯度が、各画像について所定の許容範囲での一致が確認されるまで、新たに高度を仮定して上記(3)の処理を行う、
ことを含むことを特徴とする。
The method for measuring the altitude of clouds using the optical image of the present invention is
It is a method of measuring the position and moving speed of a cloud of a subject from an optical image taken by a stereo camera in which a pair of wide-angle cameras provided at both ends of a predetermined baseline are pointed toward the zenith.
The altitude, longitude and latitude of the above wide-angle camera installation position are clear.
The image output from the wide-angle camera is set so that the shooting time, zenith position, azimuth, and zenith angle can be decoded.
(1) The azimuth angle and zenith angle of the subject are read out from each image taken by each wide-angle camera of the common subject taken at the same time by the stereo camera.
(2) Assuming the altitude of the above subject,
(3) For each of the above images, the longitude and latitude of the subject are obtained from the installation position of each wide-angle camera and the azimuth and zenith angles.
(4) The process of (3) above is performed assuming a new altitude until the longitude and latitude of the subject are found to match each image within a predetermined allowable range.
It is characterized by including.

また、上記(4)における所定範囲での一致は、上記(3)で求められた被写体の経度および緯度を含む位置にある所定のサイズの各広角カメラの画像についての相互相関係数のピークを与えるズレの値が上記所定範囲内のあるものであることを特徴とする。 Further, the agreement within the predetermined range in (4) above is the peak of the mutual correlation coefficient for the image of each wide-angle camera of a predetermined size at the position including the longitude and latitude of the subject obtained in (3) above. The value of the deviation to be given is within the above-mentioned predetermined range.

また、上記各広角カメラは、撮影した星の座標を基に校正した方位角および天頂角を出力するものであることを特徴とする。 Further, each of the above wide-angle cameras is characterized in that it outputs an azimuth angle and a zenith angle calibrated based on the coordinates of the photographed star.

また、上記(4)において各画像について所定の許容範囲での一致を確認する方法は、
地心を中心とし上記(2)の高度までを半径とする球に、
各広角カメラの上記設置位置と上記方位角および天頂角、および上記(2)の高度から求めた上記被写体の経度および緯度位置を、投影し、
上記球面での上記被写体の経度および緯度位置が所定の誤差内で一致するまで上記高度を調整するものであることを特徴とする。
Further, in the above (4), the method of confirming the agreement within a predetermined allowable range for each image is described.
In a sphere centered on the center of the earth and with a radius up to the altitude of (2) above,
The installation position of each wide-angle camera, the azimuth and zenith angles, and the longitude and latitude positions of the subject obtained from the altitude of (2) above are projected.
The altitude is adjusted until the longitude and latitude positions of the subject on the spherical surface match within a predetermined error.

また、本発明の光学画像を用いた風速の計測方法は、上記被写体の位置である高度、経度および緯度の計測を時間差で行い、上記被写体の位置の時間差から雲の移動速度を求め、この移動速度を風速とするものであることを特徴とする。 Further, in the wind speed measurement method using the optical image of the present invention, the altitude, longitude and latitude, which are the positions of the subject, are measured with a time difference, and the moving speed of the cloud is obtained from the time difference of the position of the subject, and this movement is performed. It is characterized in that the speed is the wind speed.

また、上記画像を複数の小区域に区切り、それぞれの小区域ごとに、
(1)雲の高度を求めて、雲の高度の2次元分布を計測するか、または、
(2)雲の高度、経度および緯度の2次元分布の計測を時間差を設けて行い、上記雲の高度、経度および緯度の時間差から雲の移動速度を求め、この移動速度を風速とする計測を行うことで風速の2次元分布を計測する、
ことを特徴とする。
In addition, the above image is divided into a plurality of sub-areas, and each sub-area is divided into a plurality of sub-areas.
(1) Find the altitude of the cloud and measure the two-dimensional distribution of the altitude of the cloud, or
(2) The two-dimensional distribution of cloud altitude, longitude and latitude is measured with a time difference, the moving speed of the cloud is obtained from the time difference of the altitude, longitude and latitude of the cloud, and this moving speed is used as the wind speed. By doing so, the two-dimensional distribution of wind speed is measured,
It is characterized by that.

また、広角カメラの組み合わせを変えて2組のステレオカメラを構成可能な3台の広角カメラを含み、1つの組のステレオカメラの基線は、他の組のその基線よりも短いことを特徴とするものであってもよい。 It also includes three wide-angle cameras that can configure two sets of stereo cameras by changing the combination of wide-angle cameras, and the baseline of one set of stereo cameras is shorter than that of the other set. It may be a thing.

本発明は、2台の天頂に向けた広角カメラで撮像された雲の画像について、その視野にある雲の雲底高度分布を精度よく求めるものであり、広範囲の雲底高度分布を短時間で計測することができる。また、その画像の時間差分から、対象となる雲の速度を求めることから、広範囲の風の速度の計測も短時間で行うことができる。また、本発明は、広い範囲の雲底高度の分布を、受動的に方法で計測するものであるため、他に及ぼす悪影響がない計測方法である。 The present invention accurately obtains the cloud base altitude distribution of clouds in the field of view of cloud images taken by two wide-angle cameras toward the zenith, and can obtain a wide range of cloud base altitude distribution in a short time. Can be measured. Further, since the velocity of the target cloud is obtained from the time difference of the image, the velocity of the wind in a wide range can be measured in a short time. Further, since the present invention passively measures the distribution of cloud base altitude over a wide range by a method, it is a measurement method that does not have an adverse effect on others.

本発明を適応する装置例を示す図である。基本的に、2台の広角カメラシステムを用いたステレオカメラで雲底の計測を行う。It is a figure which shows the example of the apparatus to which this invention is applied. Basically, the cloud base is measured with a stereo camera using two wide-angle camera systems. 超広角カメラを真上に向けた撮影で得られる画像を示す図で、その中心が天頂にほぼ一致し、画像上の位置が画像の中心(≒天頂)から離れるにしたがって天頂角が大きくなるが、広角カメラの場合、中心からの距離と天頂角とは比例関係からずれている。It is a diagram showing an image obtained by shooting with an ultra-wide-angle camera pointing straight up. The center of the image almost coincides with the zenith, and the zenith angle increases as the position on the image moves away from the center of the image (≈ zenith). In the case of a wide-angle camera, the distance from the center and the zenith angle deviate from the proportional relationship. レンズの歪みを星の経緯度から補正する際に用いる変数を示す図である。It is a figure which shows the variable used when correcting the distortion of a lens from the latitude and longitude of a star. レンズの歪み例を示す図で、天頂角に対する中心からの距離が線形関係からずれていることを示す。The figure which shows the distortion example of a lens shows that the distance from the center with respect to the zenith angle deviates from the linear relation. (a)は、対象となる雲について、観測点からの距離C(これに対応する地球中心角γ)を三角関数の正弦定理を用いて計算するための、雲と観測点と地球の中心とを結ぶ三角形を示す図であり、(b)は、対象となる雲の緯度ξ、経度ζを球面三角法の余弦定理と正弦定理を用いて計算するための、北極点と雲と投影観測点とを結ぶ球面上の三角形を示す図である。(A) is a cloud, an observation point, and the center of the earth for calculating the distance C (corresponding to the central angle of the earth γ) from the observation point for the target cloud using the trigonometric sine theorem. is a diagram showing a triangle connecting, (b), the cloud of interest latitude xi] C, for calculating using the cosine theorem and the sine theorem in spherical trigonometry longitude zeta C, the north pole and clouds projection It is a figure which shows the triangle on the spherical surface which connects with an observation point. 本発明の方法で雲底高度を導出した結果(黒丸)と、シーロメータによるレーザー光の散乱高度の計測結果(濃淡帯)と、の比較を示す図である。この際、上記の様に雲底高度の仮定を少しずつ変えながら緯度経度座標上にマッピングして雲の画像の相互相関を最大にする雲底高度を求めるという手法を用いた。観測装置は、情報通信研究機構(東京都小金井市貫井北町4−2−1)6号館屋上とそこから約250m離れた棟の屋上に設置した。It is a figure which shows the comparison between the result of deriving the cloud base altitude by the method of this invention (black circle), and the measurement result of the scattering altitude of laser light by a ceilometer (shade band). At this time, as described above, a method was used in which the cloud base altitude was obtained by mapping on the latitude / longitude coordinates while gradually changing the assumption of the cloud base altitude to maximize the cross-correlation of the cloud images. The observation equipment was installed on the roof of Building No. 6 of the National Institute of Information and Communications Technology (4-2-1 Nukui Kitamachi, Koganei City, Tokyo) and on the roof of a building about 250 m away from it.

先ず、本発明を適用する装置について以下に説明する。
本発明は、一対の広角カメラを天頂に向けたステレオカメラによる光学画像から、雲底部の地上高の計測を行い、時間差を置いた上記と同様の光学画像から雲底での風速を計測する方法に関するものであり、本発明を適応する装置例を図1に示す。この例においては、広角カメラ1をコントローラ2で制御した広角カメラシステムの3台(4a、4b、4c)をネットワーク3に接続した構成としている。基本的には、2台の広角カメラシステムを用いたステレオカメラで雲底の計測を行うが、2台の広角カメラ間の基線の長さが異なる設定、つまり広角カメラシステム4a−4c間の基線長をL1、4a−4b間のそれをL2(L1>L2)とする場合のための3台のカメラを用いる例を示す。また、各カメラシステム4a、4b、4cは、直線状に整列させる必要は無く、折れ線状であってもよい。
First, the apparatus to which the present invention is applied will be described below.
The present invention is a method of measuring the ground height of the cloud base from an optical image taken by a stereo camera with a pair of wide-angle cameras facing the zenith, and measuring the wind speed at the cloud base from the same optical image as above with a time lag. FIG. 1 shows an example of an apparatus to which the present invention is applied. In this example, three wide-angle camera systems (4a, 4b, 4c) in which the wide-angle camera 1 is controlled by the controller 2 are connected to the network 3. Basically, the cloud base is measured with a stereo camera using two wide-angle camera systems, but the length of the baseline between the two wide-angle cameras is different, that is, the baseline between the wide-angle camera systems 4a-4c. An example of using three cameras for the case where the length is between L1 and 4a-4b and that is L2 (L1> L2) is shown. Further, the camera systems 4a, 4b, and 4c do not need to be aligned in a straight line, and may be in a polygonal line shape.

広角カメラとしては、画角が60度以上の物でよいが、画角が80度以上の超広角カメラや、160度以上の画角で天球が収まるものは、さらに望ましい。また、上記基線長としては、通常の雲底高度の場合は、例えば200から300mであり、低い雲底の場合は、例えば50から100mにすることができる。 The wide-angle camera may have an angle of view of 60 degrees or more, but an ultra-wide-angle camera having an angle of view of 80 degrees or more and a camera in which the celestial sphere fits in an angle of view of 160 degrees or more are more desirable. The baseline length can be, for example, 200 to 300 m in the case of a normal cloud base altitude, and 50 to 100 m, for example, in the case of a low cloud base.

また、上記ネットワーク3を介して撮像データを回収し、コンピュータによって下記の手順を適用して雲底高度を求める。また、撮像画像の時間的差分を求めることで、雲底の移動距離と変化高度を得て、雲底の速度を導出する。 In addition, the imaged data is collected via the network 3 and the cloud base altitude is obtained by applying the following procedure by a computer. In addition, by obtaining the time difference of the captured image, the moving distance and the change altitude of the cloud base are obtained, and the velocity of the cloud base is derived.

本発明を実際に用いる際に、解決が必要となる技術的課題は、以下のものである。
(1)ステレオカメラとして広角カメラを用いる場合、そのカメラレンズの歪みが無視できない。
(2)雲の輪郭は一般に曖昧であり、一面に広がった雲は、特定箇所の同定が困難である。
(3)広範囲の雲底の高度分布を同時に計測できるようにする。従来の方法では、この様に広範囲の雲底の高度分布を同時に計測することは困難である。
The technical problems that need to be solved when the present invention is actually used are as follows.
(1) When a wide-angle camera is used as a stereo camera, the distortion of the camera lens cannot be ignored.
(2) The outline of a cloud is generally ambiguous, and it is difficult to identify a specific part of a cloud that has spread all over.
(3) Make it possible to measure the altitude distribution of a wide range of cloud bases at the same time. With the conventional method, it is difficult to measure the altitude distribution of such a wide range of cloud bases at the same time.

以下に、上記の技術的課題(1)から(4)を解決する方法を、順に(イ)から(ニ)に示す。 Hereinafter, methods for solving the above technical problems (1) to (4) are shown in order from (a) to (d).

(イ)雲底高度計測に特化した超広角カメラレンズのゆがみ補正
本発明においては、上記の様に超広角カメラを真上に向けて設置して撮影する。この撮影で得られる画像の中心が天頂にほぼ一致し、概略では画像上の位置が画像の中心(≒天頂)から離れるにしたがって天頂角が大きくなるということになる(図2)。
(B) Correction of distortion of the ultra-wide-angle camera lens specialized for cloud base altitude measurement In the present invention, the ultra-wide-angle camera is installed directly above for shooting as described above. The center of the image obtained by this shooting almost coincides with the zenith, and roughly, the zenith angle increases as the position on the image moves away from the center of the image (≈ zenith) (Fig. 2).

一般に、ステレオ画像から正確な距離を導くには、歪(ゆがみ)の無い画像が必要であることが知られている。雲底高度導出の際にも、歪みの無い画像が必要であり、そのためにはレンズのゆがみ補正が必要である。
また、撮影した画像における天頂の正確な位置、画像の方位(北からの回転角)φ、並びに画像上の天頂からの距離rと天頂角θの関係式を求める必要がある。
本発明においては、これらの値を夜間の晴天時に画像中に写る星を使って、以下の方法により導出する。
It is generally known that a distortion-free image is required to derive an accurate distance from a stereo image. An image without distortion is also required when deriving the cloud base altitude, and for that purpose, it is necessary to correct the distortion of the lens.
In addition, it is necessary to obtain the exact position of the zenith in the captured image, the orientation (rotation angle from the north) φ of the image, and the relational expression between the distance r from the zenith and the zenith angle θ on the image.
In the present invention, these values are derived by the following method using the stars appearing in the image in fine weather at night.

ここで知りたい未知数は、以下の4つで、図3を参照して説明する。
(a)画像中の天頂の位置(xz,yz):天頂は画像中心にほぼ一致する、とはいえ、僅かにずれた位置にある。画像中心の位置を(x,y)とすると、x=x+δx、y=y+δy(δは微小量)と表すこともできる。
(b)画像の方位(北からの回転角)φ。
(c)画像上の天頂からの距離rと天頂角θの関係式:第一次近似として、r=aθと表すことができ、この場合、未知数は比例係数のaである。
There are four unknowns that we would like to know here, which will be described with reference to FIG.
(A) Position of the zenith in the image (xz, yz): The zenith is substantially aligned with the center of the image, but is slightly offset. The position of the image center (x m, y m) When, x z = x m + δx , y z = y m + δy (δ is very small amount) may be expressed as.
(B) Image orientation (rotation angle from north) φ.
(C) Relational expression of the distance r from the zenith and the zenith angle θ on the image: As a first-order approximation, r = aθ can be expressed, in which case the unknown is the proportional coefficient a.

これらの未知数の求め方を以下に示す。
撮影された星Aの画像中の位置(x,y)は画像から読み取ることができる。また、画像の撮影時刻、撮影場所における星Aの天頂角θ、方位角φは天文学上の計算で得られ、既知である。同様に別の星Bについても、位置(x,y)は画像から読み取ることができ、天頂角θ、方位角φは既知である。この時、これらの値の間には、余弦定理により以下の関係が成り立つ(図3参照)。
How to find these unknowns is shown below.
The positions (x A , y A ) of the captured star A in the image can be read from the image. Further, the shooting time of the image, the zenith angle θ A of the star A at the shooting location, and the azimuth φ A are obtained by astronomical calculation and are known. Similarly, for another star B, the position (x B , y B ) can be read from the image, and the zenith angle θ B and the azimuth angle φ B are known. At this time, the following relationship holds between these values according to the law of cosines (see FIG. 3).

Figure 0006925619
Figure 0006925619

この関係によりaは以下のように求まる。 Based on this relationship, a can be obtained as follows.

Figure 0006925619
Figure 0006925619

また、上記の余弦定理の他に、幾何学的な関係から以下の式も得られる。 In addition to the above cosine theorem, the following equation can also be obtained from the geometrical relationship.

Figure 0006925619
Figure 0006925619

これらの関係式より、2つの星の撮影画像の位置から、4つの未知数(a、x、y、φ)を求めることができる。また、多数の星のペアからこれら4つの未知数を求め、平均を取ることにより、より正確に天頂の位置や画像の方位等を導出することもできる。 From these relational expressions, four unknowns (a, x z , y z , φ) can be obtained from the positions of the captured images of the two stars. In addition, by obtaining these four unknowns from a large number of star pairs and averaging them, it is possible to more accurately derive the position of the zenith, the orientation of the image, and the like.

次に、天頂角の異なる多数の星の位置(x,y)を読み取り、天頂の位置(x,y)からの距離rnを計算し、それぞれの星の天頂角θnとの関係をプロットし、これに関数(例えば高次多項式)をフィッティングすると、画像上の天頂からの距離rと天頂角θの関係式を求めることができる。この際、レンズのゆがみ補正式を用いることにより、画像中の各点について観測点からの方位φと天頂角θを正確に求めることができる。上記では近似的にr=aθとおいたが、実際は図4に示すように比例関係からのずれがあり、経験上3次式の多項式を用いると、充分に上記距離rと天頂角θの関係を表すことができる。また、さらに高次の多項式を用いることも容易にできる。 Next, the positions (x n , y n ) of many stars with different zenith angles are read, the distance rn from the position of the zenith (x z , y z ) is calculated, and the relationship with the zenith angle θn of each star is calculated. By plotting and fitting a function (for example, a higher-order polynomial) to this, the relational expression between the distance r from the zenith and the zenith angle θ on the image can be obtained. At this time, by using the lens distortion correction formula, the direction φ and the zenith angle θ from the observation point can be accurately obtained for each point in the image. In the above, r = aθ is approximately set, but in reality there is a deviation from the proportional relationship as shown in FIG. 4, and empirically, when a polynomial of the cubic equation is used, the relationship between the distance r and the zenith angle θ can be sufficiently determined. Can be represented. Moreover, it is also possible to easily use a higher-order polynomial.

(ロ)境界の曖昧な雲までの距離の計測
上記(イ)の方法で導出した画像の方位やレンズのゆがみ補正式を用いることにより、画像中の各点について観測点から見た方位φと天頂角θを充分正確に求めることができる。充分正確な上記天頂角が分かると、画像に雲の映像があるとき、その雲底高度hを仮定すれば、その雲について観測点からの距離C(これに対応する地球中心角γ)が、雲と観測点と地球の中心とを結ぶ三角形で、三角関数の正弦定理を用いて以下の式で計算できる(図5(a)参照)。この式においてhoは観測点の標高である。
(B) Measurement of the distance to a cloud with an ambiguous boundary By using the orientation of the image derived by the method of (a) above and the distortion correction formula of the lens, the orientation φ of each point in the image as seen from the observation point The zenith angle θ can be obtained with sufficient accuracy. If the above zenith angle is known to be sufficiently accurate, when there is an image of a cloud in the image, assuming the cloud bottom altitude h, the distance C (corresponding to the central angle γ of the earth) from the observation point for the cloud will be. It is a triangle connecting a cloud, an observation point, and the center of the earth, and can be calculated by the following formula using the trigonometric sines theorem (see Fig. 5 (a)). In this equation, ho is the altitude of the observation point.

Figure 0006925619
Figure 0006925619

すると、北極点と雲と投影観測点とを結ぶ球面上の三角形について、球面三角法の余弦定理と正弦定理を用いて、その雲の緯度ξ、経度ζが以下の式から計算できる(図5(b)参照)。ここで投影観測点は、観測点の高さを雲の高さに投影した点である。この様に、雲底高度を仮定すれば、その雲を緯度経度座標にマッピングすることができる。 Then, for the triangle on the sphere connecting the North Pole, the cloud, and the projection observation point, the latitude ξ C and longitude ζ C of the cloud can be calculated from the following equations using the cosine theorem and sine theorem of spherical trigonometry. See FIG. 5 (b)). Here, the projected observation point is a point obtained by projecting the height of the observation point onto the height of the cloud. In this way, assuming the cloud base altitude, the cloud can be mapped to the latitude and longitude coordinates.

Figure 0006925619
Figure 0006925619

異なる場所に設置された2台のカメラ(ステレオカメラ)で同時に撮影された2つの画像に同じ雲が写っていた場合、2台のカメラの設置場所(緯度、経度、標高)が既知であり、また、正しい雲底高度を仮定すれば、その雲は緯度経度座標上では所定の誤差内の位置、つまり同じ位置、にマッピングされるはずである。この性質を逆に利用すれば、ステレオカメラの画像を用いて雲底高度を導出することができる。この場合、ステレオカメラの基線は水平である必要がない。 If the same cloud appears in two images taken at the same time by two cameras (stereo cameras) installed in different locations, the installation locations (latitude, longitude, altitude) of the two cameras are known. Also, assuming the correct cloud bottom altitude, the cloud should be mapped to a position within a predetermined error on the latitude / longitude coordinates, that is, the same position. If this property is used in reverse, the cloud base altitude can be derived using the image of the stereo camera. In this case, the baseline of the stereo camera does not have to be horizontal.

具体的には、少なくとも雲の一部が共通に写っている2つの画像を、雲底高度の仮定を少しずつ変えながら緯度経度座標上にマッピングし、2つのマッピングデータの相互相関をとる。この相互相関の出力が最大になる高度が求めるべき雲底高度である。
この際、上記の様に同じ位置にマッピングすることは、任意の球面上に投影した像で行うことができることは明らかである。球面としては、例えば単位半径を持った球の表面である。
Specifically, two images in which at least a part of the cloud is captured in common are mapped on the latitude / longitude coordinates while changing the assumption of the cloud base altitude little by little, and the two mapping data are cross-correlated. The altitude at which the output of this cross-correlation is maximized is the cloud base altitude to be obtained.
At this time, it is clear that mapping to the same position as described above can be performed with an image projected on an arbitrary spherical surface. The spherical surface is, for example, the surface of a sphere having a unit radius.

図6に、本発明の方法で雲底高度を導出した結果(黒丸)と、シーロメータによるレーザー光の散乱高度の計測結果(濃淡帯)と、の比較を示す。この際、上記の様に雲底高度の仮定を少しずつ変えながら緯度経度座標上にマッピングして雲のステレオ画像の相互相関を最大にする雲底高度を求めるという手法を用いた。観測装置は、情報通信研究機構(東京都小金井市貫井北町4−2−1)6号館屋上とそこから約250m離れた138棟屋上に設置した。この比較から、上記のステレオカメラに本発明を適用して得られた雲底高度と、シーロメータの散乱が最大になる高度とがよく一致していることが分かる。 FIG. 6 shows a comparison between the result of deriving the cloud base altitude by the method of the present invention (black circle) and the measurement result of the scattering altitude of the laser light by the ceilometer (shade band). At this time, as described above, a method was used in which the cloud base altitude was obtained by mapping on the latitude / longitude coordinates while gradually changing the assumption of the cloud base altitude to maximize the cross-correlation of the cloud stereo image. The observation equipment was installed on the roof of Building No. 6 of the National Institute of Information and Communications Technology (4-2-1 Nukui Kitamachi, Koganei City, Tokyo) and on the roof of Building 138, which is about 250 m away from it. From this comparison, it can be seen that the cloud base altitude obtained by applying the present invention to the above stereo camera and the altitude at which the scattering of the ceilometer is maximized are in good agreement.

(ハ)広範囲で雲底高度の分布を同時に計測すること
天頂に向けて設置した超広角カメラで撮影した曇天の画像には、図2のように画面全面に雲が写り込んでいる場合が多い。この時、画像を複数の小区域に区切って、それぞれの小区域ごとに上記(ロ)に記載の手法でそれぞれの雲底高度を導出する。これによって雲底高度の2次元分布を得ることができる。
(C) Simultaneously measuring the distribution of cloud base altitude over a wide area Clouds are often reflected on the entire screen as shown in Fig. 2 in cloudy images taken with an ultra-wide-angle camera installed toward the zenith. .. At this time, the image is divided into a plurality of small areas, and each cloud base altitude is derived for each small area by the method described in (b) above. This makes it possible to obtain a two-dimensional distribution of cloud base altitude.

(ニ)得られた高度の情報と、前後の画像データから得られる雲の移動ベクトルから風速を導出すること。
高山に懸かる笠雲などを除き、一般に、短時間であれば雲は局所的に形を保ったまま風に流されていくことが知られている。
この雲と風の関係を用いて、上記(ロ)や(ハ)に記載の方法で雲底高度が得られた後、雲底高度測定時に前後して撮影された画像から雲の移動ベクトルを得れば、これから雲の移動速度、すなわち雲底高度における風速・風向(つまり雲の風速・風向)を導出することができる。また、雲底高度についても時間差分を取ることによって、高さ方向への移動速度を得ることが出来る。
(D) To derive the wind speed from the obtained altitude information and the cloud movement vector obtained from the previous and next image data.
It is generally known that clouds are swept away by the wind while maintaining their local shape for a short period of time, except for the lenticular clouds that hang over high mountains.
After obtaining the cloud base altitude by the method described in (b) and (c) above using this relationship between the cloud and the wind, the movement vector of the cloud is obtained from the images taken before and after the cloud base altitude measurement. Once obtained, the moving speed of the cloud, that is, the wind speed / direction at the cloud base altitude (that is, the wind speed / direction of the cloud) can be derived. In addition, the moving speed in the height direction can be obtained by taking a time difference with respect to the cloud base altitude.

上記の説明においては、北半球の場合を念頭において説明したが、北極を南極と読み替えることで、南半球でも同様に本発明を適用できることは明らかである。 In the above description, the case of the Northern Hemisphere has been taken into consideration, but it is clear that the present invention can be similarly applied to the Southern Hemisphere by replacing the North Pole with the South Pole.

気象観測拠点や空港等において、雲底高度をモニタする装置として利用することなどが可能である。
また、広範囲の雲底の高度分布や風速・風向の分布は、積乱雲などの激しい雨をもたらす雲の発達にも関係する気象要素であり、そのデータを積乱雲の発達予想にも用いることができる。
本発明は、受動的な計測であるが、通常は夜間でも雲は市街光や月明りで照らされているため、市販のカメラで十分観測が可能である。また、雲を何らかの方法で照明することで、測定箇所を指定することができ、その照明部分の計測が容易になる。この照明は、サーチライトやレーザー光でもよい。夜間の照明には、フラッシュランプやパルスレーザーからの光を用いることができる。
It can be used as a device for monitoring cloud base altitude at meteorological observation bases and airports.
In addition, the altitude distribution of the cloud base and the distribution of wind speed and direction over a wide area are meteorological factors related to the development of clouds that cause heavy rain such as cumulonimbus clouds, and the data can be used for predicting the development of cumulonimbus clouds.
Although the present invention is a passive measurement, the clouds are usually illuminated by city light or moonlight even at night, so that they can be sufficiently observed with a commercially available camera. In addition, by illuminating the clouds in some way, the measurement location can be specified, and the measurement of the illuminated portion becomes easy. The illumination may be a searchlight or a laser beam. Light from a flash lamp or a pulse laser can be used for nighttime lighting.

また、太陽光がステレオカメラの撮像装置に直接入射することを防止するための装置として、コンピュータ制御の太陽光遮蔽装置が知られている。これは、遮蔽板で太陽光を遮るものである。上記の説明においては、説明を簡単にするために、この遮蔽版は省略しているが、これを考慮に入れることは容易である。 Further, a computer-controlled solar shielding device is known as a device for preventing sunlight from directly incident on an imaging device of a stereo camera. This is to block sunlight with a shielding plate. In the above description, this occluded version is omitted for the sake of simplicity, but it is easy to take this into account.

1 広角カメラ
2 コントローラ
3 ネットワーク
4a、4b、4c 広角カメラシステム
1 Wide-angle camera 2 Controller 3 Network 4a, 4b, 4c Wide-angle camera system

Claims (6)

所定の基線の両端に設けられた一対の広角カメラを天頂方向に向けたステレオカメラによる光学画像から、被写体の雲の位置や移動速度を計測する方法であって、
上記広角カメラの設置位置の標高、経度および緯度が明らかであり、
上記広角カメラから出力される画像について、撮影時刻、天頂位置、方位角および天頂角が解読できる設定がなされたものであり、
(1)上記ステレオカメラで同時刻に撮影された共通の被写体の各広角カメラによる各画像から該被写体の方位角および天頂角を読み出し、
(2)上記被写体の高度を仮定して、
(3)上記の各画像について、各広角カメラの上記設置位置と上記方位角および天頂角から上記被写体の経度および緯度を求め、
(4)上記被写体の経度および緯度が、各画像について所定の許容範囲での一致が確認されるまで、新たに高度を仮定して上記(3)の処理を行う、
ことを含むことを特徴とする、光学画像を用いた雲の高度の計測方法。
It is a method of measuring the position and moving speed of a cloud of a subject from an optical image taken by a stereo camera in which a pair of wide-angle cameras provided at both ends of a predetermined baseline are pointed toward the zenith.
The altitude, longitude and latitude of the above wide-angle camera installation position are clear.
The image output from the wide-angle camera is set so that the shooting time, zenith position, azimuth, and zenith angle can be decoded.
(1) The azimuth angle and zenith angle of the subject are read out from each image taken by each wide-angle camera of the common subject taken at the same time by the stereo camera.
(2) Assuming the altitude of the above subject,
(3) For each of the above images, the longitude and latitude of the subject are obtained from the installation position of each wide-angle camera and the azimuth and zenith angles.
(4) The process of (3) above is performed assuming a new altitude until the longitude and latitude of the subject are found to match each image within a predetermined allowable range.
A method of measuring cloud altitude using an optical image, which comprises the above.
上記(4)における所定範囲での一致は、上記(3)で求められた被写体の経度および緯度を含む位置にある所定のサイズの各広角カメラの画像についての相互相関係数のピークを与えるズレの値が上記所定範囲内のあるものであることを特徴とする請求項1に記載の、光学画像を用いた雲の高度の計測方法。 The match in the predetermined range in (4) above gives a peak of the mutual correlation coefficient for the image of each wide-angle camera of a predetermined size at the position including the longitude and latitude of the subject obtained in (3) above. The method for measuring the altitude of a cloud using an optical image according to claim 1, wherein the value of is within the predetermined range. 上記各広角カメラは、撮影した星の座標を基に校正した方位角および天頂角を出力するものであることを特徴とする請求項1あるいは2に記載の、光学画像を用いた雲の高度の計測方法。 The altitude of a cloud using an optical image according to claim 1 or 2, wherein each of the wide-angle cameras outputs an azimuth angle and a zenith angle calibrated based on the coordinates of the photographed star. Measurement method. 上記(4)において各画像について所定の許容範囲での一致を確認する方法は、
地心を中心とし上記(2)の高度までを半径とする球に、
各広角カメラの上記設置位置と上記方位角および天頂角、および上記(2)の高度から求めた上記被写体の経度および緯度位置を、投影し、
上記球面での上記被写体の経度および緯度位置が所定の誤差内で一致するまで上記高度を調整するものであることを特徴とする請求項1から3のいずれか1つに記載の、光学画像を用いた雲の高度の計測方法。
In (4) above, the method of confirming the agreement of each image within a predetermined allowable range is as follows.
In a sphere centered on the center of the earth and with a radius up to the altitude of (2) above,
The installation position of each wide-angle camera, the azimuth and zenith angles, and the longitude and latitude positions of the subject obtained from the altitude of (2) above are projected.
The optical image according to any one of claims 1 to 3, wherein the altitude is adjusted until the longitude and latitude positions of the subject on the spherical surface match within a predetermined error. The method of measuring the altitude of the clouds used.
請求項1から4に記載のいずれか1つの光学画像を用いた雲の高度の計測方法を適用して上記被写体の位置である高度、経度および緯度の計測を時間差で行い、上記被写体の位置の時間差から雲の移動速度を求め、この移動速度を風速とするものであることを特徴とする、光学画像を用いた風速の計測方法。 By applying the method for measuring the altitude of clouds using any one of the optical images according to claims 1 to 4, the altitude, longitude and latitude, which are the positions of the subject, are measured with a time lag, and the position of the subject is measured. A method for measuring wind speed using an optical image, characterized in that the moving speed of clouds is obtained from a time difference and this moving speed is used as the wind speed. 上記画像を複数の小区域に区切り、それぞれの小区域ごとに、
(1)雲の高度を求めて、雲の高度の2次元分布を計測するか、または、
(2)雲の高度、経度および緯度の2次元分布の計測を時間差を設けて行い、上記雲の高度、経度および緯度の時間差から雲の移動速度を求め、この移動速度を風速とする計測を行うことで風速の2次元分布を計測する、
ことを特徴とする請求項1から4に記載のいずれか1つの、光学画像を用いた雲の高度の計測方法。
Divide the above image into multiple sub-areas, and for each sub-area,
(1) Find the altitude of the cloud and measure the two-dimensional distribution of the altitude of the cloud, or
(2) The two-dimensional distribution of cloud altitude, longitude and latitude is measured with a time difference, the moving speed of the cloud is obtained from the time difference of the altitude, longitude and latitude of the cloud, and this moving speed is used as the wind speed. By doing so, the two-dimensional distribution of wind speed is measured,
The method for measuring the altitude of a cloud using an optical image according to any one of claims 1 to 4, wherein the altitude of the cloud is measured.
JP2017186398A 2017-09-27 2017-09-27 How to measure cloud altitude and wind speed using optical images Active JP6925619B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017186398A JP6925619B2 (en) 2017-09-27 2017-09-27 How to measure cloud altitude and wind speed using optical images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017186398A JP6925619B2 (en) 2017-09-27 2017-09-27 How to measure cloud altitude and wind speed using optical images

Publications (2)

Publication Number Publication Date
JP2019060754A JP2019060754A (en) 2019-04-18
JP6925619B2 true JP6925619B2 (en) 2021-08-25

Family

ID=66176521

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017186398A Active JP6925619B2 (en) 2017-09-27 2017-09-27 How to measure cloud altitude and wind speed using optical images

Country Status (1)

Country Link
JP (1) JP6925619B2 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021235155A1 (en) * 2020-05-20 2021-11-25 古野電気株式会社 Cloud location calculation system, method, and program
JP7386136B2 (en) * 2020-07-03 2023-11-24 株式会社日立製作所 Cloud height measurement device, measurement point determination method, and cloud type determination method
CN111999523A (en) * 2020-08-18 2020-11-27 盐城工学院 Cloud motion vector measuring device and method
CN112799144B (en) * 2020-12-30 2024-01-16 中国极地研究中心 Geometric calibration method of all-sky imager based on gradient descent method
CN113566848B (en) * 2021-07-27 2023-11-24 中国科学院长春光学精密机械与物理研究所 Automatic star calibration method and system for optical measurement equipment based on Loongson platform

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11101640A (en) * 1997-07-31 1999-04-13 Asahi Optical Co Ltd Camera and calibration method of camera
JP2012242322A (en) * 2011-05-23 2012-12-10 Kansai Electric Power Co Inc:The Aerial object position measuring device, aerial object position measuring system and aerial object position measuring method
JP2013068429A (en) * 2011-09-20 2013-04-18 Kansai Electric Power Co Inc:The Photovoltaic power generation area output estimation apparatus, photovoltaic power generation area output estimation system and photovoltaic power generation area output estimation method
US9001311B2 (en) * 2013-03-15 2015-04-07 Digitalglobe, Inc. Using parallax in remote sensing to determine cloud feature height

Also Published As

Publication number Publication date
JP2019060754A (en) 2019-04-18

Similar Documents

Publication Publication Date Title
JP6925619B2 (en) How to measure cloud altitude and wind speed using optical images
Cavegn et al. Benchmarking high density image matching for oblique airborne imagery
Nguyen et al. Stereographic methods for cloud base height determination using two sky imagers
CN106408601B (en) A kind of binocular fusion localization method and device based on GPS
CN109946729B (en) Aerial target tracking method and device
Sánchez-García et al. C-Pro: A coastal projector monitoring system using terrestrial photogrammetry with a geometric horizon constraint
CA3112187C (en) Optics based multi-dimensional target and multiple object detection and tracking method
AU2018259895A1 (en) Information processing device, information processing method, information processing program, image processing device, and image processing system
Xu et al. An omnidirectional 3D sensor with line laser scanning
Cramer et al. Ultra-high precision UAV-based LiDAR and dense image matching
JP2007322407A (en) Measuring method for displacement, position, attitude by image processing having background as reference
Seiz et al. Cloud mapping from the ground: Use of photogrammetric methods
Haala et al. Hybrid georeferencing of images and LiDAR data for UAV-based point cloud collection at millimetre accuracy
Crispel et al. All-sky photogrammetry techniques to georeference a cloud field
CN104599281A (en) Panoramic image and remote sensing image registration method based on horizontal line orientation consistency
Cavegn et al. A systematic comparison of direct and image-based georeferencing in challenging urban areas
CN109636850B (en) Visible light positioning method for indoor intelligent lamp
Savoy et al. Geo-referencing and stereo calibration of ground-based whole sky imagers using the sun trajectory
Roncella et al. A fixed terrestrial photogrammetric system for landslide monitoring
Cavegn et al. Image-based mobile mapping for 3D urban data capture
Öktem et al. Stereophotogrammetry of oceanic clouds
CN111444385B (en) Electronic map real-time video mosaic method based on image corner matching
Janeiro et al. Advances in cloud base height and wind speed measurement through stereophotogrammetry with low cost consumer cameras
Pelc-Mieczkowska et al. Comparison of selected data acquisition methods for GNSS terrain obstacles modeling
Guntel et al. Accuracy analysis of control point distribution for different terrain types on photogrammetric block

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200818

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210616

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210629

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210728

R150 Certificate of patent or registration of utility model

Ref document number: 6925619

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150