JP7423669B2 - Earth and sky management system - Google Patents

Earth and sky management system Download PDF

Info

Publication number
JP7423669B2
JP7423669B2 JP2022019812A JP2022019812A JP7423669B2 JP 7423669 B2 JP7423669 B2 JP 7423669B2 JP 2022019812 A JP2022019812 A JP 2022019812A JP 2022019812 A JP2022019812 A JP 2022019812A JP 7423669 B2 JP7423669 B2 JP 7423669B2
Authority
JP
Japan
Prior art keywords
ground
abnormal event
flight
monitoring
movement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022019812A
Other languages
Japanese (ja)
Other versions
JP2023117218A (en
Inventor
千聖 片山
悟 三浦
雅嗣 赤尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Osaka Gas Co Ltd
Original Assignee
Osaka Gas Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Osaka Gas Co Ltd filed Critical Osaka Gas Co Ltd
Priority to JP2022019812A priority Critical patent/JP7423669B2/en
Publication of JP2023117218A publication Critical patent/JP2023117218A/en
Application granted granted Critical
Publication of JP7423669B2 publication Critical patent/JP7423669B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Navigation (AREA)
  • Emergency Alarm Devices (AREA)
  • Alarm Systems (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、施設の監視を行う飛行体及び地上移動体を管理する地空管理システムに関する。 The present invention relates to a ground and air management system that manages flying objects and ground moving objects that monitor facilities.

ガス製造プラントや発電プラントなどのインフラ施設の健全性を維持する上で、これらの施設に設けられた各種設備の監視が必要不可欠である。近年、インフラ施設などの大規模施設の点検を行う際に、無人移動車や無人飛行体を利用する試みがなされている。 In order to maintain the health of infrastructure facilities such as gas production plants and power generation plants, it is essential to monitor the various equipment installed in these facilities. In recent years, attempts have been made to use unmanned vehicles and unmanned flying vehicles when inspecting large-scale facilities such as infrastructure facilities.

特許文献1には、監視エリアに設けられた設備を点検して当該監視エリアを監視する無人飛行体及びその飛行制御方法が提案されている。この飛行制御方法は、設備を点検するために予め設定された飛行ルートに従って無人飛行体を飛行させるステップや、設備から漏洩した漏洩対象を無人飛行体に設けられたセンサにより検知するステップ、漏洩対象が漏洩したと判断された場合に無人飛行体の飛行が危険な危険エリアを決定するステップ、決定された危険エリアを回避する新たな飛行ルートを設定するステップ、設定された新たな飛行ルートに従って無人飛行体を飛行させるステップなどを行うようになっている。 Patent Document 1 proposes an unmanned flying vehicle that monitors a monitoring area by inspecting equipment provided in the monitoring area, and a flight control method thereof. This flight control method includes the steps of flying an unmanned flying vehicle according to a preset flight route to inspect the equipment, detecting leakage targets leaked from the equipment using sensors installed on the unmanned flying vehicle, and determining a dangerous area where it is dangerous for the unmanned aerial vehicle to fly if it is determined that there has been a leak, setting a new flight route that avoids the determined dangerous area, and unmanned flight following the set new flight route It is designed to perform steps such as making the aircraft fly.

特許文献2には、飛行体によって取得される情報を用いて、地上移動体の障害のない走行を支援する情報処理システムが提案されている。この情報処理システムは、飛行体によって取得された地形情報と予め定めた移動許可条件とに基づき、現在地と前記目的地との間の地形を、移動許可条件を満たす移動許可領域と移動許可条件を満たさない移動禁止領域とに分け、移動禁止領域を回避するように地上移動体の移動ルートを算出する。 Patent Document 2 proposes an information processing system that uses information acquired by a flying object to support the trouble-free running of a ground moving object. This information processing system determines the terrain between the current location and the destination based on the terrain information acquired by the aircraft and predetermined movement permission conditions, and the movement permission area and movement permission conditions that satisfy the movement permission conditions. The movement route of the ground mobile object is calculated so as to avoid the movement prohibited areas.

特開2019-202682号公報JP2019-202682A 特開2020-180786号公報Japanese Patent Application Publication No. 2020-180786

エネルギー製造施設や化学プラント施設などの大規模施設における設備の監視を行う場合、単独の飛行体や地上移動体では、迅速かつ正確な監視は困難である。特に、監視対象の施設において、ガス漏れ、液漏れ、火災、部材崩壊などの異常事象、あるいは地震、津波、台風などの天災による異常事象が発生した場合、その発生個所の監視は、複数の監視点からの監視が要求されるので、複数の飛行体や地上移動体による監視が必要となる。また、複数の飛行体や地上移動体による施設監視では、飛行体同士の協調、地上移動体同士の協調、飛行体と地上と移動体の間での協調が不可欠となる。しかしながら、特許文献1や特許文献2によるシステムでは、異常事象に対して陸空から互いに協調して動くための方策は提案されていない。 When monitoring equipment in large-scale facilities such as energy production facilities and chemical plant facilities, it is difficult to perform quick and accurate monitoring using a single flying object or ground moving object. In particular, if an abnormal event occurs at a facility to be monitored, such as a gas leak, liquid leak, fire, collapse of a member, or an abnormal event due to a natural disaster such as an earthquake, tsunami, or typhoon, the location of the occurrence must be monitored by multiple monitors. Since monitoring from a single point is required, monitoring by multiple flying or ground vehicles is required. In addition, when monitoring facilities using multiple flying objects or ground moving objects, cooperation among the flying objects, cooperation between ground moving objects, and cooperation between the flying objects, the ground, and the moving objects is essential. However, in the systems disclosed in Patent Document 1 and Patent Document 2, no measures have been proposed for mutually cooperative movement from land and air in response to an abnormal event.

本発明は以上の実情に鑑みなされたものであり、飛行体及び地上移動体が協調して、適切なルートで監視飛行または監視移動することを支援できる地空管理システムの提供を、その目的とする。 The present invention was made in view of the above-mentioned circumstances, and its purpose is to provide a ground and air management system that can support aircraft and ground moving objects to cooperate in monitoring flight or monitoring movement on an appropriate route. do.

施設の監視を行う飛行体及び地上移動体を管理する、本発明による地空管理システムは、前記飛行体の経時的位置を含む飛行情報を管理する飛行情報管理部と、前記地上移動体の経時的位置を含む地上移動情報を管理する地上移動情報管理部と、前記飛行体及び前記地上移動体に搭載された監視機器によって生成された前記施設の監視データを取得する監視データ取得部と、前記監視データに基づいて前記施設に生じた異常事象を決定する異常事象決定部と、前記異常事象の種類と前記異常事象の発生場所と前記飛行情報とに基づいて異常事態発生時の前記飛行体の特殊飛行ルートを生成する特殊飛行ルート生成部と、前記異常事象の種類と前記異常事象の発生場所と前記地上移動情報とに基づいて異常事態発生時の前記地上移動体の特殊移動ルートを生成する特殊移動ルート生成部とを備える。 The ground and air management system according to the present invention, which manages flying objects and ground moving objects that monitor facilities, includes a flight information management section that manages flight information including the chronological position of the flying object, and a flight information management section that manages flight information including the chronological position of the ground moving object. a ground movement information management unit that manages ground movement information including target locations; a monitoring data acquisition unit that obtains monitoring data of the facility generated by monitoring equipment mounted on the flying object and the ground moving object; an abnormal event determination unit that determines an abnormal event that has occurred in the facility based on monitoring data; and an abnormal event determining unit that determines an abnormal event that has occurred in the facility based on monitoring data; a special flight route generation unit that generates a special flight route; and a special flight route generation unit that generates a special movement route for the ground mobile object when an abnormal situation occurs based on the type of the abnormal event, the place where the abnormal event occurs, and the ground movement information. and a special movement route generation section .

この構成によれば、飛行体及び地上移動体の協調した監視活動が可能となり、飛行体及び地上移動体の監視機器(カメラユニットやレーダ機器や気体検出器など)によって生成された監視データを通じて、地上及び空中からの監視対象施設の様子を知ることできる。
監視データは、飛行体の経時的位置を含む飛行情報、または地上移動体の経時的位置を含む地上移動情報とリンクされることにより、三次元空間の経時的な監視状況を示すことが可能である。
また、飛行体や地上移動体の監視機器による監視データから、迅速に、施設に発生した異常事象が見つけ出され、見つけ出された異常事象に応じて、飛行体の適切な飛行ルートや地上移動体の適切な移動ルートが設定されると好都合である。このため、この構成によれば、飛行体及び地上移動体から送られてきた監視データに基づいて、異常事象決定部は、監視対象施設に異常事象が発生しているかどうかを判断することができる。異常事象が発生している場合、異常事象の種類と異常事象の発生場所、及び飛行体の経時的位置を含む飛行情報と地上移動体の経時的位置を含む地上移動情報とに基づいて、飛行体の特殊飛行ルート及び地上移動体の特殊移動ルートが生成される。これにより、種々の異常事象の種類と異常事象の発生場所とに適した、飛行体及び地上移動体の協調した監視活動が可能となる。
According to this configuration, coordinated monitoring activities of the aircraft and the ground moving object are possible, and through the monitoring data generated by the monitoring equipment (camera unit, radar equipment, gas detector, etc.) of the flying object and the ground moving object, It is possible to know the status of the monitored facility from the ground and from the air.
By linking the monitoring data with flight information including the chronological position of the flying object or ground movement information including the chronological position of the ground moving object, it is possible to indicate the chronological monitoring status of the three-dimensional space. be.
In addition, abnormal events that occur in facilities can be quickly detected from monitoring data from monitoring equipment for aircraft and ground moving objects, and appropriate flight routes and ground movement for aircraft can be determined according to the detected abnormal events. It is advantageous if an appropriate route for movement of the body is established. Therefore, according to this configuration, the abnormal event determination unit can determine whether an abnormal event is occurring at the monitored facility based on the monitoring data sent from the flying object and the ground mobile object. . If an abnormal event is occurring, flight control is performed based on the type of abnormal event, the location of the abnormal event, flight information including the position of the aircraft over time, and ground movement information including the position of the ground moving object over time. A special flight route for the body and a special movement route for the ground moving body are generated. This allows for coordinated monitoring activities of aircraft and ground vehicles that are suitable for various types of abnormal events and locations where the abnormal events occur.

階段や床下などを移動する小型地上移動体は、道路を高速で移動することは困難である。また、飛行体の航続時間も通常の道路走行車両の走行時間に比べて短い。このため、本発明では、前記地上移動体には道路走行可能な走行車両が含まれており、前記走行車両以外の前記地上移動体及び前記飛行体は前記走行車両によって運搬される。この構成により、道路走行が苦手な小型地上移動体や飛行体は、監視活動を行う地域まで、走行車両で走行されるので、好都合である。 It is difficult for small terrestrial vehicles that move on stairs or under floors to move at high speed on roads. Furthermore, the flight time of the flying object is shorter than the travel time of a normal road vehicle. Therefore, in the present invention, the ground moving body includes a traveling vehicle capable of traveling on a road, and the ground moving body and the flying object other than the traveling vehicle are transported by the traveling vehicle. With this configuration, small ground moving objects and flying objects that are not good at traveling on roads can be driven by traveling vehicles to areas where monitoring activities are performed, which is convenient.

火災やガス漏れのような異常事象の場合、時間経過とともに異常現象の範囲、異常現象が及ぼす悪影響の範囲が変化する。このため、異常事象の種類によっては、当該異常事象の経時挙動を考慮して、飛行体の特殊飛行ルート及び地上移動体の特殊移動ルートを生成する必要がある。このことから、本発明では、前記異常事象決定部によって決定された前記異常事象の経時挙動を推定する経時挙動推定部が備えられ、前記特殊飛行ルート生成部は、前記特殊飛行ルートを生成する際に前記経時挙動を参照し、前記特殊移動ルート生成部は、前記特殊移動ルートを生成する際に前記経時挙動を参照する。 In the case of an abnormal event such as a fire or a gas leak, the range of the abnormal phenomenon and the extent of its negative effects change over time. Therefore, depending on the type of abnormal event, it is necessary to generate a special flight route for the aircraft and a special movement route for the ground moving object, taking into consideration the behavior of the abnormal event over time. For this reason, the present invention includes a temporal behavior estimating section that estimates the temporal behavior of the abnormal event determined by the abnormal event determining section, and the special flight route generating section, when generating the special flight route. The special movement route generating section refers to the temporal behavior when generating the special movement route.

火災やガス漏れのような異常事象の場合、気候条件、特に風向きや風速によって、異常現象の範囲や異常現象が及ぼす悪影響の範囲(ガス漏れの濃度分布など)が変化する。このため、本発明では、前記施設周辺の気象情報を取得する気象情報取得部が備えられ、前記経時挙動推定部は前記経時挙動の推定時に前記気象情報を参照し、前記特殊飛行ルート生成部は、前記特殊飛行ルートを生成する際に前記気象情報を参照し、前記特殊移動ルート生成部は、前記特殊移動ルートを生成する際に前記気象情報を参照することも提案されている。 In the case of abnormal events such as fires and gas leaks, the range of the abnormal phenomenon and the extent of its negative effects (such as the concentration distribution of gas leaks) change depending on climate conditions, especially wind direction and wind speed. For this reason, the present invention includes a weather information acquisition unit that acquires weather information around the facility, the temporal behavior estimation unit refers to the weather information when estimating the temporal behavior, and the special flight route generation unit It has also been proposed that the special travel route generation unit refers to the weather information when generating the special flight route.

異常事態の発生時に、適正な特殊飛行ルート及び特殊移動ルートを生成する場合、特殊飛行ルート及び特殊移動ルートの出発点を地上移動体や飛行体の現在位置に近い位置とすると、地上移動体や飛行体は特殊飛行ルートや特殊移動ルートに迅速に移行できるので、好都合である。このため、本発明では、前記飛行体に搭載された飛行体自位置算出部によって算出された飛行体自位置を取得する飛行体自位置取得部と、前記地上移動体に搭載された移動体自位置算出部によって算出された移動体自位置を取得する移動体自位置取得部とが備えられ、前記飛行情報管理部は、前記飛行体の前記飛行体自位置に基づいて前記飛行体の前記経時的位置を算出し、前記地上移動情報管理部は、前記地上移動体の前記移動体自位置に基づいて前記地上移動体の前記経時的位置を算出する。これにより、現状の地上移動体や飛行体の位置が時々刻々と把握される。 When generating an appropriate special flight route and special movement route when an abnormal situation occurs, if the starting point of the special flight route and special movement route is set close to the current position of the ground mobile object or aircraft, This is advantageous because the aircraft can quickly transition to a special flight route or special movement route. For this reason, the present invention includes a flying body position acquisition unit that acquires the flying body position calculated by a flying body position calculation unit mounted on the flying body, and a mobile body position acquisition unit mounted on the ground moving body. a mobile object position acquisition section that acquires the mobile object position calculated by the position calculation section, and the flight information management section calculates the elapsed time of the flight object based on the flight object position of the flight object The ground movement information management section calculates the temporal position of the ground moving object based on the moving object's own position of the ground moving object. As a result, the current position of ground moving objects and flying objects can be grasped from moment to moment.

適正な特殊飛行ルートや特殊移動ルートは、多数の条件を設定して、シミュレーションすることで、生成することは可能である。しかしながら、大規模な施設では、異常事象の種類と異常事象の発生場所は、千差万別であり、それに適応する特殊飛行ルートや特殊移動ルートの種類も膨大となるので、そのようなシミュレーションのための高速な演算装置が必要となる。この問題を解決するためには、予め、異常事象の種類と異常事象の発生場所との組み合わせで、基本となる飛行体の飛行パターンと地上移動体の移動パターンとを求め、抽出可能に記録し、必要時には、適正に抽出した飛行パターンと移動パターンに基づいて、実際に用いる飛行体の特殊飛行ルートと地上移動体の特殊移動ルートとを生成することが好ましい。このことから、本発明では、前記異常事象の種類と前記異常事象の発生場所とによって規定されている異常事象発生時の前記飛行体の飛行パターン及び前記地上移動体の移動パターンを抽出可能に記録している異常事象時パターン記録部が備えられ、前記特殊飛行ルート生成部は、前記異常事象の種類と前記異常事象の発生場所とに基づいて抽出された前記飛行パターンを参照して前記飛行体の特殊飛行ルートを生成し、前記特殊移動ルート生成部は、前記異常事象の種類と前記異常事象の発生場所とに基づいて抽出された前記移動パターンを参照して前記地上移動体の特殊移動ルートを生成する。 Appropriate special flight routes and special movement routes can be generated by setting a large number of conditions and simulating them. However, in large-scale facilities, the types of abnormal events and the locations where they occur vary widely, and the types of special flight routes and special movement routes that can be adapted to them are also enormous, so it is difficult to conduct such simulations. A high-speed arithmetic device is required for this purpose. In order to solve this problem, the basic flight pattern of the aircraft and the movement pattern of the ground moving object are determined in advance based on the combination of the type of abnormal event and the location where the abnormal event occurs, and are recorded so that they can be extracted. When necessary, it is preferable to generate a special flight route for a flying object and a special movement route for a ground moving object to be actually used, based on appropriately extracted flight patterns and movement patterns. Therefore, in the present invention, the flight pattern of the aircraft and the movement pattern of the ground mobile object at the time of occurrence of an abnormal event, which are defined by the type of abnormal event and the location of the abnormal event, can be recorded. An abnormal event pattern recording unit is provided, and the special flight route generating unit is configured to generate a pattern for the aircraft by referring to the flight pattern extracted based on the type of the abnormal event and the location where the abnormal event occurs. The special movement route generation unit generates a special movement route for the ground mobile object by referring to the movement pattern extracted based on the type of abnormal event and the location where the abnormal event occurs. generate.

異常事象の種類と規模によっては、異常事象の現場の近くまたは遠くから異常事象の監視を続ける必要がある。逆に、異常事象の種類と規模によっては、地上移動体や飛行体は、監視活動を中止して緊急避難する必要がある。そのような監視活動の続行や緊急避難は、異常事象の発生にともなう混乱を避けるために、前もって規定されたルートで行われることが重要である。このことから、本発明では、前記飛行パターンには、前記飛行体によって前記異常事象を監視するための異常事象監視飛行パターンと、前記飛行体が前記異常事象から避難するための緊急避難飛行パターンとが含まれており、前記移動パターンには、前記地上移動体によって前記異常事象を監視するための異常事象監視移動パターンと、前記飛行体が前記異常事象から避難するための緊急避難移動パターンとが含まれている。 Depending on the type and scale of the abnormal event, it may be necessary to continue monitoring the abnormal event from near or far from the site of the abnormal event. Conversely, depending on the type and scale of the abnormal event, ground vehicles and aircraft may need to cease monitoring activities and evacuate immediately. It is important that such monitoring activities and emergency evacuations be carried out along predetermined routes to avoid confusion in the event of an abnormal event. Therefore, in the present invention, the flight pattern includes an abnormal event monitoring flight pattern for monitoring the abnormal event by the flying object, and an emergency evacuation flight pattern for the flying object to evacuate from the abnormal event. The movement pattern includes an abnormal event monitoring movement pattern for the ground mobile object to monitor the abnormal event, and an emergency evacuation movement pattern for the flight object to evacuate from the abnormal event. include.

火災など異常事象では、ガス漏れは二次災害を引き起こす可能性が高いので、ガス漏れの監視は重要である。しかも、ガス漏れ被害が及ぶ範囲(ガス濃度段階に基づく範囲)は、風向き及び風速に大きく影響される。このことから、本発明では、前記監視機器にはガス検知器が含まれており、前記異常事象にガス漏れが含まれている場合、前記経時挙動推定部は前記経時挙動を推定する際に前記施設周辺の風向き及び風速を参照することが提案される。 Gas leak monitoring is important because gas leaks are likely to cause secondary disasters in the event of an abnormal event such as a fire. Furthermore, the range of gas leak damage (range based on gas concentration levels) is greatly influenced by wind direction and wind speed. For this reason, in the present invention, the monitoring equipment includes a gas detector, and when the abnormal event includes a gas leak, the temporal behavior estimating section estimates the temporal behavior. It is suggested to refer to the wind direction and wind speed around the facility.

飛行体は強風等の天候の影響を受け易く、それにより飛行性能が悪化し、最悪の場合、墜落の可能性もある。飛行体の墜落は、二次災害を引き起こすので、回避しなければならない。このため、本発明では、前記特殊飛行ルート生成部は、前記特殊飛行ルートを生成する際に前記施設周辺の風向き及び風速を参照する。これにより、強風の場合、その影響が最小限となる飛行ルートが採用される。また、地上移動体においても、超小型移動体や歩行型移動体の場合、強風の影響を受け易いので、そのような地上移動体のための特殊移動ルートの生成では、風向き及び風速が参照されることが好ましい。 Aircraft are susceptible to weather conditions such as strong winds, which can deteriorate flight performance and, in the worst case, lead to a crash. A crash of an aircraft causes secondary disasters and must be avoided. Therefore, in the present invention, the special flight route generating section refers to the wind direction and wind speed around the facility when generating the special flight route. As a result, in the event of strong winds, a flight route with minimal impact is adopted. Furthermore, even among ground moving objects, micro-sized moving objects and walking moving objects are easily affected by strong winds, so wind direction and wind speed are referred to when generating special movement routes for such ground moving objects. It is preferable that

飛行体は、地上移動体に比べて航続時間が短く、頻繁に燃料補給または充電が必要となる。この燃料補給または充電のための時間を節約するため、地上移動体に飛行体の離着陸用ポートが備えられると好都合である。地上移動体が飛行体の母港となれば、飛行体を順次送り出すことができる。また、飛行体の母港となる地上移動体が燃料補給機能や充電機能を有すると、さらに好都合である。空中からの監視が必要な場所への飛行体の移動に地上移動体が用いられると、飛行体の航続時間が有効に利用できる。 Aircraft have a shorter cruising time than ground vehicles and require frequent refueling or charging. In order to save time for this refueling or charging, it is advantageous if the ground vehicle is equipped with a takeoff and landing port for the aircraft. If a ground mobile object becomes a home port for a flying object, the flying objects can be sent out one after another. Furthermore, it is even more advantageous if the ground mobile body serving as the home port of the aircraft has a refueling function and a charging function. When a ground vehicle is used to move an aircraft to a location that requires aerial monitoring, the flight time of the aircraft can be effectively utilized.

飛行体による監視飛行は、気候条件、特に風速の影響を受けるため、監視対象地域の風速情報によって、制限される。例えば、風速により飛行体を飛ばすかどうかが判定される。このため、本願発明では、前記飛行体の前記施設の監視活動は、風速を含む気象情報に基づいて制限される。さらに、ガス漏れを伴うような異常事象が発生すれば、地上移動体や飛行体はガス漏れの着火源になる可能性がある。このため、ガス漏れの発生場所だけでなく、風速と風向きによって推定されるガス漏れの拡がりも考慮して、地上移動体や飛行体を発生した異常事象の監視のために活動させるかどうか判定しなければならない。場合によっては、地上移動体や飛行体も異常事象の現場から避難させる。このため、本発明では、前記異常事象にガス漏れが含まれている場合、前記ガス漏れに対する着火の可能性を有する前記飛行体又は地上移動体による監視活動を禁止し、風速及び風向きに基づいて推定される前記ガス漏れが及ぶ範囲からの避難を命じる。 Monitoring flights by flying objects are affected by climatic conditions, particularly wind speed, and are therefore limited by wind speed information in the area to be monitored. For example, it is determined whether to fly the aircraft based on the wind speed. Therefore, in the present invention, the monitoring activity of the facility of the flying object is limited based on weather information including wind speed. Furthermore, if an abnormal event involving a gas leak occurs, a ground vehicle or an aircraft may become an ignition source for the gas leak. For this reason, we consider not only the location of the gas leak, but also the spread of the gas leak estimated based on wind speed and direction, and decide whether to activate ground vehicles or aircraft to monitor the abnormal event that has occurred. There must be. In some cases, ground vehicles and aircraft will also be evacuated from the site of the abnormal event. Therefore, in the present invention, when the abnormal event includes a gas leak, monitoring activities by the flying object or ground moving object that have the possibility of igniting the gas leak are prohibited, and based on the wind speed and direction, Order evacuation from the area affected by the estimated gas leak.

本発明のその他の特徴、作用及び効果は、以下の図面を用いた本発明の説明によって明らかにされる。 Other features, functions, and effects of the present invention will be made clear by the description of the present invention using the following drawings.

施設の監視を行う飛行体及び地上移動体の1つの形態を示す図である。FIG. 2 is a diagram showing one form of a flying object and a ground moving object that monitor a facility. 施設の監視を行う飛行体及び地上移動体の他の1つの形態を示す図である。It is a figure which shows another form of the flying object and ground moving object which monitor a facility. 地上移動体によって運ばれる飛行体を説明する図である。FIG. 2 is a diagram illustrating a flying object carried by a ground moving object. 地空管理システムの実施形態の概略構成を示す機能ブロック図である。FIG. 1 is a functional block diagram showing a schematic configuration of an embodiment of a geo-space management system. 地空管理システムの機能ブロック間のデータや情報の流れを示す情報流れ図である。It is an information flow diagram showing the flow of data and information between functional blocks of the geo-space management system. 地空管理システムにおける監視基本ルーチンの一例を示すフローチャートである。It is a flowchart which shows an example of the monitoring basic routine in a space management system. 地上移動体の監視基本ルーチンの一例を示すフローチャートである。2 is a flowchart illustrating an example of a basic routine for monitoring a terrestrial mobile object. 飛行体の監視基本ルーチンの一例を示すフローチャートである。2 is a flowchart showing an example of a basic routine for monitoring an aircraft. 地空管理部の基本ルーチンの一例を示すフローチャートである。It is a flowchart which shows an example of the basic routine of a space management part. 異常事象発生時処理の一例を示すフローチャートである。3 is a flowchart illustrating an example of processing when an abnormal event occurs.

以下、図面を参照して本発明の一実施形態に係る地空管理システムについて説明する。 DESCRIPTION OF THE PREFERRED EMBODIMENTS A ground and sky management system according to an embodiment of the present invention will be described below with reference to the drawings.

〔地空管理システムの概要〕
この実施形態に係る地空管理システムは、図1と図2とに示すように、監視対象となる施設に対する地上移動体1と飛行体3との監視活動を管理する。地上移動体1には、一般の道路の走行が可能な走行車両と、大型車両が近づけない場所や階段や床下などで移動が可能な特殊な地上移動体1が含まれている。
[Overview of the ground and sky management system]
As shown in FIGS. 1 and 2, the ground and air management system according to this embodiment manages the monitoring activities of a ground mobile object 1 and a flying object 3 for facilities to be monitored. The ground moving bodies 1 include running vehicles that can run on general roads, and special ground moving bodies 1 that can move in places where large vehicles cannot approach, such as on stairs or under floors.

この実施形態では、図1及び図3に示すように、複数の飛行体3は、走行車両として機能する地上移動体1に設けられた離着陸用ポート20に駐機しており、当該地上移動体1によって監視対象領域に運ばれる。少なくとも一部の地上移動体1は飛行体基地(母港)としても機能する。地上移動体1は、車輪式の走行車であり、道路等を高速で移動することができる。なお、図示されていないが、同様に、道路走行が苦手な地上移動体1(例えば、地上ロボットして知られている犬型ロボットやムカデ型ロボットなどの小型地上移動体)も走行車両として機能する地上移動体1に積み込むことができる。もちろん、走行車両以外の地上移動体1に、飛行体3を積み込んでもよい。少なくとも一部の地上移動体1は、小型地上移動体の基地(母港)として機能することができる。この実施形態では、飛行体3は、高低差が大きい設備の監視を行い、地上ロボットは、高低差の比較的小さな歩廊や階段がある設備の監視を行う。小型車両である地上移動体1は、比較的走行が容易な道路や空き地に設けられている設備を監視する。以下の記載では、走行車両、小型車両、地上ロボットは、地上移動体1として総称される。 In this embodiment, as shown in FIGS. 1 and 3, a plurality of flying objects 3 are parked at a takeoff and landing port 20 provided on a ground moving object 1 that functions as a traveling vehicle. 1 to the monitored area. At least some of the ground mobile objects 1 also function as an aircraft base (homeport). The ground vehicle 1 is a wheeled vehicle and can move at high speed on roads and the like. Although not shown, a ground moving object 1 that is not good at driving on roads (for example, a small ground moving object such as a dog-shaped robot or a centipede-shaped robot known as a ground robot) can also function as a running vehicle. It can be loaded onto a ground vehicle 1. Of course, the flying object 3 may be loaded onto a ground moving object 1 other than a traveling vehicle. At least some of the terrestrial vehicles 1 can function as bases (homeports) for small terrestrial vehicles. In this embodiment, the flying object 3 monitors equipment that has a large difference in height, and the ground robot monitors equipment that has a walkway or stairs that have a relatively small difference in height. The ground mobile body 1, which is a small vehicle, monitors equipment installed on roads or vacant lots where traveling is relatively easy. In the following description, a traveling vehicle, a small vehicle, and a ground robot are collectively referred to as a ground vehicle 1.

図2に示すように、地上移動体1が飛行体3の監視対象領域に到着すると、各飛行体3は離着陸用ポート20を離陸し、それぞれに設定されている飛行ルートに沿って、施設の設備群を監視する監視飛行を行う。監視飛行が終了した飛行体3は、再び地上移動体1の離着陸用ポート20に着陸する。飛行体3の離陸地点と着陸地点は異なっていてもよい。その間、地上移動体1は、地上から施設を監視する。 As shown in FIG. 2, when the ground mobile object 1 arrives at the area to be monitored by the flying object 3, each flying object 3 takes off from the takeoff and landing port 20 and follows the flight route set for each one of the facilities. Conducts surveillance flights to monitor equipment groups. After completing the monitoring flight, the flying object 3 lands again at the takeoff and landing port 20 of the ground mobile object 1. The takeoff point and landing point of the flying object 3 may be different. Meanwhile, the ground mobile body 1 monitors the facility from the ground.

通常の監視活動では、地上移動体1は予め設定された通常の移動ルートで移動し、飛行体3も予め設定された通常の飛行ルートで飛行する。施設の設備に異常事象が発生した場合には、異常事象に応じて設定される特殊移動ルートに基づいて地上移動体1は移動し、飛行体3も異常事象に応じて設定される特殊飛行ルートに基づいて飛行する。 In normal monitoring activities, the ground mobile object 1 moves along a preset normal movement route, and the flying object 3 also flies along a preset normal flight route. When an abnormal event occurs in the facility equipment, the ground mobile object 1 moves based on a special movement route set according to the abnormal event, and the flying object 3 also follows a special flight route set according to the abnormal event. Fly based on.

なお、この実施形態において、監視対象は、ガスタンクなどを備えたガス関連プラントであるが、これに限られるものではなく、化学コンビナートや発電プラントなどのインフラ施設といった大規模施設が広く監視対象施設となり得る。また、地震、津波、台風などの天災による種々の施設(民家も含む)の被害も監視対象となる。 In this embodiment, the target of monitoring is a gas-related plant equipped with gas tanks, etc., but it is not limited to this, and large-scale facilities such as infrastructure facilities such as chemical complexes and power generation plants can be widely monitored. obtain. Additionally, damage to various facilities (including private homes) due to natural disasters such as earthquakes, tsunamis, and typhoons will also be monitored.

〔地空管理システムの構成〕
図4と図5とに示すように、本実施形態における地空管理システムは、地上移動体1と、飛行体3と、地空管理コンピュータ5とを備えている。地上移動体1と、飛行体3と、地空管理コンピュータ5との間では、各種データや情報、各種指令が、無線通信で送受信可能である。また、少なくとも地空管理コンピュータ5は、インターネット等のデータ回線を通じて、施設内の情報提供サーバや遠隔地の情報提供サーバとデータ交換可能に接続可能である。
[Configuration of the geological management system]
As shown in FIGS. 4 and 5, the ground and air management system in this embodiment includes a ground mobile object 1, a flying object 3, and a ground and air management computer 5. Various data, information, and various commands can be transmitted and received by wireless communication between the ground moving object 1, the flying object 3, and the ground and air management computer 5. Further, at least the land and sky management computer 5 can be connected to an information providing server within the facility or an information providing server at a remote location through a data line such as the Internet so as to enable data exchange.

飛行体3は、通信部30、飛行体自位置算出部31、飛行制御部32、監視機器33を備えている。通信部30は、他の飛行体3、地上移動体1、地空管理コンピュータ5などと、通信を行う。飛行体自位置算出部31は、飛行体3に搭載されている衛星測位デバイスや慣性航法デバイスからの測位信号を用いて、自身の現在位置である飛行体自位置を算出する。飛行体自位置は、自らの飛行制御のために用いられるとともに、通信部30を通じて、他の飛行体3、地上移動体1、地空管理コンピュータ5に送られる。飛行制御部32は、自らが備える飛行制御プログラム、地上移動体1や地空管理コンピュータ5から送られてくる飛行指令に基づいて、飛行体3の飛行を制御する。 The flying object 3 includes a communication section 30, a flying object self-position calculation section 31, a flight control section 32, and a monitoring device 33. The communication unit 30 communicates with other flying objects 3, ground moving objects 1, ground and air management computers 5, and the like. The flight object self-position calculation unit 31 uses positioning signals from a satellite positioning device or an inertial navigation device mounted on the flight object 3 to calculate the flight object own position, which is its own current position. The aircraft's own position is used for its own flight control, and is also sent to other aircraft 3, ground mobile objects 1, and ground and air management computer 5 through the communication section 30. The flight control unit 32 controls the flight of the flying object 3 based on its own flight control program and flight commands sent from the ground moving object 1 and the ground and air management computer 5.

本実施形態では、飛行体3に搭載された監視機器33として、ガス検知器331とカメラユニット332とが備えられている。カメラユニット332は、カメラ本体、カメラ本体を姿勢変更可能に支持するカメラマウント、撮影画像を画像処理し、カメラ姿勢と飛行体自位置とを属性値とする撮影画像データを生成する。撮影画像データには、静止画像及び動画が含まれる。ガス検知器331によるガス検知結果と撮影画像データとは、空中監視データとして、通信部30を通じて、地上移動体1や地空管理コンピュータ5に送られる。カメラユニット332は、飛行障害物の検出にも利用することができる。また、レーザ等の専用の飛行障害物検出機器を備えてもよい。検出された飛行障害物(他の飛行体3も含まれる)の情報は、障害物回避のために飛行制御部32に与えられる。 In this embodiment, the monitoring equipment 33 mounted on the aircraft 3 includes a gas detector 331 and a camera unit 332. The camera unit 332 processes a camera body, a camera mount that supports the camera body so that its posture can be changed, and a photographed image, and generates photographed image data having the camera posture and the aircraft's own position as attribute values. The photographed image data includes still images and moving images. The gas detection result by the gas detector 331 and the photographed image data are sent to the ground mobile object 1 and the ground and air management computer 5 through the communication unit 30 as aerial surveillance data. Camera unit 332 can also be used to detect flying obstacles. Further, a dedicated flight obstacle detection device such as a laser may be provided. Information on detected flight obstacles (including other flying objects 3) is given to the flight control unit 32 for obstacle avoidance.

地上移動体1は、通信部10、移動体自位置算出部11、移動制御部12、監視機器13を備えている。通信部10は、他の地上移動体1、飛行体3、地空管理コンピュータ5、などと通信を行う。地上移動体1は、自動走行可能な車両に備えられてるナビゲーションユニットと同様な測位ユニットを備えており、自車の現在位置である移動体自位置を算出することができる。したがって、この測位ユニットは移動体自位置算出部11を含んでいる。移動体自位置は、自らの移動制御のために用いられるとともに、通信部10を通じて、他の地上移動体1や飛行体3や地空管理コンピュータ5に送られる。移動制御部12は、自動走行可能な車両に備えられてる自動走行制御部と同等な機能を有し、自らが備える自動走行制御プログラム、地空管理コンピュータ5から送られてくる移動指令に基づいて、地上移動体1の移動(走行)を制御する。なお、地上移動体1には、手動走行制御部も備えられており、運転者による操縦によって走行制御することも可能である。なお、地上移動体1のカメラユニット132も、移動障害物の検出にも利用することができる。また、レーザや超音波等の専用の移動障害物検出機器を備えてもよい。検出された移動障害物の情報は、障害物回避のために移動制御部12に与えられる。 The ground mobile object 1 includes a communication section 10, a mobile object position calculation section 11, a movement control section 12, and a monitoring device 13. The communication unit 10 communicates with other ground moving objects 1, flying objects 3, ground and air management computers 5, and the like. The ground mobile body 1 is equipped with a positioning unit similar to a navigation unit included in a vehicle capable of automatically driving, and can calculate the mobile body's own position, which is the current position of its own vehicle. Therefore, this positioning unit includes a mobile body position calculation section 11. The mobile object's own position is used for its own movement control, and is also sent to other ground mobile objects 1, aircraft 3, and ground and air management computer 5 through the communication section 10. The movement control unit 12 has the same function as an automatic driving control unit included in a vehicle capable of automatically driving, and based on its own automatic driving control program and movement commands sent from the ground and air management computer 5. , controls the movement (travel) of the ground vehicle 1. The ground vehicle 1 is also equipped with a manual travel control section, and can be controlled by the driver. Note that the camera unit 132 of the ground mobile object 1 can also be used to detect moving obstacles. Further, a dedicated moving obstacle detection device such as a laser or an ultrasonic device may be provided. Information on the detected moving obstacle is given to the movement control unit 12 for obstacle avoidance.

地上移動体1に搭載された監視機器13として、ガス検知器131とカメラユニット132とを備えている。カメラユニット132は、カメラ本体、カメラ本体を姿勢変更可能に支持するカメラマウント、撮影画像を画像処理し、カメラ姿勢と地上移動体自位置とを属性値とする撮影画像データを生成する。撮影画像データには、静止画像及び動画が含まれる。但し、地上移動体1に搭載されているカメラユニット132は、飛行体3に搭載されているカメラユニット332とは、異なる大型であり、解像度の高い大画面の画像を取得することができる。ガス検知器131によるガス検知結果と撮影画像データとは、移動体監視データとして、通信部10を通じて、他の地上移動体1や地空管理コンピュータ5に送られる。 The monitoring equipment 13 mounted on the ground mobile body 1 includes a gas detector 131 and a camera unit 132. The camera unit 132 processes a camera body, a camera mount that supports the camera body so that its posture can be changed, and a photographed image, and generates photographed image data whose attribute values are the camera posture and the position of the ground mobile object. The photographed image data includes still images and moving images. However, the camera unit 132 mounted on the ground moving object 1 is different in size from the camera unit 332 mounted on the flying object 3, and is capable of acquiring a large-screen image with high resolution. The gas detection result by the gas detector 131 and the photographed image data are sent to other ground mobile bodies 1 and the ground and sky management computer 5 through the communication unit 10 as mobile body monitoring data.

地空管理コンピュータ5は、通信部50、気象情報取得部51、飛行体自位置取得部52、移動体自位置取得部53、地空情報管理部6を備えている。さらに、地空管理コンピュータ5は、飛行体3から送られてきた空中監視データ及び地上移動体1から送られてきた地上監視データ、さらに監視対象施設に配置された監視機器から得られた監視データ、監視サービスセンタ100から与えられた監視データに基づいて異常事象を決定する機能、異常事態発生時の飛行体3の特殊飛行ルート及び地上移動体1の特殊移動ルートを生成する機能を有する。 The earth and sky management computer 5 includes a communication section 50, a weather information acquisition section 51, a flying object position acquisition section 52, a mobile object position acquisition section 53, and a earth and air information management section 6. Furthermore, the ground and air management computer 5 receives aerial surveillance data sent from the flying object 3, ground monitoring data sent from the ground mobile object 1, and monitoring data obtained from monitoring equipment placed at the facility to be monitored. , a function of determining an abnormal event based on monitoring data given from the monitoring service center 100, and a function of generating a special flight route for the flying object 3 and a special movement route for the ground mobile object 1 when an abnormal situation occurs.

通信部50は、飛行体3や地上移動体1との通信、施設内の情報提供サーバや遠隔地の情報提供サーバとの通信を行う。気象情報取得部51は、気象サービスサーバや施設内の気象情報検出装置から送られてくる気象情報を取得する。飛行体自位置取得部52は、飛行体3から送られてくる飛行体自位置を取得し、移動体自位置取得部53から送られてくる移動体自位置を取得する。 The communication unit 50 communicates with the flying object 3 and the ground moving object 1, and with an information providing server in a facility and an information providing server in a remote location. The weather information acquisition unit 51 acquires weather information sent from a weather service server or a weather information detection device in a facility. The flying object position acquisition section 52 acquires the flying object position sent from the flying object 3, and acquires the moving object position sent from the moving object position acquisition section 53.

地空情報管理部6は、飛行情報管理部6Aと地上移動情報管理部6Bとを備えている。飛行情報管理部6Aは飛行体3の経時的位置や飛行可能時間(残燃料や残バッテリ容量などに基づく)を含む飛行情報を取得して飛行体3の監視飛行を管理する。地上移動情報管理部6Bは、地上移動体1(小型地上移動体も含む)の経時的位置や移動可能時間(残燃料や残バッテリ容量などに基づく)を含む移動情報を取得して地上移動体1の監視移動を管理する。小型地上移動体の移動情報は、小型地上移動体の基地(母港)となっている地上移動体1においても管理されている。飛行情報は、飛行体3の発進基地(母港)となっている地上移動体1にも与えられる。さらに、飛行情報管理部6Aは、飛行***置追跡部61と飛行指令生成部62とを備えている。さらに、飛行情報管理部6Aは、飛行計画データベース63を利用する。飛行計画データベース63は、地空管理コンピュータ5内に構築されてもよいし、他の外部のコンピュータに構築されてもよい。飛行***置追跡部61は、各飛行体3のために設定されている飛行計画を飛行計画データベース63から読み出し、当該飛行計画に記述されている時刻と飛行位置とに基づいて、各飛行体3の経時的位置(現在位置)を推定して記録する。さらに、この経時的位置は、飛行体自位置取得部52によって取得された飛行体自位置によって修正される。飛行指令生成部62は、飛行体自位置が飛行計画における時刻と飛行位置とに一致するように、飛行体3に飛行指令を与える。さらに、飛行指令生成部62は、異常事態発生時に、各飛行体3に割り当てられる特殊飛行ルートに沿って飛行するように、飛行体3に飛行指令を与える。 The ground and air information management section 6 includes a flight information management section 6A and a ground movement information management section 6B. The flight information management unit 6A acquires flight information including the chronological position of the aircraft 3 and flight time (based on remaining fuel, remaining battery capacity, etc.) and manages the monitoring flight of the aircraft 3. The ground movement information management unit 6B acquires movement information including the chronological position and movable time (based on remaining fuel, remaining battery capacity, etc.) of the ground moving object 1 (including small ground moving objects), and Manage the monitoring movement of 1. The movement information of the small ground moving object is also managed in the ground moving object 1, which is the base (home port) of the small ground moving object. The flight information is also given to the ground mobile object 1 serving as the starting base (home port) of the flying object 3. Further, the flight information management section 6A includes a flying object position tracking section 61 and a flight command generation section 62. Further, the flight information management section 6A utilizes a flight plan database 63. The flight plan database 63 may be constructed within the ground and air management computer 5, or may be constructed on another external computer. The flight object position tracking unit 61 reads the flight plan set for each flight object 3 from the flight plan database 63, and based on the time and flight position described in the flight plan, Estimate and record the chronological position (current position) of Further, this position over time is corrected by the aircraft position acquired by the aircraft position acquisition unit 52. The flight command generation unit 62 gives a flight command to the flying object 3 so that the flying object's own position matches the time and flight position in the flight plan. Further, the flight command generation unit 62 gives a flight command to the flying objects 3 to fly along a special flight route assigned to each flying object 3 when an abnormal situation occurs.

地上移動情報管理部6Bは、移動***置追跡部64と移動指令生成部65とを備えている。さらに、地上移動情報管理部6Bは、地上移動計画データベース66を利用する。地上移動計画データベース66も、地空管理コンピュータ5内に構築されてもよいし、他の外部のコンピュータに構築されてもよい。移動***置追跡部64は、各地上移動体1のために設定されている地上移動計画を地上移動計画データベース66から読み出し、当該地上移動計画に記述されている時刻と地上移動位置とに基づいて、各地上移動体1の経時的位置(現在位置)を推定して記録する。さらに、この経時的位置は、移動体自位置取得部53によって取得された移動体自位置によって修正される。移動指令生成部65は、移動体自位置が地上移動計画における時刻と地上移動位置とに一致するように、地上移動体1に飛行指令を与える。さらに、移動指令生成部65は、異常事態発生時に、各地上移動体1に割り当てられる特殊移動ルートに沿って移動するように、地上移動体1に移動指令を与える。 The ground movement information management section 6B includes a moving body position tracking section 64 and a movement command generation section 65. Furthermore, the ground movement information management section 6B utilizes the ground movement plan database 66. The ground movement plan database 66 may also be constructed within the ground and air management computer 5, or may be constructed on another external computer. The mobile object position tracking section 64 reads the ground movement plan set for each ground movement object 1 from the ground movement plan database 66, and based on the time and ground movement position described in the ground movement plan. , the temporal position (current position) of each terrestrial mobile object 1 is estimated and recorded. Further, this position over time is corrected based on the mobile body position acquired by the mobile body position acquisition unit 53. The movement command generation unit 65 gives a flight command to the ground mobile body 1 so that the position of the mobile body coincides with the time and ground movement position in the ground movement plan. Further, the movement command generation unit 65 gives a movement command to the ground mobile body 1 to move along a special movement route assigned to each ground mobile body 1 when an abnormal situation occurs.

地空管理コンピュータ5は、空中監視データ及び地上監視データに基づいて異常事象を決定する機能を実現するために、監視データ取得部54と、異常事象決定部55と、経時挙動推定部58とを備えている。監視データ取得部54は、取得した空中監視データ及び地上監視データ、さらに監視対象施設に配置された監視機器から得られた監視データ、監視サービスセンタ100から与えられた監視データを監視時刻と監視位置とで処理して、時系列で整理された監視データを生成して、異常事象決定部55に与える。異常事象決定部55は、監視データ取得部54から与えられた監視データ、及び当該監視データから生成された特徴データに基づいて、監視対象の施設において、何らかの異常事象が発生しているかどうかを、決定する。さらに、経時挙動推定部58は、異常事象決定部55によって決定された異常事象の経時挙動、例えば、異常事象の拡がりを推定する。その際、異常事象が風の影響を受ける火災やガス漏れのような場合、気象情報に基づく異常事象の発生場所周辺の風向き及び風速が参照される。 The ground and air management computer 5 includes a monitoring data acquisition unit 54, an abnormal event determination unit 55, and a temporal behavior estimation unit 58 in order to realize a function of determining abnormal events based on aerial monitoring data and ground monitoring data. We are prepared. The surveillance data acquisition unit 54 collects the acquired aerial surveillance data and ground surveillance data, the surveillance data obtained from surveillance equipment placed at the monitored facility, and the surveillance data given from the surveillance service center 100 at a surveillance time and a surveillance position. This process is performed to generate monitoring data organized in chronological order, and the generated monitoring data is provided to the abnormal event determination unit 55. The abnormal event determination unit 55 determines whether any abnormal event is occurring in the facility to be monitored, based on the monitoring data given from the monitoring data acquisition unit 54 and the characteristic data generated from the monitoring data. decide. Further, the temporal behavior estimating unit 58 estimates the temporal behavior of the abnormal event determined by the abnormal event determining unit 55, for example, the spread of the abnormal event. At this time, if the abnormal event is a fire or gas leak that is affected by wind, the wind direction and wind speed around the location of the abnormal event based on weather information is referenced.

地空情報管理部6は、異常事態発生時の飛行体3の特殊飛行ルート及び地上移動体1の特殊移動ルートを生成する機能を実現するために、特殊飛行ルート生成部70と特殊移動ルート生成部80と異常事象時パターン記録部78(図5参照)とを備えている。異常事象時パターン記録部78は、異常事象時飛行パターンを抽出可能に記録している異常事象時飛行パターン記録部71と、異常事象時移動パターンを抽出可能に記録している異常事象時移動パターン記録部81とからなる。 In order to realize the function of generating a special flight route for the flying object 3 and a special movement route for the ground mobile object 1 when an abnormal situation occurs, the ground and air information management section 6 works with the special flight route generation section 70 to generate a special movement route. 80 and an abnormal event pattern recording section 78 (see FIG. 5). The abnormal event pattern recording unit 78 includes an abnormal event flight pattern recording unit 71 that records the abnormal event flight pattern in an extractable manner, and an abnormal event travel pattern that extractably records the abnormal event travel pattern. It consists of a recording section 81.

異常事象時飛行パターン記録部71には、異常事象の種類と異常事象の発生場所とによって規定されている異常事象発生時の飛行体3の多数の飛行パターンが記録されている。この飛行パターンは、異常事象の状況を空中から監視するために適切である飛行体3の三次元空間におけるフォーメーションを示している。同様に、異常事象時移動パターン記録部81には、異常事象の種類と異常事象の発生場所とによって規定されている異常事象発生時の地上移動体1の多数の移動パターンが記録されている。この移動パターンも、異常事象の状況を地上から監視するために適切である地上移動体1の平面的なフォーメーションを示している。 The abnormal event flight pattern recording section 71 records a large number of flight patterns of the aircraft 3 at the time of occurrence of an abnormal event, which are defined by the type of abnormal event and the location where the abnormal event occurs. This flight pattern shows a formation of the aircraft 3 in three-dimensional space that is suitable for monitoring the situation of an abnormal event from the air. Similarly, the abnormal event movement pattern recording unit 81 records a large number of movement patterns of the ground mobile object 1 when an abnormal event occurs, which are defined by the type of abnormal event and the location where the abnormal event occurs. This movement pattern also shows a planar formation of the ground mobile object 1 that is suitable for monitoring the situation of an abnormal event from the ground.

特殊飛行ルート生成部70は、まず、異常事象の種類、異常事象の発生場所、異常事象の広がり、異常事象の危険度、利用可能な飛行体3の数量、利用可能な飛行体3に搭載されている監視機器33の種類などを抽出条件として、最適な飛行パターンを抽出する。さらに、特殊飛行ルート生成部70は、抽出された飛行パターンをベースとして、飛行体3の特殊飛行ルートを生成し、飛行情報管理部6Aの飛行指令生成部62に与える。飛行体3は、風の影響を受けるので、強風が発生している場合には、異常事象が発生している施設周辺の風向き及び風速が特殊飛行ルートの生成の際に考慮される。飛行指令生成部62は、特殊飛行ルートと利用可能な飛行体3の現在位置とに基づいて、各飛行体3に対する飛行指令を生成して、各飛行体3に与える。つまり、異常事象が発生した場合、当該異常事象の経時的な挙動も考慮して、異常事象が飛行体3の監視活動に影響を与えるかどうかが判定され、影響がないと判定された場合、飛行体3の監視活動が継続され、影響があると判定された場合、飛行体3の監視活動が中止される。 The special flight route generation unit 70 first calculates the type of abnormal event, the place where the abnormal event occurs, the spread of the abnormal event, the risk level of the abnormal event, the number of available flying vehicles 3, and the number of aircraft mounted on the available flying vehicles 3. The optimal flight pattern is extracted using the type of monitoring equipment 33 used as extraction conditions. Further, the special flight route generation section 70 generates a special flight route for the flying object 3 based on the extracted flight pattern, and provides it to the flight command generation section 62 of the flight information management section 6A. Since the flying object 3 is affected by wind, when strong winds occur, the wind direction and wind speed around the facility where the abnormal event is occurring are taken into consideration when generating the special flight route. The flight command generation unit 62 generates a flight command for each flying object 3 based on the special flight route and the current position of the available flying object 3, and gives it to each flying object 3. In other words, when an abnormal event occurs, it is determined whether the abnormal event will affect the monitoring activities of the aircraft 3, taking into account the behavior of the abnormal event over time, and if it is determined that there is no impact, The monitoring activity of the flying object 3 is continued, and if it is determined that there is an impact, the monitoring activity of the flying object 3 is stopped.

同様に、特殊移動ルート生成部80は、異常事象の種類、異常事象の発生場所、異常事象の広がり、異常事象の危険度、利用可能な地上移動体1の数量、利用可能な地上移動体1に搭載されている監視機器13の種類などを抽出条件として、最適な移動パターンを抽出する。さらに、特殊移動ルート生成部80は、抽出された移動パターンをベースとして、地上移動体1の特殊移動ルートを生成し、地上移動情報管理部6Bの移動指令生成部65に与える。移動指令生成部65は、特殊移動ルートと利用可能な地上移動体1の現在位置とに基づいて、各地上移動体1に対する移動指令を生成して、各地上移動体1に与える。つまり、異常事象が発生した場合、当該異常事象の経時的な挙動も考慮して、異常事象が地上移動体1の監視活動に影響を与えるかどうかが判定され、影響がないと判定された場合、地上移動体1の監視活動が継続され、影響があると判定された場合、地上移動体1の監視活動が中止される。 Similarly, the special movement route generation unit 80 generates information such as the type of abnormal event, the location where the abnormal event occurs, the spread of the abnormal event, the degree of risk of the abnormal event, the number of available ground moving objects 1, and the number of available ground moving objects 1. The optimal movement pattern is extracted using the type of monitoring equipment 13 installed in the vehicle as extraction conditions. Further, the special movement route generation section 80 generates a special movement route for the ground mobile object 1 based on the extracted movement pattern, and provides it to the movement command generation section 65 of the ground movement information management section 6B. The movement command generation unit 65 generates a movement command for each terrestrial mobile object 1 based on the special movement route and the current position of the available terrestrial mobile object 1, and gives it to each terrestrial mobile object 1. In other words, when an abnormal event occurs, it is determined whether the abnormal event will affect the monitoring activities of the ground mobile object 1, taking into account the behavior of the abnormal event over time, and if it is determined that there is no impact. , the monitoring activity of the ground moving body 1 is continued, and if it is determined that there is an influence, the monitoring activity of the ground moving body 1 is stopped.

異常事象の種類と規模によっては、地上移動体1や飛行体3は、監視活動を中止して緊急避難する必要がある。このような緊急避難も、現場の混乱を回避するために、異常事象の種類と規模に応じた適切なフォーメーションをとる必要がある。このため、特殊飛行ルート生成部70が特殊飛行ルートの作成のために用いる飛行パターンには、飛行体3が異常事象を監視するための異常事象監視飛行パターンだけでなく、飛行体3が異常事象から避難するための緊急避難飛行パターンも含まれている。同様に、特殊移動ルート生成部80が特殊移動ルートの作成のために用いる移動パターンには、飛行体3が異常事象を監視するための異常事象監視移動パターンだけでなく、地上移動体1が異常事象から避難するための緊急避難移動パターンも含まれている。 Depending on the type and scale of the abnormal event, the ground mobile object 1 or the flying object 3 may need to stop monitoring activities and take an emergency evacuation. In such emergency evacuation, it is necessary to take appropriate formations depending on the type and scale of the abnormal event in order to avoid confusion at the scene. Therefore, the flight pattern used by the special flight route generation unit 70 to create the special flight route includes not only an abnormal event monitoring flight pattern for the flight object 3 to monitor abnormal events, but also an abnormal event monitoring flight pattern for the flight object 3 to monitor abnormal events. It also includes an emergency evacuation flight pattern for evacuating from. Similarly, the movement patterns used by the special movement route generation unit 80 to create the special movement route include not only an abnormal event monitoring movement pattern for the flight object 3 to monitor abnormal events, but also an abnormal event monitoring movement pattern for the flight object 3 to monitor abnormal events. Emergency evacuation movement patterns for evacuating from the event are also included.

次に、図6のフローチャートを用いて、本実施形態の地空管理システムによる施設監視活動の基本的なルーチンを説明する。まず、本地空管理システムの駐屯所において、地上移動体1の離着陸用ポート20に所定台数の飛行体3を積み込んで、監視対象の施設に向けて出発する(#01)。 Next, the basic routine of facility monitoring activities by the ground and sky management system of this embodiment will be explained using the flowchart of FIG. First, at the garrison of the local air management system, a predetermined number of flying objects 3 are loaded into the takeoff and landing ports 20 of the ground moving objects 1, and they depart for the facility to be monitored (#01).

少なくとも1台の地上移動体1が、監視対象の施設に到着すると、通常の地上監視計画に基づく地上移動体1の通常監視移動が開始される(#02)。さらに、地上移動体1が飛行体3による監視活動が予定されているエリアに達すると(#03のYes分岐)、飛行体3が地上移動体1の離着陸用ポート20から離陸し(#04)、空中監視が行われる(#05)。通常の飛行監視計画に基づく飛行体3の空中監視が終了すると、飛行体3は、地上移動体1の離着陸用ポート20に着陸する(#06)。ステップ#02からステップ#06に示す、地上移動体1と飛行体3とによる監視活動が続けられる。この監視活動が終了すれば(#07のYes分岐)、地上移動体1と飛行体3とは、駐屯所に帰還する(#08)。 When at least one ground moving object 1 arrives at the facility to be monitored, normal monitoring movement of the ground moving object 1 based on a normal ground monitoring plan is started (#02). Furthermore, when the ground vehicle 1 reaches the area where the flight vehicle 3 is scheduled to carry out monitoring activities (Yes branch of #03), the flight vehicle 3 takes off from the takeoff and landing port 20 of the ground vehicle 1 (#04). , aerial surveillance is performed (#05). When the aerial monitoring of the flying object 3 based on the normal flight monitoring plan is completed, the flying object 3 lands at the takeoff and landing port 20 of the ground mobile object 1 (#06). The monitoring activities by the ground mobile object 1 and the flying object 3 shown in steps #02 to #06 are continued. When this monitoring activity is completed (Yes branch of #07), the ground mobile object 1 and the flying object 3 return to the military base (#08).

次に、図7のフローチャートを用いて、地上移動体1の通常監視活動を規定する基本的な監視ルーチンを説明する。まず、地上移動体1は、地空管理コンピュータ5から、地上監視のための移動計画を取得する(#11)。取得した移動計画に基づいて、監視対象へ移動する(#12)。この移動には、運転者によって運転されるか、あるいは自動操縦される大型の走行車両としての地上移動体1が用いられる。小型走行車や移動ロボット(犬型ロボット、ムカデ型ロボットなど)は、母移動体としての大型走行車に積み込まれ、監視現場で降ろされ、その後はリモコンまたは自動で移動する。地上移動体1による地上監視が開始されると(#13)、地上移動体1に搭載されている監視機器13からの監視信号に基づいて、地上監視データが生成され(#14)、生成された地上監視データは地空管理コンピュータ5に送られる(#15)。移動計画に基づく通常移動ルートでの監視が終了すると(#16のYes分岐)、小型走行車や移動ロボットは、母移動体であるの大型走行車に戻り、大型走行車に積み込まれて、駐屯所に帰還する(#17)。なお、ここでは、大型走行車、小型走行車、移動ロボットの少なくとも1つが地上移動体1である。 Next, a basic monitoring routine that defines normal monitoring activities of the ground mobile object 1 will be explained using the flowchart of FIG. First, the ground mobile object 1 acquires a movement plan for ground monitoring from the ground and air management computer 5 (#11). Based on the acquired movement plan, move to the monitoring target (#12). For this movement, a ground vehicle 1 is used, which is a large traveling vehicle that is driven by a driver or automatically operated. Small vehicles and mobile robots (dog-shaped robots, centipede-shaped robots, etc.) are loaded onto large vehicles that serve as mother vehicles, unloaded at monitoring sites, and then moved by remote control or automatically. When ground monitoring by the ground mobile object 1 is started (#13), ground monitoring data is generated based on the monitoring signal from the monitoring equipment 13 mounted on the ground mobile object 1 (#14). The ground monitoring data is sent to the ground and air management computer 5 (#15). When the monitoring on the normal movement route based on the movement plan is completed (Yes branch of #16), the small mobile vehicle or mobile robot returns to the large mobile vehicle that is the mother mobile object, is loaded into the large mobile vehicle, and is parked. Return to the place (#17). Note that, here, at least one of a large vehicle, a small vehicle, and a mobile robot is the ground vehicle 1.

次に、図8のフローチャートを用いて、飛行体3の通常監視活動を規定する基本的な監視ルーチンを説明する。まず、飛行体3は、地空管理コンピュータ5から、空中監視のための飛行計画を取得する(#21)。取得した飛行計画に基づく監視対象が存在する場所に地上移動体1が到着すると、離着陸用ポート20から離陸する(#22)。なお、地上移動体1の離着陸用ポート20に駐機する全ての飛行体3が同じ場所で離陸するとは限らない。各飛行体3が別の場所で離陸し、別の場所で着陸してもよい。飛行体3が監視飛行を行い、飛行体3による空中監視が開始されると(#23)、飛行体3に搭載されている監視機器13からの監視信号に基づいて、空中監視データが生成され(#24)、生成された空中監視データは地空管理コンピュータ5に送られる(#25)。この通常飛行ルートでの空中監視が終了すると、飛行体3は、離着陸用ポート20に着陸して、次の監視対象が存在する場所に移動し、ステップ#22からステップ#25の監視飛行を繰り返す。飛行計画に基づく通常飛行ルートでの全て監視が終了すると(#26のYes分岐)、地上移動体1の離着陸用ポート20に着陸し、格納される(#27)。 Next, a basic monitoring routine that defines normal monitoring activities for the aircraft 3 will be explained using the flowchart in FIG. First, the aircraft 3 acquires a flight plan for aerial surveillance from the ground and air management computer 5 (#21). When the ground mobile object 1 arrives at the location where the monitoring target based on the acquired flight plan exists, it takes off from the takeoff and landing port 20 (#22). Note that not all the flying objects 3 parked at the takeoff and landing ports 20 of the ground mobile objects 1 take off at the same location. Each flying object 3 may take off at a different location and land at a different location. When the flying object 3 performs a surveillance flight and starts aerial surveillance by the flying object 3 (#23), aerial surveillance data is generated based on the monitoring signal from the monitoring equipment 13 mounted on the flying object 3. (#24), and the generated aerial surveillance data is sent to the ground and air management computer 5 (#25). When the aerial surveillance on this normal flight route is completed, the flying object 3 lands at the takeoff and landing port 20, moves to the location where the next surveillance target exists, and repeats the surveillance flight from step #22 to step #25. . When all monitoring on the normal flight route based on the flight plan is completed (Yes branch of #26), the ground mobile object 1 lands at the takeoff and landing port 20 and is stored (#27).

次に、図9のフローチャートを用いて、地空管理コンピュータ5における通常監視動作を示す基本的な監視ルーチンを説明する。まず、地空管理コンピュータ5は、施設の定期的な通常監視のために、地上移動計画データベース66から移動計画を取得し、該当する地上移動体1に送出し(#31)、飛行計画データベース63から飛行計画を取得し、飛行体3に送出する(#32)。飛行体3への飛行計画の送出は、飛行体3を積み込む地上移動体1を経由で行われてもよい。いずれにしても、飛行体3の母港としての地上移動体1は、積み込む飛行体3の飛行計画を把握しておく必要がある。 Next, a basic monitoring routine showing the normal monitoring operation in the land and sky management computer 5 will be explained using the flowchart of FIG. First, the ground and air management computer 5 acquires a movement plan from the ground movement plan database 66 for regular regular monitoring of facilities, sends it to the corresponding ground movement object 1 (#31), and sends it to the flight plan database 63. The flight plan is acquired from the flight plan and sent to the aircraft 3 (#32). The flight plan may be sent to the aircraft 3 via the ground vehicle 1 on which the aircraft 3 is loaded. In any case, the ground vehicle 1 serving as the home port of the aircraft 3 needs to know the flight plan of the aircraft 3 to be loaded.

監視活動が開始されると、監視データ取得部54は、移動計画に基づいて監視移動を行う地上移動体1から地上監視データを取得し(#33)、飛行計画に基づいて監視飛行を行う飛行体3から空中監視データを取得する(#34)。異常事象決定部55は、取得した地上監視データ及び空中監視データに基づいて、さらに監視対象施設から得られた監視情報を参照して、異常事象が発生しているかどうか判定する(#35)。異常事象の発生が認められない場合(#36のNo分岐)、全ての移動計画及び飛行計画に基づく監視活動が終了したどうかチェックされる(#37)。全ての監視活動が終了するまで、ステップ#33からステップ#36の処理が行われる。ステップ#36の異常事象発生の判定において、異常事象が発生していると決定された場合(#36のYes分岐)、異常事象発生時処理が行われる(#50)。 When the monitoring activity is started, the monitoring data acquisition unit 54 acquires ground monitoring data from the ground mobile object 1 that performs monitoring movement based on the movement plan (#33), and acquires ground monitoring data from the ground mobile object 1 that performs monitoring movement based on the flight plan. Obtain aerial surveillance data from body 3 (#34). The abnormal event determining unit 55 determines whether an abnormal event has occurred based on the acquired ground monitoring data and aerial monitoring data, and further refers to the monitoring information obtained from the monitored facility (#35). If the occurrence of an abnormal event is not recognized (No branch of #36), it is checked whether monitoring activities based on all movement plans and flight plans have been completed (#37). The processes from step #33 to step #36 are performed until all monitoring activities are completed. In the determination of the occurrence of an abnormal event in step #36, if it is determined that an abnormal event has occurred (Yes branch of #36), an abnormal event occurrence process is performed (#50).

異常事象発生時処理がスタートすると(#50)、経時挙動推定部58が異常事象の経時的な挙動を推定する(#51)。この異常事象の経時的挙動は、異常事象の種類、この異常事象に関する経時的な監視データ群、気象情報に基づく異常事象の発生場所周辺の風向き及び風速などを入力パラメータとして、推定される。例えば、ガス漏れのような場合、現時点及びその後の濃度分布が推定される。次に、このように推定された異常事象の経時的挙動に適合する飛行パターンが、異常事象時飛行パターン記録部71から抽出され(#52)、この経時的挙動に適合する移動パターンが異常事象時移動パターン記録部81から抽出される(#53)。同時に、飛行体3と地上移動体1との現在位置が、それぞれ、飛行***置追跡部61と移動***置追跡部64とから取得される(#54)。 When the abnormal event occurrence processing starts (#50), the temporal behavior estimation unit 58 estimates the temporal behavior of the abnormal event (#51). The behavior of this abnormal event over time is estimated using input parameters such as the type of abnormal event, a group of monitoring data regarding this abnormal event over time, and the wind direction and wind speed around the place where the abnormal event occurred based on weather information. For example, in the case of a gas leak, the current and subsequent concentration distributions are estimated. Next, a flight pattern that matches the temporal behavior of the abnormal event estimated in this way is extracted from the abnormal event flight pattern recording unit 71 (#52), and a movement pattern that matches this temporal behavior is determined as the abnormal event. It is extracted from the time movement pattern recording section 81 (#53). At the same time, the current positions of the flying object 3 and the ground moving object 1 are acquired from the flying object position tracking section 61 and the moving object position tracking section 64, respectively (#54).

特殊移動ルート生成部80は、得られた移動パターンと地上移動体1の現在位置とに基づいて、当該移動パターンで地上移動体1が移動できるように、特殊移動ルートを生成する(#55)。同時に、特殊飛行ルート生成部70は、得られた飛行パターンと飛行体3の現在位置とに基づいて、当該飛行パターンで飛行体3が飛行できるように特殊飛行ルートを生成する(#56)。 The special movement route generation unit 80 generates a special movement route based on the obtained movement pattern and the current position of the ground mobile object 1 so that the ground mobile object 1 can move according to the movement pattern (#55). . At the same time, the special flight route generating section 70 generates a special flight route based on the obtained flight pattern and the current position of the flying object 3 so that the flying object 3 can fly according to the flight pattern (#56).

特殊移動ルートに基づく特殊移動指令が地上移動体1に送られると、地上移動体1は特殊移動指令に基づいて移動する(#57)。ここで、地上移動体1に適用されている移動パターンが異常事象を監視する異常事象監視移動パターンであっても、あるいは異常事象避難移動パターンであっても、移動中に地上監視が続行されるので(#58)、監視データ取得部54は、引き続き、地上監視データを取得することができる(#59)。 When the special movement command based on the special movement route is sent to the ground moving body 1, the ground moving body 1 moves based on the special movement command (#57). Here, even if the movement pattern applied to the ground mobile object 1 is an abnormal event monitoring movement pattern for monitoring abnormal events or an abnormal event evacuation movement pattern, ground monitoring is continued during movement. Therefore, the monitoring data acquisition unit 54 can continue to acquire ground monitoring data (#59).

特殊飛行ルートに基づく特殊移動指令が飛行体3に送られると、飛行体3は特殊飛行指令に基づいて飛行する(#60)。ここで、飛行体3に適用されている飛行パターンが異常事象を監視する異常事象監視移動パターンであっても、あるいは異常事象避難移動パターンであっても、飛行中に空中監視が続行されるので(#61)、監視データ取得部54は、引き続き、空中監視データを取得することができる(#62)。 When a special movement command based on the special flight route is sent to the flying object 3, the flying object 3 flies based on the special flight command (#60). Here, even if the flight pattern applied to the aircraft 3 is an abnormal event monitoring movement pattern for monitoring abnormal events, or an abnormal event evacuation movement pattern, aerial monitoring continues during flight. (#61), the surveillance data acquisition unit 54 can continue to acquire aerial surveillance data (#62).

地上移動体1及び飛行体3による異常事象発生時の監視が続行しておれば(#63のNo分岐)、ステップ#51からステップ#62までの処理が繰り返される。地上移動体1及び飛行体3による異常事象発生時の監視が不要または不可能になれば(#63のYes分岐)、この異常事象発生時処理が終了する。 If the ground moving object 1 and the flying object 3 continue monitoring when an abnormal event occurs (No branch of #63), the processes from step #51 to step #62 are repeated. If monitoring by the ground moving object 1 and the flying object 3 at the time of occurrence of an abnormal event becomes unnecessary or impossible (Yes branch of #63), this processing at the time of occurrence of an abnormal event ends.

地上移動体1に搭載されたカメラユニット132や飛行体3に搭載されたカメラユニット332で取得される撮影画像は、画像処理を施すことにより、異常事象の検知にとって優れたデータとなるが、監視活動では、太陽との位置関係で逆光や暗がりなど撮影条件が不利となることが少なくない。このため、この実施形態では、カメラ本体の姿勢変更だけでは、撮影条件が改善されない場合には、地上移動体1や飛行体3の姿勢変更、移動ルートや飛行ルートの変更により、撮影条件を改善する制御機能も備えられている。 Images captured by the camera unit 132 mounted on the ground mobile object 1 or the camera unit 332 mounted on the aircraft 3 become excellent data for detecting abnormal events by performing image processing. During activities, photographing conditions are often disadvantageous, such as backlighting or darkness due to the position relative to the sun. Therefore, in this embodiment, if the shooting conditions cannot be improved only by changing the attitude of the camera body, the shooting conditions are improved by changing the attitude of the ground moving object 1 or the flying object 3, or changing the movement route or flight route. It also has control functions.

発生した異常事象が大規模であり、また異常事象の広がりが広範囲に及ぶと推定される場合、異常事象の発生現場近くを走行している地上移動体1や異常事象の発生現場近くを飛行している飛行体3だけでは、十分な監視を行うことができない。そのようなケースでは、地上移動体1または監視サービスセンタ100が管理している他の地上移動体1や飛行体3に直接応援要請をするか、あるいは別の監視サービスセンタ100に登録されている地上移動体1や飛行体3に対する応援派遣を別の監視サービスセンタ100を通じて求めることができる。その際、応援部隊に含まれる地上移動体1や飛行体3との共同監視のための走行ルートや飛行ルートが、適用される。このため、異常事象時飛行パターン記録部71には、共同監視のための飛行ルートを作成するためのベースとなる異常事象監視飛行パターンが記録され、異常事象時移動パターン記録部81には、共同監視のための移動ルートを作成するためのベースとなる異常事象監視移動パターンが記録されている。特殊飛行ルート生成部70は、異常事象の種類や範囲から抽出された最適な異常事象監視飛行パターンと、応援派遣される飛行体数を参照して、共同異常事象監視飛行ルートを作成し、特殊移動ルート生成部80は、異常事象の種類や範囲から抽出された最適な異常事象監視移動パターンと、応援派遣される移動体数を参照して、共同異常事象監視移動ルートを作成する。各飛行体3には、共同異常事象監視飛行ルートに基づく飛行指令が与えられ、各地上移動体1には、共同異常事象監視移動ルートに基づく移動指令が与えられる。 If the abnormal event that has occurred is large-scale and is estimated to spread over a wide area, the ground mobile object 1 traveling near the site of the abnormal event or flying near the site of the abnormal event may be Sufficient monitoring cannot be carried out with just the flying object 3. In such a case, the ground mobile object 1 or the monitoring service center 100 may directly request support from other ground mobile objects 1 or flying objects 3 managed by the monitoring service center 100, or may request support from other ground mobile objects 1 or flying objects 3 that are registered in another monitoring service center 100. Support dispatch for the ground moving object 1 or the flying object 3 can be requested through another monitoring service center 100. At that time, a running route and a flight route for joint monitoring with the ground mobile object 1 and the flying object 3 included in the support unit are applied. For this reason, the abnormal event flight pattern recording unit 71 records an abnormal event monitoring flight pattern that is the basis for creating a flight route for joint monitoring, and the abnormal event movement pattern recording unit 81 records a joint Abnormal event monitoring movement patterns are recorded, which are the basis for creating movement routes for monitoring. The special flight route generation unit 70 creates a joint abnormal event monitoring flight route by referring to the optimal abnormal event monitoring flight pattern extracted from the type and range of the abnormal event and the number of aircraft to be dispatched for support. The travel route generation unit 80 creates a joint abnormal event monitoring travel route by referring to the optimal abnormal event monitoring travel pattern extracted from the type and range of the abnormal event and the number of moving bodies to be dispatched for support. Each flying object 3 is given a flight command based on the joint abnormal event monitoring flight route, and each ground mobile object 1 is given a movement command based on the joint abnormal event monitoring movement route.

上述した地空管理システムによる施設の監視は、次の特徴を有する。
(a)地上移動体1に飛行体3を搭載した状態で、地上移動体1は施設・設備の監視(点検)を行う。高所監視等が必要な場所及び地上移動体1では入り込めない場所では飛行体3が地上移動体1の離着陸用ポート2から自動離陸して監視を開始し、監視終了後は地上移動体1の離着陸用ポート20に着陸して自動充電を行う。次の高所監視場所に到達後は、再び自動飛行監視を行うように、地上移動体1との飛行体3との連係で施設・設備の監視が行われる。
(b)地上移動体1には風向風速計が設置されているか、あるいは、監視対象区域の風向風速データがデータ通信によって取得できる場合、地上移動体1に搭載されている飛行体3が監視を開始のために離陸する前に、その区域の風向風速が飛行体3の動作保証値を超えていると、飛行体3の離陸が中止される。
Facility monitoring using the above-mentioned space management system has the following characteristics.
(a) With the flying object 3 mounted on the ground moving object 1, the ground moving object 1 monitors (inspects) facilities and equipment. In places where high-altitude monitoring is required or where the ground moving object 1 cannot enter, the flying object 3 automatically takes off from the takeoff and landing port 2 of the ground moving object 1 and starts monitoring. The vehicle will land at the takeoff and landing port 20 and automatically charge the battery. After reaching the next high-altitude monitoring location, monitoring of facilities and equipment is performed in cooperation with the ground mobile object 1 and the flying object 3 so that automatic flight monitoring is performed again.
(b) If the ground vehicle 1 is equipped with a wind direction and anemometer, or if the wind direction and speed data of the area to be monitored can be obtained through data communication, the aircraft 3 mounted on the ground vehicle 1 can monitor the wind speed and direction. Before taking off for the start, if the wind direction and wind speed in the area exceeds the guaranteed operation value of the aircraft 3, the takeoff of the aircraft 3 is aborted.

〔別実施の形態〕
(1)上述した実施形態では、飛行体3は自動制御飛行体として構成したが、少なくとも部分的にはリモコン操縦されるリモコン制御飛行体として構成されてもよい。リモコン制御飛行体の場合、リモコン操縦時には、飛行指令などの情報は操縦支援情報としてモニタ等を通じてリモコン操作者に報知される。
[Another embodiment]
(1) In the embodiment described above, the flying object 3 is configured as an automatically controlled flying object, but it may be configured as a remote-controlled flying object that is at least partially operated by a remote control. In the case of a remote control controlled aircraft, when operating the aircraft with the remote control, information such as flight commands is reported to the remote control operator through a monitor or the like as control support information.

(2)上述した実施形態では、地上移動体1の離着陸用ポート20に積み込まれる飛行体3は複数台であり、その監視飛行は編隊飛行であったが、離着陸用ポート20の積み込まれる飛行体3が1台であり、その監視飛行が単独飛行でもよい。 (2) In the above embodiment, a plurality of flying objects 3 are loaded into the takeoff and landing port 20 of the ground mobile object 1, and the monitoring flight is a formation flight. 3 is one unit, and its surveillance flight may be a solo flight.

(3)上述した実施形態では、地上移動体1に搭載される監視機器13及び飛行体3に搭載される監視機器33は、ガス検知器131、331とカメラユニット132、332であったが、その他の機器、例えば気圧センサ、超音波センサ、レーダなどが用いられてもよい。カメラユニット132、332のカメラ本体として、可視光カメラや赤外線カメラなど種々のカメラの利用が可能である。また、複数の種類の監視機器33が、それぞれ複数搭載されてもよいし、一種類の監視機器33だけが搭載されてもよい。さらには、ガス検知器131として、地上移動体1にカメラ型のガス検知器が搭載されてもよい。このカメラ型のガス検知器によって、飛行体3の離陸方向にガス漏れが及んでいないかどうかの確認が可能である。また、ガス検知器331として、飛行体3にレーザ式ガス検知器が搭載されてもよい。このレーザ式ガス検知器により飛行体3の飛行方向にガス漏れが及んでいないかどうかの確認が可能である。 (3) In the embodiment described above, the monitoring equipment 13 mounted on the ground mobile object 1 and the monitoring equipment 33 mounted on the flying object 3 were the gas detectors 131, 331 and the camera units 132, 332. Other devices such as barometric pressure sensors, ultrasonic sensors, radar, etc. may also be used. Various cameras such as a visible light camera and an infrared camera can be used as the camera bodies of the camera units 132 and 332. Furthermore, a plurality of types of monitoring equipment 33 may be installed, or only one type of monitoring equipment 33 may be installed. Furthermore, as the gas detector 131, a camera-type gas detector may be mounted on the ground moving body 1. With this camera-type gas detector, it is possible to confirm whether there is a gas leak in the takeoff direction of the aircraft 3. Further, as the gas detector 331, a laser gas detector may be mounted on the flying object 3. With this laser gas detector, it is possible to confirm whether or not there is a gas leak in the direction of flight of the aircraft 3.

(4)上述した実施形態では、経時挙動推定部58は、異常事象決定部55によって決定された異常事象の経時挙動、つまり異常事象の未来予測を行っていたが、さらに、異常事象の過去の推定、つまり異常事象の原因推定、例えば、ガス漏れであれば、ガス漏れ源を推定するように構成されてもよい。また、同一場所の設置されたガス漏れ検知器と風向風速計とからの測定データが取得できる場合、ガス漏れ検知器の濃度値と風向風速計の数値とからガス漏れ箇所とガス漏れ濃度とを推定することも可能である。 (4) In the embodiment described above, the temporal behavior estimating unit 58 predicts the temporal behavior of the abnormal event determined by the abnormal event determining unit 55, that is, predicts the future of the abnormal event. Estimation, that is, estimating the cause of an abnormal event, for example, in the case of a gas leak, the source of the gas leak may be estimated. In addition, if measurement data can be obtained from a gas leak detector and an anemometer installed at the same location, the gas leak location and gas leak concentration can be determined from the concentration value of the gas leak detector and the value of the anemometer. It is also possible to estimate.

(5)上述した実施形態では、地空管理コンピュータ5は、地上移動体1や飛行体3から独立して、別な場所、例えば管理サービス会社などに設置されている。これに代えて、地空管理コンピュータ5は、地上移動体1に設置されてもよい。また、地空管理コンピュータ5は、ポータブルなコンピュータとして構成され、自由に移動可能としてもよい。さらには、地空管理コンピュータ5に構築された各機能部は、複数のコンピュータに分散されてもよいし、その一部が、地上移動体1や飛行体3に備えられてもよい。 (5) In the embodiment described above, the ground and air management computer 5 is installed at a different location, such as a management service company, independently of the ground mobile object 1 and the aircraft 3. Alternatively, the ground and sky management computer 5 may be installed in the ground mobile body 1. Further, the land and sky management computer 5 may be configured as a portable computer and may be freely movable. Furthermore, each functional unit built in the ground and air management computer 5 may be distributed among a plurality of computers, or a portion thereof may be provided in the ground mobile object 1 or the aircraft 3.

(6)上述した実施形態では、飛行体3が駐機する離着陸用ポート20が地上移動体1に設けられていた。これに代えて、離着陸用ポート20が専用の離着陸用ポート車両に設けられてもよい。また、地上に設置された固定式の離着陸用ポート20が用いられてもよい。 (6) In the embodiment described above, the takeoff and landing port 20 where the flying object 3 is parked is provided in the ground mobile object 1. Alternatively, the takeoff and landing port 20 may be provided in a dedicated takeoff and landing port vehicle. Alternatively, a fixed takeoff and landing port 20 installed on the ground may be used.

なお、上記実施形態(別実施形態を含む、以下同じ)で開示される構成は、矛盾が生じない限り、他の実施形態で開示される構成と組み合わせて適用することが可能であり、また、本明細書において開示された実施形態は例示であって、本発明の実施形態はこれに限定されず、本発明の目的を逸脱しない範囲内で適宜改変することが可能である。 Note that the configurations disclosed in the above embodiments (including other embodiments, the same applies hereinafter) can be applied in combination with the configurations disclosed in other embodiments as long as there is no contradiction, and The embodiments disclosed in this specification are illustrative, and the embodiments of the present invention are not limited thereto, and can be modified as appropriate without departing from the purpose of the present invention.

本発明は、施設の監視を行う飛行体及び地上移動体を管理する地空管理システムに適用することができる。 INDUSTRIAL APPLICABILITY The present invention can be applied to a ground and air management system that manages flying objects and ground moving objects that monitor facilities.

1 :地上移動体
3 :飛行体
5 :地空管理コンピュータ
6 :地空情報管理部
6A :飛行情報管理部
6B :地上移動情報管理部
11 :移動体自位置算出部
12 :移動制御部
13 :監視機器
20 :離着陸用ポート
30 :通信部
31 :飛行体自位置算出部
32 :飛行制御部
33 :監視機器
51 :気象情報取得部
52 :飛行体自位置取得部
53 :移動体自位置取得部
54 :監視データ取得部
55 :異常事象決定部
58 :経時挙動推定部
61 :飛行***置追跡部
62 :飛行指令生成部
63 :飛行計画データベース(飛行計画DB)
64 :移動***置追跡部
65 :移動指令生成部
66 :地上移動計画データベース(地上移動計画DB)
70 :特殊飛行ルート生成部
71 :異常事象時飛行パターン記録部
78 :異常事象時パターン記録部
80 :特殊移動ルート生成部
81 :異常事象時移動パターン記録部
100 :監視サービスセンタ
131 :ガス検知器
132 :カメラユニット
331 :ガス検知器
332 :カメラユニット
1: Ground mobile object 3: Flying object 5: Ground and air management computer 6: Ground and air information management section 6A: Flight information management section 6B: Ground movement information management section 11: Mobile object position calculation section 12: Movement control section 13: Monitoring equipment 20: Takeoff and landing port 30: Communication unit 31: Flight object position calculation unit 32: Flight control unit 33: Monitoring equipment 51: Weather information acquisition unit 52: Flight object position acquisition unit 53: Mobile object position acquisition unit 54: Monitoring data acquisition unit 55: Abnormal event determination unit 58: Temporal behavior estimation unit 61: Aircraft position tracking unit 62: Flight command generation unit 63: Flight plan database (flight plan DB)
64: Mobile object position tracking unit 65: Movement command generation unit 66: Ground movement plan database (ground movement plan DB)
70: Special flight route generation unit 71: Abnormal event flight pattern recording unit 78: Abnormal event pattern recording unit 80: Special movement route generation unit 81: Abnormal event movement pattern recording unit 100: Monitoring service center 131: Gas detector 132: Camera unit 331: Gas detector 332: Camera unit

Claims (12)

施設の監視を行う飛行体及び地上移動体を管理する地空管理システムであって、
前記飛行体の経時的位置を含む飛行情報を管理する飛行情報管理部と、
前記地上移動体の経時的位置を含む地上移動情報を管理する地上移動情報管理部と、
前記飛行体及び前記地上移動体に搭載された監視機器によって生成された前記施設の監視データを取得する監視データ取得部と、
前記監視データに基づいて前記施設に生じた異常事象を決定する異常事象決定部と、
前記異常事象の種類と前記異常事象の発生場所と前記飛行情報とに基づいて、異常事態発生時の前記飛行体の特殊飛行ルートを生成する特殊飛行ルート生成部と、
前記異常事象の種類と前記異常事象の発生場所と前記地上移動情報とに基づいて、異常事態発生時の前記地上移動体の特殊移動ルートを生成する特殊移動ルート生成部と、
を備える地空管理システム。
A ground and air management system that manages flying objects and ground moving objects that monitor facilities,
a flight information management unit that manages flight information including the position of the aircraft over time;
a ground movement information management unit that manages ground movement information including the chronological position of the ground mobile object;
a monitoring data acquisition unit that obtains monitoring data of the facility generated by monitoring equipment mounted on the flying object and the ground mobile object;
an abnormal event determining unit that determines an abnormal event that has occurred in the facility based on the monitoring data;
a special flight route generation unit that generates a special flight route for the aircraft when an abnormal situation occurs, based on the type of abnormal event, the location where the abnormal event occurs, and the flight information;
a special movement route generation unit that generates a special movement route for the ground mobile object when an abnormal situation occurs, based on the type of abnormal event, the place where the abnormal event occurs, and the ground movement information;
A ground and air management system equipped with
前記地上移動体には道路走行可能な走行車両が含まれており、前記走行車両以外の前記地上移動体及び前記飛行体は前記走行車両によって運搬される請求項1に記載の地空管理システム。 The ground and air management system according to claim 1, wherein the ground moving object includes a traveling vehicle capable of driving on a road, and the ground moving object and the flying object other than the traveling vehicle are transported by the traveling vehicle. 前記異常事象決定部によって決定された前記異常事象の経時挙動を推定する経時挙動推定部が備えられ、
前記特殊飛行ルート生成部は、前記特殊飛行ルートを生成する際に前記経時挙動を参照し、
前記特殊移動ルート生成部は、前記特殊移動ルートを生成する際に前記経時挙動を参照する請求項1または2に記載の地空管理システム。
A temporal behavior estimating unit that estimates the temporal behavior of the abnormal event determined by the abnormal event determining unit,
The special flight route generation unit refers to the behavior over time when generating the special flight route,
The land and air management system according to claim 1 or 2 , wherein the special movement route generation unit refers to the behavior over time when generating the special movement route.
前記施設周辺の気象情報を取得する気象情報取得部が備えられ、前記経時挙動推定部は前記経時挙動の推定時に前記気象情報を参照し、
前記特殊飛行ルート生成部は、前記特殊飛行ルートを生成する際に前記気象情報を参照し、
前記特殊移動ルート生成部は、前記特殊移動ルートを生成する際に前記気象情報を参照する請求項に記載の地空管理システム。
A weather information acquisition unit that acquires weather information around the facility is provided, and the temporal behavior estimation unit refers to the weather information when estimating the temporal behavior,
The special flight route generation unit refers to the weather information when generating the special flight route,
The land and sky management system according to claim 3 , wherein the special movement route generation unit refers to the weather information when generating the special movement route.
前記飛行体に搭載された飛行体自位置算出部によって算出された飛行体自位置を取得する飛行体自位置取得部と、前記地上移動体に搭載された移動体自位置算出部によって算出された移動体自位置を取得する移動体自位置取得部とが備えられ、
前記飛行情報管理部は、前記飛行体の前記飛行体自位置に基づいて前記飛行体の前記経時的位置を算出し、
前記地上移動情報管理部は、前記地上移動体の前記移動体自位置に基づいて前記地上移動体の前記経時的位置を算出する請求項1から4のいずれか一項に記載の地空管理システム。
a flying object position acquisition unit that acquires the flying object position calculated by the flying object position calculating unit mounted on the flying object; and a flying object position calculating unit that acquires the flying object position calculating unit installed on the ground mobile object. a mobile body position acquisition unit that acquires the mobile body position;
The flight information management unit calculates the temporal position of the flying object based on the flying object's own position of the flying object,
The land and air management system according to any one of claims 1 to 4 , wherein the ground movement information management unit calculates the temporal position of the ground mobile body based on the mobile body position of the ground mobile body. .
前記異常事象の種類と前記異常事象の発生場所とによって規定されている異常事象発生時の前記飛行体の飛行パターン及び前記地上移動体の移動パターンを抽出可能に記録している異常事象時パターン記録部が備えられ、
前記特殊飛行ルート生成部は、前記異常事象の種類と前記異常事象の発生場所とに基づいて抽出された前記飛行パターンを参照して前記飛行体の特殊飛行ルートを生成し、
前記特殊移動ルート生成部は、前記異常事象の種類と前記異常事象の発生場所とに基づいて抽出された前記移動パターンを参照して前記地上移動体の特殊移動ルートを生成する請求項1から5のいずれか一項に記載の地空管理システム。
an abnormal event pattern record that extractably records the flight pattern of the flying object and the movement pattern of the ground moving object at the time of occurrence of the abnormal event, which are defined by the type of the abnormal event and the location where the abnormal event occurs; Department is provided,
The special flight route generation unit generates a special flight route for the aircraft by referring to the flight pattern extracted based on the type of the abnormal event and the location where the abnormal event occurs;
5. The special movement route generation unit generates a special movement route for the ground mobile object by referring to the movement pattern extracted based on the type of the abnormal event and the location where the abnormal event occurs . The ground and air management system described in any one of the above.
前記飛行パターンには、前記飛行体によって前記異常事象を監視するための異常事象監視飛行パターンと、前記飛行体が前記異常事象から避難するための緊急避難飛行パターンとが含まれており、
前記移動パターンには、前記地上移動体によって前記異常事象を監視するための異常事象監視移動パターンと、前記飛行体が前記異常事象から避難するための緊急避難移動パターンとが含まれている請求項に記載の地空管理システム。
The flight pattern includes an abnormal event monitoring flight pattern for the flying object to monitor the abnormal event, and an emergency evacuation flight pattern for the flying object to evacuate from the abnormal event,
2. The movement pattern includes an abnormal event monitoring movement pattern for the ground mobile object to monitor the abnormal event, and an emergency evacuation movement pattern for the flying object to evacuate from the abnormal event. The ground and sky management system described in 6 .
前記監視機器にはガス検知器が含まれており、前記異常事象にガス漏れが含まれている場合、前記経時挙動推定部は前記経時挙動を推定する際に前記施設周辺の風向き及び風速を参照する請求項に記載の地空管理システム。 The monitoring equipment includes a gas detector, and when the abnormal event includes a gas leak, the temporal behavior estimation unit refers to the wind direction and wind speed around the facility when estimating the temporal behavior. The ground and sky management system according to claim 3 . 前記特殊飛行ルート生成部は、前記特殊飛行ルートを生成する際に前記施設周辺の風向き及び風速を参照する請求項1から8のいずれか一項に記載の地空管理システム。 The land and air management system according to any one of claims 1 to 8 , wherein the special flight route generation unit refers to wind direction and wind speed around the facility when generating the special flight route. 前記地上移動体には、前記飛行体の離着陸用ポートが備えられている請求項1からのいずれか一項に記載の地空管理システム。 The ground and air management system according to any one of claims 1 to 9 , wherein the ground moving body is provided with a takeoff and landing port for the flying body. 前記飛行体の前記施設の監視活動は、風速を含む気象情報に基づいて制限される請求項1から10のいずれか一項に記載の地空管理システム。 The ground and air management system according to any one of claims 1 to 10 , wherein monitoring activities of the facility of the aircraft are restricted based on weather information including wind speed. 前記異常事象にガス漏れが含まれている場合、前記ガス漏れに対する着火の可能性を有する前記飛行体又は地上移動体による監視活動を禁止し、風速及び風向きに基づいて推定される前記ガス漏れが及ぶ範囲からの避難を命じる請求項1から11のいずれか一項に記載の地空管理システム。 If the abnormal event includes a gas leak, monitoring activities by the aircraft or ground vehicle that have the possibility of igniting the gas leak are prohibited, and the gas leak is estimated based on wind speed and direction. The land and air management system according to any one of claims 1 to 11 , which orders evacuation from within the area.
JP2022019812A 2022-02-10 2022-02-10 Earth and sky management system Active JP7423669B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022019812A JP7423669B2 (en) 2022-02-10 2022-02-10 Earth and sky management system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2022019812A JP7423669B2 (en) 2022-02-10 2022-02-10 Earth and sky management system

Publications (2)

Publication Number Publication Date
JP2023117218A JP2023117218A (en) 2023-08-23
JP7423669B2 true JP7423669B2 (en) 2024-01-29

Family

ID=87579832

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022019812A Active JP7423669B2 (en) 2022-02-10 2022-02-10 Earth and sky management system

Country Status (1)

Country Link
JP (1) JP7423669B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117912254B (en) * 2024-03-19 2024-05-31 山东高速股份有限公司 Highway open space detection collaborative layout method, equipment and medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018008675A1 (en) 2016-07-07 2018-01-11 日本電気株式会社 Gas detection system
JP2019202682A (en) 2018-05-24 2019-11-28 東京瓦斯株式会社 Unmanned flying object and method for controlling flight thereof
JP2019213132A (en) 2018-06-07 2019-12-12 中国電力株式会社 Remote monitoring system
JP2020048258A (en) 2018-09-14 2020-03-26 中国電力株式会社 Electrical facility check system
JP2020180786A (en) 2019-04-23 2020-11-05 川崎重工業株式会社 Movement support program, movement support system and movement support method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018008675A1 (en) 2016-07-07 2018-01-11 日本電気株式会社 Gas detection system
JP2019202682A (en) 2018-05-24 2019-11-28 東京瓦斯株式会社 Unmanned flying object and method for controlling flight thereof
JP2019213132A (en) 2018-06-07 2019-12-12 中国電力株式会社 Remote monitoring system
JP2020048258A (en) 2018-09-14 2020-03-26 中国電力株式会社 Electrical facility check system
JP2020180786A (en) 2019-04-23 2020-11-05 川崎重工業株式会社 Movement support program, movement support system and movement support method

Also Published As

Publication number Publication date
JP2023117218A (en) 2023-08-23

Similar Documents

Publication Publication Date Title
KR101793509B1 (en) Remote observation method and system by calculating automatic route of unmanned aerial vehicle for monitoring crops
CN111479086A (en) Intelligent real-time command management system for unmanned aerial vehicle
KR101861045B1 (en) Drones for manhole and river facility inspection
KR20170101776A (en) Method and system for providing route of unmanned air vehicle
CN107924190A (en) For being supported by recharging station with the system of the autonomous operation of multiple mixing unmanned vehicles of execution service
US20120046822A1 (en) Method of initiating vehicle movement
JP2013134663A (en) System and method for supporting disaster relief activities
KR20170101519A (en) Apparatus and method for disaster monitoring using unmanned aerial vehicle
WO2018103716A1 (en) Composite flight control method and system, aircraft
JP7423669B2 (en) Earth and sky management system
KR20190000439A (en) Unmanned air vehicle for birds control and operating method by using the same
CN110998466A (en) System and method for navigation path determination for unmanned vehicles
CN104118561A (en) Large endangered wildlife monitoring method based on unmanned plane technology
CN110647170A (en) Navigation mark inspection device and method based on unmanned aerial vehicle
CN112764433A (en) Device and method for searching unmanned aerial vehicle-mounted rocket debris based on deep learning
CN109062258B (en) Method and device for controlling return flight of unmanned aerial vehicle
CN112017386A (en) Forest and grassland fire monitoring system
WO2019139845A1 (en) Identifying landing zones for landing of a robotic vehicle
CN210835732U (en) Beacon inspection device based on unmanned aerial vehicle
Kim et al. Opportunities for construction site monitoring by adopting first personal view (FPV) of a drone
Muid et al. Potential of UAV application for forest fire detection
CN116931599A (en) Route control method of photovoltaic power generation field dispatching robot
US20230229159A1 (en) Central management server, unmanned aircraft and unmanned robot for monitoring management target area
CN114534134B (en) Online unmanned full-automatic fire prevention rescue unmanned aerial vehicle device and system that puts out a fire
JP7029978B2 (en) Fire spread prevention system and fire spread prevention method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230629

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20230629

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20231003

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231127

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231220

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240117

R150 Certificate of patent or registration of utility model

Ref document number: 7423669

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150