JP6735339B2 - 架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法 - Google Patents

架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法 Download PDF

Info

Publication number
JP6735339B2
JP6735339B2 JP2018511535A JP2018511535A JP6735339B2 JP 6735339 B2 JP6735339 B2 JP 6735339B2 JP 2018511535 A JP2018511535 A JP 2018511535A JP 2018511535 A JP2018511535 A JP 2018511535A JP 6735339 B2 JP6735339 B2 JP 6735339B2
Authority
JP
Japan
Prior art keywords
pantograph
aerial
region
panel
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018511535A
Other languages
English (en)
Other versions
JP2018522526A (ja
Inventor
サッキ,マッテオ
フランチェスコ,シオケッティ
アスカーリ,ルカ
キエーズィ,ロレンツォ
カニンハム,ジョン
マッケロイ,コリン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Camlin Italy Srl
Original Assignee
Camlin Italy Srl
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Camlin Italy Srl filed Critical Camlin Italy Srl
Publication of JP2018522526A publication Critical patent/JP2018522526A/ja
Application granted granted Critical
Publication of JP6735339B2 publication Critical patent/JP6735339B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60MPOWER SUPPLY LINES, AND DEVICES ALONG RAILS, FOR ELECTRICALLY- PROPELLED VEHICLES
    • B60M1/00Power supply lines for contact with collector on vehicle
    • B60M1/12Trolley lines; Accessories therefor
    • B60M1/28Manufacturing or repairing trolley lines
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61KAUXILIARY EQUIPMENT SPECIALLY ADAPTED FOR RAILWAYS, NOT OTHERWISE PROVIDED FOR
    • B61K9/00Railway vehicle profile gauges; Detecting or indicating overheating of components; Apparatus on locomotives or cars to indicate bad track sections; General design of track recording vehicles
    • B61K9/02Profile gauges, e.g. loading gauges
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L27/00Central railway traffic control systems; Trackside control; Communication systems specially adapted therefor
    • B61L27/50Trackside diagnosis or maintenance, e.g. software upgrades
    • B61L27/57Trackside diagnosis or maintenance, e.g. software upgrades for vehicles or trains, e.g. trackside supervision of train conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/02Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • G01B11/06Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness for measuring thickness ; e.g. of sheet material
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/245Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using a plurality of fixed, simultaneously operating transducers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/9515Objects of complex shape, e.g. examined with use of a surface follower device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/243Image signal generators using stereoscopic image cameras using three or more 2D image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/254Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L23/00Control, warning or like safety means along the route or between vehicles or trains
    • B61L23/04Control, warning or like safety means along the route or between vehicles or trains for monitoring the mechanical state of the route
    • B61L23/041Obstacle detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • Biochemistry (AREA)
  • Manufacturing & Machinery (AREA)
  • Electromagnetism (AREA)
  • Biomedical Technology (AREA)
  • Current-Collector Devices For Electrically Propelled Vehicles (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Train Traffic Observation, Control, And Security (AREA)
  • Image Analysis (AREA)

Description

本発明の目的は、架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法である。
知られている通り、架空接触線からの電流を取り出す牽引鉄道車両(tractive railway vehicles)は「パンタグラフ」として知られている装置を一般的に使用する。
パンタグラフは、客車の屋根上に絶縁体を用いて装着される関節状システム(フレームと呼ばれる)と、電気接触線の一本または複数本のワイヤと直接接触するよう配置される接触片を有するヘッドと、から構成される。接触片は、導電材料(例えば銅、鋼、アルミニウム、炭素)で形成される棒材で構成される。
この明細書において、二つの接触片と二つの側部突き出し部(ホーン)とを備えるY字状パンタグラフを説明する。しかしながら、本発明の目的は他のモデルのパンタグラフにも適用可能である。
接触線に沿って摺動する場合に生じる機械的摩擦によって接触片の摩耗が生じ、その結果、機関車および/または架空電気線が損傷する虞がある。
電車線が破損する前に接触片を修理または取り替えできるよう接触片の摩耗の状態を観察するために、パンタグラフの摩耗の状態の検査のための手作業システムおよび自動システムの両方を含む検査システムが開発されている。
例えば、イタリア特許第1401952号(Italian patent No. 1401952)に開示された解決法は、この後者のグループの一部であり、複数のカメラによって撮影されたパンタグラフの画像の自動診断システムに関する。電車線に沿って分散配置された同数の画像取得ステーションに複数のカメラは配置される。
それぞれのカメラによって取得された画像は、適当な処理を実行するリモート(遠隔)サーバーに送信され、パンタグラフの損傷(例えばホーンの脱落または変形、位置合わせ不良等)があれば、リモートサーバーは自動警報信号を生成する。
上述した解決法は、光ファイバーが組み込まれた検査システムよりも信頼できるが、それ自体に問題がないわけではない。特に、一台のビデオカメラのみの使用に基づくシステムはすべて、接触片の全領域の接触材料の厚さを良好には測定することができない、または発生しうる亀裂を特定し測定することができない。
また、レーザスキャナ・タイプのビデオカメラの使用に基づいたパンタグラフの三次元モデルを再現するシステムが市場において入手可能である。
しかし、非常に高価であることに加えて、これらのシステムは導入に対して複雑なインフラストラクチャー(基盤施設)を必要とする。実際、確実に信頼できる測定を行うために、ビデオカメラを移動するパンタグラフの上方に配置しなければならない。さらに、ビデオカメラを設置場所で直接較正しなければならない。少なからず、測定の信頼性はパンタグラフの速度に依存し、その速度は300km/h以上にも達する場合がある。
例えば、欧州特許出願公開第1766326号(EP1766326)には、このタイプの解決法が開示されている。
国際公開第2011/035983号(WO2011/035983)には、パンタグラフの上方の門形(ポータル)上に配置される複数個のビデオカメラの使用に基づいた、いくつかの構造要素(吊架線(カテナリー)およびパンタグラフの接触片を含む)の観察のためのシステムを開示している。
上に挙げた問題に加えて、パンタグラフの(すなわち接触片および側部ホーンに関する)完全なモデルの取得が困難であることも重要である。
JP2015017921では、一ペアのステレオ・ビデオカメラが採用されており、接触片の画像を取得するために、架空接触線の上方に配置される。
また、CN104567729は、架空接触線の上方に配置される、カテナリー式架線の画像および接触線の画像を取得するためのシステムを開示している。
パノラマ画像撮影カメラ(Pancam)として知られる市販システムは、代わりに、それぞれ架空接触線の上方および側方に配置される二つのカメラの使用を開示している。
US2010/253329は、パンタグラフを支持する車両の通過の間、設備を観察する範囲を持つ、側方ポストに配置された一つのカメラを備えるパンタグラフビデオ検査システムを開示している。
これに関連して、本発明の基本的な技術課題は、上述の従来技術の欠点を克服する架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法を提案することである。
特に、本発明の目的は、既知の解決法と比較してより信頼できるパンタグラフの三次元モデルを再現することができるとともに、機関車の速度の影響を受けずに機能する架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法を実現可能とすることにある。
本発明の他の目的は、パンタグラフの完全な再現(すなわち接触片と側部ホーンを含む再現)を行う、架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法を提供することにある。
本発明のさらなる目的は、従来技術解決法と比較して、より簡単で、より安全で、より経済的なインフラストラクチャーに基づく、架空接触線に沿ったパンタグラフのビデオ検査のためのシステムを提供することにある。
記載した技術的な課題およびその特定の目的は、以下の架空接触線に沿ったパンタグラフのビデオ検査のためのシステムによって十分に達成される。システムは、複数の観察ステーションを備える。
それぞれの観察ステーションは、パンタグラフの通過を検出するための検出手段と、パンタグラフの一部分が通過する第一架空領域を照射するための第一照射手段と、第一架空領域の画像を取得するための第一取得手段と、ローカルプロセッサと、を備える。観察ステーションの各一つにおいて、画像を取得するための取得手段は少なくとも一ペアのステレオ・ビデオカメラを備えており、ローカルプロセッサは、それぞれのペアのステレオ・ビデオカメラによって取得された画像間の相違を計算するように構成されている。
好ましくは、パンタグラフの通過を検出するための検出手段はレーザー遠隔計器を備える。
好ましくは、第一照射手段は、平面状の延設部を有するとともに複数のLED光源を支持する第一パネルを備える。第一パネルは、地面に対して所定の高さに位置しているとともに、前記第一架空領域を投光する光線を放出するように方向付けされる。
好ましくは、それぞれの観察ステーションにおいて、第一パネルおよび一ペアのステレオ・ビデオカメラは、対応する第一架空領域の取得された画像が通過中におけるパンタグラフの上側部分と端部部分とのフレームとなるよう、配置され方向付けされる。
好ましくは、それぞれの観察ステーションは、パンタグラフの他の部分が通過する第二架空領域を照射するための第二照射手段と、第二架空領域の画像を取得するための追加のビデオカメラと、を備える。
好ましくは、第二照射手段は、平面状の延設部を有するとともに複数のLED光源を支持する第二パネルを備える。第二パネルは、地面に対して所定の高さに位置しているとともに、第二架空領域を投光する光線を放出するように方向付けされる。
好ましくは、それぞれの観察ステーションにおいて、追加のビデオカメラは、対応する第二架空領域から取得された画像が通過中におけるパンタグラフの他方の端部部分のフレームとなるよう、配置され方向付けされる。
好ましくは、それぞれの観察ステーションは、架空接触線に対して両側に配置される第一ポストおよび第二ポストを備える。特に、第一ポストは、レーザー遠隔計器と第一パネルと一ペアのステレオ・ビデオカメラを支持する。第二ポストは、第二パネルと追加のビデオカメラとを支持する。
記載した技術的な課題およびその特定の目的は、以下の架空接触線に沿ったパンタグラフのビデオ検査のための方法によって十分に達成される。方法は、
複数の観察ステーションにおいてパンタグラフの通過を検出する工程と、
それぞれの観察ステーションにおいて、パンタグラフの通過の検出に応じてパンタグラフの一部分が通過する第一架空領域を照射する工程と、
それぞれの観察ステーションにおいて、第一架空領域を照射する工程中に、第一架空領域の画像を取得する工程と、
それぞれの観察ステーションから取得された画像を処理する工程と、
を含む。
特徴的には、それぞれの第一架空領域において、画像は、少なくとも一ペアのステレオ・ビデオカメラによって取得され、取得された画像を処理する工程は、相違を計算する副工程と、パンタグラフの一部分の三次元モデルを再現する副工程と、を含む。
好ましくは、それぞれの観察ステーションにおいて、パンタグラフの通過の検出に応じて、パンタグラフの他の部分が通過する第二架空領域が照射される。
この照射プロセス中に、第二架空領域の画像が取得される。こうして、画像を処理する工程は、パンタグラフの三次元モデルを完成させるよう、対応する第二架空領域において取得された画像も用いる。
それぞれの観察ステーションに関するパンタグラフの再現されたモデルをパンタグラフの理想モデルと比較することによって、パンタグラフの摩耗の状態に関する情報を取得することができる利点がある。
本発明のさらなる特徴およびその利点は、以下の添付した図面に例示する架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法の好ましい実施形態であるが他の形態を排除するものではない実施形態のおおよそ正確なしたがって非限定的な説明から、より明らかとなろう。
上から見たY字状タイプのパンタグラフの概略的な側面図である。 本発明にかかるビデオ検査システムの概略ブロック図である。 複線に適用された、図2のビデオの検査システムの一部を概略的に示す。 図4は、異なる実施形態にかかる、図2のビデオ検査システムの一部(第一ポスト)の正面を示す。 図5は、異なる実施形態にかかる、図2のビデオ検査システムの一部(第一ポスト)の側面図を示す。 変形実施形態における、図2のビデオの検査システムのビデオカメラおよび遠隔計器の配置を示す。 図6の変形実施形態の、ある特性信号を示す。 さらなる実施形態にかかる、図2のビデオ検査システムの一部(第一ポスト)の斜視図である。
図面を通じて、符号1は、例えば機関車に設置される、架空接触線に沿ったパンタグラフ100のビデオ検査用のシステムを示す。
ここで説明し例示する実施形態において、パンタグラフ100は、架空線と接触する二つの接触片101,102と、二つの側部ホーン103,104と、を備えるY字状パンタグラフである。
システム1は、架空接触線に沿って分散配置される複数の観察(モニタリング)ステーション2を備える。
それぞれの観察ステーション2は、
パンタグラフ100の通過を検出するための検出手段3と、
パンタグラフ100の一部分が通過する第一架空領域を照射するための第一照射手段4と、
第一架空領域の画像を取得するための第一取得手段5と、
を備える。
特徴的には、画像を取得するための第一取得手段5は、少なくとも一ペアのステレオ・ビデオカメラ5a,5bを備える。好ましくは、二つのステレオ・ビデオカメラ5a,5bは、マトリックス・ビデオカメラであり、二〇〇万〜二〇〇〇万画素(2〜20メガ・ピクセル)の解像度である。
ステレオ・ビデオカメラ5a,5bのそれぞれは、CMOSタイプ(「Complementary Metal Oxide Semiconductor(相補性金属酸化膜半導体)」の頭字語)またはCCDタイプ(「Charge Coupled Device(電荷結合素子)」の頭字語)のセンサを有する。
好ましくは、パンタグラフ100の通過を検出するための検出手段3は、既知のタイプのレーザー遠隔計器(テレメーター)3を備える。
好ましくは、第一架空領域を照射するための第一照射手段4は、LED技術によって実現される。
例えば、第一照射手段4は、平面状の延設部を有するとともに複数のLED光源7を支持する第一パネル6を備える。好ましくは、それぞれのLED光源7を、二つの軸(光学分野において、「パン/チルト」回転として知られている)に沿って方向付けることができる。
特に、第一パネル6は、地面Tに対して所定の高さに位置しているとともに、前記第一架空領域を投光する光線を放出するように方向付けされている。
ここで説明し例示する実施形態において、それぞれの観察ステーション2の第一架空領域を通過するとともに照射されて取得されるパンタグラフ100の一部分は、上側中央部(二つの接触片101,102)および一方の端部部分(ホーン103,104のうちの一方)に対応する。
好ましくは、それぞれの観察ステーション2において、第一パネル6および一ペアのステレオ・ビデオカメラ5a,5bは、対応する第一架空領域の取得された画像が通過中における上から見たパンタグラフ100の二つの接触片101,102とホーン103,104のうちの一方とのフレームとなるよう、配置され方向付けされている。
好ましくは、二つのステレオ・ビデオカメラ5a,5bは水平基線に応じて位置決めされる。知られている通り、語「基線(ベースライン)」は、一ペアのステレオ・ビデオカメラの光軸間の距離を示す。ここでの場合、基線は10〜50cmの間にある。
より好ましくは、パンタグラフ100の通過を検出するための検出手段3は、互いから予め設定された距離dtelの水平基線に応じて配置される既知のタイプの二つのレーザー遠隔計器3a,3bを備える。また二つのレーザー遠隔計器3a,3bは、二つのステレオ・ビデオカメラ5a,5bと同じ水平軸上にあるとともに、これらのビデオカメラの間に配置される(図6を参照)。
ここで説明し例示する実施形態において、第一ポスト8は、それぞれの観察ステーション2に配置され、レーザー遠隔計器3と第一パネル6と一ペアのステレオ・ビデオカメラ5a,5bとを支持する。
好ましくは、それぞれの観察ステーション2は、それぞれのペアのステレオ・ビデオカメラ5a,5bによって取得された画像間の相違を計算するよう構成される第一ローカルすなわちマスタ(主)プロセッサ9aを備える。
好ましくは、相違は既知のタイプのアルゴリズムを用いて計算される。
一ペアのステレオ・ビデオカメラ5a,5bを完全に水平に位置合わせすることはできないと考えられるので、第一ローカルプロセッサ9aはまた好ましくは取得された画像を調整するよう構成される。特に、調整(rectification)は既知のアルゴリズムを用いて実行される。
最後に、ステレオ・ビデオカメラ5a,5bのレンズには歪みがあると考えられるので、第一ローカルプロセッサ9aはまた好ましくは取得した画像の歪みを補正するよう構成される(これも既知のアルゴリズムを用いて)。
また、好ましくは、データ記憶モジュール(図示せず)がそれぞれの観察ステーション2に備えられる。
気象ステーション(既知のタイプの)によって検出された気温および風向・風速などの気象データが、重要なデータとして記憶モジュールに記憶される。
さらに想定される記録すべきデータは、
ビデオカメラとLED光源と電池との動作に関する診断機能と、
パンタグラフの架空接触線の位置と、
鉄道車両の移動方向および速度と、
車両の識別と、
に関するデータである。
システム1はさらに、有線(ケーブル)接続または無線(ワイヤレス)接続を用いて観察ステーション2と通信する中央処理装置(セントラル・プロセッサ)11を備える。好ましくは、中央処理装置11は、観察ステーション2のローカル・マスタプロセッサ9aからデータ(相違マップを含む)を受信するよう構成されるリモートサーバーである。リモートサーバーは、クライアントとして機能する。
好適には、それぞれの観察ステーション2は、
パンタグラフ100の他の部分が通過する第二架空領域を照射するための第二照射手段14と、
第二架空領域の画像を取得するための追加のビデオカメラ15と、
を備える。
好ましくは、追加のビデオカメラ15は、マトリックス・ビデオカメラであり、二〇〇万〜一六〇〇万画素(2〜16メガ・ピクセル)の解像度である。
好ましくは、第二架空領域を照射するための第二照射手段14は、LED技術によって実現される。
例えば、第二照射手段14は、平面状の延設部を有するとともに複数のLED光源17を支持する第二パネル16を備える。好ましくは、それぞれのLED光源17を、二つの軸(「パン/チルト」軸)に沿って方向付けることができる。
特に、第二パネル16は、地面Tに対して所定の高さに位置しているとともに、第二架空領域を投光する光線を放出するように方向付けされている。
ここで説明し例示する実施形態において、第二架空領域を通過するとともに照射されて取得されるパンタグラフ100の他の部分は、第一架空領域の範囲に含まれていない他方の端部部分(すなわち二つのホーン103,104の他方)に対応する。
好ましくは、それぞれの観察ステーション2において、第二パネル16および追加のビデオ・ビデオカメラ15は、対応する第二架空領域の取得された画像が、通過中におけるパンタグラフ100の上から見たまだ取得されていない方のホーン103,104のフレームとなるよう、配置され方向付けされている。
ここで説明し例示する実施形態において、第二ポスト18は、それぞれの観察ステーション2に配置される。第二ポスト18は、第二パネル16と、追加のビデオカメラ15と、第一ローカルプロセッサ9aと通信する第二ローカルプロセッサ9bと、を支持する。特に、第一ローカルプロセッサ9aは「マスタ」として機能し、第二ローカルプロセッサ9bは「スレーブ」としてと機能する。二つのローカルプロセッサ9a,9b間の通信は好ましくはワイヤレスで行われる。
特に、第一ポスト8および第二ポスト18は架空接触線に対して両側に配置される。
ここまで説明したビデオ検査のシステム1は、単線のパンタグラフ100を観察するのに適している。
複線の場合には、一方のパンタグラフ100が下り方向の線路Baの機関車に関連し、もう一方が上り方向の線路Brの機関車に関連する、二つのパンタグラフ100の状態を観察する必要がある。
複線のためのシステム1の構造は、いくつかの要素を重複させる必要があるが、単線のためのシステムと同様である。
特に、下り方向の線路Baのそれぞれの観察ステーション2は、
下り方向の線路Baの側に配置される第一ポスト8が、レーザー遠隔計器3(または二つのレーザー遠隔計器3a,3b)と第一パネル6と一ペアのステレオ・ビデオカメラ5a,5bと第一ローカルプロセッサ9aとを支持し、
上り方向の線路Brの側に配置される第二ポスト18が、第二パネル16と追加のビデオカメラ15と第二ローカルプロセッサ9bとを支持する
ように、第一ポスト8および第二ポスト18に「分散配置される」。
同様に、上り方向の線路Brのそれぞれの観察ステーション2は、逆方向に機能するが、同じ二つのポスト8,18に分配される。実際、この場合、上り方向の線路Brのためのレーザー遠隔計器3(または二つのレーザー遠隔計器3a,3b)と第一パネル6と一ペアのステレオ・ビデオカメラ5a,5bと第一ローカルプロセッサ9aとを支持するのは第二ポスト18である。一方、第一ポスト8は、第二パネル16と追加のビデオカメラ15と第二ローカルプロセッサ9bとを支持する。
好ましくは、第一ポスト8は、下り方向の線路Baのパンタグラフ100に対して機能的に動作する一ペアのステレオ・ビデオカメラ5a,5bと、上り方向の線路Brのパンタグラフ100に対して機能的に動作する追加のビデオカメラ15と、のためのハウジングボックス(筐体)19を備える。
下り方向の線路Baのパンタグラフ100に対して機能的に動作するレーザー遠隔計器3(または二つのレーザー遠隔計器3a,3b)もまたこのハウジングボックス19に配置される。
第二ポスト18は、上り方向の線路Brのパンタグラフ100に対して機能的に動作する一ペアのステレオ・ビデオカメラ5a,5bと、下り方向の線路Baのパンタグラフ100に対して機能的に動作する追加のビデオカメラ15と、のためのハウジングボックス(筐体)29を備える。
上り方向の線路Brのパンタグラフ100に対して機能的に動作するレーザー遠隔計器3(または二つのレーザー遠隔計器3a,3b)もまたこのハウジングボックス29に配置される。
それぞれのポスト8,18において、二つのパネル6,16を異なる高さに配置することも(図3のように)、または同じ高さに配置する(図4および図5のように)こともできる。パネル6,16が同じ高さにある場合、近い側の線路をパンタグラフが通過する第一架空領域と遠い側の線路をパンタグラフが通過する第二架空領域とをそれぞれ照射する必要があるので、地面に対して異なる角度に傾斜される(図5に示す通り)。
四つのパネルを使用する代わりに、一の(図示しない)変形実施形態では、
第一ポスト8に一つのパネルのみがあり、前記パネルは、下り方向の線路Baに関連するパンタグラフ100の上側部分および外側端部部分が通過する第一架空領域を照射するよう方向付けることができるいくつかのLED光源と、上り方向の線路Brに関連するパンタグラフ100の内側端部部分が通過する第二架空領域を照射するように方向付けることができるいくつかのLED光源と、を備えており、
第二ポスト18に一つのパネルのみがあり、前記パネルは、上り方向の線路Brに関連するパンタグラフ100の上側部分および外側端部部分が通過する第一架空領域を照射するよう方向付けることができるいくつかのLED光源と、下り方向の線路Baに関連するパンタグラフ100の内側端部部分が通過する第二架空領域を照射するように方向付けることができるいくつかのLED光源と、を備えている。
好ましくは、ポスト8,18への種々の部品(ハウジングボックス19,29、パネル6,16など)の設置は、プーリー機構を用いてそれぞれのポスト8,18に摺動可能に装着される支持構造20によって行うことができる。これにより、設置手順および保守手順がより簡単になる。
例えば、このタイプの設置装置を、追加の照明パネル26とともに、図8に示す。
ワイヤレス通信モジュール13およびローカルプロセッサ9a,9bは、代わって、アクセスを容易にするためにそれぞれのポスト8,18の基部に好ましくは配置される。
他の実施形態では、ポスト8,18とは異なる支持構造が用いられるが、いずれの場合も、好ましくは線路Ba,Brの側方に配置される。
以下に、架空接触線に沿ったパンタグラフのビデオ検査のための方法を説明する。
簡単化のために、関係するパンタグラフ100を備えた機関車が通過する単線をここでは説明する。
それぞれの観察ステーション2において、第一ポスト8に配置されたレーザー遠隔計器3が、パンタグラフ100の通過を検出し、そして制御ユニット12に第一パネル6のLED光源7を制御させる作動信号S1を生成し、これにより、これらの光源7が作動し、その結果、第一架空領域が照射される。
次に、LED光源7を制御する制御ユニット12は、第一架空領域の画像を取得する一ペアのステレオ・ビデオカメラ5a,5bへと同期信号S2(予め既知技術によって較正された)を送信する。
特に、取得する画像は、通過中に上から見たパンタグラフ100の接触片101,102および外側ホーン103(第一ポスト8に近いホーン)の画像である。
第一ローカルプロセッサ9aは、取得した画像間の相違を計算し、中央処理装置11へと送信する。
同期信号S2はまた、すべてが第二ポスト18に配置されている第二パネル16のLED光源17と追加のビデオカメラ15にも送信される。言い換えれば、第一パネル6は、「マスタ」の機能を実行し、そして第二パネル16は、「スレーブ」の機能を実行する。変形実施形態において、「マスタ」の機能は、一ペアのステレオ・ビデオカメラ5a,5bによって直接実行される。
同期信号S2は、第一ポスト8から第二ポスト18へ、第一ポスト8に配置されたワイヤレス通信モジュール13を用いて送信される。変形実施形態において、通信モジュール13は第一パネル6に組み込まれる。同期信号S2に応じて、第二パネル16のLED光源17はオンに切り替わり、追加のビデオカメラ15が第二架空領域の画像を取得する。
特に、取得する画像は、通過中に上から見たパンタグラフ100の内側ホーン104(第二ポスト18に近いホーン)の画像である。
またこれらの画像も、パンタグラフ100の三次元モデルを再現するよう構成される中央処理装置11へ送信される。
中央処理装置11はさらに、それぞれの観察ステーション2に関するパンタグラフ100の再現されたモデルをパンタグラフ100の理想モデルと比較して、パンタグラフ100の摩耗の状態に関する情報を取得するよう構成されている。
さらに、二つのビデオカメラ5a,5bからの立体的(ステレオスコピック)図形により、相対的測定だけでなく絶対的空間測定が可能となる。
したがって、中央処理装置11は、再現されたモデルを処理し、理想モデルとの比較を必要とすることなく、発生しうる亀裂の寸法や摩耗の影響を受ける領域などを取得するよう、構成される。
好ましくは、それぞれの観察ステーション2では、照射される第一架空領域が架空接触線のスライス(断片)も含むよう選択されている。こうして、パンタグラフ100の通過中のこのスライスの位置に関する情報は、ローカルプロセッサ9aによって実行される相違計算から取得される。
好ましくは、また、中央処理装置11は、パンタグラフ100の通過中の架空接触線のスライスの位置とパンタグラフ100がない状態(つまり休止状態)におけるこのスライスの位置とを比較するよう構成される。
ステレオ・ビデオカメラ5a,5b間に配置された二つのレーザー遠隔計器3a,3bを用いる実施形態では、パンタグラフ100の通過を検出することができ、したがってその速度(そして列車の速度)を計算することができる。
特に、それぞれの観察ステーション2において、二つの遠隔計器のうちの第一ポスト8に配置される遠隔計器(ここでは「第一遠隔計器3a」という)が、パンタグラフ100の通過をまず検出して第一トリガー信号TGR1を生成する。同じポスト8に配置される他方の遠隔計器(ここでは「第二遠隔計器3b」という)が、続いてパンタグラフ100の通過を検出し、第一トリガー信号TGR1に対して遅延した第二トリガー信号TGR2を生成する。
二つの遠隔計器3a,3b間の予め設定された距離dtelは分かっており(これは設計条件である)、そして第一トリガー信号TGR1と第二トリガー信号TGR2との間の時間遅延Δttelは測定可能である。したがって、パンタグラフ100の速度V(そして列車の速度)は次の関係を用いて取得できる。
V(km/h)=dtel(mm)/Δttel(ms)×3.6
パンタグラフ100の速度Vを計算した後、LED光源7を作動させるための作動信号S1が生成され、ビデオカメラ5a,5bが上述した通り同期される。二つの遠隔計器3a,3bを用いることにより、実際、パンタグラフ100の速度Vが分かることにより、LED光源7およびビデオカメラ5a,5bを作動させるための作動信号を生成するべき正確な時点を計算することができ、パンタグラフ100のモデルにかかわらず、第一架空領域において取得されるパンタグラフ100の部分を常に画像の同じ領域内に入れることができるという利点がある。
本発明にかかる架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法の特徴は、その利点のように、上の説明から明らかであろう。
特に、機関車の速度(例えば300km/hの速度に達する場合がある)によって障害を受けることがないそれぞれの観察ステーションの一ペアのステレオ・ビデオカメラの使用により、パンタグラフの非常に正確な三次元モデルを再現することが可能となる。
したがって、再現された三次元モデルをパンタグラフの理想モデルと比較することによって、パンタグラフ(摩耗、亀裂、欠け、不具合などによって影響を受ける領域)の実際の状態に関する、そしてこれによる計画保守手順または交換手順に関する信頼できる情報を取得することが可能となる。
さらに、追加のビデオカメラを使用することにより、離れた側のホーンの画像の取得によって、パンタグラフの再現されるモデルを完全なモデルとすることができる。
また提案の方法により、架空線(ワイヤ)に対するパンタグラフの圧力のモニタリングが可能となり、これにより、さらなる計器を架空線に装着するよう使用する必要がなくなる。
さらに、線路の上方のフレーム上に配置する必要がある「レーザスキャナ」タイプのセンサを使用する解決法と異なり、この場合、一ペアのステレオ・ビデオカメラおよびLED光源を線路の横に並べてより安全な場所に配置することができる。
例えば、取得する画像の品質に影響を与えない他の側方支持部材またはポストに配置することができる。
さらに、電車線に沿った既存のインフラストラクチャーを用いることができるので、占有空間、効率およびとコストの点で明らかな利点がある。
またこれにより、ビデオ検査システムの設置および保守を簡単化できる。
さらにまた、同じ支持インフラストラクチャーを、単線に適用されるシステムと複線に適用されたシステムとに用いることができる。
LED照射技術の使用により、これらのタイプのシステムに必要とされる耐久性(duration)および信頼性を満たすことができる。そしてさらに、余剰分のLED光源を備えることによって、いくつかの光源が機能停止となった場合であっても、システムを継続して使用することができる。
イタリア特許第1401952号 欧州特許出願公開第1766326号 国際公開第2011/035983号 特開2015−017921号 中国特許出願公開第104567729号 米国特許出願公開第2010/253329号

Claims (6)

  1. 線路における架空接触線に沿っており、上側中央部に接触片(101,102)を備え、端部部分にホーン(103,104)を備えるパンタグラフ(100)のビデオ検査のためのシステム(1)であって、
    複数の観察ステーション(2)を備え、前記複数の観察ステーション(2)のそれぞれが、
    少なくとも一つのレーザー遠隔計器を備える、前記パンタグラフ(100)の通過を検出するための検出手段(3)と、
    前記パンタグラフ(100)の一部分が通過する第一架空領域を照射するための第一照射手段(4)であって、平面状の延設部を有するとともに複数のLED光源(7)を支持する第一パネル(6)を備える第一照射手段(4)と、
    前記第一架空領域の画像を取得するための少なくとも一ペアのステレオ・ビデオカメラ(5a,5b)と、
    それぞれのペアのステレオ・ビデオカメラ(5a,5b)によって取得された前記画像間の相違を計算するように構成されている第一ローカルプロセッサ(9a)と、
    前記パンタグラフ(100)の他の部分が通過する第二架空領域を照射するための第二照射手段(14)であって、平面状の延設部を有するとともに複数のLED光源(17)を支持する第二パネル(16)を備える第二照射手段(14)と、
    前記第二架空領域の画像を取得するための追加のビデオカメラ(15)と、
    前記架空接触線に対して両側に、かつ前記線路の側方に配置される第一支持構造(8)および第二支持構造(18)であって、前記第一支持構造(8)が前記レーザー遠隔計器(3)と前記第一パネル(6)と前記一ペアのステレオ・ビデオカメラ(5a,5b)を支持しており、前記第二支持構造(18)が前記第二パネル(16)と前記追加のビデオカメラ(15)とを支持しており、前記第一パネル(6)および前記一ペアのステレオ・ビデオカメラ(5a,5b)は、前記第一架空領域の前記取得された画像が通過中に上から見た前記パンタグラフ(100)の前記上側中央部と一方の端部部分とのフレームとなるよう、配置され方向付けされており、前記追加のビデオカメラ(15)は、対応する前記第二架空領域から取得された前記画像が通過中に上から見た前記パンタグラフ(100)の他方の端部部分のフレームとなるよう、配置され方向付けされている第一支持構造(8)および第二支持構造(18)と、
    有線接続または無線接続を用いて前記複数の観察ステーションと通信する中央処理装置11であって、各観察ステーションの前記第一ローカルプロセッサ(9a)から前記相違の計算結果受け取り、前記追加のビデオカメラ(15)から取得された前記画像を受け取り、前記パンタグラフ(100)の三次元モデルを再現し、前記再現されたモデルを前記パンタグラフ(100)の理想モデルと比較して、前記パンタグラフ(100)の摩耗の状態に関する情報を取得するよう構成される中央処理装置11
    を備える、
    システム。
  2. 請求項に記載のビデオ検査のためのシステム(1)において、前記ステレオ・ビデオカメラ(5a,5b)は水平基線に応じて配置されるシステム。
  3. 請求項に記載のビデオ検査のためのシステム(1)において、前記パンタグラフの通過を検出するための前記検出手段(3)は、前記ステレオ・ビデオカメラ(5a,5b)間に配置されるとともに同じ水平基線に応じて配置される二つのレーザー遠隔計器(3a,3b)を備えるシステム。
  4. 請求項1から3のいずれか1項に記載のビデオ検査のためのシステム(1)において、前記第一パネル(6)は、地面(T)に対して所定の高さに位置しているとともに、前記第一架空領域を投光する光線を放出するように方向付けされているシステム。
  5. 請求項に記載のビデオ検査のためのシステム(1)において、前記第二パネル(16)は、地面(T)に対して所定の高さに位置しているとともに、前記第二架空領域を投光する光線を放出するように方向付けされているシステム。
  6. 請求項1から5のいずれか1項に記載のビデオ検査のためのシステム(1)を用いる、線路における架空接触線に沿っており、上側中央部に接触片(101,102)を端部部分にホーン(103,104)を備えるパンタグラフ(100)のビデオ検査のための方法であって、
    複数の観察ステーション(2)において前記パンタグラフ(100)の通過を検出する工程と、
    それぞれの観察ステーション(2)において、前記パンタグラフ(100)の前記通過の前記検出に応じて前記パンタグラフ(100)の一部分が通過する第一架空領域を照射し、前記パンタグラフ(100)の他の部分が通過する第二架空領域を照射する工程と、
    それぞれの観察ステーション(2)において、前記第一架空領域を照射する前記工程の間に、一ペアのステレオ・ビデオカメラ(5a,5b)を介して前記第一架空領域の画像を取得し、前記第二架空領域を照射する前記工程の間に、追加のビデオカメラ(15)を介して前記第二架空領域の画像を取得する工程と、
    それぞれの観察ステーション(2)において前記第一架空領域に関して取得された前記画像間の相違を計算する工程と、
    それぞれの観察ステーション(2)において計算された前記相違と前記追加のビデオカメラ(15)によって取得された前記画像とから開始して、前記パンタグラフ(100)の三次元モデルを再現する工程と、
    前記再現されたモデルを前記パンタグラフ(100)の理想モデルと比較して、前記パンタグラフ(100)の摩耗の状態に関する情報を取得する工程と
    を含む方法。
JP2018511535A 2015-05-12 2016-05-09 架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法 Active JP6735339B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
ITPR2015A000034A ITPR20150034A1 (it) 2015-05-12 2015-05-12 Sistema e metodo di video-ispezione di un pantografo lungo una linea aerea di contatto
ITPR2015A000034 2015-05-12
PCT/IB2016/052626 WO2016181280A1 (en) 2015-05-12 2016-05-09 System and method for the video inspection of a pantograph along an overhead contact line

Publications (2)

Publication Number Publication Date
JP2018522526A JP2018522526A (ja) 2018-08-09
JP6735339B2 true JP6735339B2 (ja) 2020-08-05

Family

ID=53794396

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018511535A Active JP6735339B2 (ja) 2015-05-12 2016-05-09 架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法

Country Status (10)

Country Link
US (1) US10416090B2 (ja)
EP (1) EP3295158B1 (ja)
JP (1) JP6735339B2 (ja)
CN (1) CN107635823B (ja)
DK (1) DK3295158T3 (ja)
ES (1) ES2789450T3 (ja)
HK (1) HK1245730A1 (ja)
IT (1) ITPR20150034A1 (ja)
PL (1) PL3295158T3 (ja)
WO (1) WO2016181280A1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108827185A (zh) * 2018-06-04 2018-11-16 中车青岛四方机车车辆股份有限公司 一种轨道车辆车身的三维重建装置及三维重建方法
JP2020041943A (ja) * 2018-09-12 2020-03-19 日立交通テクノロジー株式会社 パンタグラフの総合計測装置およびパンタグラフ押上げ力推定方法
CN109785377B (zh) * 2019-01-09 2023-05-26 中国科学院上海微***与信息技术研究所 弓网状态的检测方法
CN110097591B (zh) * 2019-04-29 2023-05-26 中国科学院上海微***与信息技术研究所 弓网状态的检测方法
CN111609813B (zh) * 2020-05-26 2021-11-09 成都唐源电气股份有限公司 一种基于3d成像的受电弓磨耗测量方法及***
CN112014400A (zh) * 2020-07-28 2020-12-01 中国铁建电气化局集团第五工程有限公司 一种基于4c检测技术的高铁接触网防零部件脱落新技术
CN112325781B (zh) * 2020-10-16 2022-05-17 易思维(杭州)科技有限公司 轨道交通接触线磨耗检测装置及方法
CN112356878B (zh) * 2020-11-19 2022-05-17 易思维(杭州)科技有限公司 一种高精度来车、走车检测***
IT202000029978A1 (it) * 2020-12-04 2022-06-04 Tech For Edge Applications S R L Sistema di monitoraggio di veicoli
CN112762826B (zh) * 2020-12-25 2022-11-15 江苏集萃智能光电***研究所有限公司 一种列车受电弓中心线偏移在线检测设备及方法
CN112781493B (zh) * 2020-12-25 2022-09-06 江苏集萃智能光电***研究所有限公司 一种列车受电弓综合几何参数在线检测设备
CN112977535B (zh) * 2021-05-11 2021-07-30 领视科技成都有限公司 一种基于激光扫描的电气化铁路限界检测方法及***
CN113104063A (zh) * 2021-06-09 2021-07-13 成都国铁电气设备有限公司 一种网轨隧综合检测***及方法
CN114384072B (zh) * 2021-11-30 2023-07-11 杭州申昊科技股份有限公司 一种用于轨道巡检刚性接触网的磨耗检测方法及***
CN114199105B (zh) * 2021-12-09 2024-04-16 湖北文理学院 一种机车构架自动调正检测平台及方法
CN118011891A (zh) * 2023-04-06 2024-05-10 南京星河世纪信息技术有限公司 一种高压设备智能监控***

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0879904A (ja) * 1994-08-31 1996-03-22 Mitsubishi Heavy Ind Ltd パンタグラフの異常検出装置
ATE430301T1 (de) 2004-03-19 2009-05-15 Jrb Engineering Pty Ltd Optisches verfahren zur bestimmung einer grösse oder der orientierung eines bewegten objekts
JP4177288B2 (ja) * 2004-05-24 2008-11-05 日立交通テクノロジー株式会社 鉄道車両用屋根上機器監視測定装置
US20100253329A1 (en) 2009-04-07 2010-10-07 Gianni Arcaini System and Apparatus for Automated Inspection of Overhead Electrical Traction Rail Car Pantographs
DE102009043215A1 (de) 2009-09-28 2011-05-19 Siemens Aktiengesellschaft Verfahren und Anordnung zur Kontrolle von Stromabnehmern, Lichtraumprofilen und horizontaler und vertikaler Fahrdrahtposition an Fahrzeugverbänden
CN201716004U (zh) * 2010-06-28 2011-01-19 成都主导科技有限责任公司 机车受电弓滑板磨耗在线自动检测装置
IT1401952B1 (it) 2010-09-22 2013-08-28 Henesis S R L Sistema e metodo per il monitoraggio di pantografi.
JP5534058B1 (ja) * 2013-02-19 2014-06-25 株式会社明電舎 摩耗測定装置及びその方法
JP2015017921A (ja) * 2013-07-12 2015-01-29 株式会社明電舎 摺り板形状計測装置
CN104567729B (zh) * 2014-12-31 2017-06-30 苏州华兴致远电子科技有限公司 受电弓运行状态监测方法及装置

Also Published As

Publication number Publication date
EP3295158B1 (en) 2020-04-08
CN107635823B (zh) 2020-09-18
JP2018522526A (ja) 2018-08-09
WO2016181280A1 (en) 2016-11-17
US20180156737A1 (en) 2018-06-07
PL3295158T3 (pl) 2020-09-21
EP3295158A1 (en) 2018-03-21
US10416090B2 (en) 2019-09-17
CN107635823A (zh) 2018-01-26
ITPR20150034A1 (it) 2016-11-12
HK1245730A1 (zh) 2018-08-31
DK3295158T3 (da) 2020-06-02
ES2789450T3 (es) 2020-10-26

Similar Documents

Publication Publication Date Title
JP6735339B2 (ja) 架空接触線に沿ったパンタグラフのビデオ検査のためのシステムおよび方法
US11142230B2 (en) Broken wheel detection system
KR101111569B1 (ko) 궤도차량을 이용한 철도시설물 감시시스템 및 방법
KR101927648B1 (ko) 차량 운행 고장 검출 시스템 및 방법
HU220577B1 (hu) Berendezés és eljárás sínhez kötött járművek kerekei gördülési paramétereinek mérésére
JP2011214933A (ja) 軌道用距離画像取得システム
CN204674616U (zh) 一种列车轮对尺寸动态检测装置
JP5879045B2 (ja) 線路周辺設備空間情報取得システム
WO2012057592A2 (ko) 궤도차량을 이용한 철도시설물 감시시스템 및 방법
JP4567533B2 (ja) パンタグラフのすり板検査装置
CN110455214A (zh) 一种受电弓滑板磨耗状态监测***及方法
CN108709497B (zh) 一种接触网几何参数检测装置
JPH0879904A (ja) パンタグラフの異常検出装置
CN111812101A (zh) 受电弓滑板缺陷检测装置及方法
CN110626380B (zh) 一种动车组正线检测方法
CN106183895B (zh) 一种单轨接触线磨耗检测装置及方法
KR100805317B1 (ko) 열차 검사장치
CN217932084U (zh) 一种列车综合检测***
US10523858B1 (en) Apparatus and method to capture continuous high resolution images of a moving train undercarriage
CN116331069A (zh) 一种自带动力的轻便式弓网检测轨道巡检车检测***
KR102258401B1 (ko) 전동차를 위한 스마트 이상검지 시스템
RU187243U1 (ru) Устройство контроля контактной сети
KR20110087367A (ko) 고속철도 전차선로 유지보수를 위한 허용오차 측정 및 관리시스템
CN204452485U (zh) 踏面缺陷信息采集***
CN109733251B (zh) 红外数字图像轨道水平和轨道电网导高监测***

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180202

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190312

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200303

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200527

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200616

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200713

R150 Certificate of patent or registration of utility model

Ref document number: 6735339

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250