JP2022026746A - Ultrasonic image evaluation device and ultrasonic image evaluation method - Google Patents
Ultrasonic image evaluation device and ultrasonic image evaluation method Download PDFInfo
- Publication number
- JP2022026746A JP2022026746A JP2020130353A JP2020130353A JP2022026746A JP 2022026746 A JP2022026746 A JP 2022026746A JP 2020130353 A JP2020130353 A JP 2020130353A JP 2020130353 A JP2020130353 A JP 2020130353A JP 2022026746 A JP2022026746 A JP 2022026746A
- Authority
- JP
- Japan
- Prior art keywords
- image
- ultrasonic image
- original
- ultrasonic
- cut
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 60
- 238000001514 detection method Methods 0.000 claims abstract description 66
- 238000013500 data storage Methods 0.000 claims abstract description 22
- 230000007547 defect Effects 0.000 claims abstract description 21
- 230000013016 learning Effects 0.000 claims abstract description 15
- 238000005259 measurement Methods 0.000 claims description 28
- 238000004364 calculation method Methods 0.000 claims description 24
- 239000000523 sample Substances 0.000 claims description 13
- 238000002604 ultrasonography Methods 0.000 claims 4
- 238000000034 method Methods 0.000 description 18
- 238000010586 diagram Methods 0.000 description 15
- 238000012545 processing Methods 0.000 description 15
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000002592 echocardiography Methods 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000003292 diminished effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Landscapes
- Investigating Or Analyzing Materials By The Use Of Ultrasonic Waves (AREA)
Abstract
Description
本発明の実施形態は、超音波画像評価装置および超音波画像評価装方法に関する。 Embodiments of the present invention relate to an ultrasonic image evaluation device and an ultrasonic image evaluation mounting method.
超音波探傷法は、構造物の検査を行う手段として広く使われている。当初は、単眼プローブを用いてエコーの波形を評価していたが、近年はフェイズドアレイ超音波探傷法の普及により、超音波探傷結果を画像化し、それを用いた評価も行われてきている。超音波探傷によって得られる超音波画像から欠陥があるかないかを判定するのは、主に資格や技能、経験を持った検査員であり、個々の専門知識と経験に基づいて判定を行っている。そのため検査員の技量によって判定結果にばらつきが生じる場合がある。 Ultrasonic flaw detection is widely used as a means of inspecting structures. Initially, the echo waveform was evaluated using a monocular probe, but in recent years, with the spread of the phased array ultrasonic flaw detection method, the ultrasonic flaw detection results have been imaged and evaluated using it. It is mainly qualified, skillful, and experienced inspectors who judge whether or not there is a defect from the ultrasonic image obtained by ultrasonic flaw detection, and make the judgment based on individual expertise and experience. .. Therefore, the judgment result may vary depending on the skill of the inspector.
そこで、超音波画像から信号処理またはAIなどを用いて自動判定する技術が知られている。例えば、超音波画像を機械学習の入力として欠陥検出する技術が知られている。この技術は1枚の画像について欠陥が含まれるか否かを判定するもので、画像処理を中心とした技術である。また、超音波画像から新たな画像を生成し、パターン認識アルゴリズムを用いて正常パターン画像と探傷画像を比較し、正常パターン画像と異なる探傷画像であった場合、その探傷画像内の形状エコーと欠陥エコーを判定することで、欠陥位置を検出する技術が知られており、この技術は欠陥の位置まで特定可能である。 Therefore, there is known a technique for automatically determining from an ultrasonic image using signal processing or AI. For example, a technique for detecting defects by using an ultrasonic image as an input for machine learning is known. This technique determines whether or not a single image contains defects, and is a technique centered on image processing. In addition, a new image is generated from the ultrasonic image, the normal pattern image and the flaw detection image are compared using the pattern recognition algorithm, and if the flaw detection image is different from the normal pattern image, the shape echo and defects in the flaw detection image are obtained. A technique for detecting the position of a defect by determining an echo is known, and this technique can identify the position of a defect.
前述の、パターン認識アルゴリズムを用いて正常パターン画像と探傷画像を比較する技術では、探傷画像について個々のエコーを含む画像を切り出す作業があるが、作業のアルゴリズムは明らかではない。仮にノイズの強度が大きく、欠陥エコーが不明瞭な画像となった場合や、形状エコーと欠陥エコーが重なり合っている場合には、切出し作業が困難になる可能性があり、欠陥を見逃すおそれがある。また、切り出したエコーを形状エコーと欠陥エコーに分類し、教師データを作成しているが、欠陥エコーか形状エコーかの判断は、常に表示されているか否かで判断しており、溶接部の組織や内在物由来のエコーなども欠陥エコーと判断される可能性がある。 In the above-mentioned technique of comparing a normal pattern image and a flaw detection image using a pattern recognition algorithm, there is a work of cutting out an image including individual echoes for the flaw detection image, but the algorithm of the work is not clear. If the noise intensity is high and the defect echo becomes an unclear image, or if the shape echo and the defect echo overlap, the cutting work may become difficult and the defect may be overlooked. .. In addition, the cut out echo is classified into shape echo and defect echo, and teacher data is created, but the judgment of defect echo or shape echo is always judged by whether it is displayed or not, and the welded part is judged. Echoes derived from tissues and internal substances may also be judged as defective echoes.
そこで、本発明の実施形態は、欠陥等の検出対象がどの程度の確度で存在するかの評価を可能とすることを目的とする。 Therefore, it is an object of the present invention to make it possible to evaluate with what degree of accuracy a detection target such as a defect exists.
上述の目的を達成するため、本発明の実施形態に係る超音波画像評価装置は、超音波探傷による少なくとも一つのオリジナル超音波画像に基づいて欠陥等の検出対象の存在の有無を評価する超音波画像評価装置であって、超音波画像データを用いて学習した判定器と、前記少なくとも一つのオリジナル超音波画像のディジタルデータであるオリジナル超音波画像データを収納するオリジナル超音波画像データ記憶部と、前記オリジナル超音波画像データ記憶部から前記オリジナル超音波画像データの一部を、所定の方向に順次読み出してそれぞれの切り出し画像を出力する画像切り出し部と、前記判定器を用いて、それぞれの前記切り出し画像について、前記検出対象の有無に関する切り出し画像判定値を算出する切り出し画像判定部と、それぞれの前記切り出し画像について算出された前記切り出し画像判定値に基づいて、前記少なくとも一つのオリジナル超音波画像についての検出対象の有無に関するオリジナル超音波画像判定値を算出するオリジナル超音波画像判定部と、を備えることを特徴とする。 In order to achieve the above object, the ultrasonic image evaluation device according to the embodiment of the present invention is an ultrasonic wave that evaluates the presence or absence of a detection target such as a defect based on at least one original ultrasonic image by ultrasonic flaw detection. An image evaluation device, a determination device learned using ultrasonic image data, an original ultrasonic image data storage unit that stores original ultrasonic image data that is digital data of at least one original ultrasonic image, and an original ultrasonic image data storage unit. A part of the original ultrasonic image data is sequentially read out from the original ultrasonic image data storage unit in a predetermined direction and each cutout image is output, and the cutout unit is used with the determination device. With respect to the image, the cut-out image judgment unit for calculating the cut-out image judgment value regarding the presence or absence of the detection target, and the cut-out image judgment value calculated for each of the cut-out images, the at least one original ultrasonic image. It is characterized by including an original ultrasonic image determination unit for calculating an original ultrasonic image determination value regarding the presence or absence of a detection target.
以下、図面を参照して、本発明の実施形態に係る超音波画像評価装置および超音波画像評価装方法について説明する。ここで、互いに同一または類似の部分には、共通の符号を付して、重複する説明は省略する。 Hereinafter, the ultrasonic image evaluation device and the ultrasonic image evaluation mounting method according to the embodiment of the present invention will be described with reference to the drawings. Here, common reference numerals are given to parts that are the same as or similar to each other, and duplicate description will be omitted.
[第1の実施形態]
本実施形態は、超音波探傷によるオリジナル超音波画像に基づいて、欠陥等の検出対象がどの程度の確度で存在するかを評価するものである。
[First Embodiment]
The present embodiment evaluates the degree of certainty that a detection target such as a defect exists based on an original ultrasonic image obtained by ultrasonic flaw detection.
まず、本実施形態に係る超音波画像評価装置および超音波画像評価方法が取り扱うオリジナル超音波画像について説明する。 First, the original ultrasonic image handled by the ultrasonic image evaluation device and the ultrasonic image evaluation method according to the present embodiment will be described.
図1は、第1の実施形態に係る超音波画像評価装置で扱う超音波画像データを提供する超音波探傷器がフェイズドアレイ超音波探傷器10である場合の構成例を示す概念図である。
FIG. 1 is a conceptual diagram showing a configuration example when the ultrasonic flaw detector for providing ultrasonic image data handled by the ultrasonic image evaluation apparatus according to the first embodiment is a phased array
図1に示されたフェイズドアレイ超音波探傷器10においては、超音波アレイ探触子10aが、1次元または2次元のアレイ状に配列された複数の超音波素子11を有する。個々の超音波素子に加えるパルスのタイミングを電子的に制御することにより、方向、集束位置等を制御する。
In the phased array
超音波アレイ探触子10aから測定対象1に照射された超音波は、遅延時間に従って入射および屈折角度が決定され、測定対象1の内部に伝搬する。内部に伝搬した超音波は、検出対象2で反射されて再び超音波アレイ探触子10aに到達する。また、検出対象2以外にも測定対象1の底面3や角部等からも、超音波は反射もしくは散乱され超音波アレイ探触子10aまで到達する。超音波アレイ探触子10aに到達したそれら反射波、散乱波は到達時間および受信素子が得た情報に基づいて映像化される。このようにして、測定対象1中にある欠陥等の検出対象2を検出する。
The ultrasonic waves radiated from the
たとえば、セクタースキャンでは、超音波アレイ探触子10aによる集束位置の角度を変化させることにより、2次元的に探傷を行う。
For example, in the sector scan, flaw detection is performed two-dimensionally by changing the angle of the focusing position by the
また、リニアスキャンでは、図1に示すように、超音波アレイ探触子10a中で、たとえば斜線が施された複数の超音波素子11のグループにより所定の方向に送信し、このグループを、超音波素子11の配列方向(長手方向)に順次移動することにより、探傷範囲を移動して2次元的に探傷を行う。図1で示す探傷範囲1aは、フェイズドアレイ超音波探傷器10が図1に示す位置にあるときの、リニアスキャンの探傷範囲を示す。
Further, in the linear scan, as shown in FIG. 1, in the
図2は、第1の実施形態に係る超音波画像評価装置で扱う超音波画像の例を示す画像図である。図2は、図1に示したリニアスキャンの場合の超音波画像である。 FIG. 2 is an image diagram showing an example of an ultrasonic image handled by the ultrasonic image evaluation device according to the first embodiment. FIG. 2 is an ultrasonic image in the case of the linear scan shown in FIG.
したがって、この場合は、超音波画像は、探傷範囲1aについて得られた画像である。この画像で、欠陥等の検出対象2に対応する検出対象画像2aや底面3に対応する底面画像3aが含まれる。なお、検出対象2は、図2で示すような丸穴に限らず、たとえばき裂、剥離、減肉、介在物等を含めてもよく、以下、これらを含めて「検出対象2」というものとする。
Therefore, in this case, the ultrasonic image is an image obtained for the flaw detection range 1a. This image includes a
本実施形態に係る超音波画像評価装置および超音波画像評価方法では、このような画像を対象として評価を行うことから、この画像をオリジナル超音波画像142aと呼ぶものとする。
In the ultrasonic image evaluation device and the ultrasonic image evaluation method according to the present embodiment, since such an image is evaluated, this image is referred to as an original
次に、本実施形態に係る超音波画像評価装置について、以下に説明する。 Next, the ultrasonic image evaluation device according to this embodiment will be described below.
図3は、第1の実施形態に係る超音波画像評価装置100の構成を示すブロック図である。
超音波画像評価装置100は、入力部110、判定器120、演算部130、記憶部140、および出力部150を有する。
FIG. 3 is a block diagram showing the configuration of the ultrasonic
The ultrasonic
入力部110は、判定器120の学習に用いる学習用超音波画像データ群、オリジナル超音波画像生成者による超音波探傷画像のディジタルデータであるオリジナル超音波画像データ142a、および、後述する演算部の各要素の処理に関する指令等の外部入力を受け入れる。
The
なお、画像は、ディジタル処理化された形で処理されることから、「画像データ」と「画像」とは、互いに厳密に表現しようとすると煩雑となる。「画像データ」と「画像」は、一方が他方も意味している場合がある。 Since the image is processed in a digitalized form, it becomes complicated if the "image data" and the "image" are to be expressed strictly with each other. "Image data" and "image" may mean one to the other.
ここで、オリジナル超音波画像生成者によるオリジナル超音波画像データ142aは、超音波画像を生成するフェイズドアレイ探傷器そのものによるものでもよいし、探傷器で得られた波形を超音波画像に描画する描画ソフトによるものでもよい。あるいは、これらもしくはこれらに類するものによって得られた超音波画像を保存したメディアやネットワークで接続されたデータベース等、超音波画像に関するデータを供給可能な手段によるものであれば何でもよい。
Here, the original
また、これらのオリジナル超音波画像データ142aは、何らかの評価を行う前評価者が介在した後に供給されてもよい。この際、前評価者は人間であってもよいし、自動プログラムもしくは人間によって操作される自動プログラム、FPGAのような理論回路等でもよい。
Further, these original
判定器120は、機械学習等に基づいて、多くの学習用の超音波画像においてたとえば、図2で示した検出対象2の検出対象画像2aや、底面3の底面画像3aの特徴を学習することにより、検出対象2の存在の有無の可能性の指標である画像判定値Xを算出する能力を確保する。
The
たとえば、機械学習においては、検出対象2を含むというラベリングを施した超音波画像と、検出対象2を含まないというラベリングを施した超音波画像とを複数枚用意し、それらを用いて学習する。
For example, in machine learning, a plurality of ultrasonic images labeled to include the
または、検出対象2の特徴量を複数個抽出し、それを教師として判定に用いる物体認識アルゴリズム等に基づいて検出対象2の存在の有無の可能性の指標である画像判定値Xを算出することでもよい。この際、検出対象2の特徴量としては、たとえば、エッジが閉曲線あるいはほぼ閉曲線であるなどのエッジの形状、超音波のエコーの合成波形の強度などが考えられる。
Alternatively, a plurality of feature quantities of the
あるいは、CNN(Convolutional Neural Network)などを用いたディープラーニングによって、検出対象2を識別して、直接に、検出対象2の存在の有無の可能性の指標である画像判定値Xを算出することでもよい。
Alternatively, the
これらの学習の結果に基づいて、判定器120は、欠陥等の検出対象2の存在の有無の可能性の指標である画像判定値Xを算出する。
Based on the results of these learnings, the
特徴点を用いた場合には、画像判定値Xの算出は、たとえば、エッジの形状と超音波のエコーの合成波形の強度の2つの指標を用いる場合を例にとると、以下の式(1)により得られる。
X=[(Q1)2+(Q2)2]1/2 (1)
ここで、Q1はエッジの連続部分の割合(閉曲線ですべて連続している場合を1とする)、Q2は超音波の合成波形の強度の最大強度部分の強度に対する比(最大1)である。
When the feature points are used, the calculation of the image judgment value X is performed by the following equation (1), for example, when two indexes of the shape of the edge and the intensity of the composite waveform of the ultrasonic echo are used. ).
X = [(Q 1 ) 2 + (Q 2 ) 2 ] 1/2 (1)
Here, Q 1 is the ratio of the continuous portion of the edge (1 is the case where all are continuous in the closed curve), and Q 2 is the ratio of the intensity of the synthetic waveform of the ultrasonic wave to the intensity of the maximum intensity portion (maximum 1). be.
なお、用いる指標は別のものでもよい。また、式(1)のようにベクトル(X1,X2)の長さの概念のような指標でなく、たとえば、これらの平均値、最小値あるいは最大値を用いてもよい。 The index used may be different. Further, instead of the index such as the concept of the length of the vector (X 1 , X 2 ) as in the equation (1), for example, the average value, the minimum value or the maximum value of these may be used.
画像判定値Xの値は、0と1の間の数値で、検出対象2の存在の確率を示す指標として算出されてもよい。あるいは、画像判定値Xの値は、あるしきい値を超えれば1、越えなければ0等とし、しきい値は経験的に設定する等の方法を用いてもよい。
The value of the image determination value X is a numerical value between 0 and 1, and may be calculated as an index indicating the probability of existence of the
以下では、画像判定値Xの値が、0と1の間の数値で、検出対象2の存在の確率を示す指標として算出されている場合を例にとって説明する。
In the following, a case where the value of the image determination value X is a numerical value between 0 and 1 and is calculated as an index indicating the probability of existence of the
演算部130は、画像切り出し部131、切り出し画像判定部132、画像内着目領域特定部133、およびオリジナル超音波画像判定部134を有する。
The
また、記憶部140は、判定器120関係のデータを記憶する判定器用データ記憶部141、オリジナル超音波画像データ142aを記憶するオリジナル超音波画像データ記憶部142、画像切り出し部131による切り出し画像データ143a(図4)を記憶する切り出し画像データ記憶部143、および演算部130内での判定等の結果を記憶する演算結果記憶部144を有する。オリジナル超音波画像データ142aおよび切り出し画像データ143aは、2次元的に配列されたデータから構成されている。
Further, the
以下、演算部130について説明する。
Hereinafter, the
図4は、画像切り出し部131の処理内容の説明図である。画像切り出し部131は、オリジナル超音波画像142aを、ウインドウに基づいて所定の方向に順次読み出して複数の切り出し画像143aを出力する。
FIG. 4 is an explanatory diagram of the processing content of the
画像切り出し部131は、まず、入力部110を介して指令として読み込まれた読み出し方向、および読み出し幅Wにしたがって、読み出し幅W、読み出し深さDのウインドウ143bを設定する。ただし、読み出し深さDは、オリジナル超音波画像データ142aの読み出し方向に直行する方向の長さである。
First, the
次に、画像切り出し部131は、入力部110を介して指令として読み込まれた重複幅ΔWにしたがって、ウインドウ幅すなわち読み出し幅W、ウインドウ深さDのウインドウ143bを順次ずらして、そのウインドウ143bに相当する分をオリジナル超音波画像データ142aから読み出す。このようにして、それぞれの切り出し画像143aが得られる。
Next, the
ここで、ウインドウ143bのウインドウ幅Wは一定でもよいし、変化してもよい。また、ウインドウ幅Wは、少なくとも、たとえば、超音波アレイ探触子10aを構成する超音波素子11の2つ分、また、想定される検出対象2が全て収まる幅であることが好ましい。
Here, the window width W of the
1つのオリジナル超音波画像から、n個の切り出し画像143aが得られた場合、このn枚の切り出し画像143aを、切り出し画像群と呼ぶこととする。切り出し画像群は、演算結果記憶部144に記憶される。
When n cut-out
切り出し画像判定部132は、画像切り出し部131から出力された切り出し画像群のそれぞれの切り出し画像143aについて、判定器120を用いて、検出対象2の有無に関する切り出し画像判定値Xjを算出する。具体的には、それぞれの切り出し画像143aについて、判定器120が出力する画像判定値Xが、切り出し画像判定部132による切り出し画像判定値Xj、すなわち、切り出し画像143aの中に所望の検出対象2が含まれている可能性を表す切り出し画像判定値Xjとして出力される。
The cut-out
切り出し画像判定部132が演算した結果であるn個の切り出し画像判定値Xjのグループは、演算結果記憶部144に記憶される。
A group of n cut-out image determination values Xj, which is the result of calculation by the cut-out
図5は、第1の実施形態に係る超音波画像評価装置の画像内着目領域特定部の処理内容の説明図である。
画像内着目領域特定部133は、オリジナル超音波画像142aにおいて特に検出対象2が存在する可能性の高い、画像内着目領域133aを設定する。画像内着目領域特定部133は、各切り出し画像143aについて切り出し画像判定部132が算出した切り出し画像判定値Xjが所定のしきい値を超える切り出し画像143aを、演算結果記憶部144から読み出し、オリジナル超音波画像142a中の着目すべき領域である画像内着目領域133aとして出力する。なお、しきい値は、後述するオリジナル超音波画像判定部134で使用するしきい値Xthと同じ値としてもよい。
FIG. 5 is an explanatory diagram of the processing content of the region of interest in the image of the ultrasonic image evaluation device according to the first embodiment.
The region of interest in the
次に、オリジナル超音波画像判定部134について説明する。
Next, the original ultrasonic
図6は、第1の実施形態に係る超音波画像評価装置のオリジナル超音波画像判定部134の処理内容の説明図である。図6の横軸は、順次切り出された切り出し画像の名称であり、a、b、c、d、e、f、gと、切り出し画像が7つの場合を例にとって示している。縦軸は、それぞれの切り出し画像について切り出し画像判定部132により出力された切り出し画像判定値Xjである。
FIG. 6 is an explanatory diagram of the processing content of the original ultrasonic
オリジナル超音波画像判定部134は、まず、切り出し画像判定部132による判定結果を記憶する演算結果記憶部144からそれぞれの切り出し画像判定値XjであるXa、Xb、Xc、Xd、Xe、Xf、Xgを読み出す。
First, the original ultrasonic
次に、オリジナル超音波画像判定部134は、それぞれの切り出し画像判定値Xjを所定のしきい値Xthと比較して、切り出し画像判定値Xjがしきい値Xthを超える切り出し画像を摘出する。図6の場合は、切り出し画像c、d、eが該当する。しきい値Xthの値はノイズとの識別等を考慮して設定する。また、しきい値Xthの値は、経験的に、たとえば0.5等と設定してもよい。設定方法としては、たとえば、Xthを変えながらクラス分類結果の検証を行い、切り出し画像判定結果と検出対象2の存在の有無の正答率が最も高い値を選択する等の方法がある。
Next, the original ultrasonic
次に、オリジナル超音波画像判定部134は、摘出された切り出し画像c、d、eの切り出し画像判定値XjであるXc、Xd、Xeを用いて、オリジナル超音波画像142aに所望の検出対象2が含まれている可能性を示すオリジナル超音波画像判定値Yを算出する。
Next, the original ultrasonic
オリジナル超音波画像判定値Yの算出は、たとえば、以下の式(2)のように、各要素のベクトル和の大きさとして算出してもよい。
Y=[(Xc)2+(Xd)2+(Xe)2]1/2 (2)
The calculation of the original ultrasonic image determination value Y may be calculated as the magnitude of the vector sum of each element, for example, as in the following equation (2).
Y = [(Xc) 2 + (Xd) 2 + (Xe) 2 ] 1/2 (2)
あるいは、これらの平均値、最小値あるいは最大値を用いてもよい。 Alternatively, the average value, the minimum value or the maximum value of these may be used.
さらには、オリジナル超音波画像判定値Yの算出は、切り出し画像判定値Xjの平均値あるいは最大値があるしきい値を超えるケースがいくつあるかを用いてもよい。 Further, the calculation of the original ultrasonic image determination value Y may use the number of cases where the average value or the maximum value of the cutout image determination value Xj exceeds a certain threshold value.
あるいは、連続的な値として算出された値を、所定の値Ytを超えた場合は1、所定の値Yt未満の場合は0のように、1か0の値のみをとるような方法でもよい。所定の値Ytは、たとえば0.5など、経験的に設定できる。設定方法としては、たとえば、Ytを変えながらクラス分類結果の検証を行い、オリジナル超音波画像判定結果と検出対象2の存在の有無の正答率が最も高い値を選択する等の方法がある。
Alternatively, a method may be used in which the value calculated as a continuous value is taken only as a value of 1 or 0, such as 1 when the value exceeds the predetermined value Yt and 0 when the value is less than the predetermined value Yt. .. The predetermined value Yt can be empirically set, for example 0.5. As a setting method, for example, there is a method of verifying the classification result while changing Yt, and selecting the value having the highest correct answer rate between the original ultrasonic image determination result and the presence / absence of the
出力部150は、オリジナル超音波画像データ記憶部142に収納されたオリジナル超音波画像データ142a、切り出し画像データ記憶部143に収納された切り出し画像データ143a、演算結果記憶部144に収納された切り出し画像判定値Xjおよびオリジナル超音波画像判定値Y等の演算結果を出力する。
The
出力部150は、いわゆるPCモニタやタブレットのような表示機であってもよいし、これらの結果をまとめて記録したデータ群の保存媒体ないしはネットワークでつながった記録媒体等、次評価者がアクセスできるものであれば形態を問わない。
The
次に、超音波画像評価方法について説明する。
図7は、第1の実施形態に係る超音波画像評価方法の手順を示すフロー図である。
Next, the ultrasonic image evaluation method will be described.
FIG. 7 is a flow chart showing the procedure of the ultrasonic image evaluation method according to the first embodiment.
まず、学習ステップS10では、判定器120が、多数の学習用の超音波画像データを用いて学習し、判定能力を確保する(S10)。詳細には、まず、入力部110が、学習用超音波画像データを読み込む(ステップS11)。次に、判定器120が学習を行う(ステップS12)。
First, in the learning step S10, the
また、入力部110が、オリジナル超音波画像142aを読み込む(ステップS20)。読み込まれたオリジナル超音波画像142aはオリジナル超音波画像データ記憶部142に収納される。
Further, the
次に、超音波画像評価(ステップS30)を実施する。ステップS30の詳細は、以下のとおりである。 Next, ultrasonic image evaluation (step S30) is performed. The details of step S30 are as follows.
まず、画像切り出し部131が、オリジナル超音波画像データ記憶部142からオリジナル超音波画像142aを読み出し、画像切り出しを行う(ステップS31)。切り出された各切り出し画像143aは、切り出し画像データ記憶部143に収納される。
First, the
次に、切り出し画像判定部132は、切り出し画像データ記憶部143に収納された各切り出し画像データ143aを順次読み出して、切り出し画像判定を行う(ステップS32)。
Next, the cut-out
また、画像内着目領域特定部133は、着目領域に該当する切り出し画像を特定する(ステップS33)。
Further, the region of
切り出し画像の判定結果である切り出し画像判定値Xj、および、着目領域は、演算結果記憶部144に収納される。
The cutout image determination value Xj, which is the determination result of the cutout image, and the region of interest are stored in the calculation
次に、オリジナル超音波画像判定部134は、演算結果記憶部144から、各切り出し画像判定値Xjを読み出して、オリジナル超音波画像判定を行い、オリジナル超音波画像判定値Yを算出する(ステップS34)。
Next, the original ultrasonic
超音波画像評価ステップS30で得られた結果は、出力部150に出力され、出力部150は、この結果を、次評価者に提示する(ステップS40)。
The result obtained in the ultrasonic image evaluation step S30 is output to the
以上のように、本実施形態は、欠陥等、見つけたい検出対象2がどの程度の確度で存在するかの評価を可能とする。
As described above, the present embodiment makes it possible to evaluate with what degree of accuracy the
[第2の実施形態]
図8は、第2の実施形態に係る超音波画像評価装置100aの構成を示すブロック図である。本実施形態は、第1の実施形態の変形である。
本実施形態は、複数のオリジナル超音波画像142aを対象とし、本実施形態に係る超音波画像評価装置100aは、着目画像特定部135および着目補助画像特定部136をさらに有する。
[Second Embodiment]
FIG. 8 is a block diagram showing the configuration of the ultrasonic
The present embodiment targets a plurality of original
ここで、複数のオリジナル画像142aは、同一の測定対象1について、複数の異なる測定条件のもとに得られたものである。ここで、測定条件は、たとえば、フェイズドアレイ超音波探傷器10の場合であれば、測定対象1に対する長手方向の測定位置、超音波の送信角度、たとえば測定対象1に荷重を加えて応力状態を変化させる場合の経過時間等のパラメータである。
Here, the plurality of
測定条件は、同一のパラメータに関して、離散的ではあるが連続的に近い状態で変化することが好ましい。すなわち、たとえば、長手方向の測定位置の場合なら、測定位置が、所定の長さ以内の間隔で変化する等である。ここで、所定の長さとは、たとえば、超音波アレイプローブを構成する素子の1ないし数個分程度の長さであり、互いに隣接する測定条件間での測定結果の間に互いの関係性が確保される長さである。 It is preferable that the measurement conditions change in a discrete but continuously close state with respect to the same parameter. That is, for example, in the case of a measurement position in the longitudinal direction, the measurement position changes at intervals within a predetermined length. Here, the predetermined length is, for example, the length of one or several elements constituting the ultrasonic array probe, and the relationship between the measurement results between the measurement conditions adjacent to each other is different from each other. It is the secured length.
図9は、第2の実施形態に係る超音波画像評価装置100aの着目画像特定部135の処理内容の第1の説明図である。図9の横軸は、各オリジナル超音波画像142aに関する1つのパラメータとしての測定条件であり、たとえば、フェイズドアレイ超音波探傷器10の長手方向の測定位置である。縦軸は、それぞれのオリジナル超音波画像142aについて、オリジナル超音波画像判定部134により算出されたオリジナル超音波画像判定値Yである。図9では、オリジナル超音波画像判定値Yが0か1で区分される算出方法の場合を例にとって示している。それぞれの測定条件におけるオリジナル超音波画像判定値Yを、黒丸で示している。
FIG. 9 is a first explanatory diagram of the processing content of the
着目画像特定部135は、オリジナル超音波画像データ記憶部142に収納されている複数のオリジナル超音波画像142aのうちから、オリジナル超音波画像判定部134によりオリジナル超音波画像判定値Yが1と算出されたオリジナル超音波画像142aを着目画像として特定し、特定した着目画像としてのオリジナル超音波画像データ142aを出力する。
The
演算結果記憶部144は、この結果を記憶するとともに、出力部150が、外部に出力する。
The calculation
図10は、第2の実施形態に係る超音波画像評価装置100aの着目画像特定部の処理内容の第2の説明図である。
FIG. 10 is a second explanatory diagram of the processing content of the image specifying unit of interest of the ultrasonic
ここで、説明のために、真実のオリジナル超音波画像判定値Yがどのようになっているかを、破線で示している。この真実のオリジナル超音波画像判定値Yに対して、図9で示した黒丸、すなわちオリジナル超音波画像判定部134が算出したオリジナル超音波画像判定値YがYどのような関係にあるかを、図10において、〇、△、×で示している。
Here, for the sake of explanation, what the true original ultrasonic image determination value Y is like is shown by a broken line. The relationship between the black circle shown in FIG. 9, that is, the original ultrasonic image determination value Y calculated by the original ultrasonic
ここで、〇は、真実のオリジナル超音波画像判定値Yが1で、オリジナル超音波画像判定部134が算出したオリジナル超音波画像判定値Yも1の場合、および真実のオリジナル超音波画像判定値Yが0で、オリジナル超音波画像判定部134が算出したオリジナル超音波画像判定値Yも0の場合を示す。△は、真実のオリジナル超音波画像判定値Yが0で、オリジナル超音波画像判定部134が算出したオリジナル超音波画像判定値Yが1の場合を示す。また、×は、真実のオリジナル超音波画像判定値Yが1で、オリジナル超音波画像判定部134が算出したオリジナル超音波画像判定値Yが0の場合を示す。
Here, ◯ indicates that the true original ultrasonic image determination value Y is 1 and the original ultrasonic image determination value Y calculated by the original ultrasonic
検出漏れを避けたいという観点から見れば。△の場合は×の場合に比べて好ましいということになる。逆に、誤検出を避けたいという観点から見れば。×の場合は△の場合に比べて好ましいということになる。探傷という目的からは、前者が安全側と言える。 From the point of view of avoiding detection omissions. In the case of Δ, it is preferable to the case of ×. On the contrary, from the viewpoint of avoiding false positives. In the case of ×, it is preferable to the case of Δ. For the purpose of flaw detection, the former can be said to be the safe side.
着目画像特定部135は、図10で示す〇および△の場合、すなわち、オリジナル超音波画像判定部134が算出したオリジナル超音波画像判定値Yが1の場合について、前述のように、オリジナル超音波画像データ記憶部142に収納されているオリジナル超音波画像データ142aを読み出して出力する。
As described above, the focused
着目補助画像特定部136は、着目画像特定部135が出力した着目画像としてのオリジナル画像142aに加え、さらに着目補助画像を付加して出力する。
In addition to the
図11は、着目補助画像特定部136の処理内容の説明図である。
着目補助画像特定部136は、着目画像特定部135が特定した着目画像としてのオリジナル超音波画像データ142aに加えて、測定条件において、これらに隣接する所定の数の図11において◎印で示したオリジナル超音波画像データ142aを含めて出力する。
FIG. 11 is an explanatory diagram of the processing content of the attention auxiliary
In addition to the original
ここで、所定の数は、多いほど、次評価者への情報は増え確実性は増すが次評価者の負担は増加する。多すぎれば、着目画像特定部135で特定した意味が薄れる。これらを勘案して、所定の数は、経験的に設定してもよい。図11では、所定の数が2の場合を示す。
Here, as the predetermined number increases, the information to the next evaluator increases and the certainty increases, but the burden on the next evaluator increases. If there are too many, the meaning specified by the
図12は、第2の実施形態に係る超音波画像評価方法の手順を示すフロー図である。
第1の実施形態と異なる部分についてのみ以下に説明する。
FIG. 12 is a flow chart showing the procedure of the ultrasonic image evaluation method according to the second embodiment.
Only the parts different from the first embodiment will be described below.
まず、ステップS20のオリジナル画像読み込みは、入力部110が、複数のオリジナル超音波画像142aを読み込む。
First, in reading the original image in step S20, the
また、ステップS34のオリジナル超音波画像判定では、オリジナル超音波画像判定部134が、複数のオリジナル超音波画像142aについての複数のオリジナル超音波画像判定値Yを算出する。
Further, in the original ultrasonic image determination in step S34, the original ultrasonic
次に、着目画像特定部135は、複数のオリジナル超音波画像の中から、着目領域としてのオリジナル超音波画像142aを特定し、出力する(ステップS35)。
Next, the focused
さらに、着目補助画像特定部136は、ステップS35で特定されたオリジナル超音波画像と測定条件において、これらに隣接する所定の数のオリジナル超音波画像データ142aを含めて出力する(ステップS36)。
Further, the attention auxiliary
以上のように、複数のオリジナル超音波画像を用いることにより、超音波画像評価の信頼性をさらに向上することができる。 As described above, the reliability of ultrasonic image evaluation can be further improved by using a plurality of original ultrasonic images.
[その他の実施形態]
以上、本発明の実施形態を説明したが、実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。
[Other embodiments]
Although the embodiments of the present invention have been described above, the embodiments are presented as examples and are not intended to limit the scope of the invention.
たとえば、実施形態では、切り出し画像判定部と、判定器とが、別個の場合を例にとって示したがこれに限定されない。たとえば、判定器と切り出し画像判定部が一体の装置であってもよい。 For example, in the embodiment, the case where the cut-out image determination unit and the determination device are separate is shown as an example, but the present invention is not limited to this. For example, the determination device and the cut-out image determination unit may be an integrated device.
また、実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。 In addition, the embodiments can be implemented in various other embodiments, and various omissions, replacements, and changes can be made without departing from the gist of the invention.
実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 The embodiments and variations thereof are included in the scope of the invention described in the claims and the equivalent scope thereof, as are included in the scope and gist of the invention.
1…測定対象、2…検出対象、2a…検出対象画像、3…底面、3a…底面画像、10…フェイズドアレイ超音波探傷器、10a…探触子、11…超音波素子、100、100a…超音波画像評価装置、110…入力部、120…判定器、130…演算部、131…画像切り出し部、132…切り出し画像判定部、133…画像内着目領域特定部、133a…画像内着目領域、134…オリジナル超音波画像判定部、135…着目画像特定部、136…着目補助画像特定部、140…記憶部、141…判定器用データ記憶部、142…オリジナル超音波画像データ記憶部、142a…オリジナル超音波画像、143…切り出し画像データ記憶部、143a…切り出し画像データ、143b…ウインドウ、144…演算結果記憶部、150…出力部
1 ... Measurement target, 2 ... Detection target, 2a ... Detection target image, 3 ... Bottom surface, 3a ... Bottom image, 10 ... Phased array ultrasonic flaw detector, 10a ... Detector, 11 ... Ultrasonic element, 100, 100a ... Ultrasonic image evaluation device, 110 ... Input unit, 120 ... Judgment unit, 130 ... Calculation unit, 131 ... Image cutting unit, 132 ... Cut out
Claims (13)
学習用の超音波画像データを用いて学習する判定器と、
前記少なくとも一つのオリジナル超音波画像のディジタルデータであるオリジナル超音波画像データを収納するオリジナル超音波画像データ記憶部と、
前記オリジナル超音波画像データ記憶部から前記オリジナル超音波画像データの一部を、所定の方向に順次読み出してそれぞれの切り出し画像を出力する画像切り出し部と、
前記判定器を用いて、それぞれの前記切り出し画像について、前記検出対象の有無に関する切り出し画像判定値を算出する切り出し画像判定部と、
それぞれの前記切り出し画像について算出された前記切り出し画像判定値に基づいて、前記少なくとも一つのオリジナル超音波画像についての前記検出対象の有無に関するオリジナル超音波画像判定値を算出するオリジナル超音波画像判定部と、
を備えることを特徴とする超音波画像評価装置。 An ultrasonic image evaluation device that evaluates the presence or absence of a detection target such as a defect based on at least one original ultrasonic image obtained by ultrasonic flaw detection.
Judgment device for learning using ultrasonic image data for learning,
An original ultrasonic image data storage unit that stores the original ultrasonic image data that is digital data of the at least one original ultrasonic image, and
An image cutting unit that sequentially reads out a part of the original ultrasonic image data from the original ultrasonic image data storage unit in a predetermined direction and outputs each cutout image.
Using the determination device, for each of the cut-out images, a cut-out image determination unit that calculates a cut-out image determination value regarding the presence or absence of the detection target, and a cut-out image determination unit.
An original ultrasonic image determination unit that calculates an original ultrasonic image determination value regarding the presence or absence of the detection target for the at least one original ultrasonic image based on the cutout image determination value calculated for each of the cutout images. ,
An ultrasonic image evaluation device characterized by being equipped with.
前記複数のオリジナル超音波画像について前記オリジナル超音波画像判定部により出力された複数の前記オリジナル超音波画像判定値に基づいて、前記複数のオリジナル超音波画像の中から着目画像としての前記オリジナル超音波画像を特定する着目画像特定部をさらに備えることを特徴とする請求項1ないし請求項4のいずれか一項に記載の超音波画像評価装置。 The at least one original ultrasound image is a plurality of original ultrasound images obtained under different measurement conditions.
The original ultrasonic wave as a focus image from the plurality of original ultrasonic images based on the plurality of original ultrasonic image determination values output by the original ultrasonic image determination unit for the plurality of original ultrasonic images. The ultrasonic image evaluation device according to any one of claims 1 to 4, further comprising a focused image specifying unit for specifying an image.
判定器が学習用の超音波画像データを用いて学習により判定能力を確保する学習ステップと、
入力部が前記少なくとも一つのオリジナル超音波画像を読み込み、オリジナル超音波画像データ記憶部が収納するオリジナル超音波画像読み込みステップと、
画像切り出し部が、前記オリジナル超音波画像データ記憶部から前記オリジナル超音波画像を読み出し、画像切り出しを行い切り出し画像を出力する切り出しステップと、
切り出し画像判定部が、前記切り出し画像について切り出し画像判定を行い切り出し画像判定値を出力し、演算結果記憶部が収納する切り出し画像判定ステップと、
オリジナル超音波画像判定部が、前記演算結果記憶部から前記切り出し画像判定値を読み出してオリジナル超音波画像判定を行い、オリジナル超音波画像判定値を出力するオリジナル超音波画像判定ステップと、
を有することを特徴とする超音波画像評価方法。 It is an ultrasonic image evaluation method that evaluates the presence or absence of a detection target such as a defect based on at least one original ultrasonic image by ultrasonic flaw detection.
A learning step in which the judgment device secures judgment ability by learning using ultrasonic image data for learning,
The input unit reads at least one original ultrasonic image, and the original ultrasonic image data storage unit stores the original ultrasonic image reading step.
An image cutting unit reads out the original ultrasonic image from the original ultrasonic image data storage unit, cuts out the image, and outputs the cutout image.
The cut-out image judgment unit determines the cut-out image of the cut-out image, outputs the cut-out image judgment value, and stores the cut-out image judgment step in the calculation result storage unit.
An original ultrasonic image determination step in which the original ultrasonic image determination unit reads the cutout image determination value from the calculation result storage unit, performs an original ultrasonic image determination, and outputs an original ultrasonic image determination value.
An ultrasonic image evaluation method characterized by having.
前記オリジナル超音波画像判定ステップのすべてが終了した後に、着目画像特定部が、前記複数のオリジナル超音波画像について前記オリジナル超音波画像判定部により出力された複数の前記オリジナル超音波画像判定値に基づいて、前記複数のオリジナル超音波画像の中から着目画像としてのオリジナル超音波画像を特定する着目画像特定ステップをさらに有することを特徴とする請求項9または請求項10に記載の超音波画像評価方法。 The at least one original ultrasound image is a plurality of original ultrasound images obtained under different measurement conditions.
After all of the original ultrasonic image determination steps are completed, the image specifying unit of interest is based on the plurality of original ultrasonic image determination values output by the original ultrasonic image determination unit for the plurality of original ultrasonic images. The ultrasonic image evaluation method according to claim 9 or 10, further comprising a focused image specifying step for specifying an original ultrasonic image as a focused image from the plurality of original ultrasonic images. ..
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020130353A JP2022026746A (en) | 2020-07-31 | 2020-07-31 | Ultrasonic image evaluation device and ultrasonic image evaluation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020130353A JP2022026746A (en) | 2020-07-31 | 2020-07-31 | Ultrasonic image evaluation device and ultrasonic image evaluation method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022026746A true JP2022026746A (en) | 2022-02-10 |
Family
ID=80264382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020130353A Pending JP2022026746A (en) | 2020-07-31 | 2020-07-31 | Ultrasonic image evaluation device and ultrasonic image evaluation method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2022026746A (en) |
-
2020
- 2020-07-31 JP JP2020130353A patent/JP2022026746A/en active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8811721B2 (en) | Three-dimensional ultrasonic inspection apparatus | |
CN113226612B (en) | Identification of processing defects in laser processing systems by means of deep convolutional neural networks | |
US20230298327A1 (en) | Information processing device, determination method, and information processing program | |
US8488871B2 (en) | Three-dimensional ultrasonic inspection apparatus | |
EA021646B1 (en) | Non-destructive testing, in particular for tubes during manufacturing and in the finished state | |
US4744250A (en) | Method for classification of point and elongated single defects in workpieces by means of ultrasonics | |
US20230221286A1 (en) | Inspection device, inspection method, and inspection program | |
US20180231508A1 (en) | Ultrasonic inspection configuration with beam overlap verification | |
JP5156707B2 (en) | Ultrasonic inspection method and apparatus | |
Koskinen et al. | The effect of different flaw data to machine learning powered ultrasonic inspection | |
JP2011208978A (en) | Ultrasonic inspection method and device for turbine blade fitting section | |
JP6397252B2 (en) | Inspection method for remaining life of welded parts of heat-resistant materials | |
WO2015001624A1 (en) | Ultrasonic flaw detection method, ultrasonic flaw detection device, and weld inspection method for panel structure | |
JP2022026746A (en) | Ultrasonic image evaluation device and ultrasonic image evaluation method | |
Sutcliffe et al. | Automatic defect recognition of single-v welds using full matrix capture data, computer vision and multi-layer perceptron artificial neural networks | |
JP2017191115A (en) | Analyzing method of damage on piping | |
JP6387160B2 (en) | Maintenance planning method for piping | |
JPH08110326A (en) | Pattern generating method for neural network system | |
KR102105503B1 (en) | Method and apparatus for automatically evaluating weld quality | |
JP5150302B2 (en) | Ultrasonic inspection data evaluation apparatus and ultrasonic inspection data evaluation method | |
JP7490531B2 (en) | Ultrasonic flaw detection image evaluation device, ultrasonic flaw detection system, and ultrasonic flaw detection image evaluation method | |
Hasanian et al. | Automatic segmentation of ultrasonic TFM phased array images: the use of neural networks for defect recognition | |
WO2022209169A1 (en) | Information processing device, determination method, and determination program | |
JP2024067360A (en) | ULTRASONIC IMAGING SYSTEM AND ULTRASONIC IMAGING METHOD | |
US11885767B2 (en) | Automated scan data quality assessment in ultrasonic testing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230213 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20231227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240305 |