JPWO2015063834A1 - Signal processing apparatus and method, computer program, and recording medium - Google Patents

Signal processing apparatus and method, computer program, and recording medium Download PDF

Info

Publication number
JPWO2015063834A1
JPWO2015063834A1 JP2015544636A JP2015544636A JPWO2015063834A1 JP WO2015063834 A1 JPWO2015063834 A1 JP WO2015063834A1 JP 2015544636 A JP2015544636 A JP 2015544636A JP 2015544636 A JP2015544636 A JP 2015544636A JP WO2015063834 A1 JPWO2015063834 A1 JP WO2015063834A1
Authority
JP
Japan
Prior art keywords
signal
display data
sound
types
analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015544636A
Other languages
Japanese (ja)
Inventor
隆真 亀谷
隆真 亀谷
石戸谷 耕一
耕一 石戸谷
友博 三浦
友博 三浦
長谷部 剛
剛 長谷部
拓磨 貞森
拓磨 貞森
攻一 谷川
攻一 谷川
慎一郎 大下
慎一郎 大下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hiroshima University NUC
Pioneer Corp
Original Assignee
Hiroshima University NUC
Pioneer Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hiroshima University NUC, Pioneer Corp filed Critical Hiroshima University NUC
Publication of JPWO2015063834A1 publication Critical patent/JPWO2015063834A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B7/00Instruments for auscultation
    • A61B7/003Detecting lung or respiration noise

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pulmonology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

信号処理装置(10)は、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、複数種類の信号成分の夫々の特性を同一の表示装置(105)に表示するための表示データを生成する生成手段(104)と、表示データを、同一の表示装置に出力する出力手段(104)とを備える。The signal processing device (10) displays the characteristics of the plurality of types of signal components in the same display device (105) based on the execution result of the analysis processing for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. Generating means (104) for generating display data for display on the display, and output means (104) for outputting the display data to the same display device.

Description

本発明は、例えば呼吸音信号等の生体音信号を処理する信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体の技術分野に関する。   The present invention relates to a signal processing apparatus and method for processing a body sound signal such as a respiratory sound signal, and a computer program and a recording medium.

呼吸音等の生体音は、医師が生体の病態を診断する際の指標の一つとして用いられる。一般的には、医師は、聴診器を用いることで、生体音を聞いている。聴診器は、生体の体に押し当てられるチェストピースが採取した生体音を、ゴム管等を介して医師の耳に伝達している。従って、医師は、耳で生体音を識別する(つまり、耳で聞き分ける)ことで、生体の病態を診断している。例えば、医師は、生体音に異常な生体音が含まれているか否かを耳で聞き分けることで、生体の病態を診断している。しかしながら、耳で生体音を聞き分けるためには、高度なスキル(例えば、高度な聴診技術)が必要とされる。   A body sound such as a breathing sound is used as one of indices when a doctor diagnoses a pathological condition of the body. In general, a doctor listens to a body sound by using a stethoscope. The stethoscope transmits a body sound collected by a chestpiece pressed against the body of a living body to a doctor's ear through a rubber tube or the like. Therefore, the doctor diagnoses the pathological condition of the living body by identifying the body sound with the ear (that is, distinguishing with the ear). For example, a doctor diagnoses a pathological condition of a living body by using the ear to distinguish whether or not the body sound contains an abnormal body sound. However, advanced skills (for example, advanced auscultation techniques) are required to distinguish body sounds with the ears.

そこで、生体音を可視化することで、医師による生体音に基づく病態の診断を補助する装置が提案されている(特許文献1参照)。具体的には、特許文献1には、生体音の一例である呼吸音を可視化処理する装置が提案されている。更には、特許文献1には、呼吸音と共に、呼吸音を解析することで呼吸音の特徴、疾病候補の種類又は疾病候補に該当する確率を表示する装置が提案されている。   In view of this, there has been proposed a device that assists diagnosis of a disease state based on a body sound by a doctor by visualizing the body sound (see Patent Document 1). Specifically, Patent Document 1 proposes an apparatus for visualizing a respiratory sound that is an example of a biological sound. Furthermore, Patent Document 1 proposes an apparatus that displays the characteristics of respiratory sounds, the types of disease candidates, or the probabilities corresponding to the disease candidates by analyzing the respiratory sounds together with the respiratory sounds.

尚、その他、本発明に関連する先行技術文献として、特許文献2から特許文献4があげられる。特許文献2には、生体音の一例である聴診音を直接的に可視化する装置ではないものの、聴診音に基づいて、患者の生理学的状態に関連付けられた診断メッセージを出力する方法が開示されている。特許文献3には、生体音の一例である呼吸音を直接的に可視化する装置ではないものの、呼吸音から副雑音(例えば、連続性ラ音や、断続性ラ音等)に関する要素を識別する装置が開示されている。特許文献4には、生体音の一例である脈波を直接的に可視化する装置ではないものの、脈波の形状の変化に関連する波形関連情報(身長、心拍数、駆出時間、前駆出時間及び最高血圧)をグラフ(レーダーチャート)表示する装置が開示されている。   In addition, Patent Documents 2 to 4 are cited as other prior art documents related to the present invention. Patent Document 2 discloses a method for outputting a diagnostic message associated with a patient's physiological state based on an auscultation sound, although it is not a device that directly visualizes an auscultation sound, which is an example of a body sound. Yes. In Patent Document 3, although it is not a device that directly visualizes a respiratory sound that is an example of a body sound, an element related to secondary noise (for example, continuous rarity or intermittent rarity) is identified from the breathing sound. An apparatus is disclosed. Patent Document 4 discloses a waveform-related information (height, heart rate, ejection time, precursor ejection time) related to a change in the shape of a pulse wave, although it is not a device that directly visualizes a pulse wave that is an example of a body sound. And a systolic blood pressure) graph (radar chart) display device.

特開2005−27751号公報JP 2005-27751 A 特表2007−508899号公報Special table 2007-508899 特表2004−531309号公報JP-T-2004-531309 特開2003−210422号公報Japanese Patent Laid-Open No. 2003-210422

しかしながら、特許文献1に開示されている装置は、呼吸音をそのまま時間軸上で表示するに過ぎない。従って、特許文献1に開示されている装置によって表示された呼吸音を観察する医師は、表示されている呼吸音にどのような呼吸音が含まれているかを識別する(つまり、目で見分ける)必要があることに変わりはない。従って、呼吸音を目で見分ける高度なスキルが必要であることに変わりはない。具体的には、呼吸音には様々な種類の呼吸音が含まれている(特許文献3参照)がゆえに、これら様々な種類の呼吸音を、当該様々な種類の呼吸音が重畳された波形から目で見分ける高度なスキルが必要であることに変わりはない。   However, the apparatus disclosed in Patent Document 1 merely displays the breathing sound as it is on the time axis. Therefore, the doctor who observes the breathing sound displayed by the apparatus disclosed in Patent Document 1 identifies what kind of breathing sound is included in the displayed breathing sound (that is, distinguishes it with the eyes). There is no change in need. Therefore, there is no change in the need for advanced skills to identify breathing sounds. Specifically, since various types of respiratory sounds are included in the respiratory sounds (see Patent Document 3), these various types of respiratory sounds are combined with waveforms of the various types of respiratory sounds. There is no change in the need for advanced skills that can be discerned.

尚、特許文献1に開示されているように、疾病候補の種類又は疾病候補に該当する確率(つまり、実質的には診断結果に相当する情報)が表示されるのであれば、生体音を直接的に表示する必要性がなくなるとも考えられる。同様に、特許文献2に開示されているように診断メッセージ(つまり、実質的には診断結果に相当する情報)が表示されるのであれば、生体音を直接的に表示する必要性がなくなるとも想定される。しかしながら、生体音に含まれる特定の特徴と特定の疾病とが1対1で関連しているとは限らない。言い換えれば、生体音に含まれる特定の特徴は、複数の疾病に関連している可能性がある。従って、生体音に関する医師の直接的な診断を待つことなく生体音を解析することで自動的に得られる診断結果に相当する情報を表示することは、医師の診断を補助するという観点から見れば必ずしも好ましいとは限らない。つまり、医師の診断を補助するという観点から見れば、医師の診断の余地を残す又は医師に診断の主導権を与えるために、生体音を何らかの態様で表示することが好ましいと考えられる。   As disclosed in Patent Document 1, if the type of disease candidate or the probability corresponding to the disease candidate (that is, information substantially corresponding to the diagnosis result) is displayed, the body sound is directly input. It is also considered that there is no need to display automatically. Similarly, if a diagnostic message (that is, information substantially corresponding to a diagnostic result) is displayed as disclosed in Patent Document 2, there is no need to directly display a body sound. is assumed. However, a specific feature included in a body sound and a specific disease are not always related one-to-one. In other words, certain features included in body sounds may be related to multiple diseases. Therefore, displaying information corresponding to the diagnosis result automatically obtained by analyzing the body sound without waiting for the doctor's direct diagnosis regarding the body sound is from the viewpoint of assisting the doctor's diagnosis. It is not always preferable. That is, from the viewpoint of assisting the diagnosis of the doctor, it is considered preferable to display the body sound in some manner in order to leave room for diagnosis by the doctor or give the doctor the initiative of diagnosis.

本発明は、例えば前述した従来の問題点に鑑みなされたものであり、例えばより見やすい態様で生体音を表示することで、医師等の診断を補助することが可能な信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体を提供することを課題とする。   The present invention has been made in view of the above-described conventional problems, for example, and a signal processing apparatus and method capable of assisting diagnosis of a doctor or the like by displaying a body sound in a more easily viewable manner, for example, and It is an object to provide a computer program and a recording medium.

上記課題を解決するために、信号処理装置は、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成手段と、前記表示データを、前記同一の表示装置に出力する出力手段とを備える。   In order to solve the above problems, the signal processing device has the same characteristics of the plurality of types of signal components based on the execution result of the analysis processing for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. Generating means for generating display data to be displayed on the display device, and output means for outputting the display data to the same display device.

上記課題を解決するために、信号処理方法は、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、前記表示データを、前記同一の表示装置に出力する出力工程とを備える。   In order to solve the above problems, the signal processing method has the same characteristics of each of the plurality of types of signal components based on the execution result of the analysis processing that separates the biological sound signal into a plurality of types of signal components that can be distinguished from each other. A generation step of generating display data for display on the display device, and an output step of outputting the display data to the same display device.

上記課題を解決するために、コンピュータプログラムは、コンピュータによって実行されるコンピュータプログラムであって、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、前記表示データを、前記同一の表示装置に出力する出力工程とを前記コンピュータに実行させる。   In order to solve the above problems, a computer program is a computer program executed by a computer, and the plurality of computer programs are based on an execution result of an analysis process that separates a body sound signal into a plurality of types of signal components that can be distinguished from each other. The computer is caused to execute a generation step of generating display data for displaying the characteristics of each type of signal component on the same display device, and an output step of outputting the display data to the same display device.

上記課題を解決するために、記録媒体は、コンピュータによって実行されるコンピュータプログラムが記録されている記録媒体であって、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、前記表示データを、前記同一の表示装置に出力する出力工程とを前記コンピュータに実行させるコンピュータプログラムが記録されている。   In order to solve the above problems, the recording medium is a recording medium on which a computer program executed by a computer is recorded, and performs an analysis process for separating a biological sound signal into a plurality of types of signal components that can be distinguished from each other Based on the result, a generation step of generating display data for displaying the characteristics of the plurality of types of signal components on the same display device, and an output step of outputting the display data to the same display device; Is recorded on the computer program.

本実施例の信号処理装置の構成を示すブロック図である。It is a block diagram which shows the structure of the signal processing apparatus of a present Example. 本実施例の信号処理装置の動作の流れを示すフローチャートである。It is a flowchart which shows the flow of operation | movement of the signal processing apparatus of a present Example. 信号取得部の生体に対する装着態様の一例を示す模式図及び呼吸音信号の波形を時間軸上で示すグラフである。It is the graph which shows an example of the mounting | wearing aspect with respect to the biological body of a signal acquisition part, and the graph which shows the waveform of a respiratory sound signal on a time axis. 信号記憶部が呼吸音信号を記憶する動作の一例を示す模式図である。It is a schematic diagram which shows an example of the operation | movement which a signal memory | storage part memorize | stores a respiratory sound signal. 呼吸音の種類を示す分類チャートである。It is a classification chart which shows the kind of breathing sound. 5種類の呼吸音(肺胞呼吸音、低音性連続性ラ音(類鼾音)、高音性連続性ラ音(笛声音)、細かい断続性ラ音(捻髪音)及び粗い断続性ラ音(水泡音))に相当する5種類の信号成分の波形を時間軸上で示すグラフである。Five types of breathing sounds (alveolar breathing sounds, low-pitched continuous rales (sounding sounds), high-pitched continuous rales (flute sounds), fine intermittent rales (twisting sounds), and coarse intermittent rales It is a graph which shows the waveform of five types of signal components equivalent to (water bubble sound)) on a time axis. 呼吸音信号を構成する5種類の信号成分の夫々の特性の表示態様の一例を示す平面図である。It is a top view which shows an example of the display mode of each characteristic of five types of signal components which comprise a respiratory sound signal. 本実施例の信号処理装置の動作の流れを示すタイミングチャートである。It is a timing chart which shows the flow of operation | movement of the signal processing apparatus of a present Example. 第1変形例の信号処理装置の構成を、当該信号処理装置を含む信号処理システムの構成と共に示すブロック図である。It is a block diagram which shows the structure of the signal processing apparatus of a 1st modification with the structure of the signal processing system containing the said signal processing apparatus. 第2変形例の信号処理装置の構成を、当該信号処理装置を含む信号処理システムの構成と共に示すブロック図である。It is a block diagram which shows the structure of the signal processing apparatus of a 2nd modification with the structure of the signal processing system containing the said signal processing apparatus. 複数の呼吸音センサの装着態様の一例を示す平面図である。It is a top view which shows an example of the mounting | wearing aspect of a some respiratory sound sensor. 第2変形例における表示部による表示態様の一例を示す平面図である。It is a top view which shows an example of the display mode by the display part in a 2nd modification. 対象データ抽出部の動作を設定するために表示部が表示する表示対象物(例えば、画像)の一例を示す平面図である。It is a top view which shows an example of the display target object (for example, image) which a display part displays in order to set operation | movement of a target data extraction part. アラーム音判定部の動作を設定するために表示部が表示する表示対象物(例えば、画像)の一例を示す平面図である。It is a top view which shows an example of the display target object (for example, image) which a display part displays in order to set operation | movement of an alarm sound determination part. 第3変形例の信号処理装置の構成を、当該信号処理装置を含む信号処理システムの構成と共に示すブロック図である。It is a block diagram which shows the structure of the signal processing apparatus of a 3rd modification with the structure of the signal processing system containing the said signal processing apparatus.

以下、信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体の実施形態について順に説明する。   Hereinafter, embodiments of a signal processing apparatus and method, a computer program, and a recording medium will be described in order.

(信号処理装置の実施形態)
<1>
本実施形態の信号処理装置は、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成手段と、前記表示データを、前記同一の表示装置に出力する出力手段とを備える。
(Embodiment of signal processing apparatus)
<1>
The signal processing apparatus according to the present embodiment has characteristics of each of the plurality of types of signal components in the same display device based on the execution result of the analysis processing that separates the body sound signal into a plurality of types of signal components that can be distinguished from each other. A generating unit configured to generate display data for display; and an output unit configured to output the display data to the same display device.

本実施形態の信号処理装置は、生体の活動に起因した音を示す信号(典型的には、音声信号)である生体音信号の特性(つまり、生体音信号の状態を特定することが可能な任意の指標)を表示装置に表示するための信号処理を行う。つまり、本実施形態の信号処理装置は、生体音信号の特性を視覚的に特定することが可能な何らかの表示対象物を表示装置に表示するための信号処理を行う。   The signal processing apparatus according to the present embodiment can specify the characteristics of a biological sound signal (that is, a voice signal) indicating a sound caused by the activity of the biological body (that is, the state of the biological sound signal). Signal processing for displaying an arbitrary index) on the display device is performed. That is, the signal processing device of the present embodiment performs signal processing for displaying on the display device some display object that can visually identify the characteristics of the biological sound signal.

尚、信号処理装置は、信号処理装置自身が生体音信号を検出することで、生体音信号を直接的に取得してもよい。或いは、信号処理装置は、信号処理装置の外部に設置される他の装置が検出した生体音信号を当該他の装置から取得することで、生体音信号を間接的に取得してもよい。また、信号処理装置は、表示装置を備えていてもよい。或いは、信号処理装置は、表示装置を備えていなくともよい。   Note that the signal processing device may directly acquire the biological sound signal by detecting the biological sound signal by the signal processing device itself. Alternatively, the signal processing device may indirectly acquire the biological sound signal by acquiring the biological sound signal detected by another device installed outside the signal processing device from the other device. Further, the signal processing device may include a display device. Alternatively, the signal processing device may not include a display device.

特に、本実施形態の信号処理装置は、生体音信号の特性を表示装置に表示するための信号処理を行うために、生成手段と、出力手段とを少なくとも備えている。   In particular, the signal processing device according to the present embodiment includes at least a generation unit and an output unit in order to perform signal processing for displaying the characteristics of the biological sound signal on the display device.

生成手段は、生体音信号の特性を表示装置に表示するための表示データを生成する。特に、本実施形態では、生成手段は、生体音信号を構成する複数種類の信号成分の夫々の特性を同一の表示装置(言い換えれば、単一の表示装置)に表示するための表示データを生成する。言い換えれば、生成手段は、複数種類の信号成分の全ての特性を複数種類の信号成分毎に区別した態様で同一の表示装置に表示するための表示データを生成する。例えば、生体音信号が第1の信号成分及び第2の信号成分から構成される場合には、生成手段は、第1の信号成分の特性及び第2の信号成分の特性の双方を同一の表示装置に表示するための表示データを生成してもよい。より具体的には、例えば、生体音信号が呼吸音信号である場合には、生成手段は、正常な呼吸音(例えば、肺胞呼吸音)に相当する信号成分の特性及び正常でない呼吸音(例えば、ラ音)に相当する信号成分の特性の双方を同一の表示装置に表示するための表示データを生成してもよい。   The generation unit generates display data for displaying the characteristics of the biological sound signal on the display device. In particular, in the present embodiment, the generation unit generates display data for displaying each characteristic of a plurality of types of signal components constituting the body sound signal on the same display device (in other words, a single display device). To do. In other words, the generation unit generates display data for displaying on the same display device in a manner in which all the characteristics of the plurality of types of signal components are distinguished for each of the plurality of types of signal components. For example, when the biological sound signal is composed of a first signal component and a second signal component, the generation unit displays both the characteristics of the first signal component and the characteristics of the second signal component in the same way. Display data for display on the device may be generated. More specifically, for example, when the body sound signal is a breathing sound signal, the generation means generates characteristics of signal components corresponding to normal breathing sounds (for example, alveolar breathing sounds) and abnormal breathing sounds ( For example, display data for displaying both of the characteristics of the signal component corresponding to (ra sound) on the same display device may be generated.

尚、表示装置は、マルチモニタ表示を行う表示装置(つまり、複数のディスプレイ装置を含む表示装置であって、当該複数のディスプレイ装置を連携させることで単一の仮想的な表示領域を形成する表示装置)であってもよい。或いは、表示装置は、シングルモニタ表示を行う表示装置(つまり、単一のディスプレイ装置を含む表示装置)であってもよい。   The display device is a display device that performs multi-monitor display (that is, a display device that includes a plurality of display devices, and forms a single virtual display region by linking the plurality of display devices. Device). Alternatively, the display device may be a display device that performs single monitor display (that is, a display device including a single display device).

信号成分の種類は、信号成分が正常音に相当する信号成分であるか否か(或いは、正常音とは異なる異常音に相当する信号成分であるか否か)という観点から区別されてもよい。或いは、信号成分の種類は、信号成分の特性に有意な差異があるか否かという観点から区別されてもよい。いずれにせよ、信号成分の種類は、ある生体音信号に対して行われる何らかの解析処理によって区別することが可能である限りは、どのような観点から区別されてもよい。   The type of signal component may be distinguished from the viewpoint of whether the signal component is a signal component corresponding to a normal sound (or whether it is a signal component corresponding to an abnormal sound different from the normal sound). . Alternatively, the types of signal components may be distinguished from the viewpoint of whether there is a significant difference in the characteristics of the signal components. In any case, the type of the signal component may be distinguished from any viewpoint as long as it can be distinguished by some kind of analysis processing performed on a certain biological sound signal.

生成手段は、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、このような表示データを生成する。尚、解析処理は、信号処理装置自身が行ってもよい。或いは、解析処理は、信号処理装置の外部に設置される他の装置が行ってもよい。この場合、信号処理装置は、他の装置が行った解析処理の実行結果を当該他の装置から取得することが好ましい。   The generation unit generates such display data based on the execution result of the analysis process for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. The analysis processing may be performed by the signal processing apparatus itself. Alternatively, the analysis processing may be performed by another device installed outside the signal processing device. In this case, it is preferable that the signal processing device acquires the execution result of the analysis processing performed by the other device from the other device.

生成手段が生成した表示データは、出力手段によって、同一の表示装置に出力される。その結果、表示装置は、生体音信号を構成する複数種類の信号成分の夫々の特性を表示する。つまり、生体音信号を構成する複数種類の信号成分の夫々の特性が、同一の表示装置に表示される。言い換えれば、複数種類の信号成分が重畳されたままの生体音信号の特性に代えて、生体音信号を構成する複数種類の信号成分の夫々の特性が、同一の表示装置に個別に表示される。   The display data generated by the generation unit is output to the same display device by the output unit. As a result, the display device displays the respective characteristics of a plurality of types of signal components constituting the biological sound signal. That is, the characteristics of each of a plurality of types of signal components constituting the biological sound signal are displayed on the same display device. In other words, instead of the characteristics of the biological sound signal in which a plurality of types of signal components are superimposed, the characteristics of the plurality of types of signal components constituting the biological sound signal are individually displayed on the same display device. .

従って、観察者(例えば、医師等の医療関係者)は、どのような種類の信号成分が生体音信号に含まれているかを容易に見分けることができる。従って、観察者は、どのような種類の信号成分が生体音信号に含まれているかを見分ける(或いは、聞き分ける)ための高度なスキルを持っていなくとも、生体音信号に基づいて生体の病態を診断することができる。つまり、観察者は、信号成分の種類と病態との関連性についての知識を有していれば、生体音信号に基づいて生体の病態を診断することができる。   Therefore, an observer (for example, a medical person such as a doctor) can easily distinguish what kind of signal component is included in the body sound signal. Therefore, even if the observer does not have an advanced skill for distinguishing (or hearing) what kind of signal component is included in the body sound signal, the observer can determine the pathological condition of the body based on the body sound signal. Can be diagnosed. That is, if the observer has knowledge about the relationship between the types of signal components and the pathological condition, the observer can diagnose the pathological condition of the living body based on the body sound signal.

加えて、生体音信号を構成する複数種類の信号成分の夫々の特性が表示装置に表示されるがゆえに、複数種類の信号成分の夫々の特性の認識に対して、観察者の主観や観察者のスキルの差が与える影響を小さくすることができる。つまり、生体音信号を構成する複数種類の信号成分の夫々の特性が客観的に表示されるがゆえに、複数の観察者の間で同一の生体音信号に対する認識が大きく異なってしまうという事態が生じにくくなる。   In addition, since the characteristics of each of the plurality of types of signal components constituting the biological sound signal are displayed on the display device, the subjectivity of the observer and the observer can be recognized with respect to the recognition of the characteristics of the plurality of types of signal components. Can reduce the impact of different skill levels. That is, since the characteristics of each of a plurality of types of signal components constituting the body sound signal are objectively displayed, recognition of the same body sound signal is greatly different among a plurality of observers. It becomes difficult.

加えて、複数種類の信号成分の夫々の特性が表示装置に表示されるがゆえに、複数種類の信号成分のうちの2つ以上の信号成分に起因した疾病が存在する場合であっても、観察者の適切な診断を仰ぐことができる。つまり、信号処理装置は、各信号成分のみに着目した自動的な診断を行うことなく、観察者の適切な診断を補助することができる。   In addition, since the characteristics of each of the plurality of types of signal components are displayed on the display device, even if there is a disease caused by two or more of the plurality of types of signal components, the observation is performed. Appropriate diagnosis of the person. In other words, the signal processing apparatus can assist the observer with an appropriate diagnosis without performing an automatic diagnosis focusing on only each signal component.

このように、本実施形態の信号処理装置は、より見やすい態様で生体音信号(実質的には、生体音)を表示することで、医師等の診断を補助することができる。   As described above, the signal processing apparatus according to the present embodiment can assist the diagnosis of a doctor or the like by displaying the biological sound signal (substantially, the biological sound) in an easier-to-see manner.

<2>
本実施形態の信号処理装置の他の態様では、前記生成手段は、前記表示装置の観察者が前記複数種類の信号成分の夫々の特性を同時に見ることができるような態様で前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための前記表示データを生成する。
<2>
In another aspect of the signal processing apparatus according to the present embodiment, the generation unit is configured so that the observer of the display device can simultaneously observe the characteristics of the plurality of types of signal components. The display data for displaying each characteristic of the component on the same display device is generated.

この態様によれば、生成手段は、複数種類の信号成分の夫々の特性を、観察者が複数種類の信号成分の夫々の特性を一目で理解する(言い換えれば、同時に又は一度にまとめて見る)ことができる態様で表示するための表示データを生成することができる。その結果、表示装置には、複数種類の信号成分の夫々の特性が、複数種類の信号成分の夫々の特性を一目で理解することができる態様で表示される。従って、観察者は、どのような種類の信号成分が生体音信号に含まれているかを容易に見分けることができる。このため、上述した各種効果が好適に享受される。   According to this aspect, the generating means allows the observer to understand each characteristic of the plurality of types of signal components at a glance (in other words, to view the characteristics of the plurality of types of signal components at the same time or collectively). Display data for display in a manner that can be generated can be generated. As a result, the characteristics of the plurality of types of signal components are displayed on the display device in a manner that allows the characteristics of the plurality of types of signal components to be understood at a glance. Therefore, the observer can easily distinguish what kind of signal component is included in the biological sound signal. For this reason, the various effects mentioned above are enjoyed suitably.

<3>
本実施形態の信号処理装置の他の態様では、前記生成手段は、前記解析処理の実行結果が変化する都度前記表示データが新たに生成されるように、前記表示データを動的に生成し、前記出力手段は、前記生成手段が新たな前記表示データを生成する都度前記表示データが新たに出力されるように、前記表示データを動的に出力する。
<3>
In another aspect of the signal processing device of the present embodiment, the generation unit dynamically generates the display data so that the display data is newly generated each time the execution result of the analysis process changes. The output means dynamically outputs the display data so that the display data is newly output every time the generation means generates new display data.

この態様によれば、表示データが動的に生成され且つ表示データが動的に出力される。従って、表示装置には、複数種類の信号成分の夫々の特性が、生体音信号の時間的な変化(つまり、各信号成分の夫々の特性の時間的な変化)に同期して、動的に表示される。つまり、表示装置には、複数種類の信号成分の夫々の特性が、適宜更新されながら表示される。従って、観察者は、複数種類の信号成分の夫々がどのようなタイミングでどのような特性を有しているかを容易に認識することができる。   According to this aspect, the display data is dynamically generated and the display data is dynamically output. Therefore, in the display device, the characteristics of each of the plurality of types of signal components are dynamically synchronized with the temporal change of the biological sound signal (that is, the temporal changes of the respective characteristics of each signal component). Is displayed. That is, on the display device, the characteristics of each of the plurality of types of signal components are displayed while being updated as appropriate. Therefore, the observer can easily recognize what characteristic each of the plurality of types of signal components has at what timing.

<4>
本実施形態の信号処理装置の他の態様では、前記生成手段は、周期的に若しくは非周期的に又は連続的に前記表示データが生成されるように、前記表示データを動的に生成し、前記出力手段は、前記生成手段が新たな前記表示データを生成する都度前記表示データが出力されるように、前記表示データを動的に出力する。
<4>
In another aspect of the signal processing apparatus according to the present embodiment, the generation unit dynamically generates the display data so that the display data is generated periodically, aperiodically, or continuously. The output means dynamically outputs the display data so that the display data is output each time the generation means generates new display data.

この態様によれば、表示データが動的に生成され且つ表示データが動的に出力される。従って、表示装置には、複数種類の信号成分の夫々の特性が、生体音信号の時間的な変化(つまり、各信号成分の夫々の特性の時間的な変化)に同期して、動的に表示される。つまり、表示装置には、複数種類の信号成分の夫々の特性が、周期的に若しくは非周期的に又は連続的に(いわば、リアルタイムに)更新されながら表示される。従って、観察者は、複数種類の信号成分の夫々がどのようなタイミングでどのような特性を有しているかを容易に認識することができる。   According to this aspect, the display data is dynamically generated and the display data is dynamically output. Therefore, in the display device, the characteristics of each of the plurality of types of signal components are dynamically synchronized with the temporal change of the biological sound signal (that is, the temporal changes of the respective characteristics of each signal component). Is displayed. That is, on the display device, the characteristics of the plurality of types of signal components are displayed while being updated periodically, aperiodically, or continuously (in other words, in real time). Therefore, the observer can easily recognize what characteristic each of the plurality of types of signal components has at what timing.

<5>
本実施形態の信号処理装置の他の態様では、当該信号処理装置に入力される前記生体音信号に対して前記解析処理を実行する解析手段を更に備えており、前記生成手段は、前記解析手段が実行する前記解析処理の結果に基づいて、前記表示データを生成する。
<5>
In another aspect of the signal processing apparatus of the present embodiment, the signal processing apparatus further includes an analysis unit that performs the analysis process on the biological sound signal input to the signal processing apparatus, and the generation unit includes the analysis unit. The display data is generated on the basis of the result of the analysis process executed by.

この態様によれば、生成手段は、信号処理装置自身が実行する(言い換えれば、信号処理装置が備える解析手段が実行する)解析処理の実行結果に基づいて、表示データを生成することができる。   According to this aspect, the generation unit can generate the display data based on the execution result of the analysis process executed by the signal processing device itself (in other words, executed by the analysis unit included in the signal processing device).

<6>
上述の如く解析手段を備える信号処理装置の他の態様では、前記解析手段は、新たな前記生体音信号が入力される都度前記解析処理が新たに実行されるように、前記解析処理を動的に実行する。
<6>
In another aspect of the signal processing apparatus including the analysis unit as described above, the analysis unit dynamically performs the analysis process so that the analysis process is newly executed each time a new body sound signal is input. To run.

この態様によれば、解析処理が動的に実行される。従って、表示装置には、複数種類の信号成分の夫々の特性が、生体音信号の時間的な変化(つまり、各信号成分の夫々の特性の時間的な変化)に同期して、動的に表示される。つまり、表示装置には、複数種類の信号成分の夫々の特性が、適宜更新されながら表示される。従って、観察者は、複数種類の信号成分の夫々がどのようなタイミングでどのような特性を有しているかを容易に認識することができる。   According to this aspect, the analysis process is dynamically executed. Therefore, in the display device, the characteristics of each of the plurality of types of signal components are dynamically synchronized with the temporal change of the biological sound signal (that is, the temporal changes of the respective characteristics of each signal component). Is displayed. That is, on the display device, the characteristics of each of the plurality of types of signal components are displayed while being updated as appropriate. Therefore, the observer can easily recognize what characteristic each of the plurality of types of signal components has at what timing.

<7>
上述の如く解析手段を備える信号処理装置の他の態様では、前記解析手段は、周期的に若しくは非周期的に又は連続的に前記解析処理が実行されるように、前記解析処理を動的に実行する。
<7>
In another aspect of the signal processing apparatus including the analysis unit as described above, the analysis unit dynamically performs the analysis process so that the analysis process is executed periodically, aperiodically, or continuously. Run.

この態様によれば、解析処理が動的に実行される。従って、表示装置には、複数種類の信号成分の夫々の特性が、生体音信号の時間的な変化(つまり、各信号成分の夫々の特性の時間的な変化)に同期して、動的に表示される。つまり、表示装置には、複数種類の信号成分の夫々の特性が、周期的に若しくは非周期的に又は連続的に(いわば、リアルタイムに)更新されながら表示される。従って、観察者は、複数種類の信号成分の夫々がどのようなタイミングでどのような特性を有しているかを容易に認識することができる。   According to this aspect, the analysis process is dynamically executed. Therefore, in the display device, the characteristics of each of the plurality of types of signal components are dynamically synchronized with the temporal change of the biological sound signal (that is, the temporal changes of the respective characteristics of each signal component). Is displayed. That is, on the display device, the characteristics of the plurality of types of signal components are displayed while being updated periodically, aperiodically, or continuously (in other words, in real time). Therefore, the observer can easily recognize what characteristic each of the plurality of types of signal components has at what timing.

<8>
本実施形態の信号処理装置の他の態様では、前記解析処理は、前記生体音信号を、正常音に相当する信号成分と前記正常音とは特性が異なる少なくとも一つの異常音に相当する少なくとも一つの信号成分とに分離する解析処理を含む。
<8>
In another aspect of the signal processing apparatus according to the present embodiment, the analysis processing is performed by using at least one of the biological sound signal corresponding to at least one abnormal sound in which the signal component corresponding to the normal sound and the normal sound have different characteristics. It includes analysis processing that separates into two signal components.

この態様によれば、表示装置には、正常音に相当する信号成分及び異常音に相当する信号成分の夫々の特性が表示される。従って、観察者(例えば、医師等の医療関係者)は、どのような種類の信号成分が生体音信号に含まれているかを容易に見分けることができる。従って、上述した各種効果が好適に享受される。   According to this aspect, the characteristics of the signal component corresponding to the normal sound and the signal component corresponding to the abnormal sound are displayed on the display device. Therefore, an observer (for example, a medical person such as a doctor) can easily distinguish what kind of signal component is included in the body sound signal. Therefore, the various effects described above are favorably enjoyed.

<9>
本実施形態の信号処理装置の他の態様では、前記解析処理は、前記生体音信号を、正常音とは特性が異なると共に互いに区別可能な複数の異常音に相当する複数の信号成分に分離する解析処理を含む。
<9>
In another aspect of the signal processing apparatus of the present embodiment, the analysis process separates the biological sound signal into a plurality of signal components corresponding to a plurality of abnormal sounds that have different characteristics from normal sounds and can be distinguished from each other. Includes analysis processing.

この態様によれば、表示装置には、複数種類の異常音に相当する複数種類の信号成分の夫々の特性が表示される。従って、観察者(例えば、医師等の医療関係者)は、どのような種類の信号成分が生体音信号に含まれているかを容易に見分けることができる。従って、上述した各種効果が好適に享受される。特に、病態の診断が正常音ではなく異常音に基づいて行われることが多いことを考慮すれば、異常音に特化した表示データを生成することは、観察者の診断を補助するという点で実践上大変有益である。   According to this aspect, the display device displays the characteristics of the plurality of types of signal components corresponding to the plurality of types of abnormal sounds. Therefore, an observer (for example, a medical person such as a doctor) can easily distinguish what kind of signal component is included in the body sound signal. Therefore, the various effects described above are favorably enjoyed. In particular, considering that diagnosis of pathological conditions is often performed based on abnormal sounds rather than normal sounds, generating display data specialized for abnormal sounds helps the observer's diagnosis. It is very useful in practice.

(信号処理方法の実施形態)
<10>
本実施形態の信号処理方法は、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、前記表示データを、前記同一の表示装置に出力する出力工程とを備える。
(Embodiment of signal processing method)
<10>
In the signal processing method of the present embodiment, the characteristics of the plurality of types of signal components are assigned to the same display device based on the execution result of the analysis processing that separates the biological sound signal into a plurality of types of signal components that can be distinguished from each other. A generation step of generating display data for display; and an output step of outputting the display data to the same display device.

本実施形態の信号処理方法によれば、上述した本実施形態の信号処理装置が享受する各種効果と同様の効果を好適に享受することができる。   According to the signal processing method of the present embodiment, it is possible to suitably enjoy the same effects as the various effects enjoyed by the signal processing device of the present embodiment described above.

尚、上述した本実施形態の信号処理装置が採用し得る各種態様に対応して、本実施形態の信号処理方法もまた、各種態様を採用してもよい。   Incidentally, in response to various aspects that can be adopted by the signal processing apparatus of the present embodiment described above, the signal processing method of the present embodiment may also adopt various aspects.

(コンピュータプログラムの実施形態)
<11>
本実施形態のコンピュータプログラムは、コンピュータによって実行されるコンピュータプログラムであって、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示手段にまとめて表示するための表示データを生成する生成工程と、前記表示データを、前記同一の表示装置に出力する出力工程とを前記コンピュータに実行させる。
(Embodiment of computer program)
<11>
The computer program of the present embodiment is a computer program executed by a computer, and the plurality of types of signal components based on an execution result of an analysis process that separates a biological sound signal into a plurality of types of signal components that can be distinguished from each other The computer is caused to execute a generation process for generating display data for displaying the respective characteristics together on the same display means, and an output process for outputting the display data to the same display device.

本実施形態のコンピュータプログラムによれば、上述した本実施形態の信号処理装置が享受する各種効果と同様の効果を好適に享受することができる。   According to the computer program of the present embodiment, it is possible to suitably enjoy the same effects as the various effects enjoyed by the signal processing apparatus of the present embodiment described above.

尚、上述した本実施形態の信号処理装置が採用し得る各種態様に対応して、本実施形態のコンピュータプログラムもまた、各種態様を採用してもよい。   Incidentally, in response to various aspects that can be adopted by the signal processing apparatus of the present embodiment described above, the computer program of the present embodiment may also adopt various aspects.

(記録媒体の実施形態)
<12>
本実施形態の記録媒体は、コンピュータによって実行されるコンピュータプログラムが記録されている記録媒体であって、生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示手段にまとめて表示するための表示データを生成する生成工程と、前記表示データを、前記同一の表示装置に出力する出力工程とを前記コンピュータに実行させるコンピュータプログラムが記録されている。
(Embodiment of recording medium)
<12>
The recording medium of the present embodiment is a recording medium on which a computer program executed by a computer is recorded, and is based on an execution result of an analysis process that separates a biological sound signal into a plurality of types of signal components that can be distinguished from each other. A generation step of generating display data for collectively displaying the characteristics of the plurality of types of signal components on the same display means, and an output step of outputting the display data to the same display device A computer program to be executed by a computer is recorded.

本実施形態の記録媒体によれば、上述した本実施形態の信号処理装置が享受する各種効果と同様の効果を好適に享受することができる。   According to the recording medium of the present embodiment, it is possible to suitably enjoy the same effects as the various effects enjoyed by the signal processing apparatus of the present embodiment described above.

尚、上述した本実施形態の信号処理装置が採用し得る各種態様に対応して、本実施形態の記録媒体もまた、各種態様を採用してもよい。   Incidentally, in response to various aspects that can be adopted by the signal processing apparatus of the present embodiment described above, the recording medium of the present embodiment may also adopt various aspects.

本実施形態のこのような作用及び他の利得は次に説明する実施例から更に明らかにされる。   Such an operation and other advantages of the present embodiment will be further clarified from examples described below.

以上説明したように、本実施形態の信号処理装置は、生成手段と、出力手段とを備える。本実施形態の信号処理方法は、生成工程と、出力工程とを備える。本実施形態のコンピュータプログラムは、生成工程と出力工程とをコンピュータに実行させる。本実施形態の記録媒体は、生成工程と出力工程とをコンピュータに実行させるコンピュータプログラムが記録されている記録媒体である。従って、より見やすい態様で生体音が表示されるがゆえに、医師等の診断が好適に補助される。   As described above, the signal processing apparatus according to the present embodiment includes the generation unit and the output unit. The signal processing method of this embodiment includes a generation process and an output process. The computer program of this embodiment causes a computer to execute a generation process and an output process. The recording medium of the present embodiment is a recording medium on which a computer program that causes a computer to execute a generation process and an output process is recorded. Therefore, since the body sound is displayed in a more easily viewable manner, a diagnosis by a doctor or the like is preferably assisted.

以下、図面を参照しながら、信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体の実施例について説明する。尚、以下では、生体音信号の一例として、呼吸音を示す呼吸音信号に着目した説明を進める。但し、生体音信号として、呼吸音信号とは異なる信号が用いられてもよい。生体音信号の他の一例としては、例えば、心音を示す心音信号や、脈動(言い換えれば、脈波)に起因した音を示す脈動音信号や、内臓器官の活動状況に起因した音(例えば、腸の動きに起因した腸音)を示す内臓音信号や、血液の流れに起因した音を示す血流音信号等が一例としてあげられる。   Hereinafter, embodiments of a signal processing apparatus and method, a computer program, and a recording medium will be described with reference to the drawings. In the following, description will be given focusing on a respiratory sound signal indicating a respiratory sound as an example of a biological sound signal. However, a signal different from the respiratory sound signal may be used as the biological sound signal. Other examples of the body sound signal include, for example, a heart sound signal indicating a heart sound, a pulsation sound signal indicating a sound caused by a pulsation (in other words, a pulse wave), and a sound caused by an activity state of an internal organ officer (for example, Examples include a visceral sound signal indicating intestinal sound due to intestinal movement), a blood flow sound signal indicating sound due to blood flow, and the like.

(1)信号処理装置の構成
はじめに、図1を参照しながら、本実施例の信号処理装置10の構成について説明する。図1は、本実施例の信号処理装置10の構成を示すブロック図である。
(1) Configuration of Signal Processing Device First, the configuration of the signal processing device 10 of this embodiment will be described with reference to FIG. FIG. 1 is a block diagram illustrating a configuration of a signal processing device 10 according to the present embodiment.

図1に示すように、本実施例の信号処理装置10は、信号取得部101と、信号記憶部102と、「解析手段」の一具体例である信号解析部103と、「生成手段」及び「出力手段」の一具体例である表示データ生成部104と、「表示装置」の一具体例である表示部105とを備える。   As shown in FIG. 1, the signal processing apparatus 10 of the present embodiment includes a signal acquisition unit 101, a signal storage unit 102, a signal analysis unit 103 which is a specific example of “analysis unit”, “generation unit”, and A display data generation unit 104 which is a specific example of “output means” and a display unit 105 which is a specific example of “display device” are provided.

信号取得部101は、呼吸音信号を取得する。例えば、信号取得部101は、生体の呼吸音を直接的に検出することで呼吸音信号を直接的に取得してもよい。この場合、信号取得部101は、生体に取り付けられると共に生体の呼吸音を検出する呼吸音センサを含んでいてもよい。このような呼吸音センサは、典型的にはマイク(例えば、コイル型マイクや、コンデンサ型マイクや、圧電型マイク等)である。但し、呼吸音センサが呼吸音を検出することができる限りは、呼吸音センサはどのような形式のセンサであってもよい。   The signal acquisition unit 101 acquires a respiratory sound signal. For example, the signal acquisition unit 101 may directly acquire a respiratory sound signal by directly detecting a respiratory sound of a living body. In this case, the signal acquisition unit 101 may include a respiratory sound sensor that is attached to a living body and detects a respiratory sound of the living body. Such a respiratory sound sensor is typically a microphone (for example, a coil-type microphone, a capacitor-type microphone, a piezoelectric microphone, or the like). However, as long as the respiratory sound sensor can detect the respiratory sound, the respiratory sound sensor may be any type of sensor.

尚、図1は、信号処理装置10が信号取得部101を備える例を示している。しかしながら、信号処理装置10は、信号取得部101を備えていなくともよい。この場合、信号処理装置10は、信号処理装置10の外部に配置されている信号取得部101から、有線若しくは無線の通信回線又は有線の信号線を介して、呼吸音信号を取得することが好ましい。   FIG. 1 shows an example in which the signal processing apparatus 10 includes a signal acquisition unit 101. However, the signal processing apparatus 10 may not include the signal acquisition unit 101. In this case, it is preferable that the signal processing apparatus 10 acquires a respiratory sound signal from the signal acquisition unit 101 arranged outside the signal processing apparatus 10 via a wired or wireless communication line or a wired signal line. .

信号記憶部102は、信号取得部101が取得した呼吸音信号を一時的に記憶する。このため、信号記憶部102は、メモリ又はバッファを含んでいてもよい。尚、後述するように、信号記憶部102は、信号取得部101が逐次取得する呼吸音信号のうち所定期間分の呼吸音信号を記憶することが好ましい。   The signal storage unit 102 temporarily stores the respiratory sound signal acquired by the signal acquisition unit 101. For this reason, the signal storage unit 102 may include a memory or a buffer. As will be described later, the signal storage unit 102 preferably stores the respiratory sound signals for a predetermined period among the respiratory sound signals sequentially acquired by the signal acquisition unit 101.

尚、図1は、信号処理装置10が信号記憶部102を備える例を示している。しかしながら、信号処理装置10は、信号記憶部102を備えていなくともよい。   FIG. 1 shows an example in which the signal processing apparatus 10 includes a signal storage unit 102. However, the signal processing apparatus 10 may not include the signal storage unit 102.

信号解析部103は、信号記憶部102が記憶している呼吸音信号に対して所定の解析処理を実行する。本実施例では、所定の解析処理は、呼吸音信号を、互いに区別可能な複数種類の信号成分に分離する解析処理を含んでいる。言い換えれば、所定の解析処理は、呼吸音信号から、互いに区別可能な複数種類の信号成分のうちの少なくとも一つを抽出する解析処理を含んでいる。言い換えれば、所定の解析処理は、呼吸音信号にどのような種類の信号成分が含まれているかを解析する解析処理を含んでいる。   The signal analysis unit 103 performs predetermined analysis processing on the respiratory sound signal stored in the signal storage unit 102. In the present embodiment, the predetermined analysis processing includes analysis processing for separating the respiratory sound signal into a plurality of types of signal components that can be distinguished from each other. In other words, the predetermined analysis processing includes analysis processing for extracting at least one of a plurality of types of signal components that can be distinguished from each other from the respiratory sound signal. In other words, the predetermined analysis process includes an analysis process for analyzing what kind of signal component is included in the respiratory sound signal.

具体的には、例えば、所定の解析処理は、呼吸音信号を、正常音に相当する信号成分と、正常音とは異なる異常音に相当する信号成分とに分離する解析処理を含んでいてもよい。言い換えれば、例えば、所定の解析処理は、呼吸音信号から、正常音に相当する信号成分及び異常音に相当する信号成分のうちの少なくとも一つを抽出する解析処理を含んでいてもよい。   Specifically, for example, the predetermined analysis process may include an analysis process for separating a respiratory sound signal into a signal component corresponding to a normal sound and a signal component corresponding to an abnormal sound different from the normal sound. Good. In other words, for example, the predetermined analysis process may include an analysis process for extracting at least one of a signal component corresponding to a normal sound and a signal component corresponding to an abnormal sound from the respiratory sound signal.

或いは、例えば、所定の解析処理は、呼吸音信号を、互いに区別可能な複数種類の正常音に相当する複数種類の信号成分に分離する解析処理を含んでいてもよい。言い換えれば、例えば、所定の解析処理は、呼吸音信号から、互いに区別可能な複数種類の正常音に相当する複数種類の信号成分のうちの少なくとも一つを抽出する解析処理を含んでいてもよい。   Alternatively, for example, the predetermined analysis process may include an analysis process for separating the respiratory sound signal into a plurality of types of signal components corresponding to a plurality of types of normal sounds that can be distinguished from each other. In other words, for example, the predetermined analysis process may include an analysis process for extracting at least one of a plurality of types of signal components corresponding to a plurality of types of normal sounds that can be distinguished from each other from the respiratory sound signal. .

或いは、例えば、所定の解析処理は、呼吸音信号を、互いに区別可能な複数種類の異常音に相当する複数種類の信号成分に分離する解析処理を含んでいてもよい。言い換えれば、例えば、所定の解析処理は、呼吸音信号から、互いに区別可能な複数種類の異常音に相当する複数種類の信号成分のうちの少なくとも一つを抽出する解析処理を含んでいてもよい。   Alternatively, for example, the predetermined analysis process may include an analysis process for separating the respiratory sound signal into a plurality of types of signal components corresponding to a plurality of types of abnormal sounds that can be distinguished from each other. In other words, for example, the predetermined analysis process may include an analysis process for extracting at least one of a plurality of types of signal components corresponding to a plurality of types of abnormal sounds that can be distinguished from each other from the respiratory sound signal. .

信号解析部103は、解析処理の結果(例えば、複数種類の信号成分そのものや、複数種類の信号成分の特性を特定可能な任意の情報等)を、表示データ生成部104に対して出力する。   The signal analysis unit 103 outputs a result of the analysis process (for example, a plurality of types of signal components themselves or arbitrary information that can specify characteristics of the plurality of types of signal components) to the display data generation unit 104.

尚、図1は、信号処理装置10が信号解析部103を備える例を示している。しかしながら、信号処理装置10は、信号解析部103を備えていなくともよい。この場合、信号処理装置10は、信号処理装置10の外部に配置されている信号解析部103から、有線若しくは無線の通信回線又は有線の信号線を介して、信号処理装置10の外部に位置する信号解析部103が実行した解析処理の結果を取得することが好ましい。   FIG. 1 shows an example in which the signal processing apparatus 10 includes a signal analysis unit 103. However, the signal processing apparatus 10 may not include the signal analysis unit 103. In this case, the signal processing device 10 is located outside the signal processing device 10 from the signal analysis unit 103 disposed outside the signal processing device 10 via a wired or wireless communication line or a wired signal line. It is preferable to acquire the result of the analysis process executed by the signal analysis unit 103.

表示データ生成部104は、信号解析部103が実行した解析処理の結果に基づいて、呼吸音信号を構成する複数種類の信号成分の夫々の特性(例えば、信号強度に相当する振幅レベル等)を表示部105に表示するための表示データ(例えば、画像信号)を生成する。言い換えれば、表示データ生成部104は、呼吸音信号を構成する複数種類の信号成分の夫々の特性を視覚的に特定することが可能な何らかの表示対象物を表示部105に表示するための表示データを生成する。尚、表示対象物は、呼吸音信号の特性を視覚的に特定することができる限りは、どのような表示対象物であってもよい。例えば、表示対象物は、呼吸音信号の特性を視覚的に特定するテキスト(例えば、文字や数値等)を含む表示対象物であってもよい。或いは、例えば、表示対象物は、呼吸音信号の特性を視覚的に特定する図画(例えば、グラフやチャート等)を含む表示対象物であってもよい。   Based on the result of the analysis process executed by the signal analysis unit 103, the display data generation unit 104 displays each characteristic of the plurality of types of signal components constituting the respiratory sound signal (for example, an amplitude level corresponding to the signal intensity). Display data (for example, an image signal) to be displayed on the display unit 105 is generated. In other words, the display data generation unit 104 displays display data for displaying on the display unit 105 some display object capable of visually specifying the characteristics of each of a plurality of types of signal components constituting the respiratory sound signal. Is generated. Note that the display object may be any display object as long as the characteristics of the respiratory sound signal can be visually identified. For example, the display object may be a display object including text (for example, characters and numerical values) that visually specifies the characteristics of the respiratory sound signal. Alternatively, for example, the display object may be a display object including a graphic (for example, a graph or a chart) that visually specifies the characteristics of the respiratory sound signal.

加えて、表示データ生成部104は、生成した表示データを、表示部105に対して出力する。   In addition, the display data generation unit 104 outputs the generated display data to the display unit 105.

尚、信号解析部103及び表示データ生成部104は、夫々、CPU(Central Processing Unit)上で論理的に実現される処理ブロックである。但し、信号解析部103及び表示データ生成部104は、夫々、半導体チップ等によって物理的に実現される処理回路であってもよい。   The signal analysis unit 103 and the display data generation unit 104 are processing blocks that are logically realized on a CPU (Central Processing Unit), respectively. However, each of the signal analysis unit 103 and the display data generation unit 104 may be a processing circuit physically realized by a semiconductor chip or the like.

表示部105は、表示データ生成部104が生成した表示データに基づく表示処理を行うディスプレイ装置である。その結果、表示部105は、呼吸音信号を構成する複数種類の信号成分の夫々の特性を、当該表示部105の表示画面上に表示する。   The display unit 105 is a display device that performs display processing based on the display data generated by the display data generation unit 104. As a result, the display unit 105 displays on the display screen of the display unit 105 the characteristics of each of a plurality of types of signal components constituting the respiratory sound signal.

尚、表示部105は、マルチモニタ表示を行う表示部(つまり、複数のディスプレイ装置を含む表示部105であって、当該複数のディスプレイ装置を連携させることで単一の仮想的な表示領域を形成する表示部105)であってもよい。或いは、表示部105は、シングルモニタ表示を行う表示部105(つまり、単一のディスプレイ装置を含む表示部105)であってもよい。   The display unit 105 is a display unit that performs multi-monitor display (that is, the display unit 105 including a plurality of display devices, and forms a single virtual display region by linking the plurality of display devices. Display unit 105). Alternatively, the display unit 105 may be a display unit 105 that performs single monitor display (that is, the display unit 105 including a single display device).

尚、図1は、信号処理装置10が表示部105を備える例を示している。しかしながら、信号処理装置10は、表示部105を備えていなくともよい。この場合、信号処理装置10は、信号処理装置10の外部に位置する表示部105に対して、有線若しくは無線の通信回線又は有線の信号線を介して、表示データ生成部104が生成した表示データを転送することが好ましい。   FIG. 1 shows an example in which the signal processing apparatus 10 includes a display unit 105. However, the signal processing apparatus 10 may not include the display unit 105. In this case, the signal processing device 10 generates display data generated by the display data generation unit 104 via a wired or wireless communication line or a wired signal line with respect to the display unit 105 located outside the signal processing device 10. It is preferable to transfer.

(2)本実施例の信号処理装置10の動作
続いて、図2から図8を参照しながら、本実施例の信号処理装置10の動作について説明する。図2は、本実施例の信号処理装置10の動作の流れを示すフローチャートである。図3は、信号取得部101の生体に対する装着態様の一例を示す模式図及び呼吸音信号の波形を時間軸上で示すグラフである。図4は、信号記憶部102が呼吸音信号を記憶する動作の一例を示す模式図である。図5は、呼吸音の種類を示す分類チャートである。図6は、5種類の呼吸音(肺胞呼吸音、低音性連続性ラ音(類鼾音)、高音性連続性ラ音(笛声音)、細かい断続性ラ音(捻髪音)及び粗い断続性ラ音(水泡音))に相当する5種類の信号成分の波形を時間軸上で示すグラフである。図7は、呼吸音信号を構成する5種類の信号成分の夫々の特性の表示態様の一例を示す平面図である。図8は、本実施例の信号処理装置10の動作の流れを示すタイミングチャートである。
(2) Operation of Signal Processing Device 10 of the Present Example Next, the operation of the signal processing device 10 of the present example will be described with reference to FIGS. FIG. 2 is a flowchart showing the operation flow of the signal processing apparatus 10 of the present embodiment. FIG. 3 is a schematic diagram illustrating an example of how the signal acquisition unit 101 is attached to the living body, and a graph illustrating the waveform of the respiratory sound signal on the time axis. FIG. 4 is a schematic diagram illustrating an example of an operation in which the signal storage unit 102 stores a respiratory sound signal. FIG. 5 is a classification chart showing the types of respiratory sounds. FIG. 6 shows five types of breathing sounds (alveolar breathing sounds, low-pitched continuous rales (similar sounds), high-pitched continuous rales (flute sounds), fine intermittent rales (haircut sounds), and rough sounds It is a graph which shows on the time-axis the waveform of five types of signal components equivalent to a discontinuous ra sound (water bubble sound). FIG. 7 is a plan view showing an example of a display mode of each characteristic of the five types of signal components constituting the respiratory sound signal. FIG. 8 is a timing chart showing the flow of operation of the signal processing apparatus 10 of the present embodiment.

図2に示すように、まず、信号取得部101は、呼吸音信号を取得する(ステップS101)。例えば、図3(a)に示すように、信号取得部101は、生体の体表面(図3(a)に示す例では、左胸付近の体表面)に取り付けられてもよい。このとき、信号取得部101の装着位置は、固定されていてもよい。或いは、医療従事者が聴診する際に聴診器をあてる位置を適宜変更していることを考慮すれば、信号取得部101の装着位置は、呼吸音信号の取得の途中で適宜変更されてもよい。その結果、信号取得部101は、呼吸音信号を取得する。このとき、信号取得部101は、所定のサンプリング周波数(例えば、44100Hz)に応じて周期的に呼吸音信号を取得してもよい。つまり、信号取得部101は、呼吸音信号のサンプル値を周期的に取得してもよい。但し、信号取得部101は、非周期的に又は連続的に呼吸音信号を取得してもよい。その結果、信号取得部101は、図3(b)に示す時間軸上の波形として特定される呼吸音信号を取得することができる。   As shown in FIG. 2, the signal acquisition unit 101 first acquires a respiratory sound signal (step S101). For example, as shown in FIG. 3A, the signal acquisition unit 101 may be attached to the body surface of the living body (in the example shown in FIG. 3A, the body surface near the left breast). At this time, the mounting position of the signal acquisition unit 101 may be fixed. Alternatively, in consideration of appropriately changing the position of the stethoscope when the medical staff auscultates, the mounting position of the signal acquisition unit 101 may be changed as appropriate during the acquisition of the respiratory sound signal. . As a result, the signal acquisition unit 101 acquires a respiratory sound signal. At this time, the signal acquisition unit 101 may periodically acquire a respiratory sound signal according to a predetermined sampling frequency (for example, 44100 Hz). That is, the signal acquisition unit 101 may periodically acquire a sample value of the respiratory sound signal. However, the signal acquisition unit 101 may acquire a respiratory sound signal aperiodically or continuously. As a result, the signal acquisition unit 101 can acquire a respiratory sound signal specified as a waveform on the time axis shown in FIG.

尚、図3(b)に示すように、生体の呼吸が吸気(つまり、肺への空気の取り込み)と呼気(つまり、肺からの空気の吐き出し)との繰り返しであることを考慮すれば、呼吸音信号は、周期性を有する信号であると言える。呼吸音信号の1周期は、吸気区間(つまり、吸気が行われる期間)と当該吸気区間に続く呼気区間(つまり、呼気が行われる期間)とを合算した期間となる。尚、呼吸音信号の周期は、時間の経過と共に変動してもよいことは言うまでもない。   As shown in FIG. 3B, considering that the respiration of the living body is a repetition of inspiration (that is, intake of air into the lung) and expiration (that is, exhalation of air from the lung), It can be said that the respiratory sound signal is a signal having periodicity. One cycle of the breathing sound signal is a period obtained by adding up the inspiratory period (that is, the period in which inspiration is performed) and the exhalation period (that is, the period in which exhalation is performed) following the inspiratory period. Needless to say, the period of the respiratory sound signal may vary with time.

信号取得部101による呼吸音信号の取得と並行して、信号記憶部102は、信号取得部101が取得した呼吸音信号を一時的に記憶する(ステップS102)。このとき、信号記憶部102は、後述する信号解析部103が実行する解析処理に必要なサイズの呼吸音信号を一時的に記憶することが好ましい。本実施例では、信号解析部103が実行する解析処理に必要な呼吸音信号のサイズは、「1秒」であるものとする。この場合、信号記憶部102は、最新の(言い換えれば、直近)1秒分の呼吸音信号を一時的に記憶することが好ましい。このような直近1秒分の呼吸音信号を一時的に記憶するために、信号記憶部102は、リングバッファを含んでいることが好ましい。但し、信号解析部103が実行する解析処理に必要な呼吸音信号のサイズは、1秒以外の任意の時間であってもよい。   In parallel with the acquisition of the respiratory sound signal by the signal acquisition unit 101, the signal storage unit 102 temporarily stores the respiratory sound signal acquired by the signal acquisition unit 101 (step S102). At this time, it is preferable that the signal storage unit 102 temporarily stores a respiratory sound signal having a size necessary for analysis processing executed by the signal analysis unit 103 described later. In this embodiment, it is assumed that the size of the respiratory sound signal necessary for the analysis processing executed by the signal analysis unit 103 is “1 second”. In this case, it is preferable that the signal storage unit 102 temporarily stores the latest (in other words, the latest) breathing sound signal for one second. In order to temporarily store the respiratory sound signal for the latest one second, it is preferable that the signal storage unit 102 includes a ring buffer. However, the size of the respiratory sound signal necessary for the analysis processing executed by the signal analysis unit 103 may be any time other than 1 second.

例えば信号取得部101が44100Hzのサンプリング周波数に応じて呼吸音信号を取得している場合には、信号記憶部102は、44100個の呼吸音信号のサンプル値を一時的に記憶する。より具体的には、図4に示すように、信号記憶部102は、最新の時刻(t)に取得された呼吸音信号のサンプル値S(t)と、時刻(t−1)に取得された呼吸音信号のサンプル値S(t−1)と、時刻(t−2)に取得された呼吸音信号のサンプル値S(t−2)と、・・・、時刻(t−44099)に取得された呼吸音信号のサンプル値S(t−44099)を一時的に記憶する。   For example, when the signal acquisition unit 101 acquires a respiratory sound signal according to a sampling frequency of 44100 Hz, the signal storage unit 102 temporarily stores sample values of 44100 respiratory sound signals. More specifically, as shown in FIG. 4, the signal storage unit 102 is acquired at the sample value S (t) of the respiratory sound signal acquired at the latest time (t) and at the time (t−1). At the time (t-44099), the sample value S (t-1) of the respiratory sound signal, the sample value S (t-2) of the respiratory sound signal acquired at time (t-2), and so on. The acquired sample value S (t-44099) of the respiratory sound signal is temporarily stored.

信号取得部101による呼吸音信号の取得と並行して、信号解析部103は、信号記憶部102が記憶している呼吸音信号に対して所定の解析処理を実行する(ステップS103)。つまり、信号解析部103は、信号記憶部102が記憶している呼吸音信号に対して、呼吸音信号を複数種類の信号成分に分離する解析処理を実行する。   In parallel with the acquisition of the respiratory sound signal by the signal acquisition unit 101, the signal analysis unit 103 performs a predetermined analysis process on the respiratory sound signal stored in the signal storage unit 102 (step S103). That is, the signal analysis unit 103 performs an analysis process on the respiratory sound signal stored in the signal storage unit 102 to separate the respiratory sound signal into a plurality of types of signal components.

ここで、図5を参照しながら、呼吸音の種類について説明する。図5に示すように、広義の呼吸音(つまり、肺音)は、狭義の呼吸音と、異常音の一例である副雑音とに分類される。狭義の呼吸音は、正常音の一例である正常な呼吸音と、異常音の一例である異常な呼吸音とに分類される。正常な呼吸音は、肺胞呼吸音と、気管支呼吸音と、気管支肺胞呼吸音と、気管呼吸音とに分類される。異常な呼吸音は、減弱・消失に起因した呼吸音と、増強に起因した呼吸音と、呼気延長に起因した呼吸音と、気管支呼吸音化に起因した呼吸音と、気管狭窄音とに分類される。副雑音は、ラ音と、その他の音とに分類される。ラ音は、連続性ラ音と、断続性ラ音とに分類される。連続性ラ音は、低音性連続性ラ音(類鼾音)と、高音性連続性ラ音(笛声音)と、スクウォーク(吸気性の連続性ラ音)とに分類される。断続性ラ音は、細かい断続性ラ音(捻髪音)と、粗い断続性ラ音(水泡音)とに分類される。その他の音は、胸膜摩擦音と、肺血管性雑音とに分類される。   Here, the types of breathing sounds will be described with reference to FIG. As shown in FIG. 5, breathing sounds in a broad sense (that is, lung sounds) are classified into a breathing sound in a narrow sense and sub-noise that is an example of an abnormal sound. Narrowly defined respiratory sounds are classified into normal respiratory sounds, which are examples of normal sounds, and abnormal respiratory sounds, which are examples of abnormal sounds. Normal respiratory sounds are classified into alveolar respiratory sounds, bronchial respiratory sounds, bronchoalveolar respiratory sounds, and tracheal respiratory sounds. Abnormal respiratory sounds are classified into respiratory sounds resulting from attenuation / disappearance, respiratory sounds resulting from augmentation, respiratory sounds resulting from exhalation exhalation, respiratory sounds resulting from bronchial breathing, and tracheal stenosis sounds. Is done. The sub-noise is classified into a ra sound and other sounds. The rales are classified into continuous rales and intermittent rales. The continuous rales are classified into low-pitched continuous rales (sounds), high-pitched continuous rales (flute sounds), and scwalks (inspiratory continuous rales). Intermittent rales are classified into fine intermittent rales (haircut sounds) and coarse intermittent rales (water bubbles). Other sounds are classified into pleural friction sounds and pulmonary vascular noise.

本実施例では、信号解析部103は、呼吸音信号を、正常音の一例である肺胞呼吸音に相当する信号成分(以下、“肺胞呼吸音成分”と称する)と、異常音の一例である低音性連続性ラ音(類鼾音)に相当する信号成分(以下、“類鼾音成分”と称する)と、異常音の一例である高音性連続性ラ音(笛声音)に相当する信号成分(以下、“笛声音成分”と称する)と、異常音の一例である細かい断続性ラ音(捻髪音)に相当する信号成分(以下、“捻髪音成分”と称する)と、異常音の一例である粗い断続性ラ音(水泡音)に相当する信号成分(以下、“水泡音成分”と称する)とに分離する解析処理を行う。言い換えれば、信号解析部103は、呼吸音信号から、肺胞呼吸音成分、類鼾音成分、笛声音成分、捻髪音成分及び水泡音成分のうちの少なくとも一つを抽出する解析処理を行う。尚、図6の1段目のグラフは、肺胞呼吸音成分の一例を示している。図6の2段目のグラフは、類鼾音成分の一例を示している。図6の3段目のグラフは、笛声音成分の一例を示している。図6の4段目のグラフは、捻髪音成分の一例を示している。図6の5段目のグラフは、水泡音成分の一例を示している。   In this embodiment, the signal analysis unit 103 uses the respiratory sound signal as an example of a signal component corresponding to an alveolar respiratory sound (hereinafter referred to as “alveolar respiratory sound component”) that is an example of a normal sound and an abnormal sound. Corresponding to the signal component (hereinafter referred to as “sound-like sound component”) corresponding to the low-pitched continuous ra sound (similar sound) and the high-sounding continuous ra sound (flute sound) as an example of the abnormal sound A signal component (hereinafter referred to as a “flute sound component”) and a signal component (hereinafter referred to as a “twist sound component”) corresponding to a fine intermittent rale (haircut sound) which is an example of an abnormal sound. Then, an analysis process is performed to separate into a signal component (hereinafter referred to as “water bubble sound component”) corresponding to a rough intermittent sound (water bubble sound) that is an example of an abnormal sound. In other words, the signal analysis unit 103 performs an analysis process of extracting at least one of the alveolar respiratory sound component, the analogy sound component, the whistle sound component, the hair-hair sound component, and the water bubble sound component from the respiratory sound signal. . The first graph in FIG. 6 shows an example of the alveolar respiratory sound component. The second graph in FIG. 6 shows an example of the analog sound component. The third graph in FIG. 6 shows an example of a whistle voice component. The graph in the fourth row in FIG. 6 shows an example of the haircut sound component. The fifth graph in FIG. 6 shows an example of the water bubble sound component.

信号解析部103は、以下の観点から、呼吸音信号を、肺胞呼吸音成分と、類鼾音成分と、笛声音成分と、捻髪音成分と、水泡音成分とに分離してもよい。   The signal analysis unit 103 may separate the respiratory sound signal into an alveolar respiratory sound component, an analogy sound component, a whistle sound component, a hairpin sound component, and a water bubble sound component from the following viewpoints: .

具体的には、肺胞呼吸音成分及び断続性ラ音に相当する信号成分(つまり、捻髪音成分及び水泡音成分)の周波数スペクトル形状が相対的に広帯域であり且つ相対的に滑らかである一方で、連続性ラ音に相当する信号成分(つまり、類鼾音成分及び笛声音成分)の周波数スペクトル形状が相対的に狭帯域であり且つ相対的に急峻であるという違いがある。従って、信号解析部103は、このような周波数スペクトル形状の違いに着目することで、呼吸音信号を、連続性ラ音に相当する信号成分と、連続性ラ音に相当する信号成分とは異なる信号成分(つまり、肺胞呼吸音成分及び断続性ラ音に相当する信号成分)とに分離してもよい。   Specifically, the frequency spectrum shape of the signal components corresponding to the alveolar respiratory sound component and the intermittent rar sound (that is, the hair hair sound component and the water bubble sound component) is relatively wideband and relatively smooth. On the other hand, there is a difference that the shape of the frequency spectrum of the signal component (that is, the analog sound component and the whistle sound component) corresponding to the continuous rar is relatively narrow band and relatively steep. Therefore, the signal analysis unit 103 pays attention to such a difference in the frequency spectrum shape, so that the respiratory sound signal is different from the signal component corresponding to the continuous ra sound and the signal component corresponding to the continuous ra sound. You may isolate | separate into a signal component (namely, the signal component corresponded to an alveolar respiration sound component and an intermittent rale).

また、類鼾音成分の周波数が相対的に低い一方で、笛声音成分の周波数が相対的に高いという違いがある。従って、信号解析部103は、このような周波数の違いに着目することで、連続性ラ音に相当する信号成分を、類鼾音成分と笛声音成分とに分離してもよい。   Further, there is a difference that the frequency of the whistle sound component is relatively high while the frequency of the analog sound component is relatively low. Therefore, the signal analysis unit 103 may separate the signal component corresponding to the continuous rale into an analog sound component and a whistle sound component by paying attention to such a difference in frequency.

また、肺胞呼吸音成分が時間的に継続する(つまり、連続する)信号成分である一方で、断続性ラ音が時間的に断続するパルス状の信号成分であるという違いがある。従って、信号解析部103は、このような時間軸上での信号成分の分布の違いに着目することで、連続性ラ音に相当する信号成分とは異なる信号成分を、肺胞呼吸音成分と断続性ラ音とに分離してもよい。   Further, there is a difference that the alveolar respiratory sound component is a signal component that continues in time (that is, is continuous), while the intermittent sound is a pulse-like signal component that is intermittent in time. Accordingly, the signal analysis unit 103 pays attention to such a difference in the distribution of the signal components on the time axis, and thereby converts a signal component different from the signal component corresponding to the continuous rales into an alveolar respiratory sound component. It may be separated into intermittent sound.

また、水泡音成分の周波数が相対的に低い一方で、捻髪音成分の周波数が相対的に高いという違いがある。従って、信号解析部103は、このような周波数の違いに着目することで、断続性ラ音に相当する信号成分を、水泡音成分と捻髪音成分とに分離してもよい。   In addition, there is a difference that the frequency of the frizzy sound component is relatively high while the frequency of the water bubble sound component is relatively low. Therefore, the signal analysis unit 103 may separate the signal component corresponding to the intermittent rattling sound into the water bubble sound component and the haircut sound component by paying attention to such a frequency difference.

尚、呼吸音信号を5種類の信号成分(つまり、肺胞呼吸音成分、類鼾音成分、笛声音成分、捻髪音成分及び水泡音成分)に分離する解析処理に関する上述の方法はあくまで一例である。従って、信号解析部103は、その他の方法で呼吸音信号を5種類の信号成分に分離する解析処理を実行してもよい。尚、呼吸音信号を複数種類の信号成分に分離する(或いは、呼吸音信号から特定種類の信号成分を抽出する)方法は、例えば、特表2004−531309号公報や、特開2005−66045号公報や、特表2001−505085号公報や、特表2007−508899号公報や、「肺音信号のスパース表現と断続音分離への応用、酒井・里元・喜安・宮原、長崎大学国学研究報告第41巻第76号」等に開示されている。従って、信号解析部103は、これらの文献に開示された方法を用いて、呼吸音信号を複数種類の信号成分に分離してもよい。   Note that the above-described method relating to analysis processing for separating a respiratory sound signal into five types of signal components (that is, an alveolar respiratory sound component, an analogy sound component, a whistle sound component, a haircut sound component, and a water bubble sound component) is merely an example. It is. Therefore, the signal analysis unit 103 may execute analysis processing for separating the respiratory sound signal into five types of signal components by other methods. Note that methods for separating a respiratory sound signal into a plurality of types of signal components (or extracting a specific type of signal component from the respiratory sound signal) are disclosed in, for example, JP-T-2004-531309 and JP-A-2005-66045. Gazettes, Special Tables 2001-505085, Special Tables 2007-508899, “Sparse representation of lung sound signals and application to intermittent sound separation, Sakai / Satomoto / Kiyan / Miyahara, Nagasaki University National Studies Report Vol. 41, No. 76 ”and the like. Therefore, the signal analysis unit 103 may separate the respiratory sound signal into a plurality of types of signal components using the methods disclosed in these documents.

また、信号解析部103は、呼吸音信号を上述した5種類の信号成分に分離する解析処理に加えて又は代えて、呼吸音信号を任意の複数種類の信号成分に分離する(或いは、呼吸音信号から任意の一以上の信号成分を抽出する)解析処理を実行してもよい。   Further, the signal analysis unit 103 separates the respiratory sound signal into arbitrary plural types of signal components in addition to or instead of the analysis processing for separating the respiratory sound signal into the above-described five types of signal components (or the respiratory sound). An analysis process (extracting one or more arbitrary signal components from the signal) may be executed.

尚、信号解析部103による解析処理の対象となっている呼吸音信号は、典型的には、肺胞呼吸音信号を常に含んでいる可能性が高い。なぜならば、生体が呼吸をしている以上、その呼吸音に異常音が含まれているか否かに関わらず、正常音の一例である肺胞呼吸音に相当する信号成分が含まれているはずであるからである。一方で、信号解析部103による解析処理の対象となっている呼吸音信号は、5種類の信号成分のうちの全部を含んでいることもある。或いは、信号解析部103による解析処理の対象となっている呼吸音信号は、5種類の信号成分のうちの一部のみを含んでいることもある。或いは、信号解析部103による解析処理の対象となっている呼吸音信号は、5種類の信号成分のうちの全部を含んでいないこともある。いずれの場合であっても、信号解析部103は、呼吸音信号を上述した5種類の信号成分に分離する解析処理を実行することで、5種類の信号成分の夫々を取得することができる。例えば、信号解析部103は、解析処理を実行することで、呼吸音信号に含まれている信号成分を取得することができると共に、呼吸音信号に含まれていない信号成分を振幅レベルがゼロとなる信号成分として取得することができる。   Note that there is a high possibility that the respiratory sound signal to be analyzed by the signal analysis unit 103 typically includes an alveolar respiratory sound signal. This is because, as long as the living body is breathing, a signal component corresponding to an alveolar respiratory sound, which is an example of a normal sound, should be included regardless of whether or not the abnormal sound is included in the respiratory sound. Because. On the other hand, the respiratory sound signal that is the target of the analysis processing by the signal analysis unit 103 may include all of the five types of signal components. Alternatively, the respiratory sound signal that is the target of analysis processing by the signal analysis unit 103 may include only a part of the five types of signal components. Alternatively, the respiratory sound signal that is the target of analysis processing by the signal analysis unit 103 may not include all of the five types of signal components. In any case, the signal analysis unit 103 can acquire each of the five types of signal components by executing an analysis process that separates the respiratory sound signal into the above-described five types of signal components. For example, the signal analysis unit 103 can acquire the signal component included in the respiratory sound signal by executing the analysis process, and the amplitude level of the signal component not included in the respiratory sound signal is zero. As a signal component.

信号解析部103は、解析処理の結果(例えば、5種類の信号成分そのものを示す情報や、5種類の信号成分の特性を特定可能な情報等)を、表示データ生成部104に対して出力する。   The signal analysis unit 103 outputs the results of the analysis processing (for example, information indicating the five types of signal components themselves, information that can specify the characteristics of the five types of signal components) to the display data generation unit 104. .

信号解析部103により実行される解析処理と並行して、表示データ生成部104は、5種類の信号成分(つまり、肺胞呼吸音成分、類鼾音成分、笛声音成分、捻髪音成分及び水泡音成分)の夫々の特性を表示部105に表示するための表示データを生成する(ステップS104)。尚、表示データは、表示部105が表示する表示対象物を示すデータである。このような表示データは、例えば、呼吸音信号の特性を視覚的に特定するテキスト(例えば、文字や数値等)及び図画(例えば、グラフやチャート等)のうちの少なくとも一方を示す画像信号(或いは、画像信号とは異なる形式を有する任意の信号)に相当するデータであってもよい。   In parallel with the analysis processing executed by the signal analysis unit 103, the display data generation unit 104 includes five types of signal components (ie, alveolar respiratory sound component, analogy sound component, whistle sound component, hair curling sound component and Display data for displaying each characteristic of the water bubble sound component) on the display unit 105 is generated (step S104). The display data is data indicating a display object displayed by the display unit 105. Such display data is, for example, an image signal (or an image signal indicating at least one of text (for example, characters and numerical values) and graphics (for example, graphs and charts) that visually specify the characteristics of the respiratory sound signal. Or any signal having a format different from that of the image signal).

このとき、表示データ生成部104は、信号解析部103が実行した解析処理の結果に基づいて、表示データを生成する。表示データ生成部104は、生成した表示データを適宜表示部105に対して出力する。   At this time, the display data generation unit 104 generates display data based on the result of the analysis process executed by the signal analysis unit 103. The display data generation unit 104 outputs the generated display data to the display unit 105 as appropriate.

尚、以下の説明では、信号成分の特性が振幅レベル(つまり、信号強度を示す特性)である例を用いて説明を進める。但し、信号成分の特性が振幅レベルとは異なる特性(言い換えれば、信号成分の状態を特定することが可能な指標(変量))であってもよいことは言うまでもない。   In the following description, the description proceeds with an example in which the characteristic of the signal component is the amplitude level (that is, the characteristic indicating the signal strength). However, it goes without saying that the characteristic of the signal component may be a characteristic different from the amplitude level (in other words, an index (variable) capable of specifying the state of the signal component).

表示データ生成部104は、5種類の信号成分の夫々の振幅レベルを同一の表示部105に表示するための表示データを生成する。言い換えれば、表示データ生成部104は、5種類の信号成分の夫々の振幅レベルを単一の表示部105に表示するための表示データを生成する。   The display data generation unit 104 generates display data for displaying the amplitude levels of the five types of signal components on the same display unit 105. In other words, the display data generation unit 104 generates display data for displaying the amplitude levels of the five types of signal components on the single display unit 105.

尚、上述したように、表示部105は、シングルモニタ表示を行う表示部105(つまり、単一のディスプレイ装置を含む表示部105)であってもよい。この場合、表示データ生成部104は、5種類の信号成分の全ての振幅レベルを単一のディスプレイ装置の表示画面上に表示するための表示データを生成する。   As described above, the display unit 105 may be the display unit 105 that performs single monitor display (that is, the display unit 105 including a single display device). In this case, the display data generation unit 104 generates display data for displaying all the amplitude levels of the five types of signal components on the display screen of a single display device.

また、上述したように、表示部105は、マルチモニタ表示を行う表示部105(つまり、複数のディスプレイ装置を含む表示部105であって、当該複数のディスプレイ装置を連携させることで単一の仮想的な表示領域を形成する表示部105)であってもよい。この場合、表示データ生成部104は、5種類の信号成分の夫々の振幅レベルを、単一の仮想的な表示領域を形成するように連携する複数のディスプレイ装置のうちの少なくとも一つの表示画面上に表示するための表示データを生成する。つまり、表示データ生成部104は、5種類の信号成分の夫々の振幅レベルを複数のディスプレイ装置が形成する単一の仮想的な表示領域に表示するための表示データを生成する。   Further, as described above, the display unit 105 is a display unit 105 that performs multi-monitor display (that is, the display unit 105 including a plurality of display devices, and a plurality of display devices are linked together to form a single virtual device. Display portion 105) that forms a typical display area. In this case, the display data generation unit 104 sets the amplitude levels of the five types of signal components on at least one display screen among a plurality of display devices that cooperate to form a single virtual display region. Display data to be displayed on the screen. That is, the display data generation unit 104 generates display data for displaying the amplitude levels of the five types of signal components in a single virtual display area formed by a plurality of display devices.

加えて、表示データ生成部104は、表示部105の表示内容を見るユーザ(例えば、医師等の医療従事者)が5種類の信号成分の夫々の振幅レベルを同時に見ることができる態様で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成することが好ましい。或いは、表示データ生成部104は、ユーザが5種類の信号成分の夫々の振幅レベルを一度にまとめて見ることができる態様で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成することが好ましい。このため、表示データ生成部104は、5種類の信号成分の夫々の振幅レベルを互いに近接する表示位置に表示するための表示データを生成してもよい。或いは、表示データ生成部104は、5種類の信号成分の夫々の振幅レベルが所定の規則に応じた態様で並ぶ(言い換えれば、配列する)ように表示するための表示データを生成してもよい。   In addition, the display data generation unit 104 can display five types of amplitude levels of the five types of signal components simultaneously by a user (for example, a medical worker such as a doctor) who views the display content of the display unit 105. It is preferable to generate display data for displaying the amplitude level of each signal component. Alternatively, the display data generation unit 104 displays display data for displaying the amplitude levels of the five signal components in such a manner that the user can see the amplitude levels of the five signal components at once. It is preferable to produce. Therefore, the display data generation unit 104 may generate display data for displaying the amplitude levels of the five types of signal components at display positions close to each other. Alternatively, the display data generation unit 104 may generate display data for displaying such that the amplitude levels of the five types of signal components are arranged (in other words, arranged) according to a predetermined rule. .

加えて、表示データ生成部104は、ユーザが5種類の信号成分の振幅レベルを信号成分毎に分離された状態で見ることができる態様で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成することが好ましい。このため、表示データ生成部104は、5種類の信号成分の振幅レベルを互いに異なる表示位置に表示するための表示データを生成してもよい。   In addition, the display data generation unit 104 displays the amplitude levels of the five types of signal components in such a manner that the user can see the amplitude levels of the five types of signal components separated for each signal component. It is preferable to generate the display data. For this reason, the display data generation unit 104 may generate display data for displaying the amplitude levels of the five types of signal components at different display positions.

加えて、表示データ生成部104は、ユーザが振幅レベルの大きさを認識することが可能な態様で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成することが好ましい。例えば、表示データ生成部104は、振幅レベルが大きくなるほどサイズが大きくなる図画を用いて5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成してもよい。或いは、例えば、表示データ生成部104は、振幅レベルそのものを示すテキスト(例えば、数値や文字等)表示を用いて5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成してもよい。   In addition, the display data generation unit 104 preferably generates display data for displaying the amplitude levels of the five types of signal components in such a manner that the user can recognize the magnitude of the amplitude level. For example, the display data generation unit 104 may generate display data for displaying the amplitude levels of the five types of signal components using a graphic that increases in size as the amplitude level increases. Alternatively, for example, the display data generation unit 104 generates display data for displaying the amplitude levels of the five types of signal components using text (for example, numerical values and characters) display indicating the amplitude level itself. Also good.

このような表示データの生成を前提とした上で、表示データ生成部104は、例えば、図7(a)から図7(d)に示す形式で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成してもよい。   On the premise of such display data generation, the display data generation unit 104 displays the amplitude levels of each of the five types of signal components, for example, in the format shown in FIGS. 7 (a) to 7 (d). Display data may be generated.

例えば、図7(a)に示すように、表示データ生成部104は、五角形のレーダーチャートを用いて5種類の信号成分の夫々の振幅レベルの瞬時値及びピーク値(例えば、所定期間毎の最大値)を表示するための表示データを生成してもよい。図7(a)に示す例では、レーダーチャートの各軸が各信号成分に対応している。また、図7(a)に示す例では、振幅レベルが大きくなるほど振幅レベルのプロット位置が外側にシフトしている。   For example, as shown in FIG. 7A, the display data generation unit 104 uses a pentagonal radar chart to display instantaneous values and peak values (for example, maximum values for each predetermined period) of each of the five types of signal components. Display data for displaying (value) may be generated. In the example shown in FIG. 7A, each axis of the radar chart corresponds to each signal component. In the example shown in FIG. 7A, the plot position of the amplitude level is shifted outward as the amplitude level increases.

或いは、図7(b)に示すように、表示データ生成部104は、棒グラフを用いて5種類の信号成分の夫々の振幅レベルの瞬時値を表示するための表示データを生成してもよい。図7(b)に示す例では、5種類の信号成分に対応する5つの棒が横軸に沿って順に並んでいる。また、図7(b)に示す例では、振幅レベルが大きくなるほど棒の長さが縦軸方向に沿って長くなっている。また、図7(b)に示す例では、棒によって示される瞬時値に加えて、線によって示されるピーク値も合わせて表示されている。   Alternatively, as shown in FIG. 7B, the display data generation unit 104 may generate display data for displaying instantaneous values of the amplitude levels of the five types of signal components using a bar graph. In the example shown in FIG. 7B, five bars corresponding to five types of signal components are arranged in order along the horizontal axis. In the example shown in FIG. 7B, the length of the bar becomes longer along the vertical axis direction as the amplitude level increases. Further, in the example shown in FIG. 7B, in addition to the instantaneous value indicated by the bar, the peak value indicated by the line is also displayed.

或いは、図7(c)に示すように、表示データ生成部104は、振幅レベルが大きくなるほど半径が大きくなる円を用いて5種類の信号成分の夫々の振幅レベルの瞬時値を表示するための表示データを生成してもよい。図7(c)に示す例では、5種類の信号成分に対応する5つの円が並んでいる。   Alternatively, as shown in FIG. 7C, the display data generation unit 104 displays an instantaneous value of each of the five types of signal components using a circle whose radius increases as the amplitude level increases. Display data may be generated. In the example shown in FIG. 7C, five circles corresponding to five types of signal components are arranged.

或いは、図7(d)に示すように、表示データ生成部104は、数値(テキスト文字)を用いて5種類の信号成分の夫々の振幅レベルの瞬時値を表示するための表示データを生成してもよい。図7(d)に示す例では、5種類の信号成分に対応する5つの数値が並んでいる。   Alternatively, as shown in FIG. 7D, the display data generation unit 104 generates display data for displaying the instantaneous values of the amplitude levels of the five types of signal components using numerical values (text characters). May be. In the example shown in FIG. 7D, five numerical values corresponding to five types of signal components are arranged.

もちろん、表示データ生成部104は、図7(a)から図7(d)に示す表示形式とは異なる表示形式で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成してもよい。   Of course, the display data generation unit 104 generates display data for displaying the amplitude levels of the five types of signal components in a display format different from the display formats shown in FIGS. 7 (a) to 7 (d). May be.

尚、表示データ生成部104は、5種類の信号成分の夫々の振幅レベルを表示する際の表示形式を選択するユーザの指示に従って、当該ユーザが選択した表示形式で5種類の信号成分の夫々の振幅レベルを表示するための表示データを生成してもよい。   The display data generation unit 104 follows each of the five types of signal components in the display format selected by the user in accordance with a user instruction for selecting the display format when displaying the amplitude levels of the five types of signal components. Display data for displaying the amplitude level may be generated.

表示データ生成部104による表示データの生成と並行して、表示部105は、表示データ生成部104が生成した表示データに基づく表示処理を行う(ステップS105)。その結果、表示部105は、5種類の信号成分の夫々の振幅レベルを表示する。例えば、表示部105は、図7(a)から図7(d)に示す形式で5種類の信号成分の夫々の振幅レベルを表示する。   In parallel with the generation of display data by the display data generation unit 104, the display unit 105 performs a display process based on the display data generated by the display data generation unit 104 (step S105). As a result, the display unit 105 displays the amplitude levels of the five types of signal components. For example, the display unit 105 displays the amplitude levels of the five types of signal components in the format shown in FIGS. 7A to 7D.

以上説明したステップS101からステップS105までの動作が、信号処理装置(10)の動作が終了するまで繰り返し行われる(ステップS106)。このとき、ステップS101からステップS105までの動作が繰り返されるに当たって、ステップS101からステップS105までの各動作は、周期的若しくは非周期的に又は連続的に行われることが好ましい。つまり、ステップS101からステップS105までの各動作は、リアルタイムに又は動的に行われることが好ましい。   The operations from step S101 to step S105 described above are repeated until the operation of the signal processing device (10) is completed (step S106). At this time, when the operation from step S101 to step S105 is repeated, each operation from step S101 to step S105 is preferably performed periodically, aperiodically, or continuously. That is, each operation from step S101 to step S105 is preferably performed in real time or dynamically.

尚、ステップS101において、信号取得部101が周期的に呼吸音信号を取得している(例えば、所定のサンプリング周波数に応じて取得している)ことは上述したとおりである。但し、信号取得部101は、非周期的に若しくは連続的に呼吸音信号を取得してもよい。   In step S101, the signal acquisition unit 101 periodically acquires a respiratory sound signal (for example, according to a predetermined sampling frequency) as described above. However, the signal acquisition unit 101 may acquire a respiratory sound signal aperiodically or continuously.

同様に、ステップS102において、信号記憶部102が周期的に呼吸音信号を記憶している(つまり、信号取得部101が呼吸音信号を周期的に取得する都度、新たに取得した呼吸音信号を記憶している)ことは上述したとおりである。但し、信号記憶部102は、信号取得部101が呼吸音信号を非周期的に又は連続的に取得する都度、新たに取得した呼吸音信号を記憶してもよい。   Similarly, in step S102, the signal storage unit 102 periodically stores the respiratory sound signal (that is, each time the signal acquisition unit 101 periodically acquires the respiratory sound signal, the newly acquired respiratory sound signal is It is as described above. However, the signal storage unit 102 may store a newly acquired respiratory sound signal each time the signal acquisition unit 101 acquires the respiratory sound signal aperiodically or continuously.

ステップS103において、信号解析部103は、周期的に若しくは非周期的に又は連続的に解析処理を実行することが好ましい。つまり、信号解析部103の解析処理の結果は、周期的に若しくは非周期的に又は連続的に更新されることが好ましい。言い換えれば、信号解析部103は、リアルタイムに又は動的に解析処理を実行することが好ましい。つまり、信号解析部103の解析処理の結果は、リアルタイムに又は動的に更新されることが好ましい。   In step S103, the signal analysis unit 103 preferably executes the analysis process periodically, aperiodically, or continuously. That is, it is preferable that the analysis processing result of the signal analysis unit 103 is updated periodically, aperiodically, or continuously. In other words, the signal analysis unit 103 preferably executes the analysis process in real time or dynamically. That is, it is preferable that the analysis processing result of the signal analysis unit 103 is updated in real time or dynamically.

尚、信号取得部101が周期的に若しくは非周期的に又は連続的に呼吸音信号を取得していることを考慮すれば、信号解析部103は、信号取得部101が新たな呼吸音信号を取得する都度(言い換えれば、信号記憶部102が記憶している所定期間分の呼吸音信号の内容に変化が生ずる都度)、新たな解析処理を実行してもよい。この場合であっても、信号解析部103は、周期的に若しくは非周期的に又は連続的に解析処理を実行していると言える。   In consideration of the fact that the signal acquisition unit 101 acquires the respiratory sound signal periodically, aperiodically, or continuously, the signal analysis unit 103 causes the signal acquisition unit 101 to output a new respiratory sound signal. Each time it is acquired (in other words, every time a change occurs in the content of the respiratory sound signal for a predetermined period stored in the signal storage unit 102), a new analysis process may be executed. Even in this case, it can be said that the signal analysis unit 103 performs the analysis processing periodically, aperiodically, or continuously.

ステップS104において、表示データ生成部104は、周期的に若しくは非周期的に又は連続的に表示データを生成することが好ましい。つまり、表示データは、周期的に若しくは非周期的に又は連続的に更新されることが好ましい。言い換えれば、表示データ生成部104は、リアルタイムに又は動的に表示データを生成することが好ましい。つまり、表示データは、リアルタイムに又は動的に更新されることが好ましい。   In step S104, the display data generation unit 104 preferably generates display data periodically, aperiodically, or continuously. That is, the display data is preferably updated periodically, aperiodically, or continuously. In other words, the display data generation unit 104 preferably generates display data in real time or dynamically. That is, the display data is preferably updated in real time or dynamically.

尚、信号解析部103が周期的に若しくは非周期的に又は連続的に解析処理を実行していることを考慮すれば、表示データ生成部104は、信号解析部103が解析処理を実行する都度(言い換えれば、信号解析部103の解析結果が更新される都度)、新たな表示データを生成してもよい。この場合であっても、表示データ生成部104は、周期的に若しくは非周期的に又は連続的に表示データを生成していると言える。   In consideration of the fact that the signal analysis unit 103 executes the analysis processing periodically, aperiodically, or continuously, the display data generation unit 104 performs the analysis every time the signal analysis unit 103 executes the analysis processing. (In other words, every time the analysis result of the signal analysis unit 103 is updated), new display data may be generated. Even in this case, it can be said that the display data generation unit 104 generates display data periodically, aperiodically, or continuously.

ステップS104において、表示データ生成部104は、周期的に若しくは非周期的に又は連続的に表示データを表示部105に対して出力することが好ましい。言い換えれば、表示データ生成部104は、リアルタイムに又は動的に表示データを表示部105に対して出力することが好ましい。   In step S <b> 104, the display data generation unit 104 preferably outputs display data to the display unit 105 periodically, aperiodically, or continuously. In other words, the display data generation unit 104 preferably outputs display data to the display unit 105 in real time or dynamically.

ステップS105において、表示データ生成部104が周期的に若しくは非周期的に又は連続的に表示データを表示部105に対して出力していることを考慮すれば、表示部105は、周期的に若しくは非周期的に又は連続的に表示処理を行っていると言える。その結果、表示部105が表示する表示対象物(例えば、図7(a)から図7(c)に示す画像又は図7(d)に示す数値)もまた、周期的に若しくは非周期的に又は連続的に更新される。つまり、表示部105が表示する表示対象物の内容は、信号取得部101が取得する呼吸音信号に応じてリアルタイムに又は動的に更新される。   Considering that the display data generation unit 104 outputs the display data to the display unit 105 periodically, aperiodically, or continuously in step S105, the display unit 105 periodically or It can be said that display processing is performed aperiodically or continuously. As a result, the display object displayed by the display unit 105 (for example, the images shown in FIGS. 7A to 7C or the numerical values shown in FIG. 7D) is also periodically or non-periodically. Or continuously updated. That is, the content of the display object displayed by the display unit 105 is updated in real time or dynamically according to the respiratory sound signal acquired by the signal acquisition unit 101.

ここで、図8を参照しながら、ステップS101からステップS105における動作のタイミングの一例について説明する。図8に示すように、時刻t1の時点で解析処理を開始する信号解析部103は、時刻t1の時点での直近の1秒分の呼吸音信号#1に対して解析処理を実行する。更に、その解析処理の結果に基づいて、表示データ生成部104が表示データを生成する。信号解析部103による解析処理及び表示データ生成部104による表示データの生成処理に、処理時間T1(例えば、0.25秒)を要するとする。その結果、時刻t1から処理時間T1が経過した時点で、時刻t1の時点での直近の1秒分の呼吸音信号#1を構成する5種類の信号成分の夫々の振幅レベルの表示が開始される。   Here, an example of the operation timing from step S101 to step S105 will be described with reference to FIG. As illustrated in FIG. 8, the signal analysis unit 103 that starts the analysis process at the time t1 executes the analysis process on the respiratory sound signal # 1 for the latest one second at the time t1. Further, the display data generation unit 104 generates display data based on the result of the analysis processing. It is assumed that the processing time T1 (for example, 0.25 seconds) is required for the analysis processing by the signal analysis unit 103 and the display data generation processing by the display data generation unit 104. As a result, when the processing time T1 has elapsed from the time t1, the display of the amplitude levels of the five types of signal components constituting the respiratory sound signal # 1 for the latest one second at the time t1 is started. The

一方で、信号解析部103による解析処理及び表示データ生成部104による表示データの生成処理が周期的に行われることが好ましいことは上述したとおりである。従って、時刻t1の時点での直近の1秒分の呼吸音信号#1に対する上述の処理に続いて、時刻t2の時点での直近の1秒分の呼吸音信号#2に対する解析処理等が行われる。時刻t2の時点での直近の1秒分の呼吸音信号#2に対する解析処理等にもまた処理時間T1を要するものとする。その結果、時刻t2から処理時間T1が経過した時点で、時刻t2の時点での直近の1秒分の呼吸音信号#2を構成する5種類の信号成分の夫々の振幅レベルの表示が開始される。   On the other hand, as described above, the analysis processing by the signal analysis unit 103 and the display data generation processing by the display data generation unit 104 are preferably performed periodically. Therefore, following the above-described processing for the most recent 1 second breathing sound signal # 1 at time t1, analysis processing for the most recent 1 second breathing sound signal # 2 at time t2 is performed. Is called. It is assumed that the processing time T1 is also required for the analysis processing or the like for the respiratory sound signal # 2 for the last one second at the time t2. As a result, when the processing time T1 has elapsed from time t2, the display of the amplitude levels of the five types of signal components constituting the respiratory sound signal # 2 for the latest one second at time t2 is started. The

尚、5種類の信号成分の夫々の振幅レベルの表示の更新間隔T2は、少なくとも信号解析部103による解析処理及び表示データ生成部104による表示データの生成処理に要する処理時間T1以上に設定されることが好ましいことが、図8に示すタイミングチャートから分かる。図8に示す例では、5種類の信号成分の夫々の振幅レベルの表示の更新間隔T2は、処理時間T1に対して所定のマージンを追加した更新間隔T2(例えば、0.4秒)に設定されている。   The update interval T2 for displaying the amplitude levels of the five types of signal components is set to at least the processing time T1 required for the analysis processing by the signal analysis unit 103 and the display data generation processing by the display data generation unit 104. It can be seen from the timing chart shown in FIG. In the example shown in FIG. 8, the update interval T2 for displaying the amplitude levels of the five types of signal components is set to an update interval T2 (for example, 0.4 seconds) obtained by adding a predetermined margin to the processing time T1. Has been.

以上説明したように、本実施例の信号処理装置10は、呼吸音信号を構成する複数種類の信号成分の夫々の特性を同一の表示部105に表示することができる。その結果、ユーザは、どのような種類の信号成分が呼吸音信号に含まれているかを容易に見分けることができる。例えば、ユーザは、呼吸音信号に異常音に相当する信号成分が含まれているかを容易に見分けることができる。更には、ユーザは、呼吸音信号に異常音に相当する信号成分が含まれている場合には、当該異常音に相当する信号成分の振幅レベルがどの程度のレベルであるかを容易に見分けることができる。従って、ユーザは、どのような種類の信号成分が呼吸音信号に含まれているかを見分ける(或いは、聞き分ける)ための高度なスキルを持っていなくとも、呼吸音信号に基づいて生体の病態を診断することができる。つまり、ユーザは、信号成分の種類と病態との関連性についての知識を有していれば、呼吸音信号に基づいて生体の病態を診断することができる。   As described above, the signal processing apparatus 10 according to the present embodiment can display the characteristics of a plurality of types of signal components constituting the respiratory sound signal on the same display unit 105. As a result, the user can easily identify what kind of signal component is included in the respiratory sound signal. For example, the user can easily distinguish whether the respiratory sound signal includes a signal component corresponding to an abnormal sound. Furthermore, when the signal component corresponding to the abnormal sound is included in the respiratory sound signal, the user can easily identify the level of the amplitude level of the signal component corresponding to the abnormal sound. Can do. Therefore, even if the user does not have an advanced skill for distinguishing (or hearing) what kind of signal component is included in the respiratory sound signal, the user diagnoses the pathological condition of the living body based on the respiratory sound signal. can do. That is, if the user has knowledge about the relationship between the type of signal component and the pathological condition, the user can diagnose the pathological condition of the living body based on the respiratory sound signal.

加えて、呼吸音信号を構成する複数種類の信号成分の夫々の特性が同一の表示部105に表示されるがゆえに、複数種類の信号成分の夫々の特性の認識に対して、ユーザの主観やユーザのスキルの差が与える影響を小さくすることができる。つまり、呼吸音信号を構成する複数種類の信号成分の夫々の特性が客観的に表示されるがゆえに、複数のユーザの間で同一の呼吸音信号に対する認識が大きく異なってしまうという事態が生じにくくなる。   In addition, since the characteristics of the plurality of types of signal components constituting the respiratory sound signal are displayed on the same display unit 105, the user's subjectivity and the recognition of the characteristics of the plurality of types of signal components can be reduced. It is possible to reduce the influence of differences in user skills. That is, since the characteristics of each of a plurality of types of signal components constituting the respiratory sound signal are objectively displayed, it is unlikely that a situation in which recognition of the same respiratory sound signal greatly differs among a plurality of users. Become.

加えて、複数種類の信号成分の夫々の特性が同一の表示部105に表示されるがゆえに、複数種類の信号成分のうちの2つ以上の信号成分に起因した疾病が存在する場合であっても、ユーザの適切な診断を仰ぐことができる。つまり、信号処理装置10は、各信号成分のみに着目した自動的な診断を行うことなく、ユーザの適切な診断を補助することができる。但し、信号処理装置10は、複数種類の信号成分に着目した自動的な診断を行ってもよい。   In addition, since the characteristics of each of the plurality of types of signal components are displayed on the same display unit 105, there is a case where there is a disease caused by two or more of the plurality of types of signal components. In addition, an appropriate diagnosis of the user can be requested. That is, the signal processing apparatus 10 can assist the user with an appropriate diagnosis without performing an automatic diagnosis focusing on only each signal component. However, the signal processing apparatus 10 may perform an automatic diagnosis focusing on a plurality of types of signal components.

加えて、本実施例では、信号解析部103による解析処理や表示データ生成部104による表示データの生成及び出力が動的に行われてもよいことは上述したとおりである。従って、表示部105には、呼吸音信号を構成する複数種類の信号成分の夫々の特性が、呼吸音信号の時間的な変化(つまり、各信号成分の夫々の特性の時間的な変化)に同期して、動的に表示される。つまり、表示部105には、複数種類の信号成分の夫々の特性が、動的に更新されながら表示される。従って、ユーザは、複数種類の信号成分の夫々がどのようなタイミングでどのような特性を有しているかを容易に認識することができる。   In addition, as described above, in this embodiment, the analysis processing by the signal analysis unit 103 and the generation and output of display data by the display data generation unit 104 may be performed dynamically. Therefore, on the display unit 105, the characteristics of each of the plurality of types of signal components constituting the respiratory sound signal are changed over time in the respiratory sound signal (that is, the temporal changes in the respective characteristics of each signal component). Synchronously and dynamically displayed. That is, the display unit 105 displays the characteristics of each of the multiple types of signal components while being dynamically updated. Therefore, the user can easily recognize what characteristic each of the plurality of types of signal components has at what timing.

(3)変形例
続いて、図9から図15を参照しながら、変形例の信号処理装置について説明する。
(3) Modified Example Next, a signal processing apparatus of a modified example will be described with reference to FIGS.

(3−1)第1変形例
はじめに、図9を参照しながら、第1変形例の信号処理装置10aについて説明する。図9は、第1変形例の信号処理装置10aの構成を、当該信号処理装置10aを含む信号処理システム1aの構成と共に示すブロック図である。尚、本実施例の信号処理装置10が備える構成要素と同一の構成要素については、同一の参照符号を付することでその詳細な説明を照射する。
(3-1) First Modification First , a signal processing apparatus 10a according to a first modification will be described with reference to FIG. FIG. 9 is a block diagram showing the configuration of the signal processing device 10a of the first modified example together with the configuration of the signal processing system 1a including the signal processing device 10a. In addition, about the component same as the component with which the signal processing apparatus 10 of a present Example is provided, the detailed description is irradiated by attaching | subjecting the same referential mark.

図9に示すように、第1変形例の信号処理装置10aは、信号処理システム1aの一部の構成要件として、信号処理システム1aに含まれている。第1変形例の信号処理システム1aは、信号処理装置10aに加えて、信号取得部101aと、音声出力装置11aとを備えている。   As shown in FIG. 9, the signal processing device 10a of the first modified example is included in the signal processing system 1a as a part of the constituent elements of the signal processing system 1a. The signal processing system 1a according to the first modification includes a signal acquisition unit 101a and an audio output device 11a in addition to the signal processing device 10a.

第1変形例の信号取得部101aは、上述した信号取得部101と同様に、呼吸音信号を取得する。このため、信号取得部101aは、呼吸音を直接的に検出する呼吸音センサ1011aを備えている。   Similar to the signal acquisition unit 101 described above, the signal acquisition unit 101a of the first modification acquires a respiratory sound signal. For this reason, the signal acquisition unit 101a includes a respiratory sound sensor 1011a that directly detects a respiratory sound.

第1変形例では、信号取得部101aが信号処理装置10aの外部に配置されているがゆえに、信号取得部101aは、取得した呼吸音信号を信号処理装置10aに対して伝送するための信号伝送部1012aを備えている。信号伝送部1012aは、有線若しくは無線の通信回線又は有線の信号線を介して、呼吸音信号を信号処理装置10a(具体的には、信号処理装置10aが備える信号記憶部102)に対して伝送する。   In the first modification, since the signal acquisition unit 101a is arranged outside the signal processing device 10a, the signal acquisition unit 101a transmits the acquired respiratory sound signal to the signal processing device 10a. Part 1012a. The signal transmission unit 1012a transmits a respiratory sound signal to the signal processing device 10a (specifically, the signal storage unit 102 included in the signal processing device 10a) via a wired or wireless communication line or a wired signal line. To do.

加えて、信号伝送部1012aは、呼吸音信号を、信号処理装置10aに加えて、音声出力装置11aに対して伝送する。音声出力装置11aは、呼吸音信号を音声として出力する。従って、音声出力装置11aは、スピーカ等を含んでいてもよい。   In addition, the signal transmission unit 1012a transmits the respiratory sound signal to the audio output device 11a in addition to the signal processing device 10a. The sound output device 11a outputs the breathing sound signal as sound. Therefore, the audio output device 11a may include a speaker or the like.

第1変形例の信号処理装置10aは、上述した信号処理装置10と同様に、信号記憶部102と、信号解析部103と、表示データ生成部104と、表示部105とを備えている。第1変形例の信号処理装置10aは、上述した信号処理装置10と比較して、信号取得部101を備えていなくともよく且つ呼吸音特徴DB(DataBase:データベース)106aを更に備えていてもよいという点で異なっている。   Similar to the signal processing apparatus 10 described above, the signal processing apparatus 10 a according to the first modification includes a signal storage unit 102, a signal analysis unit 103, a display data generation unit 104, and a display unit 105. Compared with the signal processing apparatus 10 described above, the signal processing apparatus 10a of the first modification may not include the signal acquisition unit 101 and may further include a respiratory sound feature DB (DataBase: database) 106a. It is different in that.

呼吸音特徴DB106aは、信号解析部103が解析処理を行う際に参照するデータベースであって、呼吸音信号を複数種類の信号成分に分離するために必要な各種情報を格納している。従って、信号解析部103は、呼吸音特徴DB106aを参照することで、比較的容易に、呼吸音信号を複数種類の信号成分に分離することができる。   The breathing sound feature DB 106a is a database that is referred to when the signal analysis unit 103 performs analysis processing, and stores various types of information necessary for separating the breathing sound signal into a plurality of types of signal components. Therefore, the signal analysis unit 103 can separate the respiratory sound signal into a plurality of types of signal components relatively easily by referring to the respiratory sound feature DB 106a.

このような第1変形例の信号処理システム1aの一例として、診断の対象となっている生体に装着されている可搬型の信号取得部101aが、可搬型の信号処理装置10aと、ブルートゥース等の無線の通信回線を介して接続されている信号処理システム1aがあげられる。   As an example of such a signal processing system 1a of the first modified example, a portable signal acquisition unit 101a attached to a living body to be diagnosed includes a portable signal processing device 10a, Bluetooth, and the like. An example is a signal processing system 1a connected via a wireless communication line.

このような第1変形例の信号処理装置10aであっても、上述した本実施例の信号処理装置10が享受することができる各種効果と同様の効果を好適に享受することができる。   Even in the signal processing device 10a of the first modified example, it is possible to preferably enjoy the same effects as the various effects that can be enjoyed by the signal processing device 10 of the present embodiment described above.

(3−2)第2変形例
続いて、図10から図14を参照しながら、第2変形例の信号処理装置10bについて説明する。図10は、第2変形例の信号処理装置10bの構成を、当該信号処理装置10bを含む信号処理システム1bの構成と共に示すブロック図である。図11は、複数の呼吸音センサ1011aの装着態様の一例を示す平面図である。図12は、第2変形例における表示部105による表示態様の一例を示す平面図である。図13は、対象データ抽出部108bの動作を設定するために表示部105が表示する表示対象物(例えば、画像)の一例を示す平面図である。図14は、アラーム判定部109bの動作を設定するために表示部105が表示する表示対象物(例えば、画像)の一例を示す平面図である。尚、本実施例の信号処理装置10又は第1変形例の信号処理システム1aが備える構成要素と同一の構成要素については、同一の参照符号を付することでその詳細な説明を照射する。
(3-2) Second Modification Next, a signal processing apparatus 10b according to a second modification will be described with reference to FIGS. FIG. 10 is a block diagram showing the configuration of the signal processing device 10b of the second modified example together with the configuration of the signal processing system 1b including the signal processing device 10b. FIG. 11 is a plan view illustrating an example of a mounting mode of the plurality of respiratory sound sensors 1011a. FIG. 12 is a plan view showing an example of a display mode by the display unit 105 in the second modification. FIG. 13 is a plan view showing an example of a display object (for example, an image) displayed by the display unit 105 in order to set the operation of the target data extraction unit 108b. FIG. 14 is a plan view illustrating an example of a display object (for example, an image) displayed by the display unit 105 in order to set the operation of the alarm determination unit 109b. In addition, about the component same as the component with which the signal processing apparatus 10 of a present Example or the signal processing system 1a of a 1st modification is provided, the detailed description is irradiated by attaching | subjecting the same referential mark.

図10に示すように、第2変形例の信号処理装置10bは、信号処理システム1bの一部の構成要件として、信号処理システム1bに含まれている。第2変形例の信号処理システム1bは、信号処理装置10bに加えて、信号取得部101bと、信号解析装置12bと、入力装置13bと、アラーム出力装置14bとを備えている。   As shown in FIG. 10, the signal processing device 10b of the second modified example is included in the signal processing system 1b as a part of the configuration requirements of the signal processing system 1b. The signal processing system 1b according to the second modification includes a signal acquisition unit 101b, a signal analysis device 12b, an input device 13b, and an alarm output device 14b in addition to the signal processing device 10b.

第2変形例の信号取得部101bは、第1変形例の信号取得部101aと同様に、呼吸音信号を取得する。但し、第2変形例の信号取得部101bは、第1変形例の信号取得部101aと比較して、複数の呼吸音センサ1011aを備えているという点で異なっている。複数の呼吸音センサ1011bは、例えば、図11に示すように、生体の体表面の異なる箇所に装着される。従って、第2変形例では、信号取得部101bは、複数の呼吸音信号を取得する。   Similarly to the signal acquisition unit 101a of the first modification, the signal acquisition unit 101b of the second modification acquires a respiratory sound signal. However, the signal acquisition unit 101b of the second modification is different from the signal acquisition unit 101a of the first modification in that a plurality of respiratory sound sensors 1011a are provided. The plurality of respiratory sound sensors 1011b are attached to different places on the body surface of the living body, for example, as shown in FIG. Therefore, in the second modification, the signal acquisition unit 101b acquires a plurality of respiratory sound signals.

第2変形例においても、第1変形例と同様に、信号取得部101bは、取得した呼吸音信号を信号解析装置12bに対して伝送するための信号伝送部1012aを備えている。但し、第2変形例では、信号伝送部1012aは、有線若しくは無線の通信回線又は有線の信号線を介して、呼吸音信号を信号解析装置12b(具体的には、信号解析装置12bが備える信号記憶部102)に対して伝送する。   Also in the second modification, as in the first modification, the signal acquisition unit 101b includes a signal transmission unit 1012a for transmitting the acquired respiratory sound signal to the signal analysis device 12b. However, in the second modification, the signal transmission unit 1012a transmits a respiratory sound signal to the signal analysis device 12b (specifically, a signal included in the signal analysis device 12b) via a wired or wireless communication line or a wired signal line. The data is transmitted to the storage unit 102).

第2変形例の信号解析装置12bは、上述した第1変形例の信号処理装置10aと同様に、信号記憶部102と、信号解析部103と、呼吸音特徴DB106aとを備えている。つまり、第2変形例では、解析処理を行うための構成要素(つまり、信号記憶部102、信号解析部103及び呼吸音特徴DB106a)が、信号処理装置10bの外部に配置されるという点で、第1変形例とは異なる。尚、第2変形例では、上述したように信号取得部101bが複数の呼吸音信号を取得するがゆえに、信号解析部103は、複数の呼吸音信号の夫々に対して別個独立に、上述した解析処理を行う。   Similar to the signal processing apparatus 10a of the first modification described above, the signal analysis apparatus 12b of the second modification includes a signal storage unit 102, a signal analysis unit 103, and a respiratory sound feature DB 106a. That is, in the second modification, the components for performing the analysis process (that is, the signal storage unit 102, the signal analysis unit 103, and the respiratory sound feature DB 106a) are arranged outside the signal processing device 10b. Different from the first modification. In the second modification, since the signal acquisition unit 101b acquires a plurality of breathing sound signals as described above, the signal analysis unit 103 is described separately for each of the plurality of breathing sound signals. Perform analysis processing.

第2変形例では、信号解析装置12bが信号処理装置10bの外部に配置されているがゆえに、信号解析装置12bは、解析処理の結果を信号処理装置10bに対して伝送するための信号伝送部121bを備えている。信号伝送部121bは、有線若しくは無線の通信回線又は有線の信号線を介して、解析処理の結果を信号処理装置10b(具体的には、信号処理装置10bが備える解析結果記憶部107b)に対して伝送する。   In the second modification, since the signal analysis device 12b is arranged outside the signal processing device 10b, the signal analysis device 12b transmits a result of the analysis processing to the signal processing device 10b. 121b. The signal transmission unit 121b sends the analysis processing result to the signal processing device 10b (specifically, the analysis result storage unit 107b included in the signal processing device 10b) via a wired or wireless communication line or a wired signal line. And transmit.

第2変形例の信号処理装置10bは、上述した本実施例の信号処理装置10と同様に、表示データ生成部104と、表示部105とを備えている。第2変形例では、上述したように信号取得部101bが複数の呼吸音信号を取得するがゆえに、表示データ生成部104は、複数の呼吸音信号の夫々を対象として、複数種類の信号成分の夫々の特性を表示するための表示データを生成する。つまり、表示データ生成部104は、複数の呼吸音信号の夫々に対応する表示データを生成する。その結果、第2変形例では、図12に示すように、表示部105には、複数種類の信号成分の夫々の特性が、呼吸音信号毎に表示される。つまり、表示部105には、各呼吸音信号を構成する複数種類の信号成分の夫々の特性を示す表示群が、呼吸音信号の数だけ表示される。尚、図12に示す例では、各呼吸音信号を構成する複数種類の信号成分の夫々の特性が、各呼吸音信号が取得された生体の体表面の位置に対応付けられる態様で表示されている。   The signal processing device 10b according to the second modification includes a display data generation unit 104 and a display unit 105, similarly to the signal processing device 10 according to the present embodiment described above. In the second modification, since the signal acquisition unit 101b acquires a plurality of respiratory sound signals as described above, the display data generation unit 104 includes a plurality of types of signal components for each of the plurality of respiratory sound signals. Display data for displaying each characteristic is generated. That is, the display data generation unit 104 generates display data corresponding to each of the plurality of respiratory sound signals. As a result, in the second modified example, as shown in FIG. 12, the display unit 105 displays the characteristics of each of the plurality of types of signal components for each respiratory sound signal. That is, the display unit 105 displays a display group indicating the characteristics of each of a plurality of types of signal components constituting each respiratory sound signal by the number of respiratory sound signals. In the example shown in FIG. 12, the characteristics of the plurality of types of signal components constituting each respiratory sound signal are displayed in a manner associated with the position of the body surface of the living body from which each respiratory sound signal was acquired. Yes.

第2変形例の信号処理装置10aは、上述した本実施例の信号処理装置10と比較して、信号取得部101、信号記憶部102及び信号解析部103を備えていなくともよく、且つ、解析結果記憶部107b、対象データ抽出部108b及びアラーム判定部109bを更に備えていてもよいという点で異なっている。   The signal processing apparatus 10a according to the second modification may not include the signal acquisition unit 101, the signal storage unit 102, and the signal analysis unit 103 as compared with the signal processing apparatus 10 according to the present embodiment described above, and the analysis is performed. The difference is that a result storage unit 107b, a target data extraction unit 108b, and an alarm determination unit 109b may be further provided.

解析結果記憶部107bは、信号解析装置12bが実行した解析処理の結果を記憶する。このため、解析結果記憶部107bは、メモリ又はバッファを含んでいてもよい。   The analysis result storage unit 107b stores the result of the analysis process executed by the signal analysis device 12b. For this reason, the analysis result storage unit 107b may include a memory or a buffer.

対象データ抽出部108bは、解析結果記憶部107bが記憶している解析処理の結果から、表示データ生成部104が表示データを生成するために参照するべき対象データを抽出する。例えば、対象データ抽出部108bは、表示データ生成部104が表示データを生成するために参照するべき対象データとして、所定期間中の呼吸音信号に対する解析処理の結果を抽出してもよい。その結果、第3変形例では、表示データ生成部104は、対象データ抽出部108bが抽出した解析処理の結果に基づいて、表示データを生成してもよい。   The target data extraction unit 108b extracts target data that the display data generation unit 104 should refer to in order to generate display data from the analysis processing result stored in the analysis result storage unit 107b. For example, the target data extraction unit 108b may extract the result of analysis processing on the respiratory sound signal during a predetermined period as target data that the display data generation unit 104 should refer to in order to generate display data. As a result, in the third modification, the display data generation unit 104 may generate display data based on the result of the analysis process extracted by the target data extraction unit 108b.

対象データ抽出部108bは、キーボードやマウスやタッチパネル等の入力装置13bを用いて行われるユーザの操作内容に応じて、所定期間中の呼吸音信号に対する解析処理の結果を抽出してもよい。この場合、表示部105は、ユーザの操作を受け付けるために、例えば図13に示す表示対象物(例えば、画像)を表示してもよい。図13に示す例では、ユーザは、シークバーやタイミングバーを動かすことで、対象データ抽出部108bが解析処理の結果を抽出するべき期間を指定してもよい。   The target data extraction unit 108b may extract the result of the analysis processing on the respiratory sound signal during a predetermined period according to the content of the user's operation performed using the input device 13b such as a keyboard, mouse, or touch panel. In this case, the display unit 105 may display, for example, a display object (for example, an image) illustrated in FIG. 13 in order to accept a user operation. In the example illustrated in FIG. 13, the user may designate a period during which the target data extraction unit 108b should extract the analysis processing result by moving the seek bar and the timing bar.

アラーム判定部109bは、解析処理の結果に基づいて、異常音に相当する信号成分(例えば、類鼾音成分、笛声音成分、捻髪音成分及び水泡音成分)に関するアラームを出力するか否かを判定する。例えば、アラーム判定部109bは、解析処理の結果に基づいて、異常音に相当する信号成分の振幅レベルが所定閾値以上になるか否かを判定してもよい。アラーム判定部109bは、異常音に相当する信号成分の振幅レベルが所定閾値以上になる場合に、アラームを出力すると判定してもよい。   Whether or not the alarm determination unit 109b outputs an alarm related to a signal component (for example, an analog sound component, a whistle sound component, a haircut sound component, and a water bubble sound component) corresponding to the abnormal sound based on the result of the analysis process Determine. For example, the alarm determination unit 109b may determine whether the amplitude level of the signal component corresponding to the abnormal sound is equal to or higher than a predetermined threshold based on the result of the analysis process. The alarm determination unit 109b may determine to output an alarm when the amplitude level of the signal component corresponding to the abnormal sound is equal to or greater than a predetermined threshold.

アラーム判定部109bは、アラームを出力すると判定した場合には、スピーカ等のアラーム出力装置14bがアラーム音を出力するように、アラーム出力装置14bを制御してもよい。或いは、アラーム判定部109bは、アラームを出力すると判定した場合には、ディスプレイ装置等のアラーム出力装置14bがアラーム画面を表示するように、アラーム出力装置14bを制御してもよい。   When the alarm determination unit 109b determines to output an alarm, the alarm output device 14b may be controlled such that the alarm output device 14b such as a speaker outputs an alarm sound. Alternatively, when the alarm determination unit 109b determines to output an alarm, the alarm output device 14b may be controlled so that the alarm output device 14b such as a display device displays an alarm screen.

アラーム判定部109がアラームを出力するか否かを判定する際の判定基準は、キーボードやマウスやタッチパネル等の入力装置13bを用いて行われるユーザの操作内容に応じて設定されてもよい。この場合、表示部105は、ユーザの操作を受け付けるために、例えば図14に示す表示対象物(例えば、画像)を表示してもよい。図14に示す例では、ユーザは、テキストボックスに数値を入力することで、アラーム判定部109がアラームを出力するか否かを判定する際の判定基準の一つである「所定閾値」を設定してもよい。同様に、図14に示す例では、ユーザは、異常音に相当する信号成分に対応付けられたチェックボックスにチェックを入れることで、アラーム判定部109がアラームを出力するか否かを判定する際の判定基準の一つである「アラームを出力するべき信号成分の種類」を設定してもよい。   The determination criterion for determining whether or not the alarm determination unit 109 outputs an alarm may be set according to the user's operation performed using the input device 13b such as a keyboard, a mouse, or a touch panel. In this case, the display unit 105 may display, for example, a display object (for example, an image) illustrated in FIG. 14 in order to accept a user operation. In the example illustrated in FIG. 14, the user sets a “predetermined threshold” that is one of the determination criteria when the alarm determination unit 109 determines whether to output an alarm by inputting a numerical value in a text box. May be. Similarly, in the example illustrated in FIG. 14, when the user determines whether the alarm determination unit 109 outputs an alarm by checking a check box associated with a signal component corresponding to an abnormal sound. The “type of signal component for which an alarm should be output” may be set.

このような第2変形例の信号処理システム1bの一例として、(i)手術室やICU(Intensive Care Unit:集中治療室)に収容されている生体が装着している信号取得部101bが、当該生体が横たわっているベッド脇に配置されている信号解析装置12bと、有線の通信回線又は信号線を介して接続されていると共に、(ii)信号解析装置12bが、所望のソフトウェアを実行しているパソコン等によって実現される信号処理装置10bと有線の通信回線又は信号線を介して接続されている信号処理システム1bがあげられる。   As an example of such a signal processing system 1b of the second modified example, (i) a signal acquisition unit 101b attached to a living body housed in an operating room or an ICU (Intensive Care Unit) is It is connected to the signal analysis device 12b arranged beside the bed on which the living body lies, via a wired communication line or signal line, and (ii) the signal analysis device 12b executes desired software. And a signal processing system 1b connected to a signal processing device 10b realized by a personal computer or the like via a wired communication line or signal line.

このような第2変形例の信号処理装置10bであっても、上述した本実施例の信号処理装置10が享受することができる各種効果と同様の効果を好適に享受することができる。加えて、信号処理装置10bが信号解析装置12bを備えていなくともよいがゆえに、信号処理装置10bの負荷を低減できる。その結果、信号処理装置10bの低コスト化や小型化が実現される。   Even in the signal processing device 10b of the second modified example, it is possible to suitably enjoy the same effects as the various effects that can be enjoyed by the signal processing device 10 of the present embodiment described above. In addition, since the signal processing device 10b may not include the signal analysis device 12b, the load on the signal processing device 10b can be reduced. As a result, cost reduction and size reduction of the signal processing device 10b are realized.

(3−3)第3変形例
続いて、図15を参照しながら、第3変形例の信号処理装置10cについて説明する。図15は、第3変形例の信号処理装置10cの構成を、当該信号処理装置10cを含む信号処理システム1cの構成と共に示すブロック図である。尚、本実施例の信号処理装置10、第1変形例の信号処理システム1a又は第2変形例の信号処理システム1bが備える構成要素と同一の構成要素については、同一の参照符号を付することでその詳細な説明を照射する。
(3-3) Third Modification Next, a signal processing apparatus 10c of a third modification will be described with reference to FIG. FIG. 15 is a block diagram showing the configuration of the signal processing device 10c of the third modified example together with the configuration of the signal processing system 1c including the signal processing device 10c. Note that the same reference numerals are assigned to the same components as those included in the signal processing device 10 of the present embodiment, the signal processing system 1a of the first modification, or the signal processing system 1b of the second modification. I will irradiate with a detailed explanation.

図15に示すように、第3変形例の信号処理装置10cは、信号処理システム1cの一部の構成要件として、信号処理システム1cに含まれている。第3変形例の信号処理システム1cは、信号処理装置10cに加えて、信号取得部101aと、信号解析装置12bと、音声出力装置11aとを備えている。   As shown in FIG. 15, the signal processing device 10 c of the third modification is included in the signal processing system 1 c as a part of the configuration requirements of the signal processing system 1 c. The signal processing system 1c according to the third modification includes a signal acquisition unit 101a, a signal analysis device 12b, and an audio output device 11a in addition to the signal processing device 10c.

第3変形例の信号取得部101aは、上述した第1変形例の信号取得部101aと同一である。但し、第3変形例では、信号取得部101aは、有線若しくは無線の通信回線又は有線の信号線を介して呼吸音信号を信号処理装置10c(具体的には、信号処理装置10cが備える転送用バッファ110c)に対して伝送する。   The signal acquisition unit 101a of the third modification is the same as the signal acquisition unit 101a of the first modification described above. However, in the third modification, the signal acquisition unit 101a transmits the respiratory sound signal to the signal processing device 10c (specifically, for transfer included in the signal processing device 10c via a wired or wireless communication line or a wired signal line). Transmit to buffer 110c).

第3変形例の信号解析装置12bは、上述した第2変形例の信号解析装置12bと同一である。   The signal analysis device 12b of the third modification is the same as the signal analysis device 12b of the second modification described above.

第3変形例の信号処理装置10cは、上述した第2変形例の信号処理装置10bと同様に、解析結果記憶部107bと、表示データ生成部104と、表示部105とを備えている。第3変形例の信号処理装置10cは更に、転送用バッファ110c及び音同期調整部110cを更に備えていてもよい。   Similar to the signal processing device 10b of the second modification described above, the signal processing device 10c of the third modification includes an analysis result storage unit 107b, a display data generation unit 104, and a display unit 105. The signal processing apparatus 10c according to the third modification may further include a transfer buffer 110c and a sound synchronization adjustment unit 110c.

転送用バッファ110cは、信号取得部101aから伝送される呼吸音信号を一時的に記憶すると共に、記憶している呼吸音信号を信号解析装置12bに対して伝送する。このため、転送用バッファ110cは、メモリ又はバッファを含んでいてもよい。   The transfer buffer 110c temporarily stores the respiratory sound signal transmitted from the signal acquisition unit 101a, and transmits the stored respiratory sound signal to the signal analysis device 12b. For this reason, the transfer buffer 110c may include a memory or a buffer.

音同期調整部111cは、複数種類の信号成分の夫々の特性が表示部105に表示される時刻と呼吸音信号が音声出力部11aから出力される時刻とが同期するように、信号取得部101aが備える信号伝送部1012aが呼吸音信号を音声出力装置11aに対して出力するタイミングを調整する。その結果、信号処理装置10cが信号解析装置12bに対して呼吸音信号を伝送してから信号解析装置12bが信号処理装置10cに対して解析処理の結果を伝送するまでの間のタイムラグが相対的に大きい場合であっても、表示部105が表示する表示対象物の内容と音声出力部11aの出力音声とに大きなズレが生じてしまうことは殆ど又は全くなくなる。   The sound synchronization adjustment unit 111c is configured so that the time when the characteristics of each of the plurality of types of signal components are displayed on the display unit 105 and the time when the respiratory sound signal is output from the sound output unit 11a are synchronized. The signal transmission unit 1012a included in the device adjusts the timing at which the respiratory sound signal is output to the sound output device 11a. As a result, the time lag between when the signal processing device 10c transmits the respiratory sound signal to the signal analysis device 12b and when the signal analysis device 12b transmits the result of the analysis processing to the signal processing device 10c is relative. Even when the display output is large, there is little or no significant shift between the content of the display object displayed on the display unit 105 and the output sound of the sound output unit 11a.

このような第3変形例の信号処理システム1cの一例として、(i)診断の対象となっている生体に装着されている可搬型の信号取得部101aが、可搬型の信号処理装置10cと、ブルートゥース等の無線の通信回線を介して接続されていると共に、(ii)信号処理装置10cが、外部サーバとして構築される信号解析装置12bとインターネット等の通信回線を介して接続されている信号処理システム1cがあげられる。   As an example of such a signal processing system 1c of the third modified example, (i) a portable signal acquisition unit 101a attached to a living body to be diagnosed includes a portable signal processing device 10c, In addition to being connected via a wireless communication line such as Bluetooth, (ii) Signal processing in which the signal processing device 10c is connected to a signal analysis device 12b constructed as an external server via a communication line such as the Internet There is a system 1c.

このような第3変形例の信号処理装置10cであっても、上述した本実施例の信号処理装置10が享受することができる各種効果と同様の効果を好適に享受することができる。加えて、信号処理装置10cが信号解析装置12bを備えていなくともよいがゆえに、信号処理装置10cの負荷を低減できる。その結果、信号処理装置10cの低コスト化や小型化が実現される。   Even in the signal processing device 10c of the third modification, it is possible to preferably enjoy the same effects as the various effects that can be enjoyed by the signal processing device 10 of the present embodiment described above. In addition, since the signal processing device 10c does not have to include the signal analysis device 12b, the load on the signal processing device 10c can be reduced. As a result, cost reduction and size reduction of the signal processing device 10c are realized.

尚、上述した本実施例で採用した構成要素、上述した第1変形例で採用した構成要素、上述した第2変形例で採用した構成要素及び上述した第3変形例で採用した構成要素のうちの少なくとも一部が適宜組み合わせられてもよい。   Of the constituent elements employed in the above-described embodiment, the constituent elements employed in the above-described first modification, the constituent elements employed in the above-described second modification, and the constituent elements employed in the above-described third modification. May be combined as appropriate.

また、本発明は、請求の範囲及び明細書全体から読み取るこのできる発明の要旨又は思想に反しない範囲で適宜変更可能であり、そのような変更を伴う信号処理装置及び方法、並びにコンピュータプログラム及び記録媒体もまた本発明の技術思想に含まれる。   In addition, the present invention can be appropriately changed without departing from the gist or concept of the invention that can be read from the claims and the entire specification, and a signal processing apparatus and method, a computer program, and a recording accompanying such a change. The medium is also included in the technical idea of the present invention.

10、10a、10b、10c 信号処理装置
101、101a101b 信号取得部
1011a 呼吸音センサ
1012a 信号伝送部
102 信号記憶部
103 信号解析部
104 表示データ生成部
105 表示部
106a 呼吸音特徴DB
107b 解析結果記憶部
108b 対象データ抽出部
109b アラーム判定部
110c 転送用バッファ
111c 音同期調整部
11a 音声出力装置
12b 信号解析装置
121b 信号伝送部
13b 入力装置
14b アラーム出力装置
10, 10a, 10b, 10c Signal processing device 101, 101a 101b Signal acquisition unit 1011a Respiration sound sensor 1012a Signal transmission unit 102 Signal storage unit 103 Signal analysis unit 104 Display data generation unit 105 Display unit 106a Respiration sound feature DB
107b Analysis result storage unit 108b Target data extraction unit 109b Alarm determination unit 110c Transfer buffer 111c Sound synchronization adjustment unit 11a Audio output device 12b Signal analysis device 121b Signal transmission unit 13b Input device 14b Alarm output device

Claims (12)

生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成手段と、
前記表示データを、前記同一の表示装置に出力する出力手段と
を備えることを特徴とする信号処理装置。
Display data for displaying characteristics of each of the plurality of types of signal components on the same display device is generated based on the execution result of the analysis processing for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. Generating means;
An output means for outputting the display data to the same display device.
前記生成手段は、前記表示装置の観察者が、前記複数種類の信号成分の夫々の特性を同時に見ることができるような態様で前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための前記表示データを生成する
ことを特徴とする請求項1に記載の信号処理装置。
The generating means displays the respective characteristics of the plurality of types of signal components on the same display device in such a manner that an observer of the display device can simultaneously view the characteristics of the plurality of types of signal components. The signal processing apparatus according to claim 1, wherein the display data to be generated is generated.
前記生成手段は、前記解析処理の実行結果が変化する都度前記表示データが新たに生成されるように、前記表示データを動的に生成し、
前記出力手段は、前記生成手段が新たな前記表示データを生成する都度前記表示データが新たに出力されるように、前記表示データを動的に出力する
ことを特徴とする請求項1に記載の信号処理装置。
The generation means dynamically generates the display data so that the display data is newly generated each time the execution result of the analysis process changes,
The said output means outputs the said display data dynamically so that the said display data is newly output whenever the said production | generation means produces | generates the said new display data. Signal processing device.
前記生成手段は、周期的に若しくは非周期的に又は連続的に前記表示データが生成されるように、前記表示データを動的に生成し、
前記出力手段は、前記生成手段が新たな前記表示データを生成する都度前記表示データが出力されるように、前記表示データを動的に出力する
ことを特徴とする請求項1に記載の信号処理装置。
The generation unit dynamically generates the display data so that the display data is generated periodically or aperiodically or continuously.
The signal processing according to claim 1, wherein the output unit dynamically outputs the display data so that the display data is output each time the generation unit generates new display data. apparatus.
当該信号処理装置に入力される前記生体音信号に対して前記解析処理を実行する解析手段を更に備えており、
前記生成手段は、前記解析手段が実行する前記解析処理の結果に基づいて、前記表示データを生成する
ことを特徴とする請求項1に記載の信号処理装置。
An analysis means for executing the analysis processing on the biological sound signal input to the signal processing device;
The signal processing apparatus according to claim 1, wherein the generation unit generates the display data based on a result of the analysis process executed by the analysis unit.
前記解析手段は、新たな前記生体音信号が入力される都度前記解析処理が新たに実行されるように、前記解析処理を動的に実行する
ことを特徴とする請求項5に記載の信号処理装置。
The signal processing according to claim 5, wherein the analysis unit dynamically executes the analysis process so that the analysis process is newly executed each time a new body sound signal is input. apparatus.
前記解析手段は、周期的に若しくは非周期的に又は連続的に前記解析処理が実行されるように、前記解析処理を動的に実行する
ことを特徴とする請求項5に記載の信号処理装置。
The signal processing apparatus according to claim 5, wherein the analysis unit dynamically executes the analysis process so that the analysis process is executed periodically, aperiodically, or continuously. .
前記解析処理は、前記生体音信号を、正常音に相当する信号成分と前記正常音とは特性が異なる少なくとも一つの異常音に相当する少なくとも一つの信号成分とに分離する解析処理を含む
ことを特徴とする請求項1に記載の信号処理装置。
The analysis process includes an analysis process for separating the biological sound signal into a signal component corresponding to a normal sound and at least one signal component corresponding to at least one abnormal sound having different characteristics from the normal sound. The signal processing device according to claim 1, wherein:
前記解析処理は、前記生体音信号を、正常音とは特性が異なると共に互いに区別可能な複数種類の異常音に相当する複数種類の信号成分に分離する解析処理を含む
ことを特徴とする請求項1に記載の信号処理装置。
The analysis process includes an analysis process for separating the biological sound signal into a plurality of types of signal components corresponding to a plurality of types of abnormal sounds that have different characteristics from normal sounds and are distinguishable from each other. 2. The signal processing apparatus according to 1.
生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、
前記表示データを、前記同一の表示装置に出力する出力工程と
を備えることを特徴とする生体音処理方法。
Display data for displaying characteristics of each of the plurality of types of signal components on the same display device is generated based on the execution result of the analysis processing for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. Generation process;
An output step of outputting the display data to the same display device.
コンピュータによって実行されるコンピュータプログラムであって、
生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、
前記表示データを、前記同一の表示装置に出力する出力工程と
を前記コンピュータに実行させることを特徴とするコンピュータプログラム。
A computer program executed by a computer,
Display data for displaying characteristics of each of the plurality of types of signal components on the same display device is generated based on the execution result of the analysis processing for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. Generation process;
A computer program causing the computer to execute an output step of outputting the display data to the same display device.
コンピュータによって実行されるコンピュータプログラムが記録されている記録媒体であって、
生体音信号を互いに区別可能な複数種類の信号成分に分離する解析処理の実行結果に基づいて、前記複数種類の信号成分の夫々の特性を同一の表示装置に表示するための表示データを生成する生成工程と、
前記表示データを、前記同一の表示装置に出力する出力工程と
を前記コンピュータに実行させるコンピュータプログラムが記録されていることを特徴とする記録媒体。
A recording medium on which a computer program executed by a computer is recorded,
Display data for displaying characteristics of each of the plurality of types of signal components on the same display device is generated based on the execution result of the analysis processing for separating the biological sound signal into a plurality of types of signal components that can be distinguished from each other. Generation process;
A recording medium in which a computer program for causing the computer to execute an output step of outputting the display data to the same display device is recorded.
JP2015544636A 2013-10-28 2013-10-28 Signal processing apparatus and method, computer program, and recording medium Pending JPWO2015063834A1 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2013/079127 WO2015063834A1 (en) 2013-10-28 2013-10-28 Signal-processing device and method, computer program, and storage medium

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017205315A Division JP6434107B2 (en) 2017-10-24 2017-10-24 Signal processing apparatus and method, computer program, and recording medium

Publications (1)

Publication Number Publication Date
JPWO2015063834A1 true JPWO2015063834A1 (en) 2017-03-09

Family

ID=53003485

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015544636A Pending JPWO2015063834A1 (en) 2013-10-28 2013-10-28 Signal processing apparatus and method, computer program, and recording medium

Country Status (2)

Country Link
JP (1) JPWO2015063834A1 (en)
WO (1) WO2015063834A1 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB201519985D0 (en) * 2015-11-12 2015-12-30 Respinor As Ultrasonic method and apparatus for respiration monitoring
JP6828585B2 (en) * 2016-11-30 2021-02-10 株式会社リコー Information display system, information display program, and information display method
US11439320B2 (en) * 2016-12-20 2022-09-13 Air Water Biodesign Inc. Biological-sound analysis device, biological-sound analysis method, program, and storage medium
JP6396981B2 (en) * 2016-12-27 2018-09-26 Ami株式会社 Biological monitoring device
JP6952500B2 (en) 2017-05-31 2021-10-20 日本光電工業株式会社 Bio-information processing device
JP6994753B2 (en) * 2017-08-24 2022-01-14 国立大学法人千葉大学 Auscultation training system
JP7290241B2 (en) * 2019-01-28 2023-06-13 エア・ウォーター・バイオデザイン株式会社 Breath sound detector and program

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004357758A (en) * 2003-06-02 2004-12-24 Konica Minolta Medical & Graphic Inc Biological sound detection data processor, biological sound detection data processing method and biological sound detection data processing program
JP2009520522A (en) * 2005-12-23 2009-05-28 ザ・ユニバーシティ・オブ・クイーンズランド Making patients' consciousness level audible
JP2013034670A (en) * 2011-08-08 2013-02-21 Jvc Kenwood Corp Cardiac sound information processor, cardiac sound information processing method, and cardiac sound information processing program

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5710168B2 (en) * 2010-07-26 2015-04-30 シャープ株式会社 Biometric apparatus, biometric method, biometric apparatus control program, and recording medium recording the control program
US20120209084A1 (en) * 2011-01-21 2012-08-16 Masimo Corporation Respiratory event alert system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004357758A (en) * 2003-06-02 2004-12-24 Konica Minolta Medical & Graphic Inc Biological sound detection data processor, biological sound detection data processing method and biological sound detection data processing program
JP2009520522A (en) * 2005-12-23 2009-05-28 ザ・ユニバーシティ・オブ・クイーンズランド Making patients' consciousness level audible
JP2013034670A (en) * 2011-08-08 2013-02-21 Jvc Kenwood Corp Cardiac sound information processor, cardiac sound information processing method, and cardiac sound information processing program

Also Published As

Publication number Publication date
WO2015063834A1 (en) 2015-05-07

Similar Documents

Publication Publication Date Title
WO2015063834A1 (en) Signal-processing device and method, computer program, and storage medium
JP6154372B2 (en) Non-contact sleep disorder screening system
US20210145306A1 (en) Managing respiratory conditions based on sounds of the respiratory system
JP6049889B2 (en) Swallowing estimation device
US20170325779A1 (en) Acoustic monitoring system, monitoring method, and monitoring computer program
WO2013089073A1 (en) Information analysis device, electronic stethoscope, information analysis method, measurement system, control program, and recording medium
JP2013123494A (en) Information analyzer, information analysis method, control program, and recording medium
TW201327460A (en) Apparatus and method for voice assisted medical diagnosis
EP2471461A1 (en) An integrated monitoring device arranged for recording and processing body sounds from multiple sensors
US20050033144A1 (en) Biological-sound data processing system, program, and recording medium
Rahman et al. Towards reliable data collection and annotation to extract pulmonary digital biomarkers using mobile sensors
JP2013052049A (en) Synchrony detector in interpersonal communication
US20240057964A1 (en) Deriving insights into health through analysis of audio data generated by digital stethoscopes
KR20150001009A (en) Mobile terminal diagnosis system using portable wireless digital electronic stethoscope
JP2005066044A (en) Respiratory sound data processor and program
Proniewska et al. Identification of human vital functions directly relevant to the respiratory system based on the cardiac and acoustic parameters and random forest
JP2009233103A (en) Cough detector and its program
JP6434107B2 (en) Signal processing apparatus and method, computer program, and recording medium
JP6298273B2 (en) Signal processing apparatus and method, computer program, and recording medium
TWI626037B (en) Virtual reality system for psychological clinical application
Toles et al. Acoustic and physiologic correlates of vocal effort in individuals with and without primary muscle tension dysphonia
JP6742620B2 (en) Swallowing diagnostic device and program
JP6656789B2 (en) Signal processing apparatus and method
Monika et al. Embedded Stethoscope for Real Time Diagnosis of Cardiovascular Diseases
JP2019141597A (en) Signal processing device and method, computer program, and recording medium

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170214

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170412

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20170725