JP6822036B2 - Diagnostic equipment, diagnostic systems and programs - Google Patents

Diagnostic equipment, diagnostic systems and programs Download PDF

Info

Publication number
JP6822036B2
JP6822036B2 JP2016184068A JP2016184068A JP6822036B2 JP 6822036 B2 JP6822036 B2 JP 6822036B2 JP 2016184068 A JP2016184068 A JP 2016184068A JP 2016184068 A JP2016184068 A JP 2016184068A JP 6822036 B2 JP6822036 B2 JP 6822036B2
Authority
JP
Japan
Prior art keywords
frequency
analysis result
sound
frequency analysis
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016184068A
Other languages
Japanese (ja)
Other versions
JP2018048886A (en
Inventor
伊藤 篤
篤 伊藤
勉 宇高
勉 宇高
河野 功幸
功幸 河野
小笠原 文彦
文彦 小笠原
智之 三ツ橋
智之 三ツ橋
慎也 宮森
慎也 宮森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2016184068A priority Critical patent/JP6822036B2/en
Publication of JP2018048886A publication Critical patent/JP2018048886A/en
Application granted granted Critical
Publication of JP6822036B2 publication Critical patent/JP6822036B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)

Description

本発明は、診断装置、診断システムおよびプログラムに関する。 The present invention relates to diagnostic devices, diagnostic systems and programs.

特許文献1には、画像形成装置の正常時の動作音を記憶しているRAMまたはROMと、画像形成装置から発生する動作音を検知するマイクロフォンとを有し、RAMまたはROMに記憶されている第1の音情報と、マイクロフォンにより検知された第2の音情報と、画像形成装置の動作情報とに基づいて、画像形成装置の異常箇所を特定するようなシステムが開示されている。 Patent Document 1 includes a RAM or ROM that stores a normal operating sound of an image forming apparatus, and a microphone that detects an operating sound generated by the image forming apparatus, and is stored in the RAM or ROM. A system for identifying an abnormal portion of an image forming apparatus based on a first sound information, a second sound information detected by a microphone, and an operation information of the image forming apparatus is disclosed.

特許文献2には、印刷用紙上に画像を形成する画像形成部と前記印刷用紙を搬送する搬送部とを有する画像処理装置において、装置内部の音を電気信号に変換する音変換部と、この音変換部が変換した電気信号を解析して周波数ごとの成分を求める音解析部と、この音解析部が求めた周波数ごとの成分を出力する出力部とを備えた画像処理装置が開示されている。 Patent Document 2 describes a sound conversion unit that converts sound inside the device into an electric signal in an image processing device having an image forming unit that forms an image on the printing paper and a conveying unit that conveys the printing paper. An image processing device including a sound analysis unit that analyzes an electric signal converted by a sound conversion unit to obtain a component for each frequency and an output unit that outputs a component for each frequency obtained by the sound analysis unit is disclosed. There is.

特開2007−079263号公報JP-A-2007-079263 特開2008−290288号公報Japanese Unexamined Patent Publication No. 2008-290288

ある装置において異音(異常音)が発生した場合、解析対象の装置において発生した音声を入力して音声信号を取得し、取得した音声信号と、解析対象の装置と同等の装置において過去に発生した異音の音声信号とを比較して、その異音の原因を解明しようとする場合がある。 When an abnormal sound (abnormal sound) occurs in a certain device, the sound generated in the device to be analyzed is input to acquire an audio signal, and the acquired audio signal and the device equivalent to the device to be analyzed have generated in the past. In some cases, it is attempted to clarify the cause of the abnormal noise by comparing it with the audio signal of the abnormal noise.

このような場合に、取得した音情報の時間周波数解析を行うことにより、周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形を得て、この周波数スペクトル波形における異音が含まれる領域を再度周波数解析することにより周波数スペクトル波形に含まれる異音の周期および周波数の情報を得る。そして、得られた異音の周期および周波数の情報に基づいて、過去の発生した異音の周波数スペクトル波形の中から今回取得した音情報の周波数スペクトル波形とを比較することにより異音の原因の解明を行っている。 In such a case, by performing time-frequency analysis of the acquired sound information, a frequency spectrum waveform representing the time change of the signal intensity distribution for each frequency can be obtained, and a region including an abnormal sound in this frequency spectrum waveform can be obtained. By frequency analysis again, information on the period and frequency of abnormal sounds included in the frequency spectrum waveform can be obtained. Then, based on the obtained information on the period and frequency of the abnormal sound, the frequency spectrum waveform of the sound information acquired this time is compared with the frequency spectrum waveform of the abnormal sound generated in the past to cause the abnormal sound. We are clarifying.

しかし、異音が周期音の場合が多いため、経験の乏しいユーザにとっては、周波数スペクトル波形におけるどの領域に異音が含まれるかを判別することが難しい。 However, since the abnormal sound is often a periodic sound, it is difficult for an inexperienced user to determine which region of the frequency spectrum waveform contains the abnormal sound.

本発明の目的は、経験の乏しい利用者であっても、表示された周波数解析結果波形の中から、異音であると思われる周波数および周期を容易に選択することが可能な診断装置、診断システムおよびプログラムを提供することである。 An object of the present invention is a diagnostic device and diagnosis that enables even an inexperienced user to easily select a frequency and a period that are considered to be abnormal sounds from the displayed frequency analysis result waveforms. To provide systems and programs.

[診断装置]
請求項1に係る本発明は、発生した音を入力して音情報を取得する取得手段と、
前記音情報の時間周波数解析を行い、周波数毎の強度分布の時間変化を表す周波数スペクトル波形を生成し、生成された周波数スペクトル波形に対し時間軸方向に周波数解析を行って前記音情報に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する解析手段と、
前記周波数解析結果波形を表示する表示手段と、
表示された前記周波数解析結果波形から異音の周波数成分の可能性を含む領域の指定を受付ける受付手段と、
前記受付手段により受付けられた指定領域に含まれる前記周波数成分の周期および周波数の情報を抽出する抽出手段とを備えた診断装置である。
[Diagnostic device]
The present invention according to claim 1 comprises an acquisition means for inputting generated sound and acquiring sound information.
The time- frequency analysis of the sound information is performed to generate a frequency spectrum waveform representing the time change of the intensity distribution for each frequency, and the generated frequency spectrum waveform is frequency-analyzed in the time axis direction and included in the sound information. An analysis means for generating a frequency analysis result waveform showing information on the period and frequency of sound, and
A display means for displaying the frequency analysis result waveform and
A reception means that accepts the designation of the region including the possibility of the frequency component of abnormal noise from the displayed frequency analysis result waveform, and
It is a diagnostic apparatus provided with an extraction means for extracting information on the period and frequency of the frequency component included in the designated area received by the reception means.

請求項2に係る本発明は、前記表示手段が、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを並べて表示する請求項1記載の診断装置である。 In the present invention according to claim 2, the display means performs frequency analysis of the past frequency analysis result waveform corresponding to the sound period and frequency information extracted by the extraction means and the acquired sound information. The diagnostic apparatus according to claim 1, wherein the frequency analysis result waveform obtained is displayed side by side.

請求項3に係る本発明は、前記表示手段が、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを、一方の波形を透過させた状態で重ねて表示する請求項1記載の診断装置である。 According to the third aspect of the present invention, the display means performs frequency analysis of the past frequency analysis result waveform corresponding to the sound cycle and frequency information extracted by the extraction means and the acquired sound information. The diagnostic device according to claim 1, wherein the frequency analysis result waveform obtained above is superimposed and displayed in a state where one of the waveforms is transmitted.

請求項4に係る本発明は、前記表示手段が、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを、予め設定された間隔で一方の波形を透過させた状態で重ねて表示する請求項1記載の診断装置である。 According to the fourth aspect of the present invention, the display means performs frequency analysis of the past frequency analysis result waveform corresponding to the sound cycle and frequency information extracted by the extraction means and the acquired sound information. The diagnostic device according to claim 1, wherein the frequency analysis result waveform obtained above is superimposed and displayed in a state where one waveform is transmitted at a preset interval.

請求項5に係る本発明は、前記表示手段が、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを、使用者の操作に基づいて一方の波形を透過させた状態で重ねて表示する請求項1記載の診断装置である。 According to the fifth aspect of the present invention, the display means performs frequency analysis of the past frequency analysis result waveform corresponding to the sound cycle and frequency information extracted by the extraction means and the acquired sound information. The diagnostic device according to claim 1, wherein the frequency analysis result waveform obtained above is superimposed and displayed in a state in which one of the waveforms is transmitted based on the operation of the user.

請求項6に係る本発明は、前記表示手段が、前記取得された音情報の周波数解析を行って得た周波数解析結果波形と周期および周波数が類似する過去の周波数解析結果波形を優先的に表示する請求項2又は3記載の診断装置である。 In the present invention according to claim 6, the display means preferentially displays a past frequency analysis result waveform having a period and a frequency similar to the frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. The diagnostic device according to claim 2 or 3.

請求項7に係る本発明は、前記表示手段が、前記取得された音情報の周波数解析を行って得た周波数解析結果波形と周期および周波数が類似する過去の周波数解析結果波形を、他の周波数解析結果波形とは色を変えて表示する請求項2又は3記載の診断装置である。 In the present invention according to claim 7, the display means uses a past frequency analysis result waveform having a period and frequency similar to that obtained by performing frequency analysis of the acquired sound information at another frequency. The diagnostic device according to claim 2 or 3, wherein the analysis result waveform is displayed in different colors.

請求項8に係る本発明は、前記表示手段が、前記受付手段により複数の領域の指定が受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を順次切り替えて表示する請求項1記載の診断装置である。 According to the eighth aspect of the present invention, when the display means receives the designation of a plurality of regions by the reception means, the frequency analysis result for each of the period and frequency information of the frequency components included in each received region. The diagnostic device according to claim 1, wherein waveforms are sequentially switched and displayed.

請求項9に係る本発明は、前記表示手段が、前記受付手段により複数の領域の指定が受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を重ねた状態で表示する請求項1記載の診断装置である。 According to the ninth aspect of the present invention, when the display means receives the designation of a plurality of regions by the reception means, the frequency analysis result for each of the period and frequency information of the frequency components included in each of the received regions. The diagnostic device according to claim 1, wherein the waveforms are displayed in a superposed state.

請求項10に係る本発明は、前記表示手段が、前記受付手段により複数の領域の指定が順次受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を順次重ねた状態で表示する請求項1記載の診断装置である。 According to the tenth aspect of the present invention, when the display means sequentially receives the designation of a plurality of regions by the reception means, the frequency analysis for each of the period and frequency information of the frequency components included in each of the received regions. The diagnostic device according to claim 1, wherein the result waveforms are sequentially displayed in a superposed state.

請求項11に係る本発明は、前記表示手段が、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を、それぞれ異なる表示方法により重ねて表示する請求項10記載の診断装置である。 According to claim 11, the display means superimposes and displays frequency analysis result waveforms for each frequency component period and frequency information included in each received region by different display methods. The diagnostic device described.

請求項12に係る本発明は、外部装置との間で通信を行う通信手段と、
前記抽出手段により抽出された音の周期および周波数の情報を前記通信手段を介して外部装置に送信する送信手段と、
前記解析手段により生成された周波数解析結果波形に対応する過去の周波数解析結果波形を前記通信手段を介して外部装置から受信する受信手段とをさらに備え、
前記表示手段は、前記解析手段により生成された周波数解析結果波形と、前記受信手段により受信された過去の周波数解析結果波形とを表示する請求項1から11のいずれか1項記載の診断装置である。
The present invention according to claim 12 is a communication means for communicating with an external device and a communication means.
A transmission means for transmitting sound cycle and frequency information extracted by the extraction means to an external device via the communication means, and a transmission means.
Further provided with a receiving means for receiving a past frequency analysis result waveform corresponding to the frequency analysis result waveform generated by the analysis means from an external device via the communication means.
The diagnostic apparatus according to any one of claims 1 to 11, wherein the display means displays the frequency analysis result waveform generated by the analysis means and the past frequency analysis result waveform received by the receiving means. is there.

請求項13に係る本発明は、前記表示手段が、利用者の操作に基づいて、取得された音情報の周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形と、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数スペクトル波形とを並べて表示する請求項1から12のいずれか記載の診断装置である。 According to the thirteenth aspect of the present invention, the display means extracts a frequency spectrum waveform representing a time change of the signal intensity distribution for each frequency of the acquired sound information based on the operation of the user, and the extraction means. The diagnostic device according to any one of claims 1 to 12, wherein the past frequency spectrum waveforms corresponding to the information on the period and frequency of the sound are displayed side by side.

[診断システム]
請求項14に係る本発明は、発生した音を入力して音情報を取得する取得手段と、前記音情報の時間周波数解析を行い、周波数毎の強度分布の時間変化を表す周波数スペクトル波形を生成し、生成された周波数スペクトル波形に対し時間軸方向に周波数解析を行って前記音情報に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する解析手段と、前記周波数解析結果波形を表示する表示手段と、表示された前記周波数解析結果波形から異音の周波数成分の可能性を含む領域の指定を受付ける受付手段と、前記受付手段により受付けられた指定領域に含まれる前記周波数成分の周期および周波数の情報を抽出する抽出手段と、外部装置との間で通信を行う通信手段と、前記抽出手段により抽出された音の周期および周波数の情報を前記通信手段を介して外部装置に送信する第1の送信手段と、前記解析手段により生成された周波数解析結果波形に対応する過去の周波数解析結果波形を前記通信手段を介して外部装置から受信する受信手段とを備えた診断装置と、
異音の音情報の周波数解析を行って得た複数の過去の周波数解析結果波形を格納する格納手段と、前記診断装置から音の周期および周波数の情報を受信した場合、前記格納手段に格納されている前記複数の過去の周波数解析結果波形の中から、受信した音の周期および周波数の情報に合致したものを選択して前記診断装置に送信する第2の送信手段とを備えたサーバ装置とを備えた診断システムである。
[Diagnostic system]
The present invention according to claim 14 performs a time- frequency analysis of the sound information with an acquisition means for inputting generated sound to acquire sound information, and generates a frequency spectrum waveform representing a time change of an intensity distribution for each frequency. Then, the generated frequency spectrum waveform is frequency-analyzed in the time axis direction to generate a frequency analysis result waveform indicating the frequency and frequency information of the sound included in the sound information, and the frequency analysis result waveform. The display means for displaying, the reception means for accepting the designation of the region including the possibility of the frequency component of the abnormal sound from the displayed frequency analysis result waveform, and the frequency component included in the designated region received by the reception means. The extraction means for extracting the period and frequency information of the above, the communication means for communicating with the external device, and the sound cycle and frequency information extracted by the extraction means to the external device via the communication means. A diagnostic device including a first transmitting means for transmitting and a receiving means for receiving a past frequency analysis result waveform corresponding to the frequency analysis result waveform generated by the analysis means from an external device via the communication means. ,
A storage means for storing a plurality of past frequency analysis result waveforms obtained by frequency analysis of abnormal sound information, and when sound cycle and frequency information is received from the diagnostic device, it is stored in the storage means. A server device including a second transmission means that selects a sound that matches the received sound cycle and frequency information from the plurality of past frequency analysis result waveforms and transmits the sound to the diagnostic device. It is a diagnostic system equipped with.

[プログラム]
請求項15に係る本発明は、発生した音を入力して音情報を取得する取得ステップと、
前記音情報の時間周波数解析を行い、周波数毎の強度分布の時間変化を表す周波数スペクトル波形を生成し、生成された周波数スペクトル波形に対し時間軸方向に周波数解析を行って前記音情報に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する解析ステップと、
前記周波数解析結果波形を表示する表示ステップと、
表示された前記周波数解析結果波形から異音の周波数成分の可能性を含む領域の指定を受付ける受付ステップと、
前記受付ステップにおいて受付けられた指定領域に含まれる前記周波数成分の周期および周波数の情報を抽出する抽出ステップとをコンピュータに実行させるためのプログラムである。
[program]
The present invention according to claim 15 includes an acquisition step of inputting generated sound and acquiring sound information.
The time- frequency analysis of the sound information is performed to generate a frequency spectrum waveform representing the time change of the intensity distribution for each frequency, and the generated frequency spectrum waveform is frequency-analyzed in the time axis direction and included in the sound information. An analysis step to generate a frequency analysis result waveform showing information on the period and frequency of sound, and
A display step for displaying the frequency analysis result waveform and
A reception step that accepts the designation of the region including the possibility of the frequency component of abnormal noise from the displayed frequency analysis result waveform, and
This is a program for causing a computer to perform an extraction step of extracting information on the period and frequency of the frequency component included in the designated area received in the reception step.

請求項1、2に係る本発明によれば、周波数スペクトル波形において異音であると思われる領域を指定する場合と比較して、経験の乏しい利用者であっても、表示された周波数解析結果波形の中から、異音であると思われる周波数および周期を容易に選択することが可能な診断装置を提供することができる。 According to the first and second aspects of the present invention, the displayed frequency analysis result is displayed even for an inexperienced user as compared with the case where a region considered to be an abnormal sound is specified in the frequency spectrum waveform. It is possible to provide a diagnostic device capable of easily selecting a frequency and a period that are considered to be abnormal sounds from the waveform.

請求項3〜5に係る本発明によれば、2つの周波数解析結果波形を比較する場合に、それぞれの波形を別々に並べて表示する場合と比較して、解析結果の比較を容易にすることが可能な診断装置を提供することができる。 According to the present invention according to claims 3 to 5, when comparing two frequency analysis result waveforms, it is possible to facilitate the comparison of the analysis results as compared with the case where the respective waveforms are displayed side by side separately. A possible diagnostic device can be provided.

請求項6、7に係る本発明によれば、利用者は、取得された音情報の周波数解析を行って得た周波数解析結果波形と周期および周波数が類似する周波数解析結果波形を、取得された音情報の周波数解析を行って得た周波数解析結果波形と優先して比較することが可能な診断装置を提供することができる。 According to the present invention according to claims 6 and 7, the user has acquired a frequency analysis result waveform having a period and frequency similar to the frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. It is possible to provide a diagnostic device capable of preferentially comparing with the frequency analysis result waveform obtained by performing frequency analysis of sound information.

請求項8〜10に係る本発明によれば、異音であると思われる領域が複数ある場合でも、各領域に含まれる周波数成分の周波数および周期の情報に対応した周波数解析結果波形と、取得された音情報の周波数解析を行って得た周波数解析結果波形とを比較することが可能な診断装置を提供することができる。 According to the present invention according to claims 8 to 10, even when there are a plurality of regions that are considered to be abnormal sounds, the frequency analysis result waveform corresponding to the frequency and period information of the frequency components included in each region and the acquisition It is possible to provide a diagnostic device capable of comparing with the frequency analysis result waveform obtained by performing frequency analysis of the sound information.

請求項11に係る本発明によれば、各領域に含まれる周波数成分の周波数および周期の情報に対応した複数の周波数解析結果波形を、どの領域に対応した解析結果波形であるかが分かるように表示することが可能な診断装置を提供することができる。 According to the eleventh aspect of the present invention, it is possible to know which region the analysis result waveform corresponds to a plurality of frequency analysis result waveforms corresponding to the frequency and period information of the frequency components included in each region. A diagnostic device capable of displaying can be provided.

請求項12に係る本発明によれば、取得した音情報に対応する過去の周波数解析結果波形を外部装置から取得して、取得した音情報の周波数解析結果波形と表示することが可能な診断装置を提供することができる。 According to the twelfth aspect of the present invention, a diagnostic device capable of acquiring a past frequency analysis result waveform corresponding to the acquired sound information from an external device and displaying it as a frequency analysis result waveform of the acquired sound information. Can be provided.

請求項13に係る本発明によれば、周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形により、取得した音情報と過去の音情報とを比較することが可能な診断装置を提供することができる。 According to the thirteenth aspect of the present invention, there is provided a diagnostic apparatus capable of comparing the acquired sound information with the past sound information by the frequency spectrum waveform representing the time change of the signal intensity distribution for each frequency. be able to.

請求項14に係る本発明によれば、周波数スペクトル波形において異音であると思われる領域を指定する場合と比較して、経験の乏しい利用者であっても、表示された周波数解析結果波形の中から、異音であると思われる周波数および周期を容易に選択することが可能な診断システムを提供することができる。 According to the present invention according to claim 14, as compared with the case of designating a region which seems to be an abnormal sound in the frequency spectrum waveform, even an inexperienced user can use the displayed frequency analysis result waveform. It is possible to provide a diagnostic system capable of easily selecting a frequency and a period that are considered to be abnormal sounds.

請求項15に係る本発明によれば、周波数スペクトル波形において異音であると思われる領域を指定する場合と比較して、経験の乏しい利用者であっても、表示された周波数解析結果波形の中から、異音であると思われる周波数および周期を容易に選択することが可能なプログラムを提供することができる。 According to the fifteenth aspect of the present invention, as compared with the case of designating a region which seems to be an abnormal sound in the frequency spectrum waveform, even an inexperienced user can use the displayed frequency analysis result waveform. It is possible to provide a program capable of easily selecting a frequency and a period that are considered to be abnormal sounds.

本発明の一実施形態の異音診断システムの構成を示すシステム図である。It is a system diagram which shows the structure of the abnormal noise diagnosis system of one Embodiment of this invention. 本発明の一実施形態における異音診断装置10のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware structure of the abnormal noise diagnostic apparatus 10 in one Embodiment of this invention. 本発明の一実施形態における異音診断装置10の機能構成を示すブロック図である。It is a block diagram which shows the functional structure of the abnormal noise diagnostic apparatus 10 in one Embodiment of this invention. 本発明の一実施形態におけるサーバ装置50の機能構成を示すブロック図である。It is a block diagram which shows the functional structure of the server apparatus 50 in one Embodiment of this invention. 図4中の波形データ格納部53に格納される情報の一例を示す図である。It is a figure which shows an example of the information stored in the waveform data storage part 53 in FIG. 本発明の一実施形態の異音診断システムの動作を説明するためのシーケンスチャートである。It is a sequence chart for demonstrating the operation of the abnormal noise diagnosis system of one Embodiment of this invention. 機種名、シリアル番号、動作状態等の各種情報を入力する際の異音診断装置10の表示画面例を示す図である。It is a figure which shows the display screen example of the abnormal noise diagnostic apparatus 10 when inputting various information such as a model name, a serial number, and an operating state. STFTの概念を説明するための図である。It is a figure for demonstrating the concept of STFT. STFTにより得られた解析結果に基づく周波数スペクトラム波形の画像例を示す図である。It is a figure which shows the image example of the frequency spectrum waveform based on the analysis result obtained by the FTFT. 高速フーリエ変換の解析結果例を示す図である。It is a figure which shows the analysis result example of the fast Fourier transform. 1D−FFT解析結果波形が表示された異音診断装置10の表示画面例を示す図である。It is a figure which shows the display screen example of the abnormal sound diagnostic apparatus 10 which displayed the 1D-FFT analysis result waveform. 2つの1D−FFT解析結果波形が表示された異音診断装置10の画面例を示す図である。It is a figure which shows the screen example of the abnormal sound diagnostic apparatus 10 which displayed the two 1D-FFT analysis result waveforms. 2つのSTFT解析結果波形が表示された異音診断装置10の画面例を示す図である。It is a figure which shows the screen example of the abnormal sound diagnostic apparatus 10 which displayed the waveform of two STFT analysis results. 今回録音した異音の解析結果波形上に、過去の異音データの解析結果波形を透過させた状態で重ねて表示するようにした場合の表示画面例を示す図である。It is a figure which shows the example of the display screen in the case where the analysis result waveform of the past abnormal sound data is superimposed on the analysis result waveform of the abnormal sound recorded this time in a transparent state. 1D−FFT解析結果波形上において、2つの選択領域(選択領域(1)、選択領域(2))が選択された場合の表示画面例を示す図である。It is a figure which shows the display screen example when two selection areas (selection area (1), selection area (2)) are selected on the 1D-FFT analysis result waveform. 領域(1)に対応する1D−FFT解析結果波形が表示された場合の表示画面例を示す図である。It is a figure which shows the display screen example when the 1D-FFT analysis result waveform corresponding to the region (1) is displayed. 領域(2)に対応する1D−FFT解析結果波形が表示された場合の表示画面例を示す図である。It is a figure which shows the display screen example in the case where the 1D-FFT analysis result waveform corresponding to region (2) is displayed. 今回録音した異音の1D−FFT解析結果波形上において選択領域(1)が選択され、この選択領域(1)に対応した過去の異音の解析結果波形が表示された場合の表示画面例を示す図である。An example of a display screen when the selection area (1) is selected on the 1D-FFT analysis result waveform of the abnormal sound recorded this time and the analysis result waveform of the past abnormal sound corresponding to this selection area (1) is displayed. It is a figure which shows. 図18に示された表示画面の上において、次の選択領域(2)が選択された場合の表示画面例を示す図である。It is a figure which shows the example of the display screen when the next selection area (2) is selected on the display screen shown in FIG.

次に、本発明の実施の形態について図面を参照して詳細に説明する。 Next, an embodiment of the present invention will be described in detail with reference to the drawings.

図1は本発明の一実施形態の異音診断システムの構成を示すシステム図である。 FIG. 1 is a system diagram showing a configuration of an abnormal noise diagnosis system according to an embodiment of the present invention.

本発明の一実施形態の異音診断システムは、図1に示されるように、パーソナルコンピュータ、スマートフォン、タブレット端末装置等の携帯可能な異音診断装置10と、サーバ装置50とから構成されている。 As shown in FIG. 1, the abnormal noise diagnostic system according to the embodiment of the present invention includes a portable abnormal noise diagnostic device 10 such as a personal computer, a smartphone, and a tablet terminal device, and a server device 50. ..

なお、異音診断装置10は、通信ネットワークを介してサーバ装置50に接続可能な装置であればどのような装置であっても本発明は適用可能である。ただし、本実施形態では、異音診断装置10が、音声信号を取得可能なマイク等の装置および、タッチ入力が可能なタッチパネルを備えたタブレット端末装置の場合を用いて説明する。 The present invention can be applied to the abnormal noise diagnostic device 10 as long as it can be connected to the server device 50 via a communication network. However, in the present embodiment, the case where the abnormal sound diagnostic device 10 is a device such as a microphone capable of acquiring an audio signal and a tablet terminal device provided with a touch panel capable of touch input will be described.

異音診断装置10は、エンドユーザが使用しているプリンタ等の画像形成装置20の保守管理、修理等を行うサービスマン(保守要員)により携帯され、画像形成装置20において発生した異音(異常音)信号を取得して、取得した異音信号を周波数解析したり、サーバ装置50から取得した過去の異音信号の周波数解析結果の波形と取得した異音信号の周波数解析結果波形とを表示するために使用される。 The abnormal sound diagnostic device 10 is carried by a serviceman (maintenance personnel) who performs maintenance management, repair, etc. of the image forming device 20 such as a printer used by the end user, and the abnormal noise (abnormality) generated in the image forming device 20 is carried. Sound) The signal is acquired and the acquired abnormal noise signal is frequency-analyzed, and the waveform of the frequency analysis result of the past abnormal noise signal acquired from the server device 50 and the frequency analysis result waveform of the acquired abnormal noise signal are displayed. Used to do.

異音診断装置10と、サーバ装置50とは、Wi−Fiルータ等の無線LANターミナル30や、インターネット通信網40を介して接続され情報の送受信を行っている。 The abnormal noise diagnosis device 10 and the server device 50 are connected to each other via a wireless LAN terminal 30 such as a Wi-Fi router or an Internet communication network 40 to transmit and receive information.

なお、異音診断装置10が携帯電話装置やスマートフォン等の場合には、異音診断装置10とサーバ装置50とを携帯電話回線網を介して接続して、不具合情報の送受信を行うようにすることも可能である。 When the abnormal noise diagnostic device 10 is a mobile phone device, a smartphone, or the like, the abnormal noise diagnostic device 10 and the server device 50 are connected to each other via a mobile phone network to transmit and receive defect information. It is also possible.

本実施形態の異音診断システムでは、エンドユーザの場所に設置された対象電子機器である画像形成装置20に異音が発生した場合、サービスマンが異音診断装置10を携帯して画像形成装置20の場所に出向く。そして、このサービスマンが、異音診断装置10を用いて発生している異音を録音することにより異音信号を取得して、異音の原因を特定する異音診断を行う。 In the abnormal noise diagnosis system of the present embodiment, when an abnormal noise is generated in the image forming apparatus 20 which is a target electronic device installed at the end user's place, a serviceman carries the abnormal noise diagnostic apparatus 10 with the image forming apparatus. Go to 20 places. Then, the serviceman acquires the abnormal noise signal by recording the abnormal noise generated by using the abnormal noise diagnosis device 10, and performs the abnormal noise diagnosis for identifying the cause of the abnormal noise.

なお、画像形成装置20にマイク等を設けて録音機能を持たせて、異音が発生した場合にその録音機能により異音を録音することも技術的には可能であるが、画像形成装置20がエンドユーザのオフィス等に設置される場合、この画像形成装置20に音声を録音する機能を設けることはセキュリティ上の理由により実現することができない。 Although it is technically possible to provide the image forming apparatus 20 with a microphone or the like to have a recording function and record the abnormal sound by the recording function when an abnormal sound is generated, the image forming apparatus 20 Is installed in an end user's office or the like, it is not possible to provide the image forming apparatus 20 with a function of recording sound for security reasons.

次に、本実施形態の異音診断システムにおける異音診断装置10のハードウェア構成を図2に示す。 Next, FIG. 2 shows the hardware configuration of the abnormal noise diagnosis device 10 in the abnormal noise diagnosis system of the present embodiment.

異音診断装置10は、図2に示されるように、CPU11、一時的にデータを保存可能なメモリ12、フラッシュメモリ等の記憶装置13、無線LANターミナル30との間で無線通信を行ってデータの送信及び受信を行う無線LANインタフェース(IF)14、タッチセンサ等の入力装置15、表示装置16、マイク17を有する。これらの構成要素は、制御バス18を介して互いに接続されている。 As shown in FIG. 2, the abnormal noise diagnostic device 10 performs wireless communication with the CPU 11, the memory 12 capable of temporarily storing data, the storage device 13 such as a flash memory, and the wireless LAN terminal 30 to perform data. It has a wireless LAN interface (IF) 14 for transmitting and receiving data, an input device 15 such as a touch sensor, a display device 16, and a microphone 17. These components are connected to each other via a control bus 18.

本実施形態の異音診断装置10では、表示装置16上にタッチ位置を検出するためのタッチセンサが入力装置15として設けられたタッチパネルが備えられていて、このタッチパネルを用いて表示が行われるとともにユーザからの入力が行われる。 The abnormal sound diagnostic device 10 of the present embodiment is provided with a touch panel provided as an input device 15 with a touch sensor for detecting a touch position on the display device 16, and the display is performed using the touch panel. Input from the user is performed.

CPU11は、メモリ12または記憶装置13に格納された制御プログラムに基づいて所定の処理を実行して、異音診断装置10の動作を制御する。なお、この制御プログラムは、インターネット通信網40や携帯電話回線網を介してダウンロードすることにより入手してCPU11に提供することも可能であるし、当該プログラムをCD−ROM等の記憶媒体に格納してCPU11に提供することも可能である。 The CPU 11 executes a predetermined process based on the control program stored in the memory 12 or the storage device 13 to control the operation of the abnormal noise diagnosis device 10. This control program can also be obtained by downloading via the Internet communication network 40 or the mobile phone line network and provided to the CPU 11, and the program is stored in a storage medium such as a CD-ROM. It is also possible to provide it to the CPU 11.

本実施形態の異音診断装置10は、上記の制御プログラムが実行されることにより以下に説明するような動作を行って、サービスマンが異音の原因を特定する業務の手助けを行う。 When the above control program is executed, the abnormal noise diagnostic device 10 of the present embodiment performs the operations as described below to assist the serviceman in the work of identifying the cause of the abnormal noise.

図3は、上記の制御プログラムが実行されることにより実現される異音診断装置10の機能構成を示すブロック図である。 FIG. 3 is a block diagram showing a functional configuration of the abnormal noise diagnostic device 10 realized by executing the above control program.

本実施形態の異音診断装置10は、図3に示されるように、音声取得部31と、周波数解析部32と、制御部33と、音声データ格納部34と、表示部35と、通信部36と、音声再生部37とを備えている。 As shown in FIG. 3, the abnormal noise diagnosis device 10 of the present embodiment includes a voice acquisition unit 31, a frequency analysis unit 32, a control unit 33, a voice data storage unit 34, a display unit 35, and a communication unit. 36 and a voice reproduction unit 37 are provided.

表示部35は、制御部33による制御に基づいて各種データの表示を行う。通信部36は、外部装置であるサーバ装置50との間で通信を行う。音声再生部37は制御部33による制御に基づいて、録音された音声データ等を再生して音声信号に変換する。 The display unit 35 displays various data based on the control by the control unit 33. The communication unit 36 communicates with the server device 50, which is an external device. The voice reproduction unit 37 reproduces the recorded voice data or the like and converts it into a voice signal based on the control by the control unit 33.

音声取得部31は、解析対象の装置である画像形成装置20において発生した異音の音声を入力して音声信号を取得する。 The voice acquisition unit 31 acquires a voice signal by inputting the sound of abnormal noise generated in the image forming device 20 which is the device to be analyzed.

なお、本実施形態では、音声取得部31が、画像形成装置20において発生した異音の音声を入力して音声信号を取得するものとして説明しているが、音声は音の一例であり、音声信号は音情報の一例である。 In the present embodiment, the voice acquisition unit 31 is described as inputting the voice of the abnormal sound generated in the image forming apparatus 20 to acquire the voice signal. However, the voice is an example of the sound, and the voice is used. The signal is an example of sound information.

周波数解析部32は、音声取得部31により取得された音声信号の時間周波数解析(時間依存周波数解析)を行って、取得された異音信号の周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形データを生成する。なお、周波数スペクトル波形データは、周波数解析を行うことにより得られた解析結果である。 The frequency analysis unit 32 performs time-frequency analysis (time-dependent frequency analysis) of the voice signal acquired by the voice acquisition unit 31, and represents the time change of the signal intensity distribution for each frequency of the acquired abnormal sound signal. Generate spectral waveform data. The frequency spectrum waveform data is an analysis result obtained by performing frequency analysis.

具体的には、周波数解析部32は、音声取得部31により取得された音声信号に対してSTFT(Short time Fourier transform:短時間フーリエ変換)を行うことにより周波数スペクトル波形データを生成する。このSTFTの説明については後述する。 Specifically, the frequency analysis unit 32 generates frequency spectrum waveform data by performing an STFT (Short time Fourier transform) on the voice signal acquired by the voice acquisition unit 31. The description of this FTFT will be described later.

制御部33は、周波数解析部32により得られた周波数スペクトル波形データを音声データとともに音声データ格納部34に格納する。 The control unit 33 stores the frequency spectrum waveform data obtained by the frequency analysis unit 32 in the voice data storage unit 34 together with the voice data.

また、制御部33は、周波数解析部32により得られた周波数スペクトル波形データに対して、時間軸方向に周波数解析を行う高速フーリエ変換(1D−FFT(Fast Fourier Transform))を行うよう周波数解析部32に対して指示を行う。すると、周波数解析部32は、周波数スペクトル波形データに対する周波数解析を実行して、周波数スペクトル波形に含まれる周波数成分の信号の周期および周波数を検出して1D−FFT解析結果波形を生成する。 Further, the control unit 33 performs a frequency analysis unit (1D-FFT (Fast Fourier Transform)) for performing frequency analysis in the time axis direction on the frequency spectrum waveform data obtained by the frequency analysis unit 32. Instruct 32. Then, the frequency analysis unit 32 executes frequency analysis on the frequency spectrum waveform data, detects the period and frequency of the signal of the frequency component included in the frequency spectrum waveform, and generates a 1D-FFT analysis result waveform.

つまり、周波数解析部32は、声取得部31により取得された音声信号の周波数解析を行って、取得された音信号に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する。 That is, the frequency analysis unit 32 performs frequency analysis of the voice signal acquired by the voice acquisition unit 31 and generates a frequency analysis result waveform showing information on the period and frequency of the sound included in the acquired sound signal.

そして、制御部33は、得られた周波数解析結果波形を表示部35に表示させて、ユーザに対して異音である可能性が高い周波数成分を指定するよう促す。そして、ユーザが、表示部35に表示された周波数解析結果波形上で、異音であると思われる周波数成分の領域を指定すると、制御部33は、表示された周波数解析結果波形上において異音の周波数成分を含む領域の指定を受付ける。 Then, the control unit 33 displays the obtained frequency analysis result waveform on the display unit 35, and urges the user to specify a frequency component that is likely to be an abnormal noise. Then, when the user specifies a region of a frequency component that seems to be an abnormal sound on the frequency analysis result waveform displayed on the display unit 35, the control unit 33 causes the abnormal sound on the displayed frequency analysis result waveform. Accepts the designation of the region containing the frequency component of.

そして、制御部33は、受付けた指定領域に含まれる周波数成分の周期および周波数の情報を抽出する。 Then, the control unit 33 extracts the period and frequency information of the frequency component included in the received designated region.

次に、制御部33は、取得した異音の周期および周波数の情報を、画像形成装置20の機種名、シリアル番号等の機種情報、画像形成装置20の動作状態を示す動作状態情報とともに通信部36を介してサーバ装置50に送信する。具体的には、この動作状態情報には、カラー印刷なのか白黒印刷なのか、両面印刷なのか片面印刷なのか、動作モードはスキャン、プリント、複写のいずれなのか、使用用紙の種類等の情報を含めるようにすることができる。このようにして、制御部33は、周波数解析部32により得られた1D−FFT解析結果波形から得られた情報を、通信部36を介してサーバ装置50に送信する。 Next, the control unit 33 transmits the acquired abnormal noise cycle and frequency information together with the model information such as the model name and serial number of the image forming apparatus 20 and the operating state information indicating the operating state of the image forming apparatus 20. It is transmitted to the server device 50 via 36. Specifically, this operation status information includes information such as whether it is color printing or black-and-white printing, double-sided printing or single-sided printing, whether the operation mode is scan, print, or copy, and the type of paper used. Can be included. In this way, the control unit 33 transmits the information obtained from the 1D-FFT analysis result waveform obtained by the frequency analysis unit 32 to the server device 50 via the communication unit 36.

サーバ装置50では、画像形成装置20の装置と同等の装置において過去に発生した異常音の音声信号の周波数解析を行って得られる1D−FFT解析結果波形データ、スペクトル波形データを、元の音声データ、その音声データが取得された際の装置の動作状態、異音原因、異音への対処方法等の情報とともに格納している。 In the server device 50, the 1D-FFT analysis result waveform data and the spectral waveform data obtained by frequency analysis of the sound signal of the abnormal sound generated in the past in the device equivalent to the device of the image forming device 20 are used as the original sound data. , The operating state of the device when the audio data is acquired, the cause of the abnormal noise, the coping method for the abnormal noise, and the like are stored together with the information.

そしてサーバ装置50は、異音診断装置10から送信されてきた異音の周期および周波数の情報から、周波数解析部32による周波数解析の結果得られた1D−FFT解析結果波形データに対応する1D−FFT解析結果波形データを検索して、見つかった1D−FFT解析結果波形データを異音のサンプル波形データとして格納しているスペクトル波形データ、音声データ等の情報等とともに異音診断装置10に送信する。 Then, the server device 50 corresponds to the 1D-FFT analysis result waveform data obtained as a result of the frequency analysis by the frequency analysis unit 32 from the information on the period and frequency of the abnormal sound transmitted from the abnormal sound diagnostic device 10. The FFT analysis result waveform data is searched, and the found 1D-FFT analysis result waveform data is transmitted to the abnormal sound diagnostic device 10 together with information such as spectral waveform data and voice data stored as sample waveform data of abnormal sound. ..

この結果、制御部33は、周波数解析部32による周波数解析の結果得られた1D−FFT解析結果波形データに対応する1D−FFT解析結果波形データを通信部36を介してサーバ装置50から受信する。 As a result, the control unit 33 receives the 1D-FFT analysis result waveform data corresponding to the 1D-FFT analysis result waveform data obtained as a result of the frequency analysis by the frequency analysis unit 32 from the server device 50 via the communication unit 36. ..

制御部33は、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形と、サーバ装置50から受信した1D−FFT解析結果波形とを表示部35に並べて表示する。 The control unit 33 displays the 1D-FFT analysis result waveform obtained by frequency analysis of the voice signal acquired by the voice acquisition unit 31 and the 1D-FFT analysis result waveform received from the server device 50 on the display unit 35. Display side by side.

また、制御部33は、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形と、サーバ装置50から受信した1D−FFT解析結果波形とを、一方の波形を透過させた状態で重ねて表示部35に表示するようにしても良い。 Further, the control unit 33 obtains a 1D-FFT analysis result waveform obtained by performing frequency analysis of the voice signal acquired by the voice acquisition unit 31, and a 1D-FFT analysis result waveform received from the server device 50. The waveform of the above may be superimposed and displayed on the display unit 35 in a transparent state.

例えば、サーバ装置50から受信した1D−FFT解析結果波形を透過させた状態で、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形上に重ねて表示するようにしても良い。 For example, the 1D-FFT analysis result waveform received from the server device 50 is transmitted, and the 1D-FFT analysis result waveform obtained by frequency analysis of the voice signal acquired by the voice acquisition unit 31 is superimposed on the waveform. It may be displayed.

さらに、制御部33は、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形と、サーバ装置50から受信した1D−FFT解析結果波形とを、予め設定された間隔で一方の波形を透過させた状態で重ねて表示するようにしても良い。 Further, the control unit 33 previously obtains the 1D-FFT analysis result waveform obtained by performing frequency analysis of the voice signal acquired by the voice acquisition unit 31 and the 1D-FFT analysis result waveform received from the server device 50. One waveform may be superimposed and displayed in a transparent state at a set interval.

例えば、サーバ装置50から受信した1D−FFT解析結果波形を透過させた上で1秒間隔で点滅させた状態で、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形上に重ねて表示するようにしても良い。 For example, 1D obtained by frequency analysis of the voice signal acquired by the voice acquisition unit 31 in a state where the 1D-FFT analysis result waveform received from the server device 50 is transmitted and blinked at 1-second intervals. -The FFT analysis result waveform may be overlaid on the waveform.

さらに、制御部33は、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形と、サーバ装置50から受信した1D−FFT解析結果波形とを、ユーザ(使用者)の操作に基づいて一方の波形を透過させた状態で重ねて表示するようにしても良い。 Further, the control unit 33 obtains the 1D-FFT analysis result waveform obtained by performing frequency analysis of the voice signal acquired by the voice acquisition unit 31 and the 1D-FFT analysis result waveform received from the server device 50. Based on the operation of (user), one of the waveforms may be superimposed and displayed in a transparent state.

例えば、サーバ装置50から受信した1D−FFT解析結果波形を透過させた状態で、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形上に重ねて表示するようにし、ユーザの操作により重ねて表示させた状態と、取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形のみを表示させた状態とを切替えるようにしても良い。 For example, the 1D-FFT analysis result waveform received from the server device 50 is transmitted, and the 1D-FFT analysis result waveform obtained by frequency analysis of the audio signal acquired by the audio acquisition unit 31 is superimposed on the waveform. Even if it is displayed, it is possible to switch between a state in which the waveforms are superimposed by the user's operation and a state in which only the 1D-FFT analysis result waveform obtained by performing frequency analysis of the acquired audio signal is displayed. good.

また、制御部33は、サーバ装置50から送信されてきた1D−FFT解析結果波形が複数存在する場合、複数の1D−FFT解析結果波形のうち、周波数解析部32の周波数解析によって得られた1D−FFT解析結果波形と周期および周波数が類似する波形を優先して表示部35に表示する。 Further, when there are a plurality of 1D-FFT analysis result waveforms transmitted from the server device 50, the control unit 33 has 1D obtained by frequency analysis of the frequency analysis unit 32 among the plurality of 1D-FFT analysis result waveforms. -The waveform having a period and frequency similar to that of the FFT analysis result waveform is preferentially displayed on the display unit 35.

また、制御部33は、周波数解析部32の周波数解析によって得られた1D−FFT解析結果波形と周期および周波数が類似する1D−FFT解析結果波形が複数あり、この複数の解析結果波形を同時に表示部35に表示させる場合には、取得された音信号の周波数解析を行って得た周波数解析結果波形と周期および周波数がより類似する周波数解析結果波形を、他の周波数解析結果波形とは色を変えて表示する。 Further, the control unit 33 has a plurality of 1D-FFT analysis result waveforms having a period and frequency similar to those of the 1D-FFT analysis result waveform obtained by the frequency analysis of the frequency analysis unit 32, and simultaneously displays the plurality of analysis result waveforms. When displaying on the unit 35, the frequency analysis result waveform having a period and frequency more similar to the frequency analysis result waveform obtained by performing the frequency analysis of the acquired sound signal is displayed in a color different from that of the other frequency analysis result waveforms. Change and display.

なお、制御部33は、1D−FFT解析結果波形を表示部35に表示させて、異音が含まれると思われる領域の指定を受付ける際に、複数の領域の指定が受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の1D−FFT解析結果波形を順次切り替えて表示部35に表示する。 When the control unit 33 displays the 1D-FFT analysis result waveform on the display unit 35 and accepts the designation of the region where the abnormal noise is considered to be included, if the designation of a plurality of regions is accepted, the control unit 33 accepts the waveform. The 1D-FFT analysis result waveform for each frequency component period and frequency information included in each of the divided regions is sequentially switched and displayed on the display unit 35.

また、制御部33は、複数の領域の指定が受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の1D−FFT解析結果波形を重ねた状態で表示部35に表示するようにしても良い。 Further, when the designation of a plurality of regions is received, the control unit 33 superimposes the 1D-FFT analysis result waveforms for each of the period and frequency information of the frequency components included in the received regions, and the display unit 35 It may be displayed in.

または、制御部33は、複数の領域の指定を順次受付けた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の1D−FFT解析結果波形を順次重ねた状態で表示するようにしても良い。 Alternatively, when the control unit 33 sequentially receives the designation of a plurality of regions, the control unit 33 displays the 1D-FFT analysis result waveforms for each of the period and frequency information of the frequency components included in the received regions in a sequentially superimposed state. You may do so.

その際に、制御部33は、受付けた各領域に含まれる周波数成分の周期および周波数の情報毎の1D−FFT解析結果波形を、それぞれ異なる表示方法、例えば異なる色、異なる明度、異なる彩度、異なる図形等により重ねて表示する。 At that time, the control unit 33 displays the 1D-FFT analysis result waveform for each frequency component period and frequency information included in each received region in different display methods, for example, different colors, different brightness, different saturation, and so on. Display by overlapping with different figures.

さらに、制御部33は、音声取得部31により取得された音声信号の周波数解析を行って得られた1D−FFT解析結果波形と、サーバ装置50から送信されてきた1D−FFT解析結果波形のうちのいずれか一方の波形が拡大または縮小された場合、他方の波形を同等の大きさとなるように拡大または縮小して表示する。 Further, the control unit 33 has a 1D-FFT analysis result waveform obtained by performing frequency analysis of the voice signal acquired by the voice acquisition unit 31, and a 1D-FFT analysis result waveform transmitted from the server device 50. When one of the waveforms is enlarged or reduced, the other waveform is enlarged or reduced so as to have the same size.

また、ユーザが音声データの再生を指示した場合、音声再生部37は、制御部33からの制御に基づいて、音声取得部31において取得された音声データ、またはサーバ装置50から送信されてきた1D−FFT周波数解析結果波形に対応する音声データを再生するようにしても良い。 Further, when the user instructs to reproduce the voice data, the voice reproduction unit 37 receives the voice data acquired by the voice acquisition unit 31 or 1D transmitted from the server device 50 based on the control from the control unit 33. -The audio data corresponding to the FFT frequency analysis result waveform may be reproduced.

さらに、2つの1D−FFT解析結果波形の比較を容易にするために、制御部33は、並列に表示した2つの1D−FFT解析結果波形上に、それぞれ同一の周波数を示す調整可能な周波数補助線や、時間軸方向の位置を比較するための調整可能な共通の時間軸補助線を重ねて表示するようにしても良い。 Further, in order to facilitate the comparison of the two 1D-FFT analysis result waveforms, the control unit 33 has an adjustable frequency auxiliary indicating the same frequency on the two 1D-FFT analysis result waveforms displayed in parallel. Lines and adjustable common time axis auxiliary lines for comparing positions in the time axis direction may be superimposed and displayed.

次に、本実施形態の異音解析システムにおけるサーバ装置50の機能構成を図4のブロック図を参照して説明する。 Next, the functional configuration of the server device 50 in the abnormal noise analysis system of the present embodiment will be described with reference to the block diagram of FIG.

本実施形態のサーバ装置50は、図4に示されるように、通信部51と、制御部52と、波形データ格納部53とを備えている。 As shown in FIG. 4, the server device 50 of the present embodiment includes a communication unit 51, a control unit 52, and a waveform data storage unit 53.

波形データ格納部53は、解析対象の装置である画像形成装置20と同等の装置において過去に発生した異常音の音声信号の周波数解析を行って得られる複数の1D−FFT解析結果波形を格納する。 The waveform data storage unit 53 stores a plurality of 1D-FFT analysis result waveforms obtained by performing frequency analysis of the audio signal of the abnormal sound generated in the past in a device equivalent to the image forming device 20 which is the device to be analyzed. ..

具体的には、波形データ格納部53は、図5に示されるように、予め取得された異音の音声データを周波数解析することにより得られた1D−FFT解析結果波形データと、元となった音声データと、異音の原因と、その対処方法等の情報が機種毎に格納されている。 Specifically, as shown in FIG. 5, the waveform data storage unit 53 is based on the 1D-FFT analysis result waveform data obtained by frequency-analyzing the previously acquired abnormal sound audio data. Information such as audio data, the cause of abnormal noise, and how to deal with it is stored for each model.

そして、制御部52は、異音診断装置10から異音の周期や周波数の情報を受信した場合、波形データ格納部53に格納されている複数の1D−FFT解析結果波形データの中から、受信した異音周期や周波数の情報に基づいて、異音診断装置10において取得された異音に基づく1D−FFT解析結果波形に類似するものを選択して、通信部51を介して異音診断装置10に送信する。 Then, when the control unit 52 receives the information on the period and frequency of the abnormal sound from the abnormal sound diagnostic device 10, the control unit 52 receives the information from the plurality of 1D-FFT analysis result waveform data stored in the waveform data storage unit 53. Based on the information on the abnormal sound period and frequency, a waveform similar to the 1D-FFT analysis result waveform based on the abnormal sound acquired by the abnormal sound diagnostic device 10 is selected, and the abnormal sound diagnostic device is selected via the communication unit 51. Send to 10.

なお、本実施形態では、異音診断装置10において異音の音声データのSTFT、高速フーリエ変換を行って、異音の周期および周波数の情報をサーバ装置50に送信するものとして説明しているが、高速フーリエ変換またはSTFT、高速フーリエ変換の両方をサーバ装置50側において実行するようにしても良い。 In the present embodiment, it is described that the abnormal sound diagnostic device 10 performs the STFT and the fast Fourier transform of the abnormal sound voice data and transmits the information on the period and frequency of the abnormal sound to the server device 50. , Fast Fourier Transform or STFT, Fast Fourier Transform may be executed on the server device 50 side.

この場合には、異音診断装置10からサーバ装置50に対して音声データをそのまま送信したり、音声データに対してSTFTを行った結果の周波数スペクトル波形データを送信し、サーバ装置50において音声データに対するSTFTや高速フーリエ変換を実行することになる。 In this case, the abnormal sound diagnostic device 10 transmits the voice data as it is to the server device 50, or the frequency spectrum waveform data as a result of performing the FTFT on the voice data is transmitted, and the voice data is transmitted in the server device 50. The STFT and Fast Fourier Transform will be performed on the data.

次に、本実施形態の異音診断システムの動作を図6のシーケンスチャートを参照して説明する。 Next, the operation of the abnormal noise diagnosis system of the present embodiment will be described with reference to the sequence chart of FIG.

異音診断装置10において異音の原因を特定するための異音診断を行おうとする場合、図7に示すような画像が表示されて機種名、シリアル番号、動作状態等の各種情報が入力される(ステップS101)。 When the abnormal noise diagnosis device 10 attempts to perform abnormal noise diagnosis to identify the cause of abnormal noise, an image as shown in FIG. 7 is displayed and various information such as a model name, serial number, and operating state are input. (Step S101).

そして、異音診断装置10では、動作モードを音声録音モードにして、マイク17を画像形成装置20の異音発生個所に近づけて異音の録音を行って音声データを取得する(ステップS102)。 Then, in the abnormal noise diagnosis device 10, the operation mode is set to the voice recording mode, the microphone 17 is brought close to the abnormal noise generation portion of the image forming device 20, and the abnormal sound is recorded to acquire the voice data (step S102).

すると、異音診断装置10では、取得された音声データが周波数解析部32においてSTFTが行われることにより周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形が生成される(ステップS103)。 Then, in the abnormal sound diagnostic apparatus 10, the acquired voice data is settled by the frequency analysis unit 32, so that a frequency spectrum waveform representing the time change of the signal intensity distribution for each frequency is generated (step S103).

このSTFTとは、図8に示されるように、短時間毎にフーリエ変換を行って周波数成分毎の信号強度を時間変化に応じて演算したものである。そして、このSTFTにより得られた解析結果を1つの周波数スペクトル波形の画像とした場合の波形例を図9に示す。 As shown in FIG. 8, this FTFT is obtained by performing a Fourier transform every short time and calculating the signal intensity for each frequency component according to the time change. FIG. 9 shows an example of a waveform when the analysis result obtained by this FTFT is used as an image of one frequency spectrum waveform.

図9に示した周波数スペクトル波形例では、横軸が時間、縦軸が周波数を表していて、周波数毎の強度は色によって表現されている。なお、図9では、この色の違いをハッチングパターンにより表現している。また、図9では周波数毎の強度が色によって表現される場合を例示しているが、この強度を階調により表現することも可能である。 In the frequency spectrum waveform example shown in FIG. 9, the horizontal axis represents time and the vertical axis represents frequency, and the intensity of each frequency is represented by color. In FIG. 9, this difference in color is represented by a hatching pattern. Further, although FIG. 9 illustrates a case where the intensity for each frequency is expressed by color, it is also possible to express this intensity by gradation.

この図9の周波数スペクトル波形例では、異音の周波数成分61が特定の周波数に周期的に発生しているのが表示されているのが分かる。なお、この図9に示した周波数スペクトル波形例において、低い周波数成分は通常の動作音であり異音の周波数成分ではない。 In the frequency spectrum waveform example of FIG. 9, it can be seen that the frequency component 61 of the abnormal sound is periodically generated at a specific frequency. In the frequency spectrum waveform example shown in FIG. 9, the low frequency component is a normal operating sound and is not a frequency component of an abnormal sound.

この図9に示したような周波数スペクトル波形が得られると、周波数解析部32は、この周波数スペクトル波形に対して高速フーリエ変換(1D−FFT)を実行する(ステップS104)。このようにして実行された高速フーリエ変換の解析結果波形例(1D−FFT解析結果波形例)を図10に示す。 When the frequency spectrum waveform as shown in FIG. 9 is obtained, the frequency analysis unit 32 executes a fast Fourier transform (1D-FFT) on the frequency spectrum waveform (step S104). An example of the analysis result waveform (1D-FFT analysis result waveform example) of the fast Fourier transform executed in this manner is shown in FIG.

なお、この図10では、高速フーリエ変換を行うことにより、周波数スペクトル波形に含まれる周波数成分の信号の周期および周波数が検出されることにより異音の周期および周波数が特定される。なお、異音には倍音成分等が含まれるため、複数の周期が検出される場合があるが最も信号強度が強い周期が異音周期として検出される。 In FIG. 10, the period and frequency of the abnormal sound are specified by detecting the period and frequency of the signal of the frequency component included in the frequency spectrum waveform by performing the fast Fourier transform. Since the abnormal sound contains harmonic components and the like, a plurality of cycles may be detected, but the cycle having the strongest signal strength is detected as the abnormal sound cycle.

また、所定の周期以上の長周期の信号成分は通常動作音や不定周期雑音であると考えられるため、このような長周期の信号成分の領域は判定除外領域62として、この判定除外領域62における解析結果は無視される。 Further, since a signal component having a long period of a predetermined period or longer is considered to be a normal operation sound or an indefinite period noise, such a long period signal component area is set as a judgment exclusion area 62 in the judgment exclusion area 62. The analysis result is ignored.

さらに、所定の周波数以下の低周波の信号成分についても通常動作音と区別が付かないため、このような低周波の信号成分の領域は判定除外領域63として、この判定除外領域63における解析結果は無視される。 Further, since the low frequency signal component below the predetermined frequency is also indistinguishable from the normal operating sound, the region of such a low frequency signal component is set as the judgment exclusion region 63, and the analysis result in this judgment exclusion region 63 is It will be ignored.

この図10に示したような1D−FFT解析結果波形が得られると、制御部33は、得られた1D−FFT解析結果波形を表示部35に表示する。このようにして1D−FFT解析結果波形が表示された異音診断装置10の表示画面例を図11に示す。 When the 1D-FFT analysis result waveform as shown in FIG. 10 is obtained, the control unit 33 displays the obtained 1D-FFT analysis result waveform on the display unit 35. FIG. 11 shows an example of a display screen of the abnormal sound diagnostic device 10 in which the 1D-FFT analysis result waveform is displayed in this way.

そして、このような表示画面が提示されたユーザが、異音であると思われる周波数成分を特定して、例えばタッチパネルを操作することによりこの異音の周波数成分が含まれる領域を選択する。 Then, the user presented with such a display screen identifies a frequency component that is considered to be an abnormal sound, and selects a region including the frequency component of the abnormal sound by, for example, operating a touch panel.

このようにしてユーザにより選択された選択領域80の一例を図11に示す。図11に示した例では、特定の周波数成分を含むような長方形の領域が選択領域80として指定されているのが分かる。 FIG. 11 shows an example of the selection area 80 selected by the user in this way. In the example shown in FIG. 11, it can be seen that a rectangular region including a specific frequency component is designated as the selection region 80.

そして、このように選択領域80が指定されると、選択領域80に含まれる周波数成分の周波数および周期が特定される。 When the selection area 80 is designated in this way, the frequency and period of the frequency component included in the selection area 80 are specified.

すると、異音診断装置10では、特定された異音の周波数および周期の情報を機種情報や動作状態の情報とともにサーバ装置50に送信する(ステップS105)。例えば、異音周波数は4kHz、異音周期は2.0秒というような情報がサーバ装置50に送信される。 Then, the abnormal noise diagnostic device 10 transmits the information on the frequency and period of the specified abnormal sound to the server device 50 together with the model information and the information on the operating state (step S105). For example, information such that the abnormal sound frequency is 4 kHz and the abnormal sound period is 2.0 seconds is transmitted to the server device 50.

すると、サーバ装置50では、受信した情報に基づいて、波形データ格納部53を検索することにより、受信した情報に対応する1D−FFT解析結果波形のデータや周波数スペクトル波形のデータを抽出する(ステップS106)。 Then, the server device 50 extracts the 1D-FFT analysis result waveform data and the frequency spectrum waveform data corresponding to the received information by searching the waveform data storage unit 53 based on the received information (step). S106).

そして、サーバ装置50は、抽出した1D−FFT解析結果波形のデータや周波数スペクトル波形データを、元の音声データ、異音原因、その対処方法等の情報とともに異音診断装置10に送信する(ステップS107)。 Then, the server device 50 transmits the extracted 1D-FFT analysis result waveform data and frequency spectrum waveform data to the abnormal sound diagnostic device 10 together with information such as the original voice data, the cause of the abnormal sound, and the coping method thereof (step). S107).

すると、異音診断装置10では、サーバ装置50から送信されてきた1D−FFT解析結果波形等のデータを受信する(ステップS108)。そして、異音診断装置10の制御部33は、受信した1D−FFT解析結果波形と、ID−FFT解析を行うことにより得られた解析結果波形を表示部35に表示する(ステップS109)。 Then, the abnormal noise diagnosis device 10 receives the data such as the 1D-FFT analysis result waveform transmitted from the server device 50 (step S108). Then, the control unit 33 of the abnormal noise diagnosis device 10 displays the received 1D-FFT analysis result waveform and the analysis result waveform obtained by performing the ID-FFT analysis on the display unit 35 (step S109).

このようにして2つの1D−FFT解析結果波形が表示された異音診断装置10の画面例を図12に示す。 FIG. 12 shows a screen example of the abnormal noise diagnostic device 10 in which the two 1D-FFT analysis result waveforms are displayed in this way.

図12に示した画面例では、周波数解析部32における1D−FFTにより得られた解析結果波形が、「今回録音した異音の解析結果波形」として表示され、サーバ装置50から送信されてきた解析結果波形が、「過去の異音データ」として「感光体ドラムの摩耗」という異音原因とともに表示されているのが分かる。 In the screen example shown in FIG. 12, the analysis result waveform obtained by the 1D-FFT in the frequency analysis unit 32 is displayed as the "analysis result waveform of the abnormal sound recorded this time", and the analysis transmitted from the server device 50. It can be seen that the resulting waveform is displayed as "past abnormal noise data" together with the abnormal noise cause of "wearing of the photoconductor drum".

異音診断を行おうとするサービスマンは、この2つの解析結果波形を比較して、波形中の異音成分の周波数や周期が類似しているか否かを判定することにより異音の原因を特定する。 A serviceman who intends to perform an abnormal noise diagnosis identifies the cause of the abnormal noise by comparing the waveforms of these two analysis results and determining whether or not the frequencies and periods of the abnormal noise components in the waveform are similar. To do.

また、サーバ装置50から複数の解析結果波形が送信されてきた場合には、例えば、「過去の異音データ」として表示されている周波数スペクトル波形の画像をタッチ操作により横方向になぞることにより、別の周波数スペクトル波形が表示される。 Further, when a plurality of analysis result waveforms are transmitted from the server device 50, for example, by tracing the image of the frequency spectrum waveform displayed as "past abnormal sound data" in the horizontal direction by a touch operation. Another frequency spectrum waveform is displayed.

このように複数の解析結果波形が送信されてきた場合には、サービスマンは、今回取得した異音の解析結果波形が、いずれの解析結果波形とより類似しているかを判定することにより異音の原因を特定する。なお、この異音の原因の特定の際には、単に解析結果波形の形状や異音成分の周期や周波数等を比較するだけでなく、音声再生ボタン81を操作すすることにより元の音声データを音声再生部37により再生して今回取得した異音とサーバ装置50から送信されてきた解析結果波形に対応した音声とを聴き比べて異音の原因を特定する。 When a plurality of analysis result waveforms are transmitted in this way, the serviceman determines which analysis result waveform the analysis result waveform of the abnormal sound acquired this time is more similar to the abnormal sound. Identify the cause of. When identifying the cause of this abnormal noise, not only the shape of the analysis result waveform and the period and frequency of the abnormal noise component are compared, but also the original voice data is operated by operating the voice playback button 81. Is reproduced by the voice reproduction unit 37, and the cause of the abnormal noise is identified by listening to and comparing the abnormal noise acquired this time with the voice corresponding to the analysis result waveform transmitted from the server device 50.

また、表示画面中には、STFT解析結果画面表示ボタン82が表示されており、ユーザがこのSTFT解析結果画面表示ボタン82を操作することにより、図13に示すような画面表示に切り替わる。 Further, the FTFT analysis result screen display button 82 is displayed in the display screen, and when the user operates the FTFT analysis result screen display button 82, the screen display is switched to the screen display as shown in FIG.

図13に示した表示画面例では、表示されていた2つの1D−FFT解析結果画面が、取得された音情報の周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形である2つのSTFT解析結果波形を表示した画面に切り替わっている。なお、このSTFT解析結果を表示した画面では、1D−FFT解析結果画面表示ボタン83が表示されており、ユーザがこの1D−FFT解析結果画面表示ボタン83を操作することにより、図12に示すような画面表示に切り替わる。 In the display screen example shown in FIG. 13, the two 1D-FFT analysis result screens displayed are two STFTs which are frequency spectrum waveforms representing the time change of the signal intensity distribution for each frequency of the acquired sound information. The screen is switched to the screen displaying the analysis result waveform. The 1D-FFT analysis result screen display button 83 is displayed on the screen displaying the FTFT analysis result, and as shown in FIG. 12, the user operates the 1D-FFT analysis result screen display button 83. Switch to the screen display.

なお、図9に示したようなSTFT解析結果波形(周波数スペクトル波形)では、異音原因の判定経験が少ないユーザの場合、どの領域に異音が含まれているのかを判定することができない場合がある。図13では、説明を分かり易くするため異音の周波数成分61が他の周波数成分とは異なる表示色で表示されるようにしている。しかし、実際のSTFT解析結果波形では、異音の周波数成分が他の周波数成分と同じ色で表示されてしまう場合もあり、判定経験が少ないユーザでは、異音が含まれる周波数領域を選択することが難しい場合がある。 In addition, in the STFT analysis result waveform (frequency spectrum waveform) as shown in FIG. 9, in the case of a user who has little experience in determining the cause of abnormal noise, it is not possible to determine in which region the abnormal noise is contained. There is. In FIG. 13, in order to make the explanation easy to understand, the frequency component 61 of the abnormal sound is displayed in a display color different from that of the other frequency components. However, in the actual SFTT analysis result waveform, the frequency component of the abnormal sound may be displayed in the same color as the other frequency components, and the user with little judgment experience should select the frequency region containing the abnormal sound. Can be difficult.

これに対して、図10に示したような1D−FFT解析結果波形では、STFT解析結果波形に含まれる周期性のある周波数成分が表示されるため、判定経験が少ないユーザであっても、異音が含まれる周波数領域を選択することが可能となる。 On the other hand, in the 1D-FFT analysis result waveform as shown in FIG. 10, since the periodic frequency components included in the SFTT analysis result waveform are displayed, even a user with little judgment experience is different. It is possible to select the frequency range in which the sound is included.

なお、図12に示した表示画面例では、今回録音した異音の解析結果波形と、過去の異音データの解析結果波形とを並列に並べて表示していたが、図14に示すように、今回録音した異音の解析結果波形と、過去の異音データの解析結果波形とのうちのいずれか一方の解析結果波形を透過させた状態で他方の解析結果波形上に重ねて表示するようにしても良い。 In the display screen example shown in FIG. 12, the analysis result waveform of the abnormal sound recorded this time and the analysis result waveform of the past abnormal sound data are displayed side by side in parallel, but as shown in FIG. The analysis result waveform of one of the abnormal sound analysis result waveform recorded this time and the analysis result waveform of the past abnormal sound data is transmitted and displayed on the other analysis result waveform. You may.

なお、図14に示した表示画面例では、今回録音した異音の解析結果波形を黒色とし、過去の異音データの解析結果波形を赤色として、表示色を変えて表示された例が示されている。 In the display screen example shown in FIG. 14, an example is shown in which the analysis result waveform of the abnormal sound recorded this time is black, the analysis result waveform of the past abnormal sound data is red, and the display color is changed. ing.

さらに、この図14では、表示切替ボタン84が画面上に表示されており、ユーザがこの表示切替ボタン84を操作することにより、重ねて表示した2つの解析結果波形のうちの一方の解析結果波形を表示する/表示しないという表示状態を表示切替ボタン84が操作される毎に切り替えられる。 Further, in FIG. 14, the display switching button 84 is displayed on the screen, and when the user operates the display switching button 84, the analysis result waveform of one of the two analysis result waveforms displayed in an overlapping manner is displayed. The display state of displaying / not displaying is switched every time the display switching button 84 is operated.

なお、図11では、異音診断装置10に表示された1D−FFT解析結果波形画面において、1つの選択領域80を選択した場合が示されていた。これに対して、図15に示すように、異音診断装置10に表示された1D−FFT解析結果波形画面において、2つ以上の複数の選択領域を選択するようにしても良い。図15に示した表示画面例では、ユーザの指70により2つの選択領域(選択領域(1)、選択領域(2))が選択された場合が示されている。 Note that FIG. 11 shows a case where one selection area 80 is selected on the 1D-FFT analysis result waveform screen displayed on the abnormal sound diagnosis device 10. On the other hand, as shown in FIG. 15, two or more selected areas may be selected on the 1D-FFT analysis result waveform screen displayed on the abnormal sound diagnostic device 10. In the display screen example shown in FIG. 15, the case where two selection areas (selection area (1) and selection area (2)) are selected by the user's finger 70 is shown.

このように1D−FFT解析結果波形の画面において2つの領域が選択された場合、それぞれの領域における周波数成分の周波数及び周期の情報がサーバ装置50に送信され、それぞれの領域における周波数成分の周波数及び周期に対応した1D−FFT解析結果波形等のデータがサーバ装置50から返信されてくる。 When two regions are selected on the screen of the 1D-FFT analysis result waveform in this way, information on the frequency and period of the frequency component in each region is transmitted to the server device 50, and the frequency and period of the frequency component in each region and Data such as a 1D-FFT analysis result waveform corresponding to the cycle is returned from the server device 50.

そして、このような1D−FFT解析結果波形等のデータを受信した異音診断装置10では、例えば、図16、図17に示すように、それぞれの領域の周波数及び周期に対応した1D−FFT解析結果波形を順次切り替えて表示する。 Then, in the abnormal noise diagnostic apparatus 10 that has received data such as the 1D-FFT analysis result waveform, for example, as shown in FIGS. 16 and 17, 1D-FFT analysis corresponding to the frequency and period of each region is performed. The result waveforms are sequentially switched and displayed.

図16は、領域(1)に対応する1D−FFT解析結果波形が表示された場合の表示画面例であり、図17は、領域(2)に対応する1D−FFT解析結果波形が表示された場合の表示画面例である。 FIG. 16 is an example of a display screen when the 1D-FFT analysis result waveform corresponding to the area (1) is displayed, and FIG. 17 shows the 1D-FFT analysis result waveform corresponding to the area (2). This is an example of the display screen of the case.

そして、この図16と図17の表示画面では、画面上に表示されている表示波形切替ボタン83を操作することにより切り替わるようになっている。 Then, the display screens of FIGS. 16 and 17 are switched by operating the display waveform switching button 83 displayed on the screen.

また、図16、図17では、複数の領域のそれぞれの周波数及び周期に対応した周波数解析結果波形をそれぞれ異なる画面において表示した場合が示されていたが、複数の周波数解析結果を重ね合わせて表示するようにしても良い。 Further, in FIGS. 16 and 17, the case where the frequency analysis result waveforms corresponding to the respective frequencies and periods of the plurality of regions are displayed on different screens is shown, but the plurality of frequency analysis results are superimposed and displayed. You may try to do it.

その際に、複数の領域のそれぞれの周波数及び周期に対応した周波数解析結果波形を、今回録音した異音の解析結果波形において、領域が選択される毎に、選択された領域の周波数及び周期に対応した周波数解析結果波形を、既に表示済みの周波数解析結果波形上に順次重ねて表示するようにしても良い。 At that time, the frequency analysis result waveform corresponding to each frequency and period of the plurality of regions is set to the frequency and period of the selected region each time the region is selected in the analysis result waveform of the abnormal sound recorded this time. The corresponding frequency analysis result waveform may be sequentially superimposed and displayed on the already displayed frequency analysis result waveform.

このように、複数の周波数解析結果波形を順次重ね合わせて表示する場合の表示画面例を図18および図19に示す。 18 and 19 show examples of display screens in which a plurality of frequency analysis result waveforms are sequentially superimposed and displayed in this way.

先ず、図18に示す表示画面例では、今回録音した異音の解析結果波形において選択領域(1)が選択され、この選択領域(1)に対応した過去の異音の解析結果波形が表示されている。 First, in the display screen example shown in FIG. 18, the selection area (1) is selected in the analysis result waveform of the abnormal sound recorded this time, and the analysis result waveform of the past abnormal sound corresponding to the selection area (1) is displayed. ing.

そして、この図18に示された表示画面の上において、図19に示す表示画面例のように次の選択領域(2)が選択されると、既に表示済みの選択領域(1)に対応する解析結果波形の上に、選択領域(2)に対応する解析結果波形が重ねて表示される。 Then, when the next selection area (2) is selected on the display screen shown in FIG. 18 as in the display screen example shown in FIG. 19, it corresponds to the already displayed selection area (1). The analysis result waveform corresponding to the selection area (2) is superimposed and displayed on the analysis result waveform.

この図19では、選択領域(1)に対応する解析結果波形は黒色により表示され、選択領域(2)に対応する解析結果波形は赤色により表示されている。 In FIG. 19, the analysis result waveform corresponding to the selected area (1) is displayed in black, and the analysis result waveform corresponding to the selected area (2) is displayed in red.

[変形例]
上記実施形態では、異音診断装置10がタブレット端末装置である場合を用いて説明したが、本発明はこれに限定されるものではなく、他の装置を異音診断装置とするような場合でも本発明を適用することができるものである。例えば、画像形成装置20の操作パネルが本体から脱着可能な構成であって、サーバ装置50と通信可能であり音声信号の取得機能を内蔵しているような構成の場合、この操作パネルを異音診断装置とするようにしても良い。
[Modification example]
In the above embodiment, the case where the abnormal noise diagnostic device 10 is a tablet terminal device has been described, but the present invention is not limited to this, and even when another device is used as the abnormal noise diagnostic device. The present invention can be applied. For example, when the operation panel of the image forming apparatus 20 is detachable from the main body and can communicate with the server apparatus 50 and has a built-in audio signal acquisition function, the operation panel makes an abnormal noise. It may be used as a diagnostic device.

また、上記実施形態では、異音診断装置10がマイク17を内蔵している場合を用いて説明しているが、異音診断装置10に音声録音機能が備えられていれば、マイク等の集音装置を外部に接続することにより音声信号の取得手段を実現するようにしても良い。 Further, in the above embodiment, the case where the abnormal sound diagnostic device 10 has a built-in microphone 17 is described. However, if the abnormal sound diagnostic device 10 is provided with a voice recording function, a collection of microphones and the like is used. A voice signal acquisition means may be realized by connecting a sound device to the outside.

さらに、上記実施形態では、異音解析の対象装置が画像形成装置である場合を用いて説明しているが、異音解析の対象となる装置は画像形成装置に限定されるものではなく、周期性を持った異音を発生させる可能性がある装置であれば他の装置である場合でも本発明は同様に適用可能である。 Further, in the above embodiment, the case where the target device for the abnormal noise analysis is an image forming device is described, but the device to be the target of the abnormal noise analysis is not limited to the image forming device, and the period. The present invention can be similarly applied to any other device as long as it is a device that may generate abnormal noise.

10 異音診断装置
11 CPU
12 メモリ
13 記憶装置
14 無線LANインタフェース(IF)
15 入力装置
16 表示装置
17 マイク
18 制御バス
20 画像形成装置
30 無線LANターミナル
31 音声取得部
32 周波数解析部
33 制御部
34 音声データ格納部
35 表示部
36 通信部
37 音声再生部
40 インターネット通信網
50 サーバ装置
51 通信部
52 制御部
53 波形データ格納部
61 異音の周波数成分
62、63 判定除外領域
70 指
80 選択領域
81 音声再生ボタン
82 STFT解析結果画面表示ボタン
83 1D−FFT解析結果画面表示ボタン
10 Abnormal noise diagnostic device 11 CPU
12 Memory 13 Storage device 14 Wireless LAN interface (IF)
15 Input device 16 Display device 17 Microphone 18 Control bus 20 Image forming device 30 Wireless LAN terminal 31 Voice acquisition unit 32 Frequency analysis unit 33 Control unit 34 Voice data storage unit 35 Display unit 36 Communication unit 37 Voice playback unit 40 Internet communication network 50 Server device 51 Communication unit 52 Control unit 53 Waveform data storage unit 61 Abnormal noise frequency component 62, 63 Judgment exclusion area 70 Finger 80 Selection area 81 Voice playback button 82 FTFT analysis result screen display button 83 1D-FFT analysis result screen display button

Claims (15)

発生した音を入力して音情報を取得する取得手段と、
前記音情報の時間周波数解析を行い、周波数毎の強度分布の時間変化を表す周波数スペクトル波形を生成し、生成された周波数スペクトル波形に対し時間軸方向に周波数解析を行って前記音情報に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する解析手段と、
前記周波数解析結果波形を表示する表示手段と、
表示された前記周波数解析結果波形から異音の周波数成分の可能性を含む領域の指定を受付ける受付手段と、
前記受付手段により受付けられた指定領域に含まれる前記周波数成分の周期および周波数の情報を抽出する抽出手段と、
を備えた診断装置。
An acquisition method for inputting the generated sound and acquiring sound information,
The time- frequency analysis of the sound information is performed to generate a frequency spectrum waveform representing the time change of the intensity distribution for each frequency, and the generated frequency spectrum waveform is frequency-analyzed in the time axis direction and included in the sound information. An analysis means for generating a frequency analysis result waveform showing information on the period and frequency of sound, and
A display means for displaying the frequency analysis result waveform and
A reception means that accepts the designation of the region including the possibility of the frequency component of abnormal noise from the displayed frequency analysis result waveform, and
An extraction means for extracting the period and frequency information of the frequency component included in the designated area received by the reception means, and an extraction means.
Diagnostic device equipped with.
前記表示手段は、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを並べて表示する請求項1記載の診断装置。 The display means has a past frequency analysis result waveform corresponding to the sound period and frequency information extracted by the extraction means, and a frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. The diagnostic device according to claim 1, which is displayed side by side. 前記表示手段は、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを、一方の波形を透過させた状態で重ねて表示する請求項1記載の診断装置。 The display means has a past frequency analysis result waveform corresponding to the sound period and frequency information extracted by the extraction means, and a frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. , The diagnostic apparatus according to claim 1, wherein one of the waveforms is transmitted and displayed in an overlapping manner. 前記表示手段は、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを、予め設定された間隔で一方の波形を透過させた状態で重ねて表示する請求項1記載の診断装置。 The display means has a past frequency analysis result waveform corresponding to the sound period and frequency information extracted by the extraction means, and a frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. The diagnostic device according to claim 1, wherein one of the waveforms is transmitted and displayed in an overlapping manner at preset intervals. 前記表示手段は、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数解析結果波形と、前記取得された音情報の周波数解析を行って得た周波数解析結果波形とを、使用者の操作に基づいて一方の波形を透過させた状態で重ねて表示する請求項1記載の診断装置。 The display means has a past frequency analysis result waveform corresponding to the sound period and frequency information extracted by the extraction means, and a frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. The diagnostic device according to claim 1, wherein one of the waveforms is superimposed and displayed in a transparent state based on the operation of the user. 前記表示手段は、前記取得された音情報の周波数解析を行って得た周波数解析結果波形と周期および周波数が類似する過去の周波数解析結果波形を優先的に表示する請求項2又は3記載の診断装置。 The diagnosis according to claim 2 or 3, wherein the display means preferentially displays a past frequency analysis result waveform having a period and a frequency similar to that of the frequency analysis result waveform obtained by performing frequency analysis of the acquired sound information. apparatus. 前記表示手段は、前記取得された音情報の周波数解析を行って得た周波数解析結果波形と周期および周波数が類似する過去の周波数解析結果波形を、他の周波数解析結果波形とは色を変えて表示する請求項2又は3記載の診断装置。 The display means changes the color of the past frequency analysis result waveform having a period and frequency similar to that of the frequency analysis result waveform obtained by performing the frequency analysis of the acquired sound information from that of other frequency analysis result waveforms. The diagnostic device according to claim 2 or 3 to be displayed. 前記表示手段は、前記受付手段により複数の領域の指定が受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を順次切り替えて表示する請求項1記載の診断装置。 A claim that the display means sequentially switches and displays a frequency analysis result waveform for each frequency component cycle and frequency information included in each of the received regions when the reception means accepts the designation of a plurality of regions. 1. The diagnostic device according to 1. 前記表示手段は、前記受付手段により複数の領域の指定が受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を重ねた状態で表示する請求項1記載の診断装置。 When the reception means accepts the designation of a plurality of regions, the display means claims to display the frequency analysis result waveforms for each of the period and frequency information of the frequency components included in the accepted regions in an superimposed state. Item 1. The diagnostic apparatus according to item 1. 前記表示手段は、前記受付手段により複数の領域の指定が順次受付けられた場合、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を順次重ねた状態で表示する請求項1記載の診断装置。 When the designation of a plurality of regions is sequentially received by the reception means, the display means displays a state in which frequency analysis result waveforms for each frequency component period and frequency information included in each received region are sequentially superimposed. The diagnostic device according to claim 1. 前記表示手段は、受付けられた各領域に含まれる周波数成分の周期および周波数の情報毎の周波数解析結果波形を、それぞれ異なる表示方法により重ねて表示する請求項10記載の診断装置。 The diagnostic device according to claim 10, wherein the display means superimposes and displays frequency analysis result waveforms for each frequency component period and frequency information included in each received region by different display methods. 外部装置との間で通信を行う通信手段と、
前記抽出手段により抽出された音の周期および周波数の情報を前記通信手段を介して外部装置に送信する送信手段と、
前記解析手段により生成された周波数解析結果波形に対応する過去の周波数解析結果波形を前記通信手段を介して外部装置から受信する受信手段とをさらに備え、
前記表示手段は、前記解析手段により生成された周波数解析結果波形と、前記受信手段により受信された過去の周波数解析結果波形とを表示する請求項1から11のいずれか1項記載の診断装置。
Communication means for communicating with external devices and
A transmission means for transmitting sound cycle and frequency information extracted by the extraction means to an external device via the communication means, and a transmission means.
Further provided with a receiving means for receiving a past frequency analysis result waveform corresponding to the frequency analysis result waveform generated by the analysis means from an external device via the communication means.
The diagnostic device according to any one of claims 1 to 11, wherein the display means displays the frequency analysis result waveform generated by the analysis means and the past frequency analysis result waveform received by the receiving means.
前記表示手段は、利用者の操作に基づいて、取得された音情報の周波数毎の信号強度分布の時間変化を表した周波数スペクトル波形と、前記抽出手段により抽出された音の周期および周波数の情報に対応した過去の周波数スペクトル波形とを並べて表示する請求項1から12のいずれか記載の診断装置。 The display means has a frequency spectrum waveform representing a time change of the signal intensity distribution for each frequency of the acquired sound information based on the operation of the user, and information on the period and frequency of the sound extracted by the extraction means. The diagnostic apparatus according to any one of claims 1 to 12, which displays the past frequency spectrum waveforms corresponding to the above side by side. 発生した音を入力して音情報を取得する取得手段と、前記音情報の時間周波数解析を行い、周波数毎の強度分布の時間変化を表す周波数スペクトル波形を生成し、生成された周波数スペクトル波形に対し時間軸方向に周波数解析を行って前記音情報に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する解析手段と、前記周波数解析結果波形を表示する表示手段と、表示された前記周波数解析結果波形から異音の周波数成分の可能性を含む領域の指定を受付ける受付手段と、前記受付手段により受付けられた指定領域に含まれる前記周波数成分の周期および周波数の情報を抽出する抽出手段と、外部装置との間で通信を行う通信手段と、前記抽出手段により抽出された音の周期および周波数の情報を前記通信手段を介して外部装置に送信する第1の送信手段と、前記解析手段により生成された周波数解析結果波形に対応する過去の周波数解析結果波形を前記通信手段を介して外部装置から受信する受信手段とを備えた診断装置と、
異音の音情報の周波数解析を行って得た複数の過去の周波数解析結果波形を格納する格納手段と、前記診断装置から音の周期および周波数の情報を受信した場合、前記格納手段に格納されている前記複数の過去の周波数解析結果波形の中から、受信した音の周期および周波数の情報に合致したものを選択して前記診断装置に送信する第2の送信手段とを備えたサーバ装置と、
を備えた診断システム。
The acquisition means for inputting the generated sound to acquire the sound information and the time- frequency analysis of the sound information are performed to generate a frequency spectrum waveform representing the time change of the intensity distribution for each frequency, and the generated frequency spectrum waveform is used. On the other hand, an analysis means for generating a frequency analysis result waveform showing information on the period and frequency of the sound included in the sound information by performing frequency analysis in the time axis direction, and a display means for displaying the frequency analysis result waveform are displayed. From the frequency analysis result waveform, the reception means that accepts the designation of the region including the possibility of the frequency component of the abnormal sound and the period and frequency information of the frequency component included in the designated region received by the reception means are extracted. A communication means for communicating between the extraction means and the external device, and a first transmission means for transmitting the sound cycle and frequency information extracted by the extraction means to the external device via the communication means. A diagnostic device including a receiving means for receiving a past frequency analysis result waveform corresponding to the frequency analysis result waveform generated by the analysis means from an external device via the communication means, and a diagnostic device.
A storage means for storing a plurality of past frequency analysis result waveforms obtained by performing frequency analysis of abnormal sound information, and when sound cycle and frequency information is received from the diagnostic device, it is stored in the storage means. A server device including a second transmission means for selecting a sound that matches the received sound cycle and frequency information from the plurality of past frequency analysis result waveforms and transmitting the sound to the diagnostic device. ,
Diagnostic system with.
発生した音を入力して音情報を取得する取得ステップと、
前記音情報の時間周波数解析を行い、周波数毎の強度分布の時間変化を表す周波数スペクトル波形を生成し、生成された周波数スペクトル波形に対し時間軸方向に周波数解析を行って前記音情報に含まれる音の周期および周波数の情報を示す周波数解析結果波形を生成する解析ステップと、
前記周波数解析結果波形を表示する表示ステップと、
表示された前記周波数解析結果波形から異音の周波数成分の可能性を含む領域の指定を受付ける受付ステップと、
前記受付ステップにおいて受付けられた指定領域に含まれる前記周波数成分の周期および周波数の情報を抽出する抽出ステップとをコンピュータに実行させるためのプログラム。
The acquisition step of inputting the generated sound and acquiring the sound information,
The time- frequency analysis of the sound information is performed to generate a frequency spectrum waveform representing the time change of the intensity distribution for each frequency, and the generated frequency spectrum waveform is frequency-analyzed in the time axis direction and included in the sound information. An analysis step to generate a frequency analysis result waveform showing information on the period and frequency of sound, and
A display step for displaying the frequency analysis result waveform and
A reception step that accepts the designation of the region including the possibility of the frequency component of abnormal noise from the displayed frequency analysis result waveform, and
A program for causing a computer to perform an extraction step of extracting information on the period and frequency of the frequency component included in the designated area received in the reception step.
JP2016184068A 2016-09-21 2016-09-21 Diagnostic equipment, diagnostic systems and programs Active JP6822036B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016184068A JP6822036B2 (en) 2016-09-21 2016-09-21 Diagnostic equipment, diagnostic systems and programs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016184068A JP6822036B2 (en) 2016-09-21 2016-09-21 Diagnostic equipment, diagnostic systems and programs

Publications (2)

Publication Number Publication Date
JP2018048886A JP2018048886A (en) 2018-03-29
JP6822036B2 true JP6822036B2 (en) 2021-01-27

Family

ID=61766239

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016184068A Active JP6822036B2 (en) 2016-09-21 2016-09-21 Diagnostic equipment, diagnostic systems and programs

Country Status (1)

Country Link
JP (1) JP6822036B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023033848A (en) 2021-08-30 2023-03-13 トヨタ自動車株式会社 Abnormal noise specification device, abnormal noise specification method and abnormal noise specification program

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4592123B2 (en) * 1996-09-13 2010-12-01 東芝エレベータ株式会社 Unsteady signal analyzer and medium on which unsteady signal analysis program is recorded
JP3449194B2 (en) * 1997-01-28 2003-09-22 松下電工株式会社 Method and apparatus for diagnosing abnormalities in rotating equipment
JP4655831B2 (en) * 2005-08-31 2011-03-23 横河電機株式会社 Waveform measuring device
JP5744783B2 (en) * 2012-03-29 2015-07-08 株式会社 ゼネテック Measuring instrument and vibration impact measurement system
JP6242772B2 (en) * 2014-09-12 2017-12-06 株式会社神戸製鋼所 Rotating machine abnormality detecting device, rotating machine abnormality detecting method, and rotating machine
JP2016113260A (en) * 2014-12-15 2016-06-23 株式会社日立ビルシステム Elevator abnormal sound diagnostic system
JP5954604B1 (en) * 2015-12-14 2016-07-20 富士ゼロックス株式会社 Diagnostic device, diagnostic system and program

Also Published As

Publication number Publication date
JP2018048886A (en) 2018-03-29

Similar Documents

Publication Publication Date Title
US10911607B2 (en) Diagnosing an image forming apparatus based on sound signal analysis
JP5954648B1 (en) Terminal device, diagnostic system, and program
US10352820B2 (en) Diagnostic device, diagnostic system, diagnostic method, and non-transitory computer-readable medium
JP5939480B1 (en) Terminal device, diagnostic system and program
JP5954604B1 (en) Diagnostic device, diagnostic system and program
US9992355B2 (en) Diagnostic apparatus, diagnostic system, and non-transitory computer readable medium
JP5954605B1 (en) Diagnostic device, diagnostic system and program
JP6840971B2 (en) Diagnostic equipment, diagnostic systems and programs
CN106915166B (en) Diagnostic device, diagnostic system, and diagnostic method
JP5943313B1 (en) Diagnostic device, diagnostic system and program
JP6822036B2 (en) Diagnostic equipment, diagnostic systems and programs
JP6834223B2 (en) Diagnostic equipment, diagnostic systems and programs
WO2017094270A1 (en) Diagnosis device, diagnosis system, diagnosis method and program
JP6016149B1 (en) Terminal device, diagnostic system, and program
JP6763255B2 (en) Diagnostic equipment, diagnostic systems and programs
JP6868176B2 (en) Diagnostic equipment, diagnostic systems and programs

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190830

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200715

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200717

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200902

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20201102

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20201208

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201221

R150 Certificate of patent or registration of utility model

Ref document number: 6822036

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350