JP7205684B2 - minutes generation system and minutes generation program - Google Patents
minutes generation system and minutes generation program Download PDFInfo
- Publication number
- JP7205684B2 JP7205684B2 JP2018171569A JP2018171569A JP7205684B2 JP 7205684 B2 JP7205684 B2 JP 7205684B2 JP 2018171569 A JP2018171569 A JP 2018171569A JP 2018171569 A JP2018171569 A JP 2018171569A JP 7205684 B2 JP7205684 B2 JP 7205684B2
- Authority
- JP
- Japan
- Prior art keywords
- importance
- minutes
- term
- terms
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、音声データから音声認識によって文字データとしての議事録を生成する議事録生成システムおよび議事録生成プログラムに関する。 BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a minutes generation system and a minutes generation program for generating minutes as text data from voice data by speech recognition.
従来、音声データから音声認識によって文字データとしての議事録を生成する議事録生成システムが知られている（例えば、特許文献１－３参照。）。 2. Description of the Related Art Conventionally, there has been known a minutes generation system that generates minutes as text data from voice data by speech recognition (see Patent Documents 1 to 3, for example).
しかしながら、従来の議事録生成システムにおいては、議事録における重要な内容を利用者に容易に理解させることが困難であるという問題がある。 However, in the conventional minutes generation system, there is a problem that it is difficult for the user to easily understand the important contents of the minutes.
そこで、本発明は、議事録における重要な内容を利用者に容易に理解させることができる議事録生成システムおよび議事録生成プログラムを提供することを目的とする。 SUMMARY OF THE INVENTION Accordingly, it is an object of the present invention to provide a minutes generation system and a minutes generation program that enable a user to easily understand the important contents of the minutes.
本発明の議事録生成システムは、音声データから音声認識によって文字データとしての議事録を生成する議事録生成部と、前記議事録に含まれる用語の重要度を判定する重要度判定部と、前記重要度に基づいた出力内容で前記用語を出力する用語出力部とを備え、前記重要度判定部は、前記音声データにおける音声の音調の変化と、前記音声データにおける音声の音量の変化と、前記音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて前記音声データにおける重要な期間を特定し、前記重要な期間に含まれる前記用語の前記重要度を、前記重要な期間に含まれない前記用語の前記重要度より高く判定することを特徴とする。 The minutes generation system of the present invention includes a minutes generation unit that generates minutes as character data by speech recognition from voice data, an importance determination unit that determines the importance of terms included in the minutes, and a term output unit for outputting the term with output content based on the degree of importance, wherein the degree of importance determination unit controls changes in tone of voice in the voice data, changes in volume of voice in the voice data, and identifying important time periods in the audio data based on at least one of existence of an endorsement term indicating endorsement in the audio data, and including the importance of the terms included in the important time periods in the important time periods. It is characterized in that the importance is determined higher than the importance of the term that is not included in the term.
この構成により、本発明の議事録生成システムは、音声データにおける音声の音調の変化と、音声データにおける音声の音量の変化と、音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて音声データにおける重要な期間を特定し、重要な期間に含まれる用語の重要度を、重要な期間に含まれない用語の重要度より高く判定し、重要度に基づいた出力内容で用語を出力するので、議事録における重要な用語を利用者に容易に理解させることができ、その結果、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the minutes generation system of the present invention is based on at least one of a change in the tone of the voice in the voice data, a change in the volume of the voice in the voice data, and the presence of an approval term indicating approval in the voice data. to identify important periods in the speech data, determine the importance of terms included in the important period to be higher than the importance of terms not included in the important period, and output the terms based on the importance Therefore, the user can easily understand the important terms in the minutes, and as a result, the user can easily understand the important contents in the minutes.
本発明の議事録生成システムにおいて、前記用語出力部は、前記重要度が特定の程度以上である前記用語を強調した状態で前記議事録を出力しても良い。 In the minutes generating system of the present invention, the term output unit may output the minutes while emphasizing the term whose importance is equal to or higher than a specific level.
この構成により、本発明の議事録生成システムは、議事録における重要な用語を議事録上で利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the minutes generation system of the present invention can make the user easily understand the important terms in the minutes on the minutes, so that the user can easily understand the important contents in the minutes. be able to.
本発明の議事録生成システムにおいて、前記用語出力部は、前記重要度の大きさ順に、または、前記重要度が特定の程度以上である前記用語を強調した状態で、前記用語の一覧を出力しても良い。 In the minutes generation system of the present invention, the term output unit outputs the list of terms in order of importance or in a state in which the terms having a specific degree of importance or higher are emphasized. can be
この構成により、本発明の議事録生成システムは、議事録における重要な用語を用語の一覧上で利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the minutes generation system of the present invention can allow the user to easily understand the important terms in the minutes on the list of terms, so that the user can easily understand the important contents in the minutes. can be made
本発明の議事録生成システムにおいて、前記用語出力部は、前記音声データにおける音声の音調の変化に基づいた値を示す軸と、前記音声データにおける音声の音量の変化に基づいた値を示す軸と、前記音声データにおける前記賛同用語の存在に基づいた値を示す軸とのうち、少なくとも２軸によって構成される空間上に、前記重要度が特定の程度以上である前記用語を配置したマップを出力しても良い。 In the minutes generating system of the present invention, the term output unit has an axis indicating values based on changes in tone of speech in the audio data, and an axis indicating values based on changes in volume of speech in the audio data. and an axis indicating a value based on the presence of the agreeing term in the voice data, and outputting a map in which the terms having the degree of importance equal to or higher than a specific level are arranged on a space formed by at least two axes. You can
この構成により、本発明の議事録生成システムは、音声データにおける音声の音調の変化に基づいた値を示す軸と、音声データにおける音声の音量の変化に基づいた値を示す軸と、音声データにおける賛同用語の存在に基づいた値を示す軸とのうち、少なくとも２軸によって構成される空間上に用語を配置したマップ上で、議事録における重要な用語の重要度の詳細な内容を利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the minutes generation system of the present invention has an axis indicating a value based on a change in the tone of the voice in the voice data, an axis indicating a value based on the change in the volume of the voice in the voice data, and an axis indicating the value based on the change in the volume of the voice in the voice data. Users can see the detailed content of the importance of important terms in the minutes on a map that arranges terms on a space composed of at least two axes, one of which indicates the value based on the existence of agreeing terms. Since the content can be easily understood, the user can easily understand the important contents of the minutes.
本発明の議事録生成システムにおいて、前記用語出力部は、前記重要度が特定の程度以上である前記用語同士の相互の関係を示す相互関係図を出力し、前記相互関係図は、前記音声データにおいて同一の前記重要な期間に含まれる前記用語同士が相互に関係があることを示しても良い。 In the minutes generation system of the present invention, the term output unit outputs a correlation diagram showing a mutual relationship between the terms having the degree of importance equal to or higher than a specific level, and the correlation diagram is based on the speech data. may indicate that the terms included in the same significant period are related to each other.
この構成により、本発明の議事録生成システムは、用語同士の相互の関係を示す相互関係図上で、議事録における重要な用語同士の相互の関係を利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the minutes generation system of the present invention can allow the user to easily understand the mutual relationship between important terms in the minutes on the mutual relationship diagram showing the mutual relationship between terms. , the user can easily understand the important contents in the minutes.
本発明の議事録生成システムにおいて、前記用語出力部は、前記重要度が特定の程度以上である前記用語が含まれるフレーズまたは文を前記議事録から抽出して出力しても良い。 In the minutes generation system of the present invention, the term output unit may extract and output from the minutes a phrase or sentence containing the term having a specific level of importance or higher.
この構成により、本発明の議事録生成システムは、重要度が特定の程度以上である用語が含まれるフレーズまたは文を議事録から抽出して出力するので、議事録における重要なフレーズまたは文を利用者に容易に理解させることができ、その結果、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the minutes generation system of the present invention extracts and outputs phrases or sentences containing terms whose importance is above a certain degree from the minutes, so that important phrases or sentences in the minutes can be used. As a result, the user can easily understand the important contents of the minutes.
本発明の議事録生成プログラムは、音声データから音声認識によって文字データとしての議事録を生成する議事録生成部と、前記議事録に含まれる用語の重要度を判定する重要度判定部と、前記重要度に基づいた出力内容で前記用語を出力する用語出力部とをコンピューターに実現させ、前記重要度判定部は、前記音声データにおける音声の音調の変化と、前記音声データにおける音声の音量の変化と、前記音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて前記音声データにおける重要な期間を特定し、前記重要な期間に含まれる前記用語の前記重要度を、前記重要な期間に含まれない前記用語の前記重要度より高く判定することを特徴とする。 A program for generating minutes of the present invention includes: a minutes generating unit for generating minutes as character data by speech recognition from voice data; an importance determining unit for determining the importance of terms included in the minutes; A term output unit for outputting the term with output content based on the degree of importance is implemented in a computer, and the degree of importance determination unit changes the tone of the voice in the voice data and changes the volume of the voice in the voice data. and presence of an endorsement term indicating endorsement in the voice data; It is characterized in that the importance of the term that is not included in the period is determined to be higher than that of the term.
この構成により、本発明の議事録生成プログラムを実行するコンピューターは、音声データにおける音声の音調の変化と、音声データにおける音声の音量の変化と、音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて音声データにおける重要な期間を特定し、重要な期間に含まれる用語の重要度を、重要な期間に含まれない用語の重要度より高く判定し、重要度に基づいた出力内容で用語を出力するので、議事録における重要な用語を利用者に容易に理解させることができ、その結果、議事録における重要な内容を利用者に容易に理解させることができる。 With this configuration, the computer that executes the program for generating minutes of the present invention detects at least changes in tone of voice in the voice data, changes in volume of voice in the voice data, and presence of approval terms indicating approval in the voice data. Identify important periods in speech data based on one, determine the importance of terms included in the important period higher than the importance of terms not included in the important period, and output content based on the importance Since the terms are output in , the user can easily understand the important terms in the minutes, and as a result, the user can easily understand the important contents in the minutes.
本発明の議事録生成システムおよび議事録生成プログラムは、議事録における重要な内容を利用者に容易に理解させることができる。 INDUSTRIAL APPLICABILITY The minutes generation system and minutes generation program of the present invention can allow the user to easily understand the important contents of the minutes.
以下、本発明の実施の形態について、図面を用いて説明する。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described with reference to the drawings.
まず、本発明の一実施の形態に係る議事録生成システムの構成について説明する。 First, the configuration of the minutes generation system according to one embodiment of the present invention will be described.
図１は、本実施の形態に係る議事録生成システム１０のブロック図である。 FIG. 1 is a block diagram of minutes generation system 10 according to the present embodiment.
図１に示すように、議事録生成システム１０は、種々の操作が入力される例えばキーボード、マウスなどの操作デバイスである操作部１１と、種々の情報を表示する例えばＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）などの表示デバイスである表示部１２と、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットなどのネットワーク経由で、または、ネットワークを介さずに有線または無線によって直接に、外部の装置と通信を行う通信デバイスである通信部１３と、各種の情報を記憶する例えば半導体メモリー、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などの不揮発性の記憶デバイスである記憶部１４と、議事録生成システム１０全体を制御する制御部１５とを備えている。議事録生成システム１０は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）などのコンピューターによって構成されている。
As shown in FIG. 1, the minutes generation system 10 includes an
記憶部１４は、議事録を生成するための議事録生成プログラム１４ａを記憶している。議事録生成プログラム１４ａは、例えば、議事録生成システム１０の製造段階で議事録生成システム１０にインストールされていても良いし、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｋ）、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｋ）、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）メモリーなどの外部の記憶媒体から議事録生成システム１０に追加でインストールされても良いし、ネットワーク上から議事録生成システム１０に追加でインストールされても良い。
The storage unit 14 stores a
記憶部１４は、議事録のデータ（以下「議事録データ」という。）１４ｂを記憶可能である。記憶部１４は、議事録データ１４ｂ以外にも、議事録データを少なくとも１つ記憶可能である。
The storage unit 14 can store minutes data (hereinafter referred to as "minutes data") 14b. The storage unit 14 can store at least one piece of minutes data in addition to the
記憶部１４は、例えば「なるほど」、「いいね」などの賛同を示す用語（以下「賛同用語」という。）が登録される賛同用語データベース１４ｃを記憶している。
The storage unit 14 stores an
記憶部１４は、会議に参加する可能性がある者の音声の特徴を発声者毎に示す音声特徴情報１４ｄを記憶可能である。
The storage unit 14 can store
制御部１５は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）と、プログラムおよび各種のデータを記憶しているＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）と、制御部１５のＣＰＵの作業領域として用いられるメモリーとしてのＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）とを備えている。制御部１５のＣＰＵは、記憶部１４または制御部１５のＲＯＭに記憶されているプログラムを実行する。 The control unit 15 includes, for example, a CPU (Central Processing Unit), a ROM (Read Only Memory) storing programs and various data, and a RAM (Random Access Memory). The CPU of the control unit 15 executes programs stored in the storage unit 14 or the ROM of the control unit 15 .
制御部１５は、議事録生成プログラム１４ａを実行することによって、音声データから音声認識によって文字データとしての議事録を生成する議事録生成部１５ａと、議事録に含まれる用語の重要度を判定する重要度判定部１５ｂと、重要度に基づいた出力内容で用語を出力する用語出力部１５ｃとを実現する。
By executing the
次に、議事録生成システム１０の動作について説明する。 Next, the operation of the minutes generation system 10 will be described.
まず、会議の音声データに基づいて議事録を生成する場合の議事録生成システム１０の動作について説明する。 First, the operation of the minutes generation system 10 when generating minutes based on audio data of a conference will be described.
図２は、会議の音声データに基づいて議事録を生成する場合の議事録生成システム１０の動作のフローチャートである。 FIG. 2 is a flow chart of the operation of minutes generation system 10 when minutes are generated based on audio data of a conference.
利用者は、議事録の生成の基になる音声データ（以下「対象音声データ」という。）を操作部１１を介して指定して、議事録生成システム１０に議事録の生成を操作部１１を介して指示することができる。議事録生成システム１０の議事録生成部１５ａは、議事録の生成が指示されると、図２に示す動作を実行する。
The user designates the audio data on which the minutes are to be generated (hereinafter referred to as "target audio data") through the
図２に示すように、議事録生成部１５ａは、音声特徴情報１４ｄを利用して対象音声データに対して音声認識を実行することによって、対象音声データに含まれる音声の発声者を全て検出する（Ｓ５１）。
As shown in FIG. 2, the
次いで、議事録生成部１５ａは、対象音声データに対して音声認識を実行することによって、対象音声データから文字データを生成する（Ｓ５２）。ここで、議事録生成部１５ａは、対象音声データから文字データを生成する場合、対象音声データから生成した文字データにおけるいずれの文字が、Ｓ５１において検出したいずれの発声者による発言に基づいた文字であるかも特定する。
Next, the
次いで、重要度判定部１５ｂは、Ｓ５２において生成した文字データに含まれる用語を抽出する（Ｓ５３）。重要度判定部１５ｂは、Ｓ５３において、重複がないように用語を抽出する。
Next, the
次いで、重要度判定部１５ｂは、音声データにおける音調の変化に基づいて用語の重要度を判定する音調式重要度判定処理を実行する（Ｓ５４）。
Next, the
図３は、音調式重要度判定処理のフローチャートである。 FIG. 3 is a flow chart of the tone formula importance determination process.
図３に示すように、重要度判定部１５ｂは、Ｓ５１において検出された全ての発声者のうち、今回の音調式重要度判定処理において未だ対象にしていない１人の発声者のみを対象とする（Ｓ６１）。
As shown in FIG. 3, the
次いで、重要度判定部１５ｂは、対象音声データにおいて現在の対象の発声者の音声の音調が特定の高さ超になる時点を検索する（Ｓ６２）。ここで、特定の高さは、対象音声データにおける現在の対象の発声者の音声に基づいて設定されても良いし、音声特徴情報１４ｄにおける現在の対象の発声者の音声に基づいて設定されても良い。例えば、特定の高さは、対象音声データにおける現在の対象の発声者の最初の音声の高さでも良いし、対象音声データにおける現在の対象の発声者の全ての音声の高さの平均でも良い。
Next, the
次いで、重要度判定部１５ｂは、Ｓ６２における検索において現在の対象の発声者の音声の音調が特定の高さ超になる時点が抽出されたか否かを判断する（Ｓ６３）。
Next, the
重要度判定部１５ｂは、現在の対象の発声者の音声の音調が特定の高さ超になる時点が抽出されたとＳ６３において判断すると、Ｓ６２における検索において抽出された時点のうち、今回の音調式重要度判定処理において未だ対象にしていない１つの時点のみを対象とする（Ｓ６４）。
If the
重要度判定部１５ｂは、Ｓ６４の処理の後、対象音声データにおいて現在の対象の時点を含む特定の期間を重要な期間として特定する（Ｓ６５）。ここで、現在の対象の時点を含む特定の期間とは、例えば、現在の対象の時点を基準として前の１０秒と、後ろの１０秒との合計２０秒間である。
After the processing of S64, the
重要度判定部１５ｂは、Ｓ６５の処理の後、Ｓ５３において抽出された用語のうち、対象音声データにおいてＳ６５において特定した期間に含まれる用語の重要度に特定の値を加算する（Ｓ６６）。ここで、重要度判定部１５ｂは、Ｓ６５において特定した期間に対象の用語が１回存在する場合には対象の用語の重要度に１ポイントを加算し、２回存在する場合には対象の用語の重要度に２ポイントを加算し、３回存在する場合には対象の用語の重要度に３ポイントを加算するなど、Ｓ６５において特定した期間に対象の用語が存在する回数に応じたポイントを対象の用語の重要度にＳ６６において加算する。また、重要度判定部１５ｂは、Ｓ６５において特定した期間に用語の後端が含まれる場合にのみ、Ｓ６５において特定した期間に、この用語が含まれるとＳ６６において判定する。
After the process of S65, the
重要度判定部１５ｂは、Ｓ６６の処理の後、Ｓ６２における検索において抽出された全ての時点を今回の音調式重要度判定処理において対象にしたか否かを判断する（Ｓ６７）。
After the process of S66, the
重要度判定部１５ｂは、Ｓ６２における検索において抽出された少なくとも１つの時点を未だ対象にしていないとＳ６７において判断すると、Ｓ６４の処理を実行する。
When the
重要度判定部１５ｂは、現在の対象の発声者の音声の音調が特定の高さ超になる時点が抽出されなかったとＳ６３において判断するか、Ｓ６２における検索において抽出された全ての時点を対象にしたとＳ６７において判断すると、Ｓ５１において検出された全ての発声者を今回の音調式重要度判定処理において対象にしたか否かを判断する（Ｓ６８）。
The
重要度判定部１５ｂは、Ｓ５１において検出された少なくとも１人の発声者を未だ対象にしていないとＳ６８において判断すると、Ｓ６１の処理を実行する。
If the
重要度判定部１５ｂは、Ｓ５１において検出された全ての発声者を対象にしたとＳ６８において判断すると、図３に示す音調式重要度判定処理を終了する。
When the
図２に示すように、重要度判定部１５ｂは、Ｓ５４の音調式重要度判定処理の後、音声データにおける音量の変化に基づいて用語の重要度を判定する音量式重要度判定処理を実行する（Ｓ５５）。
As shown in FIG. 2, after the tone-based importance determination process in S54, the
図４は、音量式重要度判定処理のフローチャートである。 FIG. 4 is a flowchart of volume-based importance determination processing.
図４に示すように、重要度判定部１５ｂは、Ｓ５１において検出された全ての発声者のうち、今回の音量式重要度判定処理において未だ対象にしていない１人の発声者のみを対象とする（Ｓ７１）。
As shown in FIG. 4, the
次いで、重要度判定部１５ｂは、対象音声データにおいて現在の対象の発声者の音声の音量が特定の大きさ超になる時点を検索する（Ｓ７２）。ここで、特定の大きさは、対象音声データにおける現在の対象の発声者の音声に基づいて設定されても良いし、音声特徴情報１４ｄにおける現在の対象の発声者の音声に基づいて設定されても良い。例えば、特定の大きさは、対象音声データにおける現在の対象の発声者の最初の音声の大きさでも良いし、対象音声データにおける現在の対象の発声者の全ての音声の大きさの平均でも良い。
Next, the
次いで、重要度判定部１５ｂは、Ｓ７２における検索において現在の対象の発声者の音声の音量が特定の大きさ超になる時点が抽出されたか否かを判断する（Ｓ７３）。
Next, the
重要度判定部１５ｂは、現在の対象の発声者の音声の音量が特定の大きさ超になる時点が抽出されたとＳ７３において判断すると、Ｓ７２における検索において抽出された時点のうち、今回の音量式重要度判定処理において未だ対象にしていない１つの時点のみを対象とする（Ｓ７４）。
If the importance
重要度判定部１５ｂは、Ｓ７４の処理の後、対象音声データにおいて現在の対象の時点を含む特定の期間を重要な期間として特定する（Ｓ７５）。ここで、現在の対象の時点を含む特定の期間とは、例えば、現在の対象の時点を基準として前の１０秒と、後ろの１０秒との合計２０秒間である。
After the process of S74, the
重要度判定部１５ｂは、Ｓ７５の処理の後、Ｓ５３において抽出された用語のうち、対象音声データにおいてＳ７５において特定した期間に含まれる用語の重要度に特定の値を加算する（Ｓ７６）。ここで、重要度判定部１５ｂは、Ｓ７５において特定した期間に対象の用語が存在する回数に応じたポイントを対象の用語の重要度にＳ７６において加算する。また、重要度判定部１５ｂは、Ｓ７５において特定した期間に用語の後端が含まれる場合にのみ、Ｓ７５において特定した期間に、この用語が含まれるとＳ７６において判定する。
After the process of S75, the
重要度判定部１５ｂは、Ｓ７６の処理の後、Ｓ７２における検索において抽出された全ての時点を今回の音量式重要度判定処理において対象にしたか否かを判断する（Ｓ７７）。
After the processing of S76, the
重要度判定部１５ｂは、Ｓ７２における検索において抽出された少なくとも１つの時点を未だ対象にしていないとＳ７７において判断すると、Ｓ７４の処理を実行する。
When the
重要度判定部１５ｂは、現在の対象の発声者の音声の音量が特定の大きさ超になる時点が抽出されなかったとＳ７３において判断するか、Ｓ７２における検索において抽出された全ての時点を対象にしたとＳ７７において判断すると、Ｓ５１において検出された全ての発声者を今回の音量式重要度判定処理において対象にしたか否かを判断する（Ｓ７８）。
The
重要度判定部１５ｂは、Ｓ５１において検出された少なくとも１人の発声者を未だ対象にしていないとＳ７８において判断すると、Ｓ７１の処理を実行する。
If the
重要度判定部１５ｂは、Ｓ５１において検出された全ての発声者を対象にしたとＳ７８において判断すると、図４に示す音量式重要度判定処理を終了する。
When the
図２に示すように、重要度判定部１５ｂは、Ｓ５５の音量式重要度判定処理の後、音声データにおける賛同用語の存在に基づいて用語の重要度を判定する賛同用語式重要度判定処理を実行する（Ｓ５６）。
As shown in FIG. 2, after the volume level importance determination process in S55, the
図５は、賛同用語式重要度判定処理のフローチャートである。 FIG. 5 is a flow chart of the approval term expression importance determination process.
図５に示すように、重要度判定部１５ｂは、Ｓ５１において検出された全ての発声者のうち、今回の賛同用語式重要度判定処理において未だ対象にしていない１人の発声者のみを対象とする（Ｓ８１）。
As shown in FIG. 5, the
次いで、重要度判定部１５ｂは、Ｓ５２において生成した文字データと、賛同用語データベース１４ｃとに基づいて、対象音声データにおいて現在の対象の発声者によって賛同用語が発声された時点を検索する（Ｓ８２）。ここで、重要度判定部１５ｂは、対象音声データにおける賛同用語の後端に対応する時点を、賛同用語が発声された時点として扱う。
Next, the
次いで、重要度判定部１５ｂは、Ｓ８２における検索において現在の対象の発声者によって賛同用語が発声された時点が抽出されたか否かを判断する（Ｓ８３）。
Next, the
重要度判定部１５ｂは、現在の対象の発声者によって賛同用語が発声された時点が抽出されたとＳ８３において判断すると、Ｓ８２における検索において抽出された時点のうち、今回の賛同用語式重要度判定処理において未だ対象にしていない１つの時点のみを対象とする（Ｓ８４）。
If the
重要度判定部１５ｂは、Ｓ８４の処理の後、対象音声データにおいて現在の対象の時点を含む特定の期間を重要な期間として特定する（Ｓ８５）。ここで、現在の対象の時点を含む特定の期間とは、例えば、現在の対象の時点を基準として前の１０秒と、後ろの１０秒との合計２０秒間である。
After the processing of S84, the
重要度判定部１５ｂは、Ｓ８５の処理の後、Ｓ５３において抽出された用語のうち、対象音声データにおいてＳ８５において特定した期間に含まれる用語の重要度に特定の値を加算する（Ｓ８６）。ここで、重要度判定部１５ｂは、Ｓ８５において特定した期間に対象の用語が存在する回数に応じたポイントを対象の用語の重要度にＳ８６において加算する。また、重要度判定部１５ｂは、Ｓ８５において特定した期間に用語の後端が含まれる場合にのみ、Ｓ８５において特定した期間に、この用語が含まれるとＳ８６において判定する。
After the process of S85, the
重要度判定部１５ｂは、Ｓ８６の処理の後、Ｓ８２における検索において抽出された全ての時点を今回の賛同用語式重要度判定処理において対象にしたか否かを判断する（Ｓ８７）。
After the process of S86, the
重要度判定部１５ｂは、Ｓ８２における検索において抽出された少なくとも１つの時点を未だ対象にしていないとＳ８７において判断すると、Ｓ８４の処理を実行する。
If the
重要度判定部１５ｂは、現在の対象の発声者によって賛同用語が発声された時点が抽出されなかったとＳ８３において判断するか、Ｓ８２における検索において抽出された全ての時点を対象にしたとＳ８７において判断すると、Ｓ５１において検出された全ての発声者を今回の賛同用語式重要度判定処理において対象にしたか否かを判断する（Ｓ８８）。
The
重要度判定部１５ｂは、Ｓ５１において検出された少なくとも１人の発声者を未だ対象にしていないとＳ８８において判断すると、Ｓ８１の処理を実行する。
If the
重要度判定部１５ｂは、Ｓ５１において検出された全ての発声者を対象にしたとＳ８８において判断すると、図５に示す賛同用語式重要度判定処理を終了する。
When the
図２に示すように、重要度判定部１５ｂは、Ｓ５６の賛同用語式重要度判定処理の後、Ｓ５４～Ｓ５６の処理によって用語毎に判定された重要度を示す用語重要度情報を生成する（Ｓ５７）。
As shown in FIG. 2, the
次いで、議事録生成部１５ａは、Ｓ５２において生成した文字データと、Ｓ５７において生成した用語重要度情報とを含む議事録データを生成する（Ｓ５８）。
Next, the
次いで、議事録生成部１５ａは、Ｓ５８において生成した議事録データを記憶部１４に記憶して（Ｓ５９）、図２に示す動作を終了する。
Next, the
次に、議事録を出力する場合の議事録生成システム１０の動作について説明する。 Next, the operation of the minutes generation system 10 when outputting minutes will be described.
図６は、議事録を出力する場合の議事録生成システム１０の動作のフローチャートである。 FIG. 6 is a flowchart of the operation of the minutes generation system 10 when outputting minutes.
利用者は、記憶部１４に記憶されているいずれかの議事録データを操作部１１を介して指定して、議事録生成システム１０に議事録の出力を操作部１１を介して指示することができる。議事録生成システム１０の用語出力部１５ｃは、議事録の出力が指示されると、図６に示す動作を実行する。
The user can specify any of the minutes data stored in the storage unit 14 via the
図６に示すように、用語出力部１５ｃは、議事録データの用語重要度情報に基づいて、特定の程度、すなわち、特定のポイント以上の重要度が付されている用語を抽出する（Ｓ９１）。
As shown in FIG. 6, the
次いで、用語出力部１５ｃは、Ｓ９１において抽出した用語を強調した状態で、議事録データに含まれる文字データ、すなわち、議事録を表示部１２への表示によって出力して（Ｓ９２）、図６に示す動作を終了する。ここで、Ｓ９２における強調の方法としては、種々の方法を採用することが可能である。例えば、用語出力部１５ｃは、Ｓ９１において抽出した用語を、Ｓ９１において抽出していない用語より太字にしたり、Ｓ９１において抽出していない用語よりフォントサイズを大きくしたり、Ｓ９１において抽出していない用語とはフォントの種類を変えたりすることによって強調することができる。
Next, the
議事録生成システム１０は、重要度が特定の程度以上である用語を強調した状態で議事録を出力する（Ｓ９２）ので、議事録における重要な用語を議事録上で利用者に容易に理解させることができ、その結果、議事録における重要な内容を利用者に容易に理解させることができる。 The minutes generation system 10 outputs the minutes in a state in which terms having a degree of importance above a certain level are emphasized (S92), so that the user can easily understand the important terms in the minutes. As a result, the user can easily understand the important contents of the minutes.
なお、用語出力部１５ｃは、対象音声データに含まれる用語の出力方法として、図６に示す出力方法以外の方法を採用しても良い。例えば、用語出力部１５ｃは、対象音声データに含まれる用語の出力方法として、以下に説明する種々の方法を採用しても良い。用語出力部１５ｃは、対象音声データに含まれる用語の出力方法を、操作部１１を介した指示に応じて切り替えても良い。
Note that the
例えば、用語出力部１５ｃは、対象音声データに含まれる用語の一覧を表示部１２に表示することによって、対象音声データに含まれる用語を出力しても良い。なお、用語出力部１５ｃは、対象音声データに含まれる用語の全てではなく、対象音声データに含まれる用語の一部の一覧を表示しても良い。例えば、用語出力部１５ｃは、対象音声データに含まれる用語のうち、議事録データの用語重要度情報における重要度が１ポイント以上である用語の一覧を表示しても良い。用語出力部１５ｃは、議事録データの用語重要度情報における重要度の大きさ順に用語の一覧を表示部１２に表示しても良い。また、用語出力部１５ｃは、用語の一覧を表示部１２に表示する場合に、議事録データの用語重要度情報における重要度が特定の程度以上である用語を強調した状態で表示しても良い。ここで、強調の方法としては、種々の方法を採用することが可能である。例えば、用語出力部１５ｃは、議事録データの用語重要度情報における重要度が特定の程度以上である用語を、議事録データの用語重要度情報における重要度が特定の程度未満である用語より太字にしたり、議事録データの用語重要度情報における重要度が特定の程度未満である用語よりフォントサイズを大きくしたり、議事録データの用語重要度情報における重要度が特定の程度未満である用語とはフォントの種類を変えたりすることによって強調することができるし、議事録データの用語重要度情報における重要度が特定の程度以上である用語を、議事録データの用語重要度情報における重要度が特定の程度未満である用語より上位に配置することによって強調することができる。
For example, the
議事録生成システム１０は、重要度の大きさ順に、または、重要度が特定の程度以上である用語を強調した状態で、用語の一覧を出力する場合、議事録における重要な用語を用語の一覧上で利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 When the minutes generation system 10 outputs a list of terms in order of degree of importance or in a state in which terms with a degree of importance above a certain level are emphasized, the important terms in the minutes are displayed in the list of terms. Since the user can easily understand the above, it is possible to make the user easily understand the important contents of the minutes.
例えば、用語出力部１５ｃは、音声データにおける音声の音調の変化に基づいた値を示す軸と、音声データにおける音声の音量の変化に基づいた値を示す軸と、音声データにおける賛同用語の存在に基づいた値を示す軸とのうち、いずれか２軸によって構成される２次元空間上に用語を配置した２次元マップを表示部１２に表示することによって、対象音声データに含まれる用語を出力しても良い。例えば、用語出力部１５ｃは、音声データにおける音声の音調の変化に基づいた値を示す軸と、音声データにおける音声の音量の変化に基づいた値を示す軸と、音声データにおける賛同用語の存在に基づいた値を示す軸とのうち、利用者によって選択された２軸によって構成される２次元空間上に用語を配置した２次元マップを表示部１２に表示しても良い。
For example, the
ここで、音声データにおける音声の音調の変化に基づいた値としては、例えば、音調式重要度判定処理において用語毎に加算した重要度や、音調式重要度判定処理において重要度を加算した要因になった発声者の、用語毎の人数が採用されることができる。音声データにおける音声の音量の変化に基づいた値としては、例えば、音量式重要度判定処理において用語毎に加算した重要度や、音量式重要度判定処理において重要度を加算した要因になった発声者の、用語毎の人数が採用されることができる。音声データにおける賛同用語の存在に基づいた値としては、例えば、賛同用語式重要度判定処理において用語毎に加算した重要度や、賛同用語式重要度判定処理において重要度を加算した要因になった発声者の、用語毎の人数が採用されることができる。 Here, values based on changes in the tone of speech in speech data include, for example, the importance added to each term in the tone-based importance determination process, and the factor added to the importance in the tone-based importance determination process. The number of different speakers per term can be taken. Values based on changes in voice volume in voice data include, for example, the importance added for each term in the volume-based importance determination process, and the utterance that was the factor for adding the importance in the volume-based importance determination process. of persons per term can be employed. Values based on the presence of agreeing terms in voice data include, for example, the importance added for each term in the agreeing term expression importance determination process, and the factor added to the importance in the agreeing term expression importance determination process. The number of speakers per term can be employed.
なお、用語出力部１５ｃは、対象音声データに含まれる用語の全てではなく、対象音声データに含まれる用語の一部を２次元マップ上に表示しても良い。例えば、用語出力部１５ｃは、対象音声データに含まれる用語のうち、議事録データの用語重要度情報における重要度が特定の程度以上である用語のみを２次元マップ上に表示しても良い。
Note that the
図７は、音声データにおける音声の音調の変化に基づいた値として、音調式重要度判定処理において用語毎に加算した重要度を示す軸と、音声データにおける賛同用語の存在に基づいた値として、賛同用語式重要度判定処理において用語毎に加算した重要度を示す軸との２軸によって構成される２次元空間上に用語を配置した２次元マップ２０の一例である。２次元マップ２０には、用語２１～２５が配置されている。例えば、２次元マップ２０において、用語２１は、音調が高くなった時点を含む特定の期間に発声されていることと、賛同用語が発声された時点を含む特定の期間に発声されていることとの両方が多く、非常に重要な用語である可能性が高い。また、２次元マップ２０において、用語２２は、賛同用語が発声された時点を含む特定の期間に発声されていることが多いが、音調が高くなった時点を含む特定の期間に発声されていることが少ないので、用語２１よりは重要ではない可能性が高い。また、２次元マップ２０において、用語２４は、音調が高くなった時点を含む特定の期間に発声されていることが多いが、賛同用語が発声された時点を含む特定の期間に発声されていることが少ないので、用語２１よりは重要ではない可能性が高い。また、２次元マップ２０において、用語２５は、音調が高くなった時点を含む特定の期間に発声されていることと、賛同用語が発声された時点を含む特定の期間に発声されていることとの両方が少なく、用語２１～２４よりは重要ではない可能性が高い。
FIG. 7 shows, as values based on changes in the tone of speech in speech data, an axis indicating the degree of importance added for each term in the tone-based importance determination process, and values based on the presence of agreeing terms in speech data, It is an example of a two-
なお、用語出力部１５ｃは、音声データにおける音声の音調の変化に基づいた値を示す軸と、音声データにおける音声の音量の変化に基づいた値を示す軸と、音声データにおける賛同用語の存在に基づいた値を示す軸との３軸によって構成される３次元空間上に用語を配置した３次元マップを表示部１２に表示することによって、対象音声データに含まれる用語を出力しても良い。
Note that the
議事録生成システム１０は、音声データにおける音声の音調の変化に基づいた値を示す軸と、音声データにおける音声の音量の変化に基づいた値を示す軸と、音声データにおける賛同用語の存在に基づいた値を示す軸とのうち、少なくとも２軸によって構成される空間上に、重要度が特定の程度以上である用語を配置したマップを出力する場合、このマップ上で、議事録における重要な用語の重要度の詳細な内容を利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 The minutes generation system 10 has an axis indicating values based on changes in tone of speech in the audio data, an axis indicating values based on changes in the volume of speech in the audio data, and an axis indicating values based on changes in the volume of the audio in the audio data. When outputting a map in which terms with a certain degree of importance or higher are arranged on a space composed of at least two axes, the important terms in the minutes can be displayed on this map. Since the user can easily understand the detailed content of the importance of the meeting, the user can easily understand the important content in the minutes.
例えば、用語出力部１５ｃは、用語同士の相互の関係を示す相互関係図を表示部１２に表示することによって、対象音声データに含まれる用語を出力しても良い。なお、用語出力部１５ｃは、対象音声データに含まれる用語の全てではなく、対象音声データに含まれる用語の一部を相互関係図上に表示しても良い。例えば、用語出力部１５ｃは、対象音声データに含まれる用語のうち、議事録データの用語重要度情報における重要度が特定の程度以上である用語のみを相互関係図上に表示しても良い。
For example, the
図８は、用語同士の相互の関係を示す相互関係図３０の一例である。相互関係図３０には、用語３１～３６が配置されている。相互関係図３０において、Ｓ６６、Ｓ７６またはＳ８６において同一の特定の期間に含まれていた用語同士は、相互に関係があることを示す矢印３７ａ～矢印３７ｇによって接続されている。矢印３７ａ～矢印３７ｇは、Ｓ６６、Ｓ７６またはＳ８６において同一の特定の期間に含まれていた回数が多いほど、太く表示される。また、用語３１～３６は、議事録データの用語重要度情報において付されている重要度が大きいほど、大きく表示される。
FIG. 8 is an example of an interrelationship diagram 30 showing interrelationships between terms.
議事録生成システム１０は、重要度が特定の程度以上である用語同士の相互の関係を示す相互関係図を出力する場合、この相互関係図上で、議事録における重要な用語同士の相互の関係を利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 When the minutes generation system 10 outputs a correlation diagram showing the mutual relationship between terms having a degree of importance equal to or higher than a certain level, the mutual relationship between important terms in the minutes is displayed on the correlation diagram. can be easily understood by the user, it is possible to make the user easily understand the important contents in the minutes.
例えば、用語出力部１５ｃは、議事録データの用語重要度情報における重要度が特定の程度以上である用語が含まれるフレーズを、議事録データに含まれる文字データから抽出して表示部１２に表示することによって、対象音声データに含まれる用語を出力しても良い。また、用語出力部１５ｃは、議事録データの用語重要度情報における重要度が特定の程度以上である用語が含まれる文を、議事録データに含まれる文字データから抽出して表示部１２に表示することによって、対象音声データに含まれる用語を出力しても良い。
For example, the
議事録生成システム１０は、重要度が特定の程度以上である用語が含まれるフレーズまたは文を、議事録データに含まれる文字データ、すなわち、議事録から抽出して出力する場合、議事録における重要なフレーズまたは文を利用者に容易に理解させることができるので、議事録における重要な内容を利用者に容易に理解させることができる。 When the minutes generation system 10 extracts and outputs a phrase or sentence containing a term having a specific degree of importance or higher from the character data included in the minutes data, that is, from the minutes, the minutes generation system 10 extracts and outputs Since the user can easily understand such phrases or sentences, the user can easily understand the important contents of the minutes.
以上に説明したように、議事録生成システム１０は、音声データにおける音声の音調の変化と、音声データにおける音声の音量の変化と、音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて音声データにおける重要な期間を特定し（Ｓ６５、Ｓ７５またはＳ８５）、重要な期間に含まれる用語の重要度を、重要な期間に含まれない用語の重要度より高く判定し（Ｓ６６、Ｓ７６またはＳ８６）、重要度に基づいた出力内容で用語を出力する（Ｓ９２）ので、議事録における重要な用語を利用者に容易に理解させることができ、その結果、議事録における重要な内容を利用者に容易に理解させることができる。 As described above, the minutes generation system 10 detects at least one of changes in tone of voice in voice data, changes in volume of voice in voice data, and presence of approval terms indicating approval in voice data. (S65, S75 or S85), and the importance of terms included in the important period is determined higher than the importance of terms not included in the important period (S66, S76 or S86), and the terms are output according to the output contents based on the degree of importance (S92), so that the user can easily understand the important terms in the minutes, and as a result, the important contents in the minutes can be used. can be easily understood by
議事録生成システム１０は、上述のＳ５１において、音声特徴情報１４ｄを利用して対象音声データに対して音声認識を実行することによって、対象音声データに含まれる音声の発声者を全て検出する。しかしながら、議事録生成システム１０は、Ｓ５１において、音声特徴情報１４ｄを利用せずに対象音声データに対して音声認識を実行することによって、対象音声データに含まれる音声の発声者を全て検出しても良い。議事録生成システム１０は、音声特徴情報１４ｄを利用せずに対象音声データに対して音声認識を実行する場合、対象音声データに含まれる音声の発声者を音声特徴情報１４ｄに登録されている特定の人物として識別することはできないが、対象音声データに複数の発声者の音声が含まれるときに、対象音声データに含まれる音声の発声者同士を識別することは可能である。
In the above S51, the minutes generation system 10 detects all the speakers of the voices included in the target voice data by executing voice recognition on the target voice data using the
議事録生成システム１０は、上述のＳ６６、Ｓ７６およびＳ８６において、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に対象の用語が存在する回数に応じたポイントを対象の用語の重要度に加算する。しかしながら、議事録生成システム１０は、Ｓ６６、Ｓ７６およびＳ８６において、上述の方法以外の方法によってポイントを対象の用語の重要度に加算しても良い。例えば、議事録生成システム１０は、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に対象の用語が存在する回数にかかわらず、Ｓ６６、Ｓ７６およびＳ８６において１ポイントのみを対象の用語の重要度に加算しても良い。 In S66, S76 and S86 described above, the minutes creation system 10 adds points according to the number of times the target term exists during the period specified in S65, S75 or S85 to the importance of the target term. However, in S66, S76 and S86, the minutes creation system 10 may add points to the importance of the target term by a method other than the method described above. For example, the minutes generation system 10 adds only 1 point to the importance of the target term in S66, S76, and S86 regardless of the number of times the target term exists in the period specified in S65, S75, or S85. Also good.
議事録生成システム１０は、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に用語の後端が含まれる場合にのみ、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に、この用語が含まれると、上述のＳ６６、Ｓ７６およびＳ８６において判定する。しかしながら、議事録生成システム１０は、Ｓ６６、Ｓ７６およびＳ８６において、上述の方法以外の方法によって、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に、この用語が含まれると判定しても良い。例えば、議事録生成システム１０は、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に用語の少なくとも一部が含まれる場合に、Ｓ６５、Ｓ７５またはＳ８５において特定した期間に、この用語が含まれると、Ｓ６６、Ｓ７６およびＳ８６において判定しても良い。 Only when the term specified in S65, S75, or S85 includes the trailing end of the term, the minutes generation system 10, when the term is included in the period specified in S65, S75, or S85, S66, Decisions are made in S76 and S86. However, in S66, S76 and S86, the minutes creation system 10 may determine that the term is included in the period specified in S65, S75 or S85 by a method other than the above method. For example, when at least a part of the term is included in the period specified in S65, S75 or S85, the minutes generation system 10, when the term is included in the period specified in S65, S75 or S85, S66, You may judge in S76 and S86.
議事録生成システム１０は、上述のＳ８２において、対象音声データにおける賛同用語の後端に対応する時点を、賛同用語が発声された時点として扱う。しかしながら、議事録生成システム１０は、Ｓ８２において、対象音声データにおける賛同用語の後端に対応する時点以外の時点を、賛同用語が発声された時点として扱っても良い。例えば、議事録生成システム１０は、Ｓ８２において、対象音声データにおける賛同用語の前端に対応する時点を、賛同用語が発声された時点として扱っても良い。 The minutes generation system 10 treats the point of time corresponding to the trailing end of the approving term in the target voice data as the point of time when the approving term was uttered in S82 described above. However, the minutes generation system 10 may treat, in S82, a point in time other than the point corresponding to the end of the endorsement term in the target voice data as the point in time at which the approval term was uttered. For example, the minutes generation system 10 may treat the time corresponding to the front end of the approving term in the target voice data as the time when the approving term was uttered in S82.
議事録生成システム１０は、本実施の形態において、議事録や用語の出力方法として、表示を採用している。しかしながら、議事録生成システム１０は、表示以外の方法によって議事録や用語を出力しても良い。例えば、議事録生成システム１０は、印刷によって議事録や用語を出力しても良い。 In the present embodiment, the minutes generation system 10 employs display as a method of outputting minutes and terms. However, the minutes generation system 10 may output the minutes and terms by a method other than display. For example, the minutes generation system 10 may output the minutes and terms by printing.
議事録生成システム１０は、本実施の形態において、１台のコンピューターによって構成されている。しかしながら、議事録生成システム１０は、複数台のコンピューターによって構成されても良い。 Minutes generation system 10 is configured by one computer in the present embodiment. However, the minutes generation system 10 may be composed of a plurality of computers.
１０ 議事録生成システム（コンピューター）
１４ａ 議事録生成プログラム
１５ａ 議事録生成部
１５ｂ 重要度判定部
１５ｃ 用語出力部
２０ ２次元マップ（マップ）
２１～２５ 用語
３０ 相互関係図
３１～３６ 用語
３７ａ～３７ｇ 矢印（用語同士の相互の関係を示す矢印）
10 minutes generation system (computer)
14a
21-25
Claims (2)
前記議事録に含まれる用語の重要度を判定する重要度判定部と、
前記重要度に基づいた出力内容で前記用語を出力する用語出力部と
を備え、
前記重要度判定部は、前記音声データにおける音声の音調の変化と、前記音声データにおける音声の音量の変化と、前記音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて前記音声データにおける重要な期間を特定し、前記重要な期間に含まれる前記用語の前記重要度を、前記重要な期間に含まれない前記用語の前記重要度より高く判定し、
前記用語出力部は、前記音声データにおける音声の音調の変化に基づいた値を示す軸と、前記音声データにおける音声の音量の変化に基づいた値を示す軸と、前記音声データにおける前記賛同用語の存在に基づいた値を示す軸とのうち、少なくとも２軸によって構成される空間上に、前記重要度が特定の程度以上である前記用語を配置したマップを出力することを特徴とする議事録生成システム。 a minutes generation unit that generates minutes as character data by speech recognition from voice data;
an importance determination unit that determines the importance of terms included in the minutes;
a term output unit that outputs the term with output content based on the degree of importance;
The importance determination unit determines whether the voice data is based on at least one of a change in tone of voice in the voice data, a change in volume of voice in the voice data, and the presence of an approval term indicating approval in the voice data. identifying important time periods in the data, determining the importance of the terms included in the important time periods to be higher than the importance of the terms not included in the important time periods ;
The term output unit has an axis indicating values based on changes in tone of voice in the voice data, an axis indicating values based on changes in volume of voice in the voice data, and an axis indicating values based on changes in volume of voice in the voice data. outputting a map in which the terms having a specific degree of importance or higher are arranged in a space formed by at least two of the axes representing values based on existence; system.
前記議事録に含まれる用語の重要度を判定する重要度判定部と、 an importance determination unit that determines the importance of terms included in the minutes;
前記重要度に基づいた出力内容で前記用語を出力する用語出力部と a term output unit configured to output the term with output content based on the degree of importance;
をコンピューターに実現させ、 is realized on a computer,
前記重要度判定部は、前記音声データにおける音声の音調の変化と、前記音声データにおける音声の音量の変化と、前記音声データにおける賛同を示す賛同用語の存在との少なくとも１つに基づいて前記音声データにおける重要な期間を特定し、前記重要な期間に含まれる前記用語の前記重要度を、前記重要な期間に含まれない前記用語の前記重要度より高く判定し、 The importance determination unit determines whether the voice data is based on at least one of a change in tone of voice in the voice data, a change in volume of voice in the voice data, and the presence of an approval term indicating approval in the voice data. identifying important time periods in the data, determining the importance of the terms included in the important time periods to be higher than the importance of the terms not included in the important time periods;
前記用語出力部は、前記音声データにおける音声の音調の変化に基づいた値を示す軸と、前記音声データにおける音声の音量の変化に基づいた値を示す軸と、前記音声データにおける前記賛同用語の存在に基づいた値を示す軸とのうち、少なくとも２軸によって構成される空間上に、前記重要度が特定の程度以上である前記用語を配置したマップを出力することを特徴とする議事録生成プログラム。 The term output unit has an axis indicating values based on changes in tone of voice in the voice data, an axis indicating values based on changes in volume of voice in the voice data, and an axis indicating values based on changes in volume of voice in the voice data. outputting a map in which the terms having a specific degree of importance or higher are arranged in a space formed by at least two of the axes representing values based on existence; program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018171569A JP7205684B2 (en) | 2018-09-13 | 2018-09-13 | minutes generation system and minutes generation program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018171569A JP7205684B2 (en) | 2018-09-13 | 2018-09-13 | minutes generation system and minutes generation program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020042229A JP2020042229A (en) | 2020-03-19 |
| JP7205684B2 true JP7205684B2 (en) | 2023-01-17 |
Family
ID=69798520
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018171569A Active JP7205684B2 (en) | 2018-09-13 | 2018-09-13 | minutes generation system and minutes generation program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7205684B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111797226B (en) * | 2020-06-30 | 2024-04-05 | 北京百度网讯科技有限公司 | Conference summary generation method and device, electronic equipment and readable storage medium |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005025571A (en) | 2003-07-03 | 2005-01-27 | Ns Solutions Corp | Business support device, business support method, and its program |
| JP2013109635A (en) | 2011-11-22 | 2013-06-06 | Nippon Telegr & Teleph Corp <Ntt> | Word importance calculation device and method and program thereof |
| JP2014085998A (en) | 2012-10-26 | 2014-05-12 | Univ Of Yamanashi | Electronic note creation support device and program for electronic note creation support device |
| JP2015082087A (en) | 2013-10-24 | 2015-04-27 | 富士通株式会社 | Information processing device, program, and method |
-
2018
- 2018-09-13 JP JP2018171569A patent/JP7205684B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005025571A (en) | 2003-07-03 | 2005-01-27 | Ns Solutions Corp | Business support device, business support method, and its program |
| JP2013109635A (en) | 2011-11-22 | 2013-06-06 | Nippon Telegr & Teleph Corp <Ntt> | Word importance calculation device and method and program thereof |
| JP2014085998A (en) | 2012-10-26 | 2014-05-12 | Univ Of Yamanashi | Electronic note creation support device and program for electronic note creation support device |
| JP2015082087A (en) | 2013-10-24 | 2015-04-27 | 富士通株式会社 | Information processing device, program, and method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020042229A (en) | 2020-03-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108288468B (en) | Audio recognition method and device | |
| WO2020177190A1 (en) | Processing method, apparatus and device | |
| JP4825800B2 (en) | Music classification method | |
| JP6541673B2 (en) | Real time voice evaluation system and method in mobile device | |
| JP6556575B2 (en) | Audio processing apparatus, audio processing method, and audio processing program | |
| JP6884947B2 (en) | Dialogue system and computer programs for it | |
| JP2007206317A (en) | Authoring method and apparatus, and program | |
| JP2008134475A (en) | Technique for recognizing accent of input voice | |
| JP2018146715A (en) | Voice interactive device, processing method of the same and program | |
| US20190371305A1 (en) | Voice interaction system, its processing method, and program therefor | |
| JP2020003535A (en) | Program, information processing method, electronic apparatus and learnt model | |
| JP2020077159A (en) | Interactive system, interactive device, interactive method, and program | |
| EP3779814A1 (en) | Method and device for training adaptation level evaluation model, and method and device for evaluating adaptation level | |
| JP2013109061A (en) | Voice data retrieval system and program for the same | |
| JP2018084627A (en) | Language model learning device and program thereof | |
| JP2010160608A (en) | Interaction device, interaction program, and interaction method | |
| JP7205684B2 (en) | minutes generation system and minutes generation program | |
| Bosker et al. | Both native and non-native disfluencies trigger listeners' attention | |
| JP6728116B2 (en) | Speech recognition device, speech recognition method and program | |
| JP6709558B2 (en) | Conversation processor | |
| CN116127003A (en) | Text processing method, device, electronic equipment and storage medium | |
| JP2011170622A (en) | Content providing system, content providing method, and content providing program | |
| CN113436629A (en) | Voice control method and device, electronic equipment and storage medium | |
| WO2023199895A1 (en) | Presentation evaluation device | |
| JP2019078924A (en) | Utterance contents evaluation system and utterance contents evaluation program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210831 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220422 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220601 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220726 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221130 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221213 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7205684 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |