JP4807092B2 - 議事録作成システム及び議事録作成方法。 - Google Patents

議事録作成システム及び議事録作成方法。 Download PDF

Info

Publication number
JP4807092B2
JP4807092B2 JP2006034605A JP2006034605A JP4807092B2 JP 4807092 B2 JP4807092 B2 JP 4807092B2 JP 2006034605 A JP2006034605 A JP 2006034605A JP 2006034605 A JP2006034605 A JP 2006034605A JP 4807092 B2 JP4807092 B2 JP 4807092B2
Authority
JP
Japan
Prior art keywords
time
switching
minutes
slide
recorded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006034605A
Other languages
English (en)
Other versions
JP2007215056A (ja
Inventor
透 布施
志華 鍾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2006034605A priority Critical patent/JP4807092B2/ja
Priority to US11/518,142 priority patent/US7884845B2/en
Publication of JP2007215056A publication Critical patent/JP2007215056A/ja
Application granted granted Critical
Publication of JP4807092B2 publication Critical patent/JP4807092B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/802—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving processing of the sound signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Television Signal Processing For Recording (AREA)

Description

本発明は、補完的な情報を有する議事録を作成できる議事録作成システム及び議事録作成方法に関し、特に、説明対象の切替時刻と説明内容の区切時刻とに基づいて抽出した補完情報である発言音声等が関連付けられた議事録を作成できる議事録作成システム及び議事録作成方法に関する。
会議の議事録により会議の要旨を知ることができるが、会議の様子を知ることはできない。そこで、会議における発言音声等を予め録音等しておき、後に再生することによって、その会議の様子を知ることができるだけでなく、更に再確認もできる。この際に、重要な発言に関する音声を、予め抽出しておくことができれば、会議の内容を効率的に確認することができ、短時間で会議の要旨を把握することができる。
このような機能を有する情報処理装置としては、会議中に重要な発言等がなされたと判断した場合に会議の参加者は時刻の記録を指示し、指示された時刻の所定時間以上前であって予め定められた時間区切りから始まる記録音声を重要発言として抽出する技術が知られている（例えば、特許文献１参照）。
特開２００５‐２４４５２３
また、予め抽出しておいた発言音声等の利用価値は、予め抽出した音声等の再生順序を編集する等して議事録等と関連付けることで格段に向上する。
このような機能を有する情報処理システムとしては、会議中に重要な発言等がなされたと判断した場合に会議の参加者は時刻の記録を指示し、指示された指示時刻に基づいて任意の時間区分における発言音声等を抽出し、抽出された時間区分の発言音声等の再生順序等を指示時刻に基づいて入替等する技術が知られている（例えば、特許文献２参照）。
特許３６６４１３２号
ところで、上記のように重要な発言であると判断した時点のみを基準として一定時間前の時刻を重要な発言の開始時刻であると推測する情報処理システムでは、発言の終了時刻を推定できなかった。このため、実際に重要な発言のなされた時間区間であり議事録の記録対象とした時間区間（以下、重要発言区間と言う）と抽出された時間区間（以下、抽出発言区間と言う）との差異が発生していた。
また、上記のように会議の参加者が時刻の記録を指示し、指示された指示時刻に基づいて任意の時間区分における発言音声等を抽出する情報処理システムでは、説明対象とする表示を切替えながら会議を行う場合においては、説明対象の切替に基づいた発言音声等の抽出をすることができなかった。
通常は、説明対象について発言がなされるので説明対象の切替に伴って発言内容も切り替わる。よって、上記情報処理システムでは、重要発言区間と抽出発言区間との差異が発生していた。
本発明は、上記問題に鑑みて成されたものであり、その目的とするところは、説明対象を切替えながら行われる会議において重要発言区間との差異を少なく抽出発言区間を抽出できる議事録作成システム及び議事録作成方法を提供することにある。
本発明に係る議事録作成システムは、会議で表示される情報である複数のストリームの画像としての被表示画像の内で説明対象とする被表示画像を切替えを検出する検出手段と、被表示画像の内容を時間的に区切る区切りを検出する区切検出手段と、切替検出手段が説明対象とする被表示画像の切替えを検出した時刻である切替時刻と区切検出手段が区切を検出した時刻である区切時刻とに基づいて、複数のストリームに対応して、議事録を構成する議事録情報の記録対象とされる時間区間である被記録時間区間を抽出する抽出手段と、を備えることを特徴としている
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されている被表示画像の区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、抽出手段は、切替時刻を区切時刻に基づいて補完した切替時刻である補完切替時刻で区切られる被記録時間区間を抽出することを特徴としている。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、補完切替時刻とは、以下の条件式（４）を満足する時刻であることを特徴としている。
（数４）
Ｔ＝（Ｔｍｉｎ＋Ｔｍａｘ）／２…（４）
但し、ＴＣは切替時刻、Ｔｆは最もＴＣに近い切替元の被表示画像の区切時刻、Ｔｔは最もＴＣに近い切替先の被表示画像の区切時刻、ＴｍｉｎはＴＣ、Ｔｆ、Ｔｔの内で最も早い時刻、及び、ＴｍａｘはＴＣ、Ｔｆ、Ｔｔの内で最も遅い時刻を示す。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、補完切替時刻とは、以下の条件式（５）を満足する時刻であることを特徴としている。
（数５）
Ｔ＝Ｔｆ１…（５）
ｄｆ＜ｄｔ
ｄｆ＝｜ＴＣ−Ｔｆ１｜／｜Ｔｆ１−Ｔｆ０｜
ｄｔ＝｜ＴＣ−Ｔｔ０｜／｜Ｔｔ１−Ｔｔ０｜
但し、ＴＣは切替時刻、Ｔｆ１は最もＴＣに近い切替元の被表示画像の区切時刻、Ｔｆ０はＴｆ１に最も近くＴｆ１より早い切替元の被表示画像の区切時刻、Ｔｔ０は最もＴＣに近い切替先の被表示画像の区切時刻、Ｔｔ１はＴｆ０に最も近くＴｔ０より遅い切替先の被表示画像の区切時刻を示す。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、補完切替時刻とは、以下の条件式（６）を満足する時刻であることを特徴としている。
（数６）
Ｔ＝Ｔｔ０…（６）
ｄｆ＞ｄｔ
ｄｆ＝｜ＴＣ−Ｔｆ１｜／｜Ｔｆ１−Ｔｆ０｜
ｄｔ＝｜ＴＣ−Ｔｔ０｜／｜Ｔｔ１−Ｔｔ０｜
但し、ＴＣは切替時刻、Ｔｆ１は最もＴＣに近い切替元の被表示画像の区切時刻、Ｔｆ０はＴｆ１に最も近くＴｆ１より早い切替元の被表示画像の区切時刻、Ｔｔ０は最もＴＣに近い切替先の被表示画像の区切時刻、Ｔｔ１はＴｆ０に最も近くＴｔ０より遅い切替先の被表示画像の区切時刻を示す。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、抽出手段は、区切時刻に基づいて区切られる被記録時間区間を抽出することを特徴としている。
一例として、議事録情報の記録対象とする発言等は、被表示画像の区切りある内容に対してなされる。よってこの構成によれば、区切時刻で区切られた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、被表示画像とは、会議で表示されるスライドデータを含み、区切検出手段は、スライドデータの表示の切替時刻を区切時刻として検出することを特徴としている。
一例として、議事録情報の記録対象とする発言等は、表示されているスライドデータに対してなされる。よってこの構成によれば、スライドの表示切替時刻に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、会議において使用されるスライドデータを取得するスライドデータ取得手段と、抽出手段で抽出された被記録時間区間を記録した議事録情報とスライドデータ取得手段で取得したスライドデータであって抽出手段で抽出された被記録時間区間に表示されていたスライドデータとを関連付けて蓄積する蓄積手段と、を更に備えることを特徴としている。
一例として、通常、議事録情報は表示対象とされたスライドデータに対する発言を記録対象とする。よってこの構成によれば、議事録情報の記録対象とした時間区間に表示されていたスライドを知ることができる。
上記構成において、会議における音声を収音する収音手段と、抽出手段で抽出された被記録時間区間を記録した議事録情報と抽出手段で抽出された被記録時間区間に収音手段で収音された収音音声とを関連付けて蓄積する蓄積手段と、を更に備えることを特徴としている
一例として、通常、議事録情報は発言を記録対象とする。よってこの構成によれば、議事録情報の記録対象とした発言を知ることができる。
上記構成において、会議における画像を撮像する撮像手段と、抽出手段で抽出された被記録時間区間を記録した議事録情報と抽出手段で抽出された被記録時間区間に撮像手段で撮像された撮像画像とを関連付けて蓄積する蓄積手段と、を更に備えることを特徴としている。
一例として、通常、議事録情報は発言を記録対象とする。よってこの構成によれば、議事録情報の記録対象とした発言の行われた際の会議の様子を知ることができる。
上記構成において、蓄積手段によって蓄積された議事録を構成する議事録情報の内で配信対象とする議事録情報で構成される配信議事録を作成する配信議事録作成手段と、配信議事録作成手段で作成された配信議事録を配信する配信手段と、を更に備えることを特徴としている。
この構成によれば、既に作成された議事録に基づいて配信用の議事録を作成することができるため、一例として、既に作成された議事録に基づかずに配信用の議事録を作成する場合と比べて、議事録を作成に要する書記の労力を軽減できる。
上記構成において、配信手段により配信された配信議事録は、配信議事録を構成する議事録情報の記録対象とした被記録時間区間と関連付けて蓄積手段に蓄積された被表示画像、収音音声、撮像画像のいずれか１つ以上に対してアクセス可能に張られたリンクを有することを特徴としている。
この構成によれば、配信議事録と被記録時間区間における会議で使用されたスライドデータ等の被表示画像、会議における音声、又は、会議における映像とをリンクとして関連付けるので、配信される議事録のデータの増加を抑制しながら議事録にコンテンツ情報と言う補完情報を付加することができる。
上記構成において、複数のストリームの画像としての被表示画像は、複数の画面に表示するための複数のストリームの画像データであり、被表示画像は、個別のスライドである、構成を採用できる。
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されている画面に表示されたスライドの区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
上記構成において、複数のストリームの画像としての被表示画像は、複数のスクリーンへに投影するための複数のストリームの画像データであり、被表示画像は、個別の投影されたスライドである、構成を採用できる。
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されているスクリーンに表示されたスライドの区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
本発明に係る議事録作成方法は、会議で表示される情報である被表示画像の表示対象の切替えを検出する切替検出ステップと、被表示画像の内容を時間的に区切る区切時刻を検出する区切検出ステップと、切替検出ステップが検出した切替時刻と区切検出ステップの検出した区切時刻とに基づいて、議事録を構成する議事録情報の記録対象とされる時間区間である被記録時間区間を抽出する抽出ステップと、を備えることを特徴としている。
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されている被表示画像の区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
本発明によれば、説明対象を切替えた時刻と説明内容を区切る時刻とに基づいて抽出発言区間を抽出することで、説明対象を切替えながら行われる会議において重要発言区間との差異を少なく抽出発言区間を抽出できる議事録作成システム及び議事録作成方法を提供できる。
以下、本発明の最良の実施形態について、添付図面を参照しつつ説明する。図１は本発明の一実施例に係る議事録作成システムの構成図である。
本発明の議事録作成システム１は、複数の取得装置１０、切替検出装置２０、出音装置３０、表示装置４０、入力装置５０、及び、議事録作成装置１００、で構成されている。
先ず、図２を用いて、取得装置１０の一構成例を説明する。図２は、取得装置１０の一構成を説明するための図である。
一又は複数の取得装置１０は、切替検出装置２０に直接、又は、ネットワーク５００を介して接続されている。取得装置１０は、区切検出手段でありスライドデータ取得手段であるプロジェクタ１１、収音手段であるマイクロフォン１２、撮像手段であるビデオカメラ１３で構成される。
プロジェクタ１１は、例えば、液晶プロジェクタ等で構成され、切替検出装置２０に接続している。また、このプロジェクタ１１は、会議で使用されるスライドをスクリーンへ投影する。
また、プロジェクタ１１は、それぞれのプロジェクタを識別する情報（以下単に、プロジェクタ識別情報と言う）を有している。プロジェクタ１１は、投影したスライドの電子データ、投影するスライドの切替を検出し、時間的に内容が区切れたことを表す信号（以下単に、区切信号と言う）をプロジェクタ識別情報と関連付けて切替検出装置２０へ送信する。尚、区切信号の代わりに区切を検出した時刻である区切時刻を送信する構成を採用することもできる。
一例として、議事録情報の記録対象とする発言等は、表示されているスライドデータに対してなされる。よってこの構成によれば、スライドの表示切替時刻に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
マイクロフォン１２は、例えば、圧電マイクで構成される。マイクロフォン１２は、各出席者の音声を収音可能に配置、携帯されている。
また、マイクロフォン１２は、マイクロフォンを識別する情報（以下単に、マイク識別情報と言う）を有する。マイクロフォン１２は、収音した音声情報とマイク識別情報と関連付けて切替検出装置２０へ送信する。
ビデオカメラ１３は、例えば、ＣＣＤカメラで構成される。ビデオカメラ１３は、各出席者及び会議の様子を撮像可能に配置されている。
また、ビデオカメラ１３は、ビデオカメラを識別する情報（以下単に、ビデオカメラ識別情報と言う）を有する。ビデオカメラ１３は、撮像した撮像情報とカメラ識別情報とを関連付けて切替検出装置２０へ送信する。
ここで、図１に戻り議事録作成システムの構成について引き続き説明する。
切替検出装置２０は、例えば、切替器等で構成される。切替検出装置２０は、プロジェクタ１１、マイクロフォン１２、ビデオカメラ１３、算出部１１０、及び、制御部１４０に接続されている。
切替検出装置２０は、会議で表示される情報である複数の被表示画像の内で説明対象とする被表示画像が切替えられたことを検出する。尚、被表示画像とは、会議においてプロジェクタ１１によって投影されるスライドデータ等の情報を含む。
具体的には、複数の取得装置１０を構成するプロジェクタ１１によって投影されたスライドをそれぞれ一台のビデオカメラ１３が撮像する構成を採用した場合であって、投影されたスライドの内で説明対象としているスライドを撮像した撮像画像のみを、表示装置４０の表示する画面の特定の位置に表示する場合について説明する。
先ず、ユーザ４００は、説明対象としているスライドを撮像した撮像画像へ表示装置４０の表示を変更する命令を入力装置５０に入力する。その後、入力装置５０に入力された命令と変更先のカメラのカメラ識別情報とが、制御部１４０を通じて切替検出装置２０へ通知される。
次に、切替検出装置２０は、説明対象であったスライドを撮像していたビデオカメラ（以下単に、切替元ビデオカメラと言う）の撮像した撮像画像から、切り替えられて新たに説明対象とするスライドを撮像しているビデオカメラ（以下単に、切替先ビデオカメラと言う）の撮像した撮像画像へ切替えて制御部１４０へ送信する。
よって、切替検出装置２０は、撮像画像の切替によって説明対象とする被表示画像が切替えられたことを検出する。
その後、切替検出装置２０は、切替元ビデオカメラのカメラ識別情報（以下単に、切替元カメラ識別情報）と切替先ビデオカメラのカメラ識別情報（以下単に、切替先カメラ識別情報）と切替を検出したことを表す信号（以下単に、切替信号と言う）とを関連付けて議事録作成装置１００の算出部１１０へ送信する。尚、切替信号の代わりに切替を検出した時刻である切替時刻を送信する構成を採用することもできる。
出音装置３０は、例えば、スピーカ等で構成される。出音装置３０は、制御部１４０に接続している。出音装置３０は、制御部１４０から受信した音声情報等を出音する。
表示装置４０は、例えば、液晶表示装置又はＣＲＴ等で構成される。表示装置４０は、制御部１４０に接続している。表示装置４０は、制御部１４０から受信した表示情報を表示する。
入力装置５０は、例えば、キーボード、マウス、又は、タッチパネル等から構成され、制御部１４０に接続している。入力装置５０は、書記３００から会議識別情報、各種命令、及び、議事録情報等を入力される。入力装置５０は、入力された会議識別情報、実行命令、及び、議事録情報等を制御部１４０へ送信する。
議事録作成装置１００は、例えば、パーソナルコンピュータ等で構成される。議事録作成装置１００は、算出部１１０、議事録作成手段である議事録作成部１２０、蓄積手段である蓄積部１３０、制御部１４０、抽出手段である抽出部１５０、配信議事録作成手段である配信議事録作成部１６０、及び、配信手段である配信部１７０等から構成されている。
議事録作成装置１００は、書記３００により、実行命令、及び、議事録を構成する議事録情報等の情報を入力される。議事録作成装置１００は、表示情報を表示する。尚、議事録情報とは議事録を構成する情報を言い、特に、議事録を構成する文であるコメントを含む。
議事録作成装置１００は、図示を省略するが、ネットワーク５００を介して会議の参加者等の利用する遠隔端末及び取得装置１０に接続している。議事録作成装置１００は、ネットワーク５００を通じて配信議事録を遠隔端末へ送信する。また、議事録作成装置１００は、遠隔端末から配信議事録にリンクされた収音音声、撮像画像、又は、スライドデータを参照される。
また、議事録作成装置１００は、ネットワーク５００を通じて取得装置１０からスライドデータ、区切信号、及び、プロジェクタ識別情報、切替元カメラ識別情報、切替先カメラ識別情報、及び、切替信号、撮像画像及びカメラ識別情報、並びに、収音音声及びマイク識別情報等を受信する。
以降に説明する算出部１１０、議事録作成部１２０、蓄積部１３０、制御部１４０、抽出部１５０、配信議事録作成部１６０、及び、配信部１７０は、例えば、ＣＰＵ及びメモリとそれらを制御するソフトウェア等から構成される。
算出部１１０は、切替検出装置２０、議事録作成部１２０、及び、制御部１４０に接続している。算出部１１０は、切替検出装置２０からスライドデータ、区切信号、及び、プロジェクタ識別情報、切替元カメラ識別情報、切替先カメラ識別情報、及び、切替信号、撮像画像及びカメラ識別情報、並びに、収音音声及びマイク識別情報等を受信する。
また、算出部１１０は、制御部１４０から書記３００が議事録情報を入力していることを示す信号（以下単に、入力信号と言う）を書記の入力から遅延無く受信する。これにより、算出部１１０は、書記３００の議事録情報入力時刻及び終了時刻を知ることができ、議事録情報の入力を行った時間区間（以下単に、議事録情報入力区間と言う）を算出する。
その後、算出部１１０は、切替検出装置２０から受信したスライドデータ、区切信号、及び、プロジェクタ識別情報、切替元カメラ識別情報、切替先カメラ識別情報、及び、切替信号、撮像画像及びカメラ識別情報、並びに、収音音声及びマイク識別情報と、算出した議事録情報入力区間とを議事録作成部１２０へ送信する。
議事録作成部１２０は、算出部１１０、蓄積部１３０、及び、制御部１４０に接続している。議事録作成部１２０は、算出部１１０からスライドデータ、区切信号、及び、プロジェクタ識別情報、切替元カメラ識別情報、切替先カメラ識別情報、及び、切替信号、撮像画像及びカメラ識別情報、収音音声及びマイク識別情報、並びに、議事録情報入力区間等を受信する。
また、議事録作成部１２０は、制御部１４０から書記３００が入力中の議事録情報等と議事録を作成を指示する命令等を受信する。その後、議事録作成部１２０は、受信した命令に従って受信した議事録情報に基づいて議事録を作成する。次に、議事録作成部１２０は、作成した議事録を制御部１４０へ送信する。
また、議事録作成部１２０は、受信したスライドデータ、区切信号、及び、プロジェクタ識別情報、切替元カメラ識別情報、切替先カメラ識別情報、及び、切替信号、撮像画像及びカメラ識別情報、収音音声及びマイク識別情報、並びに、議事録情報入力区間と作成した議事録とを蓄積部１３０へ送信する。
蓄積部１３０は、スライドデータ、区切信号、及び、プロジェクタ識別情報、切替元カメラ識別情報、切替先カメラ識別情報、及び、切替信号、撮像画像及びカメラ識別情報、収音音声及びマイク識別情報、議事録情報入力区間、並びに、議事録を受信する。
また、蓄積部１３０は、区切信号を受信した時刻をプロジェクタが区切を検出した時刻である区切時刻とみなし、切替信号を受信した時刻を切替検出装置２０が切替を検出した時刻である切替時刻とみなす。
蓄積部１３０は、受信したスライドデータと区切時刻とプロジェクタ識別情報とを関連付けてデータベース１８０に蓄積する。尚、区切信号を受信した時刻はシステム時刻を元に作成される。
尚、抽出部１５０は、議事録情報と抽出した被記録時間区間とを関連付けて蓄積するため、時刻情報を介して、議事録情報と少なくとも抽出部１５０で抽出される被記録時間区間に表示されていたスライドデータとを関連付けて蓄積できる。
一例として、通常、議事録情報は表示対象とされたスライドデータに対する発言を記録対象とする。よってこの構成によれば、議事録情報の記録対象とした時間区間に表示されていたスライドを知ることができる。
また、蓄積部１３０は、撮像画像とカメラ識別情報とシステム時刻とを関連付けてデータベース１８０に蓄積する。これによって、議事録情報と抽出部１５０で抽出される被記録時間区間を含む撮像画像とを関連付けて蓄積できる。
一例として、通常、議事録情報は発言を記録対象とする。よってこの構成によれば、議事録情報の記録対象とした発言の行われた際の会議の様子を知ることができる。
更に、蓄積部１３０は、収音音声及びマイク識別情報とシステム時刻とを関連付けてデータベース１８０に蓄積する。これによって、議事録情報と抽出部１５０で抽出される被記録時間区間を含む収音音声とを関連付けて蓄積できる。
一例として、通常、議事録情報は発言を記録対象とする。よってこの構成によれば、議事録情報の記録対象とした発言を知ることができる。
また、蓄積部１３０は、議事録情報入力区間と議事録とを関連付けてデータベース１８０に蓄積する。最後に、切替時刻と切替元カメラ識別情報と切替先カメラ識別情報とを関連付けて蓄積する。
制御部１４０は、切替検出装置２０、出音装置３０、表示装置４０、入力装置５０、算出部１１０、議事録作成部１２０、抽出部１５０、配信議事録作成部１６０、及び、配信部１７０に接続している。
制御部１４０は、切替検出装置２０から説明対象であるスライドを撮像しているビデオカメラの撮像した撮像画像を受信する。
制御部１４０は、出音装置３０が収音音声等を出力するよう制御し、表示装置４０が撮像画像等を表示するよう制御する。また、制御部１４０は、入力装置５０から命令、及び、議事録情報等を受信する。また、制御部１４０は、切替検出装置２０から受信した撮像画像を表示装置４０へ表示する制御を行うため、表示情報を送信する。
制御部１４０は、入力装置５０から書記３００が入力中のコメントを受信し、遅延無く算出部１１０へ入力信号を送信する。尚、算出部１１０は入力信号に基づいて議事録情報入力区間を算出する。
制御部１４０は、入力装置５０を通じて入力された抽出を指示する命令を受信するか、又は、所定の時刻の経過を検出した後に、抽出部１５０へ実行命令を送信する。
更に、制御部１４０は、入力装置５０から受信した入力中の議事録情報、及び、議事録情報を議事録に追加する旨の命令を議事録作成部１２０へ送信する。
また、制御部１４０は、配信議事録作成部１６０にデータベース１８０から参照した受信アドレス、送信アドレス、会議書誌情報、議事録情報、並びに、配信する議事録情報を送信する。尚、配信議事録情報とは、制御装置１４０がデータベース１８０から参照した議事録を構成する議事録情報であって、入力装置５０等を通じて書記３００が配信対象とする議事録情報として選択した議事録情報を言う。
制御部１４０は、入力装置５０を通じて入力された配信命令を受信し、配信部１７０へ配信命令を送信する。また、制御部１４０は、データベース部１８０から蓄積した出席者の氏名、受信アドレス、送信アドレス、会議書誌情報、及び、議事録等を参照する。
抽出部１５０は、制御部１４０及びデータベース１８０に接続している。抽出部１５０は、制御部１４０を通じてユーザ４００が入力装置５０で入力した抽出を指示する命令を受信するか、又は、所定の時刻の経過を検出した後に、議事録を構成する議事録情報に関連付けて蓄積された議事録情報入力区間に基づいて、議事録情報の記録対象とされた時間区間である被記録時間区間を暫定的に抽出する。尚、暫定的に抽出された被記録時間区間を暫定被記録時間区間と言う。尚、議事録情報入力区間と被記録時間区間と一致させる構成を採用することもできる。
具体的には、抽出部１５０は、データベース１８０に蓄積された切替時刻と区切時刻とを参照する。その後、抽出部１５０は、参照した切替時刻と区切時刻とスライドストリームとに基づいて、仮想スライド区間を有する仮想ストリームを作成する処理（以下単に、仮想ストリーム作成処理と言う）を実行する。
尚、スライドストリームとは、それぞれの取得装置１０のプロジェクタ１１に投影するように入力したスライドデータであって、直接又はネットワーク５００を介して議事録作成装置１００のデータベース１８０に蓄積された情報の一連の流れを言う。尚、スライドデータは、会議で表示される情報の一つである。
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されているスクリーンに表示されたスライドの区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
また、それぞれの取得装置１０は、プロジェクタ１１の代わりに例えば、液晶ディスプレイやＣＲＴ表示装置等を有する構成を採用できる。このような実施例の場合には、スライドストリームとは、それぞれの取得装置１０の液晶ディスプレイ等に表示するように入力したスライドデータであって、直接又はネットワーク５００を介して議事録作成装置１００のデータベース１８０に蓄積された情報の一連の流れを言う。
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されている画面に表示されたスライドの区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
仮想スライド区間とは、スライドストリームの内容を区切る区切時刻で区分されたスライド区間を、更に切替時刻で区分した区間である。また、仮想スライド区間は、会議の開始時刻及び終了時刻までの時間区間をも有する。
その後、参照した切替時刻と区切時刻とに基づいて平均値を用いた補完処理（以下単に、平均値補完処理と言う）を実行することで切替時刻を補完する。尚、補完された切替時刻を補完切替時刻と呼ぶことにする。また、平均値補完処理については後述する。
又は、抽出部１５０は参照した区切時刻に基づいて乖離率を用いた補完処理（以下単に、乖離率補完処理と言う）を実行することで切替時刻を補完する。尚、同様に、補完された切替時刻を補完切替時刻と呼ぶことにする。また同様に、乖離率補完処理については後述する。
次に、抽出部１５０は、補完切替時刻を基に仮想スライド区間を補正し、補正された仮想スライド区間と既に抽出した暫定被記録時間区間とに基づいて被記録時間区間を抽出する。その後、抽出した被記録時間区間と議事録を構成する議事録情報と被記録時間区間とを関連付けてデータベース１８０に蓄積する。
よって、データベース１８０に蓄積された議事録情報と被記録時間区間と被記録時間区間に表示されていたスライドデータと被記録時間区間に収音されていた収音音声と被記録時間区間に撮像された撮像画像とは、時刻情報を基に関連付く。
先ず、切替時刻の補完方法について説明する前に、図３を用いて補完の必要性について説明する。図３は、切替時刻の補完の必要性について説明した図である。
通常、議事録の記録対象とされる発言等は、説明対象とするスライドに対して行われる。よって、記録対象とされる発言は説明対象を切替えた時刻ＴＣ０ないし３をまたぐことは少ない。
また、通常、発言等は、説明対象とするスライドの内容に対して行われる。よって、発言は表示スライドが切替られて表示内容が時間的に区切られた時刻ＴＤ１１、１４、ＴＤ２１、ＴＤ２４、ＴＤ３２、及び、ＴＤ３３をまたぐことは少ない。
よって、切替時刻ＴＣ及び区切時刻ＴＤで区切られた時間区間に基づいて発言等がなされた時間区間（つまり、被記録時間区間）を抽出することで、実際に発言のなされた時間区間と抽出された時間区間との差異が生じ難くなる。
理想的には、ＴＣ２とＴＤ１４及びＴＤ３２との関係の様に、切替時刻ＴＣと区切時刻ＴＤとが一致することが望ましい。しかし、プロジェクタ等を操作してスライドの表示切替により内容の区切りを指示するオペレータと説明対象とするスライドストリームの切替をを指示するオペレータとが異なる場合や、複数のスライドストリームをネットワークを介して受信しており、ネットワークに遅延が生じている場合等には、ＴＣ１とＴＤ１１及びＴＤ２１、若しくは、ＴＣ３とＴＤ３３及びＴＤ２４との関係の様に、切替時刻ＴＣと区切時刻ＴＤとが一致せずに誤差が発生する。
よって、単純に切替時刻ＴＣと区切時刻ＴＤとに基づいて時間区間を区切る場合には、誤差によって生じる微小区間の影響を受けるてしまうため、切替時刻ＴＣを区切時刻ＴＤに基づいて、又は、切替時刻ＴＣを区切時刻ＴＤと切替時刻ＴＣとに基づいて補完した切替時刻で区切られる被記録時間区間を抽出する必要がある。
次に、図４を用いて抽出部１５０の実行する平均補完処理を説明する。図４は、抽出部１５０の実行する平均補完処理を示すフローチャートである。
先ず、抽出部１５０は、処理対象とする切替時刻ＴＣを取得する（ステップＳＴ１）。次に、説明対象の切替先とするスライドストリーム（以下単に、切替先ストリームと言う）における区切時刻Ｔｔを取得する。ただし、Ｔｔとは、切替先ストリームの区切時刻の内で最も切替時刻Ｔに近いものを言う（ステップＳＴ２）。
次に、抽出部１５０は、説明対象の切替元であるスライドストリーム（以下単に、切替元ストリームと言う）における区切時刻Ｔｆを取得する。ただし、Ｔｆとは、切替先ストリームの区切時刻の内で最も切替時刻Ｔに近いものを言う（ステップＳＴ３）。
その後、抽出部１５０は、区切時刻Ｔｆ及びＴｔ、並びに、切替時刻ＴＣの内で最も遅い時刻Ｔｍａｘを取得する（ステップＳＴ４）。
次に、抽出部１５０は、区切時刻Ｔｆ及びＴｔ、並びに、切替時刻ＴＣの内で最も早い時刻Ｔｍｉｎを取得する（ステップＳＴ５）。
その後、抽出部１５０は、切替時刻ＴＣの補完時刻である補完切替時刻ＴをＴｍａｘ及びＴｍｉｎの平均値として算出する（ステップＳＴ６）。その後、抽出部１５０は処理を終了する。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
次に、図５ないし７を用いて補完切替時刻と切替時刻及び区切時刻との関係を説明する。図５は、補完切替時刻と切替時刻Ｔ及び区切時刻との関係を説明するための図の一例である。
図５の上図及び下図では、切替先ストリームの区切時刻Ｔｔと切替元ストリームの区切時刻Ｔｆとの間で、ストリームの切替が発生した場合を説明する。双方の場合には、ＴｔとＴｆとの中間時点Ｔに、切替時刻ＴＣは補正される。
図６は、補完切替時刻と切替時刻Ｔ及び区切時刻との関係を説明するための図の他例である。
図６の上図及び下図では、切替先ストリームの区切時刻Ｔｔ及び切替元ストリームの区切時刻Ｔｆの双方よりも前に、ストリームの切替が発生した場合を説明する。ＴｔよりもＴｆが遅い場合には切替時刻ＴＣとＴｆの中間時点Ｔに、そうでない場合には切替時刻ＴＣとＴｔの中間時点Ｔに、切替時刻ＴＣは補正される。
図７は、補完切替時刻と切替時刻Ｔ及び区切時刻との関係を説明するための図の他例である。
図７の上図及び下図では、切替先ストリームの区切時刻Ｔｔ及び切替元ストリームの区切時刻Ｔｆの双方よりも後に、ストリームの切替が発生した場合を説明する。ＴｔよりもＴｆが早い場合には切替時刻ＴＣとＴｆの中間時点Ｔに、そうでない場合には切替時刻ＴＣとＴｔの中間時点Ｔに、切替時刻ＴＣは補正される。
次に、図８を用いて抽出部１５０の実行する乖離率補完処理を説明する。図８は、抽出部１５０の実行する乖離率補完処理を示すフローチャートである。
先ず、抽出部１５０は、処理対象とする切替時刻ＴＣを取得する（ステップＳＴ１０１）。次に、切替元ストリームにおける区切時刻Ｔｆ０及びＴｆ１を取得する。ただし、Ｔｆ１とは、切替元ストリームの区切時刻の内で最も切替時刻Ｔに近いものを言い、Ｔｆ０とは、Ｔｆ１に最も近くＴｆ１より早い切替元ストリームの区切時刻を言う。（ステップＳＴ１０２）。
次に、抽出部１５０は、ステップＳＴ１０２で取得した区切時刻Ｔｆ１及びＴｆ０と切替時刻ＴＣとに基づいて乖離率ｄｆを算出する（ステップＳＴ１０３）。具体的には、切替時刻ＴＣと区切時刻Ｔｆ１との差を区切時刻Ｔｆ１と区切時刻Ｔｆ０の差で除算した値を求め、求めた値の絶対値を乖離率ｄｆとして算出する。
その後、抽出部１５０は、切替先ストリームにおける区切時刻Ｔｔ０及びＴｔ１を取得する。ただし、Ｔｔ０とは、切替先ストリームの区切時刻の内で最も切替時刻Ｔに近いものを言い、Ｔｔ１とは、Ｔｔ０に最も近くＴｔ０より遅い切替先ストリームの区切時刻を言う。（ステップＳＴ１０４）。
次に、抽出部１５０は、ステップＳＴ１０４で取得した区切時刻Ｔｔ１及びＴｔ０と切替時刻ＴＣとに基づいて乖離率ｄｔを算出する（ステップＳＴ１０５）。具体的には、切替時刻ＴＣと区切時刻Ｔｔ０との差を区切時刻Ｔｔ１と区切時刻Ｔｔ０の差で除算した値を求め、求めた値の絶対値を乖離率ｄｔとして算出する。
その後、抽出部１５０は、ステップＳＴ１０３で算出した乖離率ｄｆがステップＳＴ１０５で算出したｄｔよりも小さいかを判断する（ステップＳＴ１０６）。抽出部１５０は、乖離率ｄｆがｄｔよりも小さいと判断した場合にはステップＳＴ１０７の処理を、そうでない場合にはステップＳＴ１０８の処理を実行する。
ステップＳＴ１０６において、抽出部１５０は、乖離率ｄｆがｄｔよりも小さいと判断した場合には、切替時刻ＴＣをＴｆ１と補完する（ステップＳＴ１０７）。その後、抽出部１５０は処理の実行を終了する。
ステップＳＴ１０６において、抽出部１５０は、乖離率ｄｆがｄｔ以上であると判断した場合には、切替時刻ＴＣをＴｔ０と補完する（ステップＳＴ１０８）。その後、抽出部１５０は処理の実行を終了する。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
次に、図９ないし１０を用いて補完切替時刻と区切時刻との関係を説明する。図９は、補完切替時刻と区切時刻との一の関係を説明するための図である。
図９の上図、中図及び下図では、切替先ストリームの区切時刻Ｔｔ０及びＴｔ１で定まる区間と切替元ストリームの区切時刻Ｔｆ０及びＴｆ１で定まる区間とが重なる場合を示している。また、上から順に、切替時刻がＴｔ０よりも前、Ｔｔ０とＴｆ１との間、Ｔｆ１の後である場合における補完切替時刻Ｔと区切時刻Ｔｔ０、Ｔｔ１、Ｔｆ０、及び、Ｔｆ１との関係を表している。
上、中、及び、下図いずれの場合であっても、補完切替時刻ＴがＴｔ０又はＴｆ１のいずれとなるかは、乖離率ｄｔ及びｄｆに依存する。尚、図９においては上及び中図では乖離率ｄｔはｄｆより小さく、補完切替時刻ＴはＴｔ０となり、下図では乖離率ｄｔはｄｆより大きく補完切替時刻ＴはＴｆ１と補完される場合を示した。
図１０は、補完切替時刻と区切時刻との他の関係を説明するための図である。図１０の上図、中図及び下図では、切替先ストリームの区切時刻Ｔｔ０及びＴｔ１で定まる区間と切替元ストリームの区切時刻Ｔｆ０及びＴｆ１で定まる区間とが重ならない場合を示している。また、上から順に、切替時刻がＴｔ０よりも前、Ｔｔ０とＴｆ１との間、Ｔｆ１の後である場合における補完切替時刻Ｔと区切時刻Ｔｔ０、Ｔｔ１、Ｔｆ０、及び、Ｔｆ１との関係を表している。
上、中、及び、下図いずれの場合であっても、補完切替時刻ＴがＴｔ０又はＴｆ１のいずれとなるかは、乖離率ｄｔ及びｄｆに依存する。尚、図９においては上及び中図では乖離率ｄｔはｄｆより小さく、補完切替時刻ＴはＴｔ０となり、下図では乖離率ｄｔはｄｆより大きく補完切替時刻ＴはＴｆ１と補完される場合を示した。
次に、図１１ないし１５を参照して抽出部１５０の実行する仮想スライド作成処理を説明する。図１１は、仮想スライド作成処理を制御する処理（以下単に、仮想スライド作成制御処理と言う）を示すフローチャートである。尚、仮想スライド作成制御処理は、本議事録作成装置１００に入力されるスライドストリームの全てに対して順に実行される。
先ず、抽出部１５０は、処理対象とするストリームにおける切替番号を表すテンポラリ変数ｉを１とする（ステップＳＴ２０１）。次に、処理対象とするストリームの会議中ｉ番目の切替時刻ＴＣｉを取得する（ステップＳＴ２０２）。
その後、抽出部１５０は、ｉが１であるかを判断する。つまり、処理対象とするストリームの最初の切替であるかを判断する（ステップＳＴ２０３）。抽出部１５０は、ｉが１であると判断した場合にはステップＳＴ２０４の処理を、そうでない場合にはステップＳＴ２１０の処理を実行する。
ステップＳＴ２０３において、抽出部１５０は、ｉが１であると判断した場合には、切替区間の開始時刻を会議の開始時刻ＴＣｓとする（ステップＳＴ２０４）。尚、切替区間とは、ステップＳＴ２１２で説明する仮想スライド作成処理の処理対象とする時間区間であって、ステップＳＴ２０４、２０６、２１０又は２１１で採用される処理対象とするストリームの切替時刻（若しくは、会議開始時刻ＴＣｓ又は終了時刻ＴＣｅ）で区切られた区間（ＴＣｉ，ＴＣｉ＋１）（若しくは（ＴＣｓ，ＴＣ１）又は（ＴＣｎ，ＴＣｅ））を言う。
ここで、図１２を参照して、図１１の仮想スライド作成制御処理のステップＳＴ２０４で説明した切替区間開始時刻の変更について説明する。図１２は、仮想スライド作成処理の概念を説明するための図である。
図１２は、３つのスライドストリームを使用する会議が時刻ＴＣｓに開始し、その後、時刻ＴＣ１でストリーム２及び３について最初の説明対象の切替を行い、時刻ＴＣ２でストリーム１について最初の説明対象の切替をし、ストリーム２については２番目の説明対象の切替を行なった場合を示している。
会議における発言や議事録の記録は、会議の開始時刻ＴＣｓから始まる。しかし、スライドの投影開始時刻ＴＣ１は会議の開始時刻ＴＣｓよりも通常は遅い。よって、会議の開始時刻から説明対象となるストリームの切替がなされるまでの間を１つの区切とする。
具体的には、図１２に示すように、スライドストリーム１ないし３についてそれぞれＩ１１、２１、及び、３１と言う区間を定めて、定めた区間について仮想スライド作成処理を実行する。この構成によって、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
次に、図１１に戻り引き続き仮想スライド作成制御処理について説明する。
ステップＳＴ２０４又はステップＳＴ２１０を実行した後には、抽出部１５０は、ｉがｎであるかを判断する。つまり、処理対象とするストリームの切替の番号ｉが最後の切替の番号ｎであるかを判断する（ステップＳＴ２０５）。抽出部１５０は、ｉがｎであると判断した場合にはステップＳＴ２０６の処理を、そうでない場合にはステップＳＴ２１１の処理を実行する。
ステップＳＴ２０５において、抽出部１５０は、ｉがｎであると判断した場合には、切替区間の終了時刻を会議の終了時刻ＴＣｅとする（ステップＳＴ２０６）。
ステップＳＴ２０６又はステップＳＴ２１１を実行した後には、抽出部１５０は、上記ステップＳＴ２０４、２０６、２１０又は２１１で求めた区間において、スライドストリームへ入力されたスライドの時間区間（以下単に、スライド区間と言う）の全てを取得する。
その後、抽出部１５０は、仮想スライド作成処理を実行する（ステップＳＴ２１２）。尚、仮想スライド作成処理については後述する。
次に、抽出部１５０は、ステップＳＴ２０５と同様に、ｉがｎであるかを判断する。つまり、処理対象とするストリームの切替の番号ｉが最後の切替の番号ｎであるかを判断する（ステップＳＴ２０８）。抽出部１５０は、ｉがｎであると判断した場合にはステップＳＴ２０９の処理を、そうでない場合にはステップＳＴ２１３の処理を実行する。
ステップＳＴ２０８において、抽出部１５０は、ｉがｎであると判断した場合には、入力切替補完処理を実行する（ステップＳＴ２０９）。その後、抽出部１５０は処理の実行を終了する。尚、入力切替補完処理については後述する。
ステップＳＴ２０３において、抽出部１５０は、ｉが１でないと判断した場合には、切替区間の終了時刻を会議の終了時刻ＴＣｉとする（ステップＳＴ２１０）。その後、抽出部１５０は、ステップＳＴ２０５の処理を実行する。
ここで、図１２を再度参照して、図１１の仮想スライド作成制御処理のステップＳＴ２１０で説明した切替区間の終了時刻の変更について説明する。
図１２は、３つのスライドストリームを使用する会議がスライドの投影を終了した後に、時刻ＴＣｅにその会議が終了した場合を示している。
会議における発言や議事録の記録は、会議の終了時刻ＴＣｅまで続く。しかし、スライドの投影は会議の終了時刻ＴＣｅよりも先に終わることがある。よって、スライドの最後の切替から会議の終了時刻ＴＣｅまでの間を１つの区切とする。
具体的には、図１２に示すように、スライドストリーム１ないし３についてそれぞれＩ１３、２５、及び、３４と言う切替区間を定めて、定めた区間について仮想スライド作成処理を実行する。この構成によって、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
次に、図１１に戻り引き続き仮想スライド作成制御処理について説明する。
ステップＳＴ２０５において、抽出部１５０は、ｉがｎでないと判断した場合には、切替区間の終了時刻をｉ＋１番目の切替時刻Ｃｉ＋１とする（ステップＳＴ２１１）。その後、抽出部１５０はステップＳＴ２０７の処理を実行する。
ステップＳＴ２０８において、抽出部１５０は、ｉがｎでないと判断した場合には、処理対象とする切替の番号ｉを１だけインクリメントする（ステップＳＴ２１３）。その後、抽出部１５０は、ステップＳＴ２０２に戻って上記処理を繰り返す。
次に、図１３を用いて、抽出部１５０の実行する図１１のステップＳＴ２１２で説明した仮想スライド作成処理について説明する。図１３は、抽出部１５０の実行する仮想スライド作成処理を示すフローチャートである。
先ず、抽出部１５０は、切替区間の最初のスライド区間を処理対象とする（ステップＳＴ３０１）。尚、処理対象とするスライド区間を処理対象スライド区間と以下単に言う。
次に、抽出部１５０は、処理対象スライド区間が切替区間の最初のスライド区間であるかを判断する（ステップＳＴ３０２）。抽出部１５０は、処理対象スライドが切替区間の最初のスライド区間であると判断した場合にはステップＳＴ３０３を、そうでない場合にはステップＳＴ３０７を実行する。
ステップＳＴ３０２において、抽出部１５０は、処理対象スライドが切替区間の最初のスライド区間であると判断した場合には、処理対象スライド区間の一つ前のスライド区間を取得する（ステップＳＴ３０３）。尚、一つ前のスライド区間が存在しない場合には、会議の開始時刻ＴＣｓから処理対象スライドの区間開始時刻までをスライド区間として取得する。
次に、抽出部１５０は、切替時刻からＳＴ３０３で取得した一つ前のスライドの終了時刻までの仮想スライド区間を追加する（ステップＳＴ３０４）。
その後、抽出部１５０は、処理対象スライド区間の区間開始時刻及び終了時刻を有する仮想スライド区間を作成する（ステップＳＴ３０５）。
ステップＳＴ３０５、ステップＳＴ３０８、又は、ステップＳＴ３０９を実行した後には、抽出部１５０は、処理対象スライド区間が切替区間の最後のスライド区間であるかを判断する（ステップＳＴ３０６）。抽出部１５０は、処理対象スライドが切替区間の最後のスライド区間であると判断した場合には仮想スライド区間作成処理を終了し、そうでない場合にはステップＳＴ３１０の処理を実行する。
ステップＳＴ３０２において、抽出部１５０は、処理対象スライド区間が切替区間の最初のスライド区間でないと判断した場合には、処理対象スライドが切替区間中の最後のスライド区間であるかを判断する（ステップＳＴ３０７）。抽出部１５０は、処理対象スライドが切替区間の最後のスライド区間であると判断した場合にはステップＳＴ３０８の処理を、そうでない場合にはステップＳＴ３０９の処理を実行する。
ステップＳＴ３０７において、抽出部１５０は、処理対象スライド区間が切替区間の最後のスライド区間であると判断した場合には、仮想スライド区間の終了時刻を次の（ｉ＋１番目の）切替時刻とする仮想スライド区間を作成する。その後、ステップＳＴ３０６の処理を実行する。
ステップＳＴ３０７において、抽出部１５０は、処理対象スライドが切替区間の最後のスライド区間でないと判断した場合には、処理対象スライドの区間開始時刻及び終了時刻を有する仮想スライド区間を作成する（ステップＳＴ３０９）。その後、ステップＳＴ３０６の処理を実行する。
ステップＳＴ３０６において、抽出部１５０は、処理対象スライドが切替区間の最後のスライド区間でないと判断した場合には、切替区間の処理対象スライド区間の次のスライド区間を処理対象スライド区間とする（ステップＳＴ３１０）。その後、ステップＳＴ３０２に戻り上記処理を繰り返す。
ここで、図１４を用いて、図１３で説明した仮想スライド作成処理を再度説明する。図１４は、図１２で示す切替区間Ｉ１２を説明する部分拡大図である。
例えば、図１２に示す切替区間Ｉ１２について仮想スライド作成処理を実行する場合には、処理対象スライドは、最初にＩＳ１２、２番目にＩＳ１３、最後にＩＳ１４と言う順番に処理対象とされる。
また、処理対象スライドが最初のスライドのＩＳ１２である場合には、処理対象スライドの一つ前のスライドであるＩＳ１１を取得する（ステップＳＴ３０３）。
その後、抽出部１５０は、切替時刻Ｃ１１からＳＴ３０３で出取得した一つ前のスライドＩＳ１１の終了時刻Ｔｅ１１までの仮想スライド区間ＩＰＳ１１＿３を追加する（ステップＳＴ３０４）。
尚、ＳＴ３０３で出取得した一つ前のスライドが存在しない場合には、会議開始時刻ＴＣｓから終了時刻Ｔｅ１０までの仮想スライド区間ＩＰＳ１１＿１を追加する（ステップＳＴ３０３）。
更に、抽出部１５０は、処理対象スライドが切替区間の最後のスライドＩＳ１４である場合には、処理対象スライドの区間開始時刻Ｔｅ１２から開始して２番目の切替時刻で終了する仮想スライド区間ＩＰＳ１４＿０を追加する（ステップＳＴ３０９）。
次に、図１５を参照して図１１で示したステップＳＴ２０９の入力切替補完処理について説明する。図１６は、抽出部１５０の実行する入力切替補完処理を示すフローチャートである。
先ず、抽出部１５０は、最初の仮想スライド区間を処理対象とする（ステップＳＴ４０１）。次に、抽出部１５０は、処理対象仮想スライド区間を取得とする（ステップＳＴ４０２）。その後、抽出部１５０は、処理対象仮想スライド区間長が所定の閾値より小さいか判断する（ステップＳＴ４０３）。抽出部１５０は、処理対象仮想スライド区間長が所定の閾値より小さいかと判断した場合にはステップＳＴ４０４の処理を、そうでない場合にはステップＳＴ４１１の処理を実行する。
ステップＳＴ４０３において、抽出部１５０は、処理対象仮想スライド区間長が所定の閾値より小さいかと判断した場合には、処理対象仮想スライドを削除する（ステップＳＴ４０４）。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。このような区間を削除することで抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
次に、抽出部１５０は、処理対象スライド区間が処理対象とするスライドストリームの最後のスライド区間であるかを判断する（ステップＳＴ４０５）。抽出部１５０は、最後のスライド区間であるとを判断する場合にはステップＳＴ４０６の処理を、そうでない場合にはステップＳＴ４１１の処理を実行する。
ステップＳＴ４０５において、抽出部１５０は、処理対象スライド区間が処理対象とするスライドストリームの最後のスライド区間であるとを判断した場合には、ステップＳＴ４０４で削除されずに残存した仮想スライド区間の内で最初のものを処理対象仮想スライド区間とする（ステップＳＴ４０６）。
次に、抽出部１５０は、処理対象仮想スライド区間の前後に削除された区間があるか判断する（ステップＳＴ４０７）。抽出部１５０は、削除された区間があると判断する場合にはステップＳＴ４０８を、そうでない場合にはステップＳＴ４１２の処理を実行する。
ステップＳＴ４０７において、抽出部１５０は、処理対象仮想スライド区間の前後に削除された区間があると判断する場合には、削除された区間に関連する切替時刻を補完する（ステップＳＴ４０８）。尚、切替時刻の補完処理の内で平均値を用いる補完処理については図４を用いて、また、乖離率を用いる補完処理については図８を用いて説明したため、説明は省略する。
一例として、切替時刻と区切時刻とが接近した時間区間において発言がなされることは少ない。また、この構成によれば、補正切替時刻に基づいて被記録時間区間を抽出できるため、一例として、補完しない切替時刻と区切時刻とに基づいて被記録時間区間を抽出する装置と比べて、発言などのなされることが少ない区間を抽出するおそれが無く、抽出された被記録時間区間と実際に議事録の記録対象とされ時間区間との差異が生じ難くなる。
次に、抽出部１５０は、処理対象仮想スライドの区間開始時刻又は終了時刻の内で、隣接する仮想スライド区間が削除された時刻をステップＳＴ４０８で補完された切替時刻で補正する（ステップＳＴ４０９）。
次に、抽出部１５０は、処理対象スライド区間が処理対象とするスライドストリームの最後のスライド区間であるかを判断する（ステップＳＴ４１０）。抽出部１５０は、最後のスライド区間であるとを判断する場合には処理を終了し、そうでない場合にはステップＳＴ４１２の処理を実行する。
ステップＳＴ４０３において、抽出部１５０は、処理対象仮想スライド区間長が所定の閾値より小さくないと判断した場合、又は、ステップＳＴ４０５において、処理対象スライド区間が処理対象とするスライドストリームの最後のスライド区間でないとを判断した場合には、処理対象スライド区間を次のスライド区間とする（ステップＳＴ４１１）。その後、ステップＳＴ４０２に戻り上記処理を繰り返す。
ステップＳＴ４０７において、抽出部１５０は、処理対象仮想スライド区間の前後に削除された区間がないと判断する場合、又は、ステップＳＴ４１０において、処理対象スライド区間が処理対象とするスライドストリームの最後のスライド区間でないと判断した場合には、処理対象スライド区間を次のスライド区間とする（ステップＳＴ４１２）。その後、ステップＳＴ４０７に戻り上記処理を繰り返す。
次に、抽出部１５０は、議事録情報入力区間に基づいて暫定的に求めた被記録時間区間である暫定被記録時間区間を、仮想スライド区間作成制御処理で作成し、補正した仮想スライド区間で分割する。その後、分割された暫定被記録時間区間の先頭区間のみを被記録時間区間として抽出する。
次に、図１６を用いて、抽出部１５０の行なう被記録時間区間を抽出する処理（以下単に、被記録時間区間抽出処理と言う）を説明する。図１６は、抽出部１５０の行なう被記録時間区間抽出処理を示すフローチャートである。
先ず、抽出部１５０は、暫定被記録時間区間の開始時刻を取得する（ステップＳＴ５０１）。次に、抽出部１５０は、暫定被記録時間区間の終了時刻を取得する（ステップＳＴ５０２）。
次に、抽出部１５０は、暫定被記録時間区間の終了時刻を取得できたか判断する（ステップＳＴ５０３）。抽出部１５０は、暫定被記録時間区間の終了時刻を取得できたと判断する場合にはステップＳＴ５０４の処理を、そうでない場合にはステップＳＴ５０８の処理を実行する。
ステップＳＴ５０３において、抽出部１５０は、暫定被記録時間区間の終了時刻を取得できたと判断する場合、又は、ステップＳＴ５０８を実行した後には、暫定被記録時間区間内に補正後の仮想スライドの区間区切（つまり、補完後の切替又は区切）があるかを判断する（ステップＳＴ５０４）。抽出部１５０は、暫定被記録時間区間内に補正後の仮想スライドの区間の区切があると判断した場合にはステップＳＴ５０５の処理を、そうでない場合にはステップＳＴ５０６の処理を実行する。
ステップＳＴ５０４において、抽出部１５０は、暫定被記録時間区間内に補正後の仮想スライドの区間区切があると判断した場合には、暫定被記録時間区間の終了時刻を補完後の仮想スライドの区間区切時刻に補正することで被記録時間区間を抽出する（ステップＳＴ５０５）。
一例として、議事録情報の記録対象とする発言等は、切替可能に表示されている被表示画像の区切りある内容に対してなされる。よってこの構成によれば、切替時刻と区切時刻との双方に基づいて区切りを定められた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
また、一例として、議事録情報の記録対象とする発言等は、被表示画像の区切りある内容に対してなされる。よってこの構成によれば、区切時刻で区切られた被記録時間区間を抽出できるため、抽出された被記録時間区間と実際に議事録情報の記録対象とされ時間区間との差異が生じ難くなる。
ステップＳＴ５０４において、抽出部１５０は、暫定被記録時間区間内に補正後の仮想スライドの区間区切がないと判断した場合、又は、ステップＳＴ５０５を実行した後には、抽出部１５０は、抽出した被記録時間区間に対応する収音音声がデータベース１８０に蓄積されているか判断する（ステップＳＴ５０６）。抽出部１５０は、被記録時間区間に対応する収音音声がデータベース１８０に蓄積されていると判断する場合にはステップＳＴ５０７の処理を、そうでない場合には処理を終了する。
ステップＳＴ５０６において、抽出部１５０は、被記録時間区間に対応する収音音声がデータベース１８０に蓄積されていると判断する場合には、
被記録時間区間に対応するデータベース１８０に蓄積された収音音声を抽出し、被記録時間区間と議事録情報と収音音声とを関連付けてデータベース１８０に蓄積する。
ステップＳＴ５０３において、抽出部１５０は、暫定被記録時間区間の終了時刻を取得できなかったと判断した場合には、暫定被記録時間区間の開始時刻より所定時間遅い時刻を終了時刻とする（ステップＳＴ５０８）。その後、ステップＳＴ５０４の処理を実行する。
次に、図１７及び１８を参照して、図１６で説明した被記録時間区間抽出処理を再度説明する。図１７は、暫定被記録時間区間と被記録時間区間とスライド区間との一の関係を説明するための図である。
図１７で示す、抽出部１５０が抽出した暫定被記録時間区間（Ｒ１ｓ，Ｒ１ｅ）に切替時刻ＴＣは含まれていない。ここで、抽出部１５０は、仮想スライド区間ＳＬｔ２＿０を、図１５を用いて説明した入力切替補完処理で所定の区間長に達しなかっため削除した（ステップＳＴ４０４）。
よって、平均値に基づく補完処理を実行した結果、切替時刻ＴＣは暫定被記録時間区間（Ｒ１ｓ，Ｒ１ｅ）に含まれる補完切替時刻Ｔと補完された（ステップＳＴ４０８）。その後、抽出部１５０は、削除された仮想スライド区間ＳＬｔ２＿０に隣接する仮想スライド区間ＳＬｔ２＿１の開始時刻を補完切替時刻Ｔと補正する（ステップＳＴ４０９）。
そこで、抽出部１５０は、暫定被記録時間区間（Ｒ１ｓ，Ｒ１ｅ）に補完切替時刻Ｔが含まれると判断し（ステップＳＴ５０４）、暫定被記録時間区間の終了時刻Ｒ１ｅを補完切替時刻Ｔと補正して被記録時間区間（Ｒ１ｓ，Ｔ）を抽出する（ステップＳＴ５０５）。
また、抽出部１５０が抽出した暫定被記録時間区間（Ｒ２ｓ，Ｒ２ｅ）は、区切時刻Ｔｔ２ｅを含むと判断する（ステップＳＴ５０４）。そこで、抽出部１５０は、暫定被記録時間区間の終了時刻Ｒ２ｅを区切時刻Ｔｔ２ｅと補正することで被記録時間区間（Ｒ２ｓ，区切時刻Ｔｔ２ｅ）を抽出する（ステップＳＴ５０５）。
また、図１８で示す、抽出部１５０が抽出した暫定被記録時間区間（Ｒ１ｓ，Ｒ１ｅ）も同様に切替時刻ＴＣは含まれていない。ここで、抽出部１５０は、仮想スライド区間ＳＬｔ２＿０を、図１５を用いて説明した入力切替補完処理で所定の区間長に達しなかっため、図１７と同様に削除した（ステップＳＴ５０８）。
次に、図１７と異なり、乖離率に基づく補完処理を実行した結果、切替時刻ＴＣは暫定被記録時間区間（Ｒ１ｓ，Ｒ１ｅ）に含まれる補完切替時刻Ｔと補完された（ステップＳＴ４０８）。その後、図１７と同様に、抽出部１５０は、削除された仮想スライド区間ＳＬｔ２＿０に隣接する仮想スライド区間ＳＬｔ２＿１の開始時刻を補完切替時刻Ｔと補正する（ステップＳＴ４０９）。
そこで、抽出部１５０は、暫定被記録時間区間の終了時刻Ｒ１ｅを補完切替時刻Ｔと補正することで被記録時間区間（Ｒ１ｓ，Ｔ）を抽出する点も図１７の例と同様である（ステップＳＴ５０５）。
更に、抽出部１５０が抽出した暫定被記録時間区間（Ｒ２ｓ，Ｒ２ｅ）については、図１７の例と同様であるために説明を省略する。
ここで、図１に戻り本議事録作成装置１００の構成を引き続き説明する。
データベース１８０は、例えば、リレーショナルデータベースで構成され、蓄積部１３０、制御部１４０、抽出部１５０、及び、配信部１７０に接続している。
データベース１８０は、スライドデータと区切時刻とプロジェクタ識別情報とを蓄積部１３０によって関連付けられて蓄積している。
また、データベース１８０は、撮像画像とカメラ識別情報と時刻情報とを蓄積部１３０によって関連付けられて蓄積している。
更に、データベース１８０は、収音音声及びマイク識別情報と時刻情報とを蓄積部１３０によって関連付けられて蓄積している。
また、データベース１８０は、議事録情報入力区間と議事録とを蓄積部１３０によって関連付けられて蓄積している。
更に、データベース１８０は、切替時刻と切替元カメラ識別情報と切替先カメラ識別情報とを蓄積部１３０によって関連付けられて蓄積している。
データベース１８０は、説明対象とされるスライドを投影するプロジェクタのプロジェクタ識別情報とそれを説明する参加者の音声を収音可能に配置されたマイクロフォンのマイク識別情報と投影されたスライド又はスライド説明者を撮像可能に配置されたビデオカメラのカメラ識別情報とを関連付けて蓄積している。
これにより、切替先カメラ識別情報に基づいて説明対象の切替先であるスライドデータ（以下単に、切替先スライドデータと言う）と切替先スライドデータを説明した音声とを関連付けることができる。
また、データベース１８０は、会議の出席者を識別する情報（以下単に、出席者識別情報と言う）、出席者の氏名等の個人情報、配信される議事録（以下単に、配信議事録と言う）を通常受信する端末（以下単に、端末と言う）及び配信議事録を受信するメールアドレス（以下単に、受信アドレスと言う）とを関連付けて蓄積している。
また、データベース１８０は、書記３００を識別する情報と配信議事録を送信するメールアドレス（以下単に、送信アドレスと言う）とを関連付けて蓄積している。
更にまた、データベース１８０は、会議識別情報と会議の書誌的情報（以下単に、会議書誌情報と言う）と会議の出席者の出席者識別情報とを関連付けて蓄積している。尚、会議の書誌的情報とは、会議名、場所、開催時刻、出席者、議事日程（アジェンダ）等を予め記載したメモ情報等を言う。
データベース１８０は、制御部１４０により、蓄積した出席者の氏名、受信アドレス、送信アドレス、及び、会議書誌情報等を参照される。更にまた、蓄積部１３０は、配信部１７０により、蓄積したスライドデータ、収音音声、又は、撮像画像等を参照される。
配信議事録作成部１６０は、制御部１４０及び配信部１７０に接続している。配信議事録作成部１６０は、制御部１４０から受信アドレス、送信アドレス、会議書誌情報、議事録、及び、配信議事録情報等を取得する。
その後、制御部１４０から受信する配信議事録情報に基づいて配信議事録を作成する。その後、作成した配信議事録を制御部１４０及び配信部１７０へ送信する。尚、配信議事録は、例えば、ＨＴＭＬ等の構造化文書で構成されており、電子メールとして配信される。
この構成によれば、既に作成された議事録に基づいて配信用の議事録を作成することができるため、一例として、既に作成された議事録に基づかずに配信用の議事録を作成する場合と比べて、議事録を作成に要する書記の労力を軽減できる。
配信部１７０は、制御部１４０、配信議事録作成部１６０及び蓄積部１３０に接続している。配信部１７０は、配信議事録作成部１６０から配信議事録を受信する。その後、制御部１４０から配信命令を受信し、ネットワーク５００を通じて配信議事録を配信する。
構造化文書で構成される配信議事録は、配信議事録の配信議事録情報の内で特にコメントを記録する対象とした被記録時間区間に説明対象とされていたスライドデータ、収音された収音音声、及び、撮像された撮像画像であって、本議事録作成装置１００のデータベース１８０に蓄積されたスライドデータ、収音音声、及び、撮像画像にアクセス可能にリンクが張られている。
よって、配信議事録の配信を受けた会議の参加者は、それぞれの操作する端末においてリンク先を参照することで、本議事録作成装置１００のデータベース１８０に蓄積された被記録時間区間に説明対象とされていたスライドデータ、収音された収音音声、及び、撮像された撮像画像を配信部１７０を通じて取得し、取得した情報を視聴できる。
この構成によれば、配信議事録と被記録時間区間における会議で使用されたスライドデータ等の被表示画像、会議における音声、又は、会議における映像とをリンクとして関連付けるので、配信される議事録のデータの増加を抑制しながら議事録にコンテンツ情報と言う補完情報を付加することができる。
次に、図１９を参照して、本発明の他実施例に係る議事録作成システムの構成図を説明する。図１９は本発明の他実施例に係る議事録作成システムの構成図である。
本議事録作成システムの構成は、図１で例示した議事録作成システムの構成とほぼ同じであるが、関連情報指示装置６０を備える点で異なる。
取得装置１０の接続、及び、機能は、図１で例示した議事録作成システムを構成する取得装置１０と同じであるため省略する。
図１で例示した議事録作成システムを構成する切替検出装置２０が説明対象とするスライドを撮像した撮像画像を切り替えるのに対し、本議事録作成システムの切替検出装置２０は、説明対象とするスライドを説明する音声を収音音声を切替る点でことなる。
また、図１で例示した議事録作成システムを構成する切替検出装置２０が説明対象スライドの切替を、制御部１４０へ送信するスライドを撮像した撮像画像の切替に基づいて検出するのに対し、本議事録作成システムの切替検出装置２０は、収音音声を切替えに基づいて検出する点で異なる。
切替検出装置２０の接続は、図１で例示した議事録作成システムを構成する取得装置１０とほぼ同じであるが、関連情報指示装置６０に接続している点で異なる。
また、切替検出装置２０は、図１で例示した切替検出装置２０と同様に、制御部１４０から切替命を指示する命令と変更先のカメラのカメラ識別情報とを受領した後に、関連情報指示装置１００へカメラ識別情報を送信し、カメラ識別情報に関連付けられたマイク識別情報を取得する。
その後、切替検出装置２０は、説明対象であったスライドを説明する音声を収音可能に配置されたマイクロフォン（以下単に、切替元マイクロフォンと言う）の収音した収音音声から説明対象とするスライドを説明する音声を収音可能に配置されたマイクロフォン（以下単に、切替先マイクロフォンと言う）の収音した収音音声へ切替えて制御部１４０へ送信する。よって、切替検出装置２０は、収音音声の切替によって説明対象とする被表示画像が切替えられたことを検出する。
その後、切替検出装置２０は、切替元マイクロフォンのマイク識別情報（以下単に、切替元マイク識別情報）と切替先マイクロフォンのマイクロ識別情報（以下単に、切替先マイクロ識別情報）と切替を検出したことを表す信号（以下単に、切替信号と言う）とを関連付けて算出部
１００へ送信する。尚、切替信号の代わりに切替を検出した時刻である切替時刻を送信する構成を採用することもできる。
関連情報指示装置６０は、切替検出装置２０に接続している。関連情報指示装置６０は、説明対象とされる投影されたスライドを撮像可能に配置されたカメラのカメラ識別情報と、説明を収音可能に配置されたマイクロフォンのマイク識別情報とを関連付けて記憶している。
切替検出装置２０からカメラ識別情報を受信し、予め記憶していたカメラ識別情報と関連付けられたマイク識別情報を切替検出装置２０へ送信する。
出音装置３０、表示装置４０、入力装置５０、議事録作成装置１００、算出部１１０、議事録作成部１２０、蓄積部１３０、制御部１４０、抽出部１５０、配信議事録作成部１６０、配信部１７０、及び、データベース１８０の接続及び構成等は、図１で例示したものと同様であるため省略する。
上記実施形態では、配信議事録は作成された議事録に対してただ一つ作成される場合について説明したが、これに限定されるわけではなく、例えば、制御部１４０は、会議の参加者の所属をデータベース１８０から参照し、配信議事録作成部１６０は、会議の参加者の所属に関連する議事録情報のみから配信議事録を作成するように制御することで、配信議事録の配信先別に異なる配信議事録を作成する構成を採用できる。
上記実施形態では、ＣＣＤカメラを用いた場合について説明したが、これに限定されるわけではなく、例えば、ＣＭＯＳイメージセンサを用いたカメラ等を採用することも可能である。
上記実施形態では、複数のプロジェクタ１１により投影されたスライドを撮像する複数のビデオカメラ１３又は説明を収音音声するマイクロフォン１２を切替検出装置２０によって切り替える場合について説明したが、これに限定されるわけではなく、例えば、複数のコンピュータに１台のプロジェクタ１１を切替検出装置２０介して接続する構成を採用することができる。これによって、説明対象とするスライドを出力するコンピュータを切替検出装置２０が切替えることができるだけでなく、説明対象の切替えを検出できる。
本発明の一実施例に係る議事録作成システムの構成図である。 取得装置の一構成を説明するための図である。 切替時刻の補完の必要性について説明した図である。 抽出部の実行する平均補完処理を示すフローチャートである。 補完切替時刻と切替時刻及び区切時刻との関係を説明するための図の一例である。 補完切替時刻と切替時刻及び区切時刻との関係を説明するための図の他例である。 補完切替時刻と切替時刻及び区切時刻との関係を説明するための図の他例である。 抽出部の実行する乖離率補完処理を示すフローチャートである。 補完切替時刻と区切時刻との一の関係を説明するための図である。 補完切替時刻と区切時刻との他の関係を説明するための図である。 仮想スライド作成制御処理を示すフローチャートである。 仮想スライド作成処理の概念を説明するための図である。 抽出部１００の実行する仮想スライド作成処理を示すフローチャートである。 図１３で示す切替区間Ｉ１２を説明する部分拡大図である。 抽出部１５０の実行する入力切替補完処理を示すフローチャートである。 抽出部１５０の行なう被記録時間区間抽出処理を示すフローチャートである。 暫定被記録時間区間と被記録時間区間とスライド区間との一の関係を説明するための図である。 暫定被記録時間区間と被記録時間区間とスライド区間との他の関係を説明するための図である。 本発明の他実施例に係る議事録作成システムの構成図である。
符号の説明
１…議事録作成システム
１０…取得装置
１１…プロジェクタ
１２…マイクロフォン
１３…ビデオカメラ
２０…切替検出装置
３０…出音装置
４０…表示装置
５０…入力装置
６０…関連情報指示装置
１００…議事録作成装置
１１０…算出部
１２０…議事録作成部
１３０…蓄積部
１４０…制御部
１５０…抽出部
１６０…配信議事録作成部
１７０…配信部
１８０…データベース
３００…書記
４００…ユーザ
５００…ネットワーク
Ｃｉｊ…ストリームｉのｊ番目の切替
ｉ…処理対象スライドストリームにおける処理対象切替番号
Ｉｉｊ…ストリームｉのｊ番目の切替区間
ＩＰＳｉｊ…ストリームｉのｊ番目の仮想スライド区間
ＩＳｉｊ…ストリームｉのｊ番目のスライド区間
ｎ…処理対象スライドストリームにおける最後の切替番号
ＳＬｉｊ…ストリームｉのｊ番目のスライド区間
Ｔ…補完後のストリーム切替時刻
Ｔ…時刻
Ｔ１１，１４，２１，２４，３２,３３…区切時刻
ＴＣ…ストリーム切替時刻
ＴＣ０〜３…切替時刻
ＴＣ１〜ｎ…切替時刻
ＴＣｅ…会議終了時刻
ＴＤ１４，…ＴＤ３２
Ｔｅｉｊ…ストリームｉのｊ番目スライド区間の終了時刻
Ｔｆｉｅ…切替元ストリームｉ番目のスライドの区間終了時刻
Ｔｆｉｓ…切替元ストリームｉ番目のスライドの区間開始時刻
ＴＲｉｓ…ｉ番目の議事録入力区間開始時刻
ＴＲｉｅ…ｉ番目の議事録入力区間終了時刻
Ｔｔｉｅ…切替先ストリームｉ番目のスライドの区間終了時刻
Ｔｔｉｓ…切替先ストリームｉ番目のスライドの区間開始時刻

Claims (15)

  1. 会議で表示される情報である複数のストリームの画像としての被表示画像の内で説明対象とする被表示画像の切替えを検出する検出手段と、
    前記被表示画像の内容を時間的に区切る区切りを検出する区切検出手段と、
    前記切替検出手段が説明対象とする被表示画像の切替えを検出した時刻である切替時刻と前記区切検出手段が区切を検出した時刻である区切時刻とに基づいて、前記複数のストリームに対応して、議事録を構成する議事録情報の記録対象とされる時間区間である被記録時間区間を抽出する抽出手段と、を備える議事録作成システム。
  2. 前記抽出手段は、前記切替時刻を区切時刻に基づいて補完した切替時刻である補完切替時刻で区切られる前記被記録時間区間を抽出することを特徴とする請求項１に記載の議事録作成システム。
  3. 補完切替時刻とは、以下の条件式（１）を満足する時刻であることを特徴とする請求項２に記載の議事録作成システム。
    （数１）
    Ｔ ＝ （Ｔｍｉｎ ＋ Ｔｍａｘ） ／ ２ …（１）
    但し、ＴＣは前記切替時刻、Ｔｆは最もＴＣに近い切替元の前記被表示画像の区切時刻、Ｔｔは最もＴＣに近い切替先の前記被表示画像の区切時刻、ＴｍｉｎはＴＣ、Ｔｆ、Ｔｔの内で最も早い時刻、及び、ＴｍａｘはＴＣ、Ｔｆ、Ｔｔの内で最も遅い時刻を示す。
  4. 補完切替時刻とは、以下の条件式（２）を満足する時刻であることを特徴とする請求項２に記載の議事録作成システム。
    （数２）
    Ｔ ＝ Ｔｆ１ …（２）
    ｄｆ ＜ ｄｔ
    ｄｆ ＝ ｜ＴＣ − Ｔｆ１｜ ／ ｜Ｔｆ１ − Ｔｆ０｜
    ｄｔ ＝ ｜ＴＣ − Ｔｔ０｜ ／ ｜Ｔｔ１ − Ｔｔ０｜
    但し、ＴＣは前記切替時刻、Ｔｆ１は最もＴＣに近い切替元の前記被表示画像の区切時刻、Ｔｆ０はＴｆ１に最も近くＴｆ１より早い切替元の前記被表示画像の区切時刻、Ｔｔ０は最もＴＣに近い切替先の前記被表示画像の区切時刻、Ｔｔ１はＴｆ０に最も近くＴｔ０より遅い切替先の前記被表示画像の区切時刻を示す。
  5. 補完切替時刻とは、以下の条件式（３）を満足する時刻であることを特徴とする請求項２に記載の議事録作成システム。
    （数３）
    Ｔ ＝ Ｔｔ０ …（３）
    ｄｆ ＞＝ ｄｔ
    ｄｆ ＝ ｜ＴＣ − Ｔｆ１｜ ／ ｜Ｔｆ１ − Ｔｆ０｜
    ｄｔ ＝ ｜ＴＣ − Ｔｔ０｜ ／ ｜Ｔｔ１ − Ｔｔ０｜
    但し、ＴＣは前記切替時刻、Ｔｆ１は最もＴＣに近い切替元の前記被表示画像の区切時刻、Ｔｆ０はＴｆ１に最も近くＴｆ１より早い切替元の前記被表示画像の区切時刻、Ｔｔ０は最もＴＣに近い切替先の前記被表示画像の区切時刻、Ｔｔ１はＴｆ０に最も近くＴｔ０より遅い切替先の前記被表示画像の区切時刻を示す。
  6. 前記抽出手段は、前記区切時刻に基づいて区切られる前記被記録時間区間を抽出することを特徴とする請求項１ないし５に記載の議事録作成システム。
  7. 前記被表示画像とは、会議で表示されるスライドデータを含み、
    前記区切検出手段は、スライドデータの表示の切替時刻を区切時刻として検出することを特徴とする請求項１ないし６に記載の議事録作成システム。
  8. 会議において使用されるスライドデータを取得するスライドデータ取得手段と、
    前記抽出手段で抽出された被記録時間区間を記録した議事録情報と前記スライドデータ取得手段で取得したスライドデータであって前記抽出手段で抽出された被記録時間区間に表示されていたスライドデータとを関連付けて蓄積する蓄積手段と、を更に備える請求項７に記載の議事録作成システム。
  9. 会議における音声を収音する収音手段と、
    前記抽出手段で抽出された被記録時間区間を記録した議事録情報と前記抽出手段で抽出された被記録時間区間に前記収音手段で収音された収音音声とを関連付けて蓄積する蓄積手段と、を更に備える請求項８に記載の議事録作成システム。
  10. 会議における画像を撮像する撮像手段と、
    前記抽出手段で抽出された被記録時間区間を記録した議事録情報と前記抽出手段で抽出された被記録時間区間に前記撮像手段で撮像された撮像画像とを関連付けて蓄積する蓄積手段と、を更に備える請求項９に記載の議事録作成システム。
  11. 前記蓄積手段によって蓄積された議事録を構成する議事録情報の内で配信対象とする議事録情報で構成される配信議事録を作成する配信議事録作成手段と、
    前記配信議事録作成手段で作成された配信議事録を配信する配信手段と、を更に備えることを特徴とする請求項１０に記載の議事録作成システム。
  12. 配信手段により配信された配信議事録は、配信議事録を構成する議事録情報の記録対象とした被記録時間区間と関連付けて前記蓄積手段に蓄積された被表示画像、収音音声、撮像画像のいずれか１つ以上に対してアクセス可能に張られたリンクを有することを特徴とする請求項１１に記載の議事録作成システム。
  13. 前記複数のストリームの画像としての被表示画像は、複数の画面に表示するための複数のストリームの画像データであり、
    前記被表示画像は、個別のスライドである、ことを特徴とする請求項１ないし１２に記載の議事録作成システム。
  14. 前記複数のストリームの画像としての被表示画像は、複数のスクリーンへに投影するための複数のストリームの画像データであり、
    前記被表示画像は、個別の投影されたスライドである、ことを特徴とする請求項１ないし１２に記載の議事録作成システム。
  15. 会議で表示される情報である被表示画像の表示対象の切替えを検出する切替検出ステップと、
    前記被表示画像の内容を時間的に区切る区切時刻を検出する区切検出ステップと、
    前記切替検出ステップが検出した切替時刻と前記区切検出ステップの検出した区切時刻とに基づいて、議事録を構成する議事録情報の記録対象とされる時間区間である被記録時間区間を抽出する抽出ステップと、を備える議事録作成方法。
JP2006034605A 2006-02-11 2006-02-11 議事録作成システム及び議事録作成方法。 Expired - Fee Related JP4807092B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006034605A JP4807092B2 (ja) 2006-02-11 2006-02-11 議事録作成システム及び議事録作成方法。
US11/518,142 US7884845B2 (en) 2006-02-11 2006-09-11 Minutes taking system, minutes taking method, and program product therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006034605A JP4807092B2 (ja) 2006-02-11 2006-02-11 議事録作成システム及び議事録作成方法。

Publications (2)

Publication Number Publication Date
JP2007215056A JP2007215056A (ja) 2007-08-23
JP4807092B2 true JP4807092B2 (ja) 2011-11-02

Family

ID=38434476

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006034605A Expired - Fee Related JP4807092B2 (ja) 2006-02-11 2006-02-11 議事録作成システム及び議事録作成方法。

Country Status (2)

Country Link
US (1) US7884845B2 (ja)
JP (1) JP4807092B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5463990B2 (ja) * 2010-03-18 2014-04-09 ブラザー工業株式会社 通信システムおよび議事録作成プログラム
JP5676979B2 (ja) * 2010-08-30 2015-02-25 キヤノン株式会社 情報処理装置、情報処理方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3637937B2 (ja) * 1996-08-12 2005-04-13 富士ゼロックス株式会社 情報再生装置および情報再生方法
JP2003058901A (ja) * 2001-08-16 2003-02-28 Sony Corp 記録装置および方法、再生装置および方法、記録媒体、並びにプログラム
JP3664132B2 (ja) 2001-12-27 2005-06-22 ソニー株式会社 ネットワーク情報処理システム及び情報処理方法
JP2004173058A (ja) * 2002-11-21 2004-06-17 Nippon Telegr & Teleph Corp <Ntt> 会議情報可視化方法、装置、プログラムおよび該プログラムを記録した記録媒体
JP4576133B2 (ja) 2004-02-25 2010-11-04 パイオニア株式会社 ネットワーク会議システム、会議端末および会議サーバ
JP2007052565A (ja) * 2005-08-16 2007-03-01 Fuji Xerox Co Ltd 情報処理システム及び情報処理方法

Also Published As

Publication number Publication date
US7884845B2 (en) 2011-02-08
JP2007215056A (ja) 2007-08-23
US20070188654A1 (en) 2007-08-16

Similar Documents

Publication Publication Date Title
US9641812B2 (en) Dispensing verification device
EP1876596A2 (en) Recording and reproducing data
US8224178B2 (en) Real time transmission of photographic images from portable handheld devices
US20170019451A1 (en) Media production system with location-based feature
US20180052837A1 (en) Information processing apparatus, information processing method, and information processing system
US20150296180A1 (en) Real-Time Smart Display Detection System
EP2860968B1 (en) Information processing device, information processing method, and program
JP2013090267A (ja) 撮像装置
JP6173085B2 (ja) 情報処理装置及びその制御方法、プログラム、並びに記憶媒体
CN111010598A (zh) 一种截屏应用方法及智能电视
EP2350936A1 (en) Method and device relating to information management
JP4807092B2 (ja) 議事録作成システム及び議事録作成方法。
JP4866396B2 (ja) タグ情報付加装置、タグ情報付加方法及びコンピュータプログラム
US9195312B2 (en) Information processing apparatus, conference system, and information processing method
KR101390675B1 (ko) 하이라이트 클립 기록 장치 및 방법
JP4645418B2 (ja) 画像メッセージ伝達システム及びプログラム
JPWO2009050877A1 (ja) 不適切コンテンツ検出方法および装置、そのコンピュータプログラム、ならびにコンテンツ公開システム
KR101850501B1 (ko) 역사 컨텐츠 제공 시스템
US20100026848A1 (en) Moving picture imaging apparatus with zoom function, image processing and display method and program
WO2007058268A1 (ja) 対応付け装置
JP5233730B2 (ja) 情報処理装置及び情報処理方法
US20190394361A1 (en) Video monitoring method, server, and video monitoring system
JP2019121234A (ja) 画像処理装置
JP2010056894A (ja) 映像情報管理システム
JP2008182428A (ja) 画像データ自動送信システム、グループ化方法と装置、送信先決定方法と装置、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110719

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110801

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140826

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4807092

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees