JP2014127079A - Information processing unit and method - Google Patents

Information processing unit and method Download PDF

Info

Publication number
JP2014127079A
JP2014127079A JP2012284281A JP2012284281A JP2014127079A JP 2014127079 A JP2014127079 A JP 2014127079A JP 2012284281 A JP2012284281 A JP 2012284281A JP 2012284281 A JP2012284281 A JP 2012284281A JP 2014127079 A JP2014127079 A JP 2014127079A
Authority
JP
Japan
Prior art keywords
conference
meeting
time
image
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012284281A
Other languages
Japanese (ja)
Other versions
JP6020152B2 (en
Inventor
優樹 ▲高▼谷
Yuki Takaya
Akira Masuda
明 増田
進介 ▲柳▼詰
Shinsuke Yagizume
Hiroshi Baba
洋 馬場
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2012284281A priority Critical patent/JP6020152B2/en
Publication of JP2014127079A publication Critical patent/JP2014127079A/en
Application granted granted Critical
Publication of JP6020152B2 publication Critical patent/JP6020152B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PROBLEM TO BE SOLVED: To specify a conference correctly even when the conference is prolonged thereby generating a temporal shift between the reservation information and the actual situation.SOLUTION: An information processing unit comprises: a conference reservation list recording section 103 for recording a conference name, a conference time and a conference room associated with each other as a conference reservation list; and a corresponding conference determination section 101 for determining, on the basis of an imaging time and imaging position of an image related to a conference in a conference room, as well as the conference reservation list, a conference corresponding to the imaged image. The corresponding conference determination section 101 extracts candidates of conferences corresponding to the imaged image on the basis of the imaging time, the imaging position and the conference reservation list and calculates which candidate among the extracted candidates of conferences is the most probable on the basis of the amount of characters in the imaged image and the imaging time in order to determine the corresponding conference.

Description

本発明は、情報処理装置及び方法に関し、特に、会議室での会議に関する画像と会議との関連付けを自動的に行うための技術に関する。   The present invention relates to an information processing apparatus and method, and more particularly to a technique for automatically associating an image and a conference related to a conference in a conference room.

会議において、会議室に備え付けられたホワイトボードなどに板書を取り、それを画像として保存し議事録に添付して共有するということが多く行われている。また、会議の議事録管理システムとして、サーバに複数の会議の議事録が保存されており、端末からサーバにアクセスして議事録の編集、閲覧をするということが多く行われている。そのような会議システムにおいて、ホワイトボードの写真を議事録に添付する場合、議事録作成者はデジタルカメラで撮影した画像を情報端末に取り込み、該当する議事録を選択し、画像を添付するという作業が必要になり手間がかかるという問題点がある。それを解決するために事前に入力された会議の予約情報と撮影時の情報により自動で該当する会議を特定するという技術は、既に知られている(例えば、特許文献1)。   In meetings, it is often performed to take a blackboard on a whiteboard or the like provided in a conference room, save it as an image, and attach it to the minutes. In addition, as a meeting minutes management system, minutes of a plurality of meetings are stored in a server, and the minutes are often edited and viewed by accessing the server from a terminal. In such a conference system, when attaching a photo of a whiteboard to the minutes, the minutes creator takes the images taken with the digital camera into the information terminal, selects the relevant minutes, and attaches the images. There is a problem that it takes time and labor. In order to solve this problem, a technique for automatically identifying a corresponding conference based on conference reservation information input in advance and information at the time of shooting is already known (for example, Patent Document 1).

しかしながら、今までの自動添付システムでは会議室を予約する時に登録する会議の時間と場所に基づいて該当会議を特定していたため、会議が延長して予約時間を越えてしまうなど、予約情報と異なる状況になった場合に誤った会議を特定してしまうという問題があった。   However, in the conventional automatic attachment system, the conference is specified based on the time and place of the conference that is registered when the conference room is reserved. Therefore, the conference is extended and the reservation time is exceeded. There was a problem that the wrong meeting was specified when the situation came.

特許文献1には、画像を撮影装置から直接共有サーバに短時間で画像をアップロードするのが目的で、撮影装置に撮影時刻取得手段と撮影位置取得手段が備え付けられており、会議室の時間ごとの利用者のリスト(≒会議予約情報)と取得された撮影時刻、場所によって利用者リストに基づいたアクセス権限を付加した上で画像をアップロードする技術が開示されている。   In Patent Document 1, an image is directly uploaded from a photographing apparatus to a shared server in a short time, and the photographing apparatus is provided with photographing time acquisition means and photographing position acquisition means. A technique for uploading an image after adding an access authority based on the user list according to the user list (≈conference reservation information) and the acquired shooting time and location is disclosed.

特許文献1に記載の技術は、事前に登録した予約情報と撮影時の時間、場所の情報で会議を特定し、板書を画像として保存するという点で本願発明と関連性がある。しかしながら、会議時間と場所を事前に予約システムに設定しておかなければならないため、会議時間が延長になり会議の予約と実際の会議時間に時間のずれが発生した場合において、臨機応変に対応できないという上述のような問題は解消できていない。   The technique described in Patent Literature 1 is related to the present invention in that a conference is specified by reservation information registered in advance and time and place information at the time of shooting and a board is stored as an image. However, since the conference time and place must be set in the reservation system in advance, if the conference time is extended and there is a time lag between the conference reservation and the actual conference time, it will not be possible to respond flexibly. The above-mentioned problem has not been solved.

そこで本発明は、上記実情に鑑みて、会議が延長して、予約情報の状況と時間のずれが発生したような場合でも、正しい会議を特定することを目的とする。   Therefore, in view of the above circumstances, the present invention has an object to specify a correct conference even when the conference is extended and a time lag occurs between the status of reservation information.

上記目的を達成するために、会議名、会議時間及び会議室の場所を紐付けて会議予約リストとして記録する会議予約リスト記録部と、会議室における会議に関する画像を撮影した撮影時刻及び撮影位置、並びに、前記会議予約リストに基づいて、撮影画像が該当する会議を判断する該当会議判断部と、を備え、前記該当会議判断部は、前記撮影時刻、前記撮影位置及び前記会議予約リストに基づいて、前記撮影画像が該当する会議の候補を抽出し、前記撮影画像中の文字の量及び前記撮影時刻に基づいて、抽出した会議の候補のうちどの会議の候補に該当するかの確率を計算し、該当する会議を判断することを特徴とする。   In order to achieve the above object, a conference reservation list recording unit that records the conference name, the conference time, and the location of the conference room as a conference reservation list, and the shooting time and shooting position at which an image related to the conference in the conference room is shot, And a meeting determining unit that determines a meeting to which the captured image corresponds, based on the meeting reservation list, the meeting determining unit based on the shooting time, the shooting position, and the meeting reservation list. The conference candidate corresponding to the captured image is extracted, and the probability of which conference candidate corresponds to the extracted conference candidate is calculated based on the amount of characters in the captured image and the shooting time. , Determining the corresponding meeting.

本発明によれば、会議が延長して、予約情報の状況と時間のずれが発生したような場合でも、正しい会議を特定することが可能となる。   According to the present invention, it is possible to specify a correct conference even when the conference is extended and a time lag occurs between the status of reservation information.

本発明による実施形態のシステム概要を説明するための図である。It is a figure for demonstrating the system outline | summary of embodiment by this invention. 上記実施形態のシステムの機能構成(最小構成)を示すブロック図である。It is a block diagram which shows the function structure (minimum structure) of the system of the said embodiment. 上記実施形態のシステムの機能構成を示すブロック図である。It is a block diagram which shows the function structure of the system of the said embodiment. 上記実施形態の会議予約リスト記録部103に登録される情報テーブルの一例を示す図である。It is a figure which shows an example of the information table registered into the conference reservation list recording part 103 of the said embodiment. 上記実施形態の画像記録部105に保存される情報テーブルの一例を示す図である。It is a figure which shows an example of the information table preserve | saved at the image recording part 105 of the said embodiment. 上記実施形態の判断履歴記録部107に保存される情報テーブルの一例を示す図である。It is a figure which shows an example of the information table preserve | saved at the judgment history recording part 107 of the said embodiment. 上記実施形態における事前処理の各会議室の位置の登録処理のシーケンス図である。It is a sequence diagram of the registration process of the position of each meeting room of the pre-process in the said embodiment. 上記実施形態における事前処理の会議室の予約処理のシーケンス図である。It is a sequence diagram of the reservation process of the conference room of the pre-process in the said embodiment. 上記実施形態における撮影した画像と会議を関連付けて保存するシーケンス図である。It is a sequence diagram which associates and preserve | saves the image | photographed image and meeting in the said embodiment. 上記実施形態の会議室位置情報記録部102に保存されている情報テーブルを説明するための図である。It is a figure for demonstrating the information table preserve | saved at the meeting room location information recording part 102 of the said embodiment. 上記実施形態の位置取得手段112によって得られた位置情報から、撮影された会議室を特定する方法を説明するための図である。It is a figure for demonstrating the method to identify the image | photographed meeting room from the positional information obtained by the position acquisition means 112 of the said embodiment. 上記実施形態の該当会議判断部101が会議予約リストと撮影時間から該当する会議の候補を抽出する処理のフローチャート図である。It is a flowchart figure of the process in which the applicable meeting judgment part 101 of the said embodiment extracts the candidate of a applicable meeting from a meeting reservation list and imaging | photography time. 上記実施形態の該当会議判断部101が会議予約リストと撮影時間から会議候補を抽出する具体例を説明するための図である。It is a figure for demonstrating the specific example in which the applicable meeting judgment part 101 of the said embodiment extracts a meeting candidate from a meeting reservation list and imaging | photography time. 上記実施形態の該当会議判断部101が会議候補から該当会議を特定するフローチャート図である。It is a flowchart figure in which the applicable meeting judgment part 101 of the said embodiment specifies an applicable meeting from a meeting candidate. 上記実施形態における、会議候補から会議を特定するのに画像中の文字の量から確率を算出する方法を説明するための図である。It is a figure for demonstrating the method to calculate a probability from the quantity of the character in an image in order to identify a meeting from the meeting candidate in the said embodiment. 上記実施形態における、会議候補から会議を特定するのに撮影時刻から確率を算出する方法を説明するための図である。It is a figure for demonstrating the method of calculating a probability from imaging | photography time, in order to identify a meeting from the meeting candidate in the said embodiment. 第2の実施形態における会議室に備え付けられているデバイスの使用履歴の登録処理のフローチャート図である。It is a flowchart figure of the registration process of the usage log of the device with which the conference room in 2nd Embodiment is equipped. 第2の実施形態においてデバイス使用履歴記録部106に登録される情報テーブルの例を示す図ある。It is a figure which shows the example of the information table registered into the device usage log | history recording part 106 in 2nd Embodiment. 第2の実施形態においてデバイス使用履歴から該当会議を特定するフローチャート図である。It is a flowchart figure which identifies an applicable meeting from a device usage history in 2nd Embodiment. 上記実施形態において会議候補から該当会議を特定するフローチャート図である。It is a flowchart figure which identifies an applicable meeting from a meeting candidate in the said embodiment. 第3の実施形態において、会議室位置情報記録部102に保存されている情報テーブルを説明するための図である。FIG. 10 is a diagram for explaining an information table stored in a meeting room position information recording unit in the third embodiment. 第3の実施形態において、撮影装置110により撮影された撮影画像を用いて会議室を特定する方法を説明するための図である。FIG. 10 is a diagram for describing a method of specifying a conference room using a captured image captured by the imaging device 110 in the third embodiment. 第4の実施形態において、会議の候補と過去の判定履歴から該当会議を判断する処理のフローチャート図であるIn 4th Embodiment, it is a flowchart figure of the process which judges an applicable meeting from the candidate of a meeting, and the past determination history. 第5の実施形態において、撮影時間に会議の予約が入っていない場合に、会議の候補を抽出する方法を説明するための図である。In a 5th embodiment, it is a figure for explaining a method of extracting a conference candidate, when a conference reservation has not been entered at the photographing time. 第6の実施形態において、会議と関連付けずに画像を保存行いたい場合の撮影装置110のユーザインタフェース画面例である。In the sixth embodiment, it is an example of a user interface screen of the photographing apparatus 110 when it is desired to save an image without associating with a meeting. 第6の実施形態において、会議と関連付けを行わずに画像の保存を行う場合のシーケンス図である。In 6th Embodiment, it is a sequence diagram in the case of preserve | saving an image, without performing an association with a meeting. 第6の実施形態において、判断履歴記録部107に保存される情報テーブルである。14 is an information table stored in a determination history recording unit 107 in the sixth embodiment. 第7の実施形態において、撮影画像から該当会議を判断し、該当する会議と関連付けて画像を保存する場合のシーケンス図である。In 7th Embodiment, it is a sequence diagram in the case of determining an applicable meeting from a picked-up image and storing an image in association with the applicable meeting. 第7の実施形態において、保存された画像を元に議事録の自動生成を行う場合のシーケンス図である。FIG. 20 is a sequence diagram in the case of automatically generating a minutes based on a stored image in the seventh embodiment. 第7の実施形態において、自動生成された会議の議事録の例である。In a 7th embodiment, it is an example of the minutes of the meeting generated automatically.

以下、本発明の実施の形態を説明する。下記実施形態は、会議の板書をカメラで撮影し、その画像を添付する議事録管理システムに関して、以下の特徴を有する。   Embodiments of the present invention will be described below. The following embodiment has the following characteristics regarding a minutes management system in which a board book of a meeting is photographed with a camera and the image is attached.

要するに、会議を実施するユーザは会議名、時間、場所を指定して会議予約リストを作成する。会議時には、撮影装置110で板書を撮影し、時間取得手段111、位置取得手段112で得られた情報を付加してサーバに画像、時間、位置を送信する。サーバでは、位置情報から会議室を特定し、その会議室における会議予約リストと画像の撮影時刻から会議の候補を出し、会議延長有無情報を作成し、その情報と会議の候補を比較して該当する会議を判断する。   In short, a user who conducts a conference creates a conference reservation list by specifying the conference name, time, and location. At the time of the meeting, a board is photographed by the photographing device 110, and the information obtained by the time acquisition unit 111 and the position acquisition unit 112 is added, and the image, time, and position are transmitted to the server. The server identifies the conference room from the location information, generates a conference candidate from the conference reservation list in the conference room and the image shooting time, creates conference extension information, compares the information with the conference candidate, and applies Determine the meeting you want.

会議延長有無情報とは、具体的には、撮影された画像に映るホワイトボードに記載されている文字の量/会議室に備え付けられているデバイスの使用履歴/過去の該当会議の判断結果に基づいて作成される。
上で述べたような特徴について、図面を参照しながら、以下、詳細に説明する。
More specifically, the conference extension information is based on the amount of characters written on the whiteboard reflected in the captured image, the usage history of the devices installed in the conference room, and the past judgment results of the corresponding conference. Created.
The features described above will be described in detail below with reference to the drawings.

<第1の実施形態>
まず、図1を参照して、本実施形態のシステム概要を説明する。図1に示すように、本実施形態に係る情報処理装置(サーバ)100は、会議室に設置されたプロジェクタ114や撮影装置110とネットワークにより接続されている。
<First Embodiment>
First, the system outline of the present embodiment will be described with reference to FIG. As shown in FIG. 1, an information processing apparatus (server) 100 according to the present embodiment is connected to a projector 114 and a photographing apparatus 110 installed in a conference room via a network.

本実施形態のシステムを利用する際には、ユーザは事前準備を行う必要がある。ユーザは、事前準備として、会議を行う前に、情報処理装置(サーバ)100に、使用する会議室、使用日時を入力し、予約を行う。会議室名とそれに紐づく位置特定情報は、あらかじめシステム管理者等のユーザにより情報処理装置(サーバ)100に登録される。ここで、位置特定情報は、具体的には三次元座標/マーカーを用いる(後述)。   When using the system of the present embodiment, the user needs to make advance preparations. As a preparation, the user inputs a conference room to be used and a use date and time to the information processing apparatus (server) 100 before making a conference and makes a reservation. The meeting room name and the position specifying information associated therewith are registered in advance in the information processing apparatus (server) 100 by a user such as a system administrator. Here, the position specifying information specifically uses three-dimensional coordinates / markers (described later).

事前準備後の処理の流れとしては、次の1.〜4.の流れとなる。
1.ユーザがホワイトボードに記載した板書の内容を撮影装置110で撮影する。
2.撮影装置110は、時間取得手段111、位置取得手段112を用いて撮影した瞬間の時間、位置を取得する。
3.撮影装置110は撮影した画像、時間、位置を情報処理装置(サーバ)100に送信する。
4.情報処理装置(サーバ)100は、受信した撮影時間、場所から該当する会議の候補を抽出し、会議が延長しているかを判断する情報を作り出し該当する会議を判断する。(詳細は図11,図12参照しながら後述する)
The process flow after preparation is as follows. ~ 4. It becomes the flow of.
1. The user captures the contents of the blackboard written on the whiteboard with the imaging device 110.
2. The photographing apparatus 110 obtains the time and position of the moment of photographing using the time obtaining unit 111 and the position obtaining unit 112.
3. The imaging device 110 transmits the captured image, time, and position to the information processing device (server) 100.
4). The information processing apparatus (server) 100 extracts a corresponding conference candidate from the received shooting time and location, creates information for determining whether the conference is extended, and determines the corresponding conference. (Details will be described later with reference to FIGS. 11 and 12).

機能構成の観点から最小構成の本実施形態のシステムを捉えると、図2に示すものになる。図2は、本実施形態のシステムの機能構成を示すブロック図である。図2に示す各構成要素は、例えばIPネットワークのようなネットワークに接続されており、互いに通信することができる。以下、各構成要素を説明する。   When the system of the present embodiment having the minimum configuration is captured from the viewpoint of the functional configuration, it is as shown in FIG. FIG. 2 is a block diagram showing a functional configuration of the system of the present embodiment. Each component shown in FIG. 2 is connected to a network such as an IP network, and can communicate with each other. Hereinafter, each component will be described.

図2に示す情報処理装置(サーバ)100が有するモジュールとしては、該当会議判断部101、会議室位置情報記録部102、会議予約リスト記録部103、通信部104がある。以下、各部の役割や保持する情報について述べる。   Modules included in the information processing apparatus (server) 100 illustrated in FIG. 2 include a corresponding conference determination unit 101, a conference room position information recording unit 102, a conference reservation list recording unit 103, and a communication unit 104. The following describes the role of each part and the information it holds.

該当会議判断部101は、撮影時の時間、場所からその画像が撮影された会議の候補を抽出する。また、撮影された画像中に含まれる文字の量と撮影時刻から、候補に挙げられた会議のどれに該当するのかの確率を計算して判断を行う。また、デバイスの使用履歴から、候補に挙げられた会議のどれに該当するのか判断を行う。   The meeting determination unit 101 extracts a candidate for a meeting in which the image is captured from the time and place at the time of capturing. Also, the probability of which of the conferences listed as candidates is calculated from the amount of characters included in the photographed image and the photographing time, and the determination is made. Further, it is determined from the device usage history which of the conferences listed as candidates.

会議室位置情報記録部102は、位置情報から会議室の特定を行う。あらかじめ、会議室位置情報記録部102には、システム管理者等のユーザが情報処理装置(端末)113から各会議室ごとの位置情報を登録しておく。また、会議室位置情報記録部102は、会議室と位置情報の対応関係を保持する。図10、図21参照して詳述する。   The conference room position information recording unit 102 specifies a conference room from the position information. In advance, a user such as a system administrator registers location information for each conference room from the information processing apparatus (terminal) 113 in the conference room location information recording unit 102. The conference room position information recording unit 102 holds the correspondence between the conference room and the position information. This will be described in detail with reference to FIGS.

会議予約リスト記録部103は、各会議の会議名、開始時間、終了時間を記録する。あらかじめ、会議予約リスト記録部103には、ユーザが情報処理装置(端末)113から会議ごとに会議名、開始時間、終了時間を指定して予約情報を登録する。また、会議予約リスト記録部103は、会議名と、開始時間と、終了時間を保持する。図4に、会議予約リスト記録部103に登録される情報テーブルの一例を示す。   The conference reservation list recording unit 103 records the conference name, start time, and end time of each conference. In advance, the reservation information is registered in the conference reservation list recording unit 103 by designating the conference name, start time, and end time for each conference from the information processing apparatus (terminal) 113. In addition, the conference reservation list recording unit 103 holds the conference name, start time, and end time. FIG. 4 shows an example of an information table registered in the conference reservation list recording unit 103.

通信部104は、撮影装置110が送信してきた画像を受信する。また、情報処理装置(端末)113からの入力を受け付ける。また、議事録を情報処理装置(端末)113に送信する。   The communication unit 104 receives an image transmitted from the imaging device 110. Also, an input from the information processing apparatus (terminal) 113 is accepted. In addition, the minutes are transmitted to the information processing device (terminal) 113.

図2において、他のシステム構成要素としては、撮影装置110、時間取得手段111、位置取得手段112、情報処理装置(端末)113がある。以下、各部又は各装置の役割について述べる。   In FIG. 2, as other system components, there are an imaging device 110, a time acquisition unit 111, a position acquisition unit 112, and an information processing device (terminal) 113. Hereinafter, the role of each unit or each device will be described.

撮影装置110は、会議室のホワイトボードに記載された板書を撮影する。通信機能を有し、情報処理装置(サーバ)100と撮影した画像を送信するために通信を行う。例えば、デジタルカメラなどで実施できる。また、IPネットワークにつながっており、情報処理装置(サーバ)100と通信するよう設定されている。   The imaging device 110 captures a board written on a whiteboard in a conference room. It has a communication function and communicates with the information processing apparatus (server) 100 in order to transmit the captured image. For example, it can be implemented with a digital camera. Further, it is connected to the IP network and is set to communicate with the information processing apparatus (server) 100.

時間取得手段111 は、撮影装置110が写真を撮影した時刻を記録する。例えば、デジタルカメラの内蔵時計などで実施できる。位置取得手段112は、撮影装置110が写真を撮影した場所を特定する。位置取得装置は位置情報を取得するのみで、撮影された位置がどの会議室かを判断するのは、情報処理装置(サーバ)100が行う。例えば、デジタルカメラに内蔵したGPS(Global Positioning System)などで実施できる。別の実施例としては、各会議室のホワイトボードに貼りつけたマーカーなど。情報処理装置(端末)113は、ユーザからの操作を受け付ける。会議室の位置情報登録、会議の予約などに用いられる。 一般的なパーソナルコンピュータを指す。   The time acquisition unit 111 records the time when the photographing apparatus 110 took a photograph. For example, it can be implemented with a built-in clock of a digital camera. The position acquisition unit 112 identifies a place where the photographing apparatus 110 has taken a photograph. The position acquisition device only acquires position information, and the information processing apparatus (server) 100 determines which conference room the imaged position is. For example, it can be implemented by a GPS (Global Positioning System) built in a digital camera. Another example is a marker affixed to the whiteboard of each conference room. The information processing apparatus (terminal) 113 receives an operation from the user. Used for registration of conference room location information, conference reservation, etc. A general personal computer.

なお、図2は、本実施形態のシステムの最小の構成要素を示している。図3ではこの明細書で開示する全ての実施形態に対して必要となるモジュール構成図を示す。図2と比較して図3で追加された構成要素は、画像記録部105、デバイス使用履歴記録部106、判断履歴記録部107、プロジェクタ114である。追加された構成要素について、以下、説明する。   FIG. 2 shows the minimum components of the system of this embodiment. FIG. 3 shows a module configuration diagram required for all the embodiments disclosed in this specification. The components added in FIG. 3 compared to FIG. 2 are an image recording unit 105, a device usage history recording unit 106, a determination history recording unit 107, and a projector 114. The added components will be described below.

情報処理装置(サーバ)100の画像記録部105は、撮影装置110が送信してきた画像を該当会議判断部101によって特定された会議と関連付けて記録する。また、撮影された画像・画像と会議の対応関係を保持する。図5に、画像記録部105に保存される情報テーブルの一例を示す。   The image recording unit 105 of the information processing apparatus (server) 100 records the image transmitted by the imaging apparatus 110 in association with the meeting specified by the meeting determination unit 101. Also, the correspondence between the photographed image / image and the conference is held. FIG. 5 shows an example of an information table stored in the image recording unit 105.

デバイス使用履歴記録部106は、会議室名と会議室に紐付いたデバイスを記録しておく。また、会議室に紐付けられたデバイスが起動、終了した場合にその時刻を記録する。また、各会議室ごとのデバイスの起動時間、終了時間を保持する。デバイス使用履歴記録部106については、図16,図17,図18参照してさらに詳細に説明する。   The device usage history recording unit 106 records a conference room name and a device associated with the conference room. Also, when the device associated with the conference room is activated and terminated, the time is recorded. In addition, the start time and end time of the device for each conference room are held. The device usage history recording unit 106 will be described in more detail with reference to FIGS. 16, 17, and 18.

判断履歴記録部107は、該当会議判断部101が今までに行った判断の履歴を記録する。また、会議候補として抽出した会議、およびどちらの会議に関連付けを行ったかの判断結果を記録する。また、会議候補2つ・判断結果を保持する。図6に、判断履歴記録部107に保存される情報テーブルの一例を示す。   The judgment history recording unit 107 records a history of judgments made so far by the corresponding conference judgment unit 101. In addition, the conference extracted as the conference candidate and the determination result of which conference is associated are recorded. In addition, two conference candidates and determination results are held. FIG. 6 shows an example of an information table stored in the determination history recording unit 107.

プロジェクタ114は、起動した時間、終了した時間を情報処理装置(サーバ)100に送信する。また、IPネットワークにつながっており、情報処理装置(サーバ)100と通信するよう設定されている。   The projector 114 transmits the start time and the end time to the information processing apparatus (server) 100. Further, it is connected to the IP network and is set to communicate with the information processing apparatus (server) 100.

<事前処理>
図7は、事前処理の各会議室の位置の登録処理のシーケンス図である。システム管理者等のユーザは、事前に、会議室を特定するための位置特定情報を情報処理装置(サーバ)100に登録する。ユーザは、情報処理装置(端末)113から、会議室ごとにその会議室名と位置情報特定情報を会議室位置情報記録部102に記録する。位置特定情報に関しては、図10,図11,図21にて後述する。
<Pre-processing>
FIG. 7 is a sequence diagram of the registration process of the position of each conference room in the pre-process. A user such as a system administrator registers position specifying information for specifying a conference room in the information processing apparatus (server) 100 in advance. The user records the conference room name and location information specifying information in the conference room location information recording unit 102 for each conference room from the information processing device (terminal) 113. The position specifying information will be described later with reference to FIG. 10, FIG. 11, and FIG.

図8は、事前処理の会議室の予約処理のシーケンス図である。ユーザは、事前に、情報処理装置(端末)113からサーバに会議の予約を行う。ユーザは、情報処理装置(端末)113から、使用する会議室、開始時間、終了時間を指定して会議予約リスト記録部103に記録する。   FIG. 8 is a sequence diagram of a reservation process for a pre-process conference room. The user reserves a conference from the information processing device (terminal) 113 to the server in advance. The user designates the conference room to be used, the start time, and the end time from the information processing device (terminal) 113 and records them in the conference reservation list recording unit 103.

図9は、撮影した画像と会議を関連付けて保存するシーケンス図である。すなわち、本実施形態において、会議の特定は、図9のシーケンスにより行う。下記手順4における位置情報からの会議室特定方法は図10、手順5における会議候補の抽出方法は図12、図13、図24、手順6における該当する会議の判断方法は図15,図16に後述する。   FIG. 9 is a sequence diagram for storing a captured image in association with a conference. That is, in this embodiment, the conference is specified by the sequence shown in FIG. The meeting room identification method from the location information in the procedure 4 below is shown in FIG. 10, the meeting candidate extraction method in the procedure 5 is shown in FIGS. 12, 13, 24, and the meeting determination method in the procedure 6 is shown in FIGS. It will be described later.

手順1)ユーザは、画像撮影装置110を用いて、板書を撮影する。
手順2)画像撮影装置110は、時間取得部、位置情報取得部から撮影時の時間情報、位置情報を取得する。
手順3)画像撮影装置110は、手順1,2において取得した画像データ、時間情報、位置情報を情報処理端末(サーバ)に送信する。
手順4)サーバは受信した位置情報と会議室位置情報記録部102を照合し、撮影が行われた会議室を特定する。
手順5)サーバは手順4で特定した会議室名と撮影時間、会議予約リスト記録部103を照合して、会議候補を抽出する。
手順6)サーバは抽出した会議候補と撮影時間、画像データを比較して、会議候補のうち該当する会議を判断する。
Procedure 1) A user photographs a board using the image photographing device 110.
Procedure 2) The image capturing apparatus 110 acquires time information and position information at the time of shooting from the time acquisition unit and the position information acquisition unit.
Procedure 3) The image capturing device 110 transmits the image data, time information, and position information acquired in Procedures 1 and 2 to the information processing terminal (server).
Procedure 4) The server collates the received location information with the conference room location information recording unit 102, and specifies the conference room where the image was taken.
Procedure 5) The server compares the conference room name specified in Procedure 4 with the shooting time and the conference reservation list recording unit 103 to extract conference candidates.
Step 6) The server compares the extracted conference candidate with the shooting time and the image data, and determines the corresponding conference among the conference candidates.

図10は、会議室位置情報記録部102に保存されている情報テーブルを説明するための図である。また、図11は、位置取得手段112によって得られた位置情報から、撮影された会議室を特定する方法を説明するための図である。   FIG. 10 is a diagram for explaining an information table stored in the conference room position information recording unit 102. FIG. 11 is a diagram for explaining a method for identifying a captured conference room from position information obtained by the position acquisition unit 112.

各会議室の床位置は、図7に示した事前準備によって、会議室位置情報記録部102に保存されている。同じ階にある会議室は通常、天井までの高さが変わらないため、床位置だけを記憶しておき、高さ方向には一定値(ここでは200とする)とする。この時、各会議室は、図10に示すように三次元空間中で直方体として表現することができる。   The floor position of each conference room is stored in the conference room position information recording unit 102 by the preparation shown in FIG. Conference rooms on the same floor usually do not change the height to the ceiling, so only the floor position is stored and set to a constant value (200 here) in the height direction. At this time, each conference room can be represented as a rectangular parallelepiped in the three-dimensional space as shown in FIG.

該当会議判断部101は、位置取得手段112によって得られた座標が各会議室を表す直方体の内部に存在するかどうかを比較し、内部に存在した場合は、その会議室名を通知する。具体例として、位置取得手段112によって得られた座標が、(200,120,100)であった場合は、この座標は会議室Aの空間内なので、該当会議判断部101は、会議室Aという会議室名を通知する。   The corresponding meeting determination unit 101 compares whether or not the coordinates obtained by the position acquisition unit 112 exist inside a rectangular parallelepiped representing each meeting room, and if it exists, notifies the meeting room name. As a specific example, when the coordinates obtained by the position acquisition unit 112 are (200, 120, 100), since these coordinates are in the space of the conference room A, the corresponding conference determination unit 101 is called conference room A. Notify meeting room name.

図12は、該当会議判断部101が会議予約リストと撮影時間から該当する会議の候補を抽出する処理のフローチャート図である。また、図13は、該当会議判断部101が会議予約リストと撮影時間から会議候補を抽出する具体例を説明するための図である。   FIG. 12 is a flowchart of a process in which the meeting determination unit 101 extracts a meeting candidate corresponding to the meeting reservation list and the shooting time. FIG. 13 is a diagram for explaining a specific example in which the conference determination unit 101 extracts conference candidates from the conference reservation list and shooting time.

図12において、該当会議判断部101は、会議室名を会議予約リスト記録部103に通知し、指定した会議室における会議の予約リストを取得する(S101)。次に、該当会議判断部101は、取得した会議予約リストと撮影時間を比較し、会議開始時間≦撮影時間≦会議終了時間を満たす会議Xが存在するかを検索する(S102)。存在する場合はS103、存在しない場合はS105に進む。   In FIG. 12, the meeting determination unit 101 notifies the conference reservation list recording unit 103 of the conference room name, and acquires a conference reservation list in the designated conference room (S101). Next, the meeting determination unit 101 compares the acquired conference reservation list with the shooting time, and searches for a meeting X that satisfies the meeting start time ≦ shooting time ≦ conference end time (S102). When it exists, it progresses to S103, and when it does not exist, it progresses to S105.

S102において会議Xが存在する場合には、会議Xの開始時刻=会議Yの終了時刻を満たす会議Yが存在するかを検索する(S103)。存在した場合には、会議X,Yを会議候補として抽出する(S104)。存在しない場合は会議Xのみを会議候補として抽出する(S106)。   If there is a conference X in S102, it is searched whether there is a conference Y that satisfies the start time of the conference X = the end time of the conference Y (S103). If it exists, conferences X and Y are extracted as conference candidates (S104). If it does not exist, only the conference X is extracted as a conference candidate (S106).

S102において会議Xが存在しない場合には、会議リストの中から会議の終了時間≦撮影時間を満たす会議を抽出し、その中から最も終了時間の遅い会議を会議候補として抽出する(S105,S106)。なお、S105のフローに入る状況というのは、会議の予約が入っていない時間帯に画像を撮影した場合であり、詳しくは図24にて後述する。   If there is no meeting X in S102, a meeting satisfying meeting end time ≦ shooting time is extracted from the meeting list, and a meeting with the latest end time is extracted as a candidate for meeting (S105, S106). . Note that the situation of entering the flow of S105 is a case where an image is taken in a time zone in which no conference reservation is entered, and will be described in detail later with reference to FIG.

以上のフローの具体例を挙げる。ある会議室において図13に示すように、15時までの会議B、15時〜16時の会議C、16時以降の会議Dが会議予約リストに登録されている場合に、15:10に画像を撮影したとする。この時、会議Cは開始時間(15:00)≦撮影時間(15:10)≦終了時間(16:00)を満たすので、会議Cを会議候補の一つである会議Xと抽出する。また、会議Bの終了時間(15:00)=会議Cの開始時間(15:00)となっているので、会議Bも会議候補として抽出する。   The specific example of the above flow is given. In a certain conference room, as shown in FIG. 13, when a conference B up to 15:00, a conference C from 15:00 to 16:00, and a conference D after 16:00 are registered in the conference reservation list, an image is displayed at 15:10. Is taken. At this time, since the meeting C satisfies the start time (15:00) ≦ the shooting time (15:10) ≦ the end time (16:00), the meeting C is extracted as the meeting X which is one of the meeting candidates. Since the end time of the conference B (15:00) = the start time of the conference C (15:00), the conference B is also extracted as a conference candidate.

つまり、撮影時間に対して考えられる会議候補は、会議Bが延長している場合/会議Cが予定通り行われている場合の二つが考えられる。会議候補が一つとなる場合は、図24で後述する。   That is, there are two possible conference candidates for the shooting time: when the conference B is extended / when the conference C is held as scheduled. The case where there is one conference candidate will be described later with reference to FIG.

図14は、該当会議判断部101が会議候補から該当会議を特定するフローチャート図である。以下に各処理を説明する。   FIG. 14 is a flowchart in which the meeting determination unit 101 identifies the meeting from the meeting candidates. Each process will be described below.

まず、該当会議判断部101が会議予約リスト記録部103から会議候補を取得する(S201)。得られた会議候補の数によってフローが変更する(S202)。すなわち、会議候補が複数得られた場合はS203に続き、該当する会議を判断するための確率計算を行う。他方で、会議候補が1つしか得られない場合は、その会議と撮影画像を関連付けて保存する(S208)。会議候補が1つしか得られない状況については、図23を参照して説明する。   First, the meeting determination unit 101 acquires a conference candidate from the conference reservation list recording unit 103 (S201). The flow changes depending on the number of conference candidates obtained (S202). That is, when a plurality of conference candidates are obtained, the probability calculation for determining the corresponding conference is performed following S203. On the other hand, if only one conference candidate is obtained, the conference and the captured image are stored in association with each other (S208). A situation where only one conference candidate is obtained will be described with reference to FIG.

S203では、撮影された画像中のホワイトボードの文字の量を得るために、画像の2値化を行う。2値化を行う際のしきい値は判別分析法によって得られる値を使用する。S204では、S203で得られた撮影画像を2値化した画像と撮影時間によって、該当会議の確率計算を行う。確率計算の方法は、図15、図16を参照しながら後述する。   In S203, the image is binarized in order to obtain the amount of whiteboard characters in the captured image. As a threshold for binarization, a value obtained by discriminant analysis is used. In S204, the probability of the meeting is calculated based on the binarized image obtained in S203 and the shooting time. The probability calculation method will be described later with reference to FIGS.

次に、計算した確率がしきい値以上であるか否かを判断する(S205)。S204で算出した確率がしきい値以上であった場合は、会議候補で挙げられた会議のうち前の時間の会議であると判断する(S206)。しきい値未満であった場合は、現在の時間の会議であると判断する(S207)。   Next, it is determined whether or not the calculated probability is greater than or equal to a threshold value (S205). If the probability calculated in S204 is equal to or greater than the threshold value, it is determined that the conference is the previous conference among the conferences listed as conference candidates (S206). If it is less than the threshold, it is determined that the meeting is at the current time (S207).

S206,S207又はS208によって得られた会議名と関連付けて、撮影画像を画像記録部105に保存する(S209)。   The captured image is stored in the image recording unit 105 in association with the meeting name obtained in S206, S207, or S208 (S209).

図15は、会議候補から会議を特定するのに画像中の文字の量から確率を算出する方法を説明するための図である。また、図16は、会議候補から会議を特定するのに撮影時刻から確率を算出する方法を説明するための図である。ここでは抽出された会議候補から正しい会議を判定するための確率の計算方法について説明する。会議判断の確率は、「1:撮影された画像中に含まれる文字の多さ」、「2:画像が撮影された時間」の2つによって、計算される。   FIG. 15 is a diagram for explaining a method of calculating the probability from the amount of characters in the image in order to identify the conference from the conference candidates. FIG. 16 is a diagram for explaining a method of calculating the probability from the shooting time to identify the conference from the conference candidates. Here, a probability calculation method for determining a correct conference from the extracted conference candidates will be described. The probability of meeting determination is calculated by two: “1: the number of characters included in the captured image” and “2: time when the image was captured”.

1.撮影された画像中に含まれる文字の多さ
前の会議が延長していた場合、議論が長い時間続いているために、撮影されたホワイトボードにはたくさんの文字が記入されている可能性が高い。逆に、新しい会議を始めたばかりの時間帯では、ホワイトボードにたくさんの文字が記入されている可能性は低い。そこで、撮影された画像の文字領域の多さを判定するために、撮影画像を2値化する。画像中の全画素数をNall、2値化した画像中の黒画素の数をNblackとした時、撮影された画像中に含まれる文字の多さPcharは、
char=Nblack/Nall
と表すことができる。Pcharの値が大きい、すなわち画像中の文字が多い場合は、前の時間帯の会議である確率が高い。
1. The number of characters included in the captured image If the previous meeting was extended, the discussion could last for a long time, so the captured whiteboard may have many characters on it. high. On the other hand, in the time zone just starting a new meeting, it is unlikely that there are many letters on the whiteboard. Therefore, the captured image is binarized in order to determine the number of character regions in the captured image. When the total number of pixels in the image is N all and the number of black pixels in the binarized image is N black , the number of characters P char included in the captured image is
P char = N black / N all
It can be expressed as. When the value of P char is large, that is, when there are many characters in the image, there is a high probability that the meeting is in the previous time zone.

2.画像が撮影された時間
会議候補が連続している場合において、会議Aの終了時刻をtA、会議Bの終了時刻をtBとすると、ホワイトボードを撮影した時刻tがtAに近いほど、前の会議が延長している可能性が高く、tBに近いほど、現在の時間の会議である可能性が高い。そこで、その確率をPtimeとすると、
time=|t−tB|/|t−tA
と表すことができる。Ptimeの値が大きい、すなわち撮影時刻がtAに近いほど前の時間帯の会議である確率が高い。
2. Time when Images were Taken When conference candidates are continuous, if the end time of conference A is t A and the end time of conference B is t B , the closer the time t when the whiteboard was shot to t A , The previous meeting is likely to be extended, and the closer to t B , the more likely it is the current time meeting. So, if the probability is P time ,
P time = | t−t B | / | t−t A |
It can be expressed as. The larger the value of P time is, that is, the closer the shooting time is to t A , the higher the probability that the meeting is in the previous time zone.

1,2から会議候補のうち、前の会議に該当する確率をPとすると、
P=Pchar×Ptime
と表すことができる。この確率Pがしきい値以上である場合、会議候補のうち前の会議で撮影された画像だと判断し、しきい値未満である場合、現在の時刻の会議で撮影された画像だと判断する。
Let P be the probability of meeting the previous meeting among the meeting candidates from 1 and 2.
P = P char × P time
It can be expressed as. If this probability P is greater than or equal to the threshold value, it is determined that the image was taken in the previous meeting among the conference candidates, and if it is less than the threshold value, it is determined that the image was taken in the meeting at the current time. To do.

以上で、第1の実施形態の説明を終える。本実施形態においては、会議を実施するユーザは会議名、時間、場所を指定して会議予約リストを作成する。会議時には、撮影装置110で板書を撮影し、時間取得手段111、位置取得手段112で得られた情報を付加してサーバに画像、時間、位置を送信する。サーバでは、位置情報から会議室を特定し、その会議室における会議予約リストと画像の撮影時刻から会議の候補を出し、会議延長有無情報を作成し、その情報と会議の候補を比較して該当する会議を判断する。そのため、本実施形態によれば、会議の板書の画像を会議予約情報に応じて自動で該当する会議に関連付けて保存することができ、その際、会議が延長して、会議の予約状況と時間のずれが発生しても、正しい会議を関連付けることができる。   This is the end of the description of the first embodiment. In this embodiment, a user who conducts a conference creates a conference reservation list by specifying the conference name, time, and location. At the time of the meeting, a board is photographed by the photographing device 110, and the information obtained by the time acquisition unit 111 and the position acquisition unit 112 is added, and the image, time, and position are transmitted to the server. The server identifies the conference room from the location information, generates a conference candidate from the conference reservation list in the conference room and the image shooting time, creates conference extension information, compares the information with the conference candidate, and applies Determine the meeting you want. Therefore, according to the present embodiment, it is possible to automatically save and save an image of a conference board according to conference reservation information, in which case the conference is extended and the conference reservation status and time are extended. Even if a deviation occurs, the correct conference can be associated.

<第2の実施形態>
本実施形態においては、上記実施形態と同様の構成に加え、会議室に備え付けられているデバイスの使用履歴を、該当会議の判断に用いる。まず、使用履歴の登録について述べ、次に、使用履歴から該当会議を特定する処理について述べる。会議の候補を抽出する処理などについては、上記実施形態と同様であるため、説明を省略する。
<Second Embodiment>
In the present embodiment, in addition to the same configuration as that of the above-described embodiment, the use history of the device provided in the conference room is used for the determination of the corresponding conference. First, registration of usage history will be described, and then processing for identifying the meeting from the usage history will be described. The process for extracting the conference candidates is the same as that in the above embodiment, and a description thereof will be omitted.

図17は、会議室に備え付けられているデバイスの使用履歴の登録処理のフローチャート図である。図18は、デバイス使用履歴記録部106に登録される情報テーブルの例を示す図ある。図17と図18を参照しながら、会議室に備え付けのデバイスとしてプロジェクタ114が存在する場合に会議候補から該当会議を判断する方法について説明する。   FIG. 17 is a flowchart of a process for registering the use history of devices provided in a conference room. FIG. 18 is a diagram illustrating an example of an information table registered in the device usage history recording unit 106. With reference to FIGS. 17 and 18, a method of determining a conference from conference candidates when a projector 114 is present as a device provided in the conference room will be described.

図17において、以下の処理が行われる。
1)会議室に備え付けのプロジェクタ114を電源起動、終了した時に、プロジェクタ114は、情報処理装置(サーバ)100に会議室名と時間を通知し、デバイス使用履歴記録部106に登録する。
2)起動時間記録時には、会議予約リスト記録部103と会議室名、起動時間を照合し、該当会議室に予約されている会議のうち、起動時間に最も近い開始時刻を持つ会議の起動時間として、記録する。
3)終了時間記録時には、手順2で記録した会議の終了時間に通知された時間を記録する。
つまり、起動時間は入力されているが、終了時間が記録されていない会議があった場合はその会議は会議中であるということが言える。
In FIG. 17, the following processing is performed.
1) When the projector 114 installed in the conference room is powered on and terminated, the projector 114 notifies the information processing apparatus (server) 100 of the conference room name and time and registers them in the device usage history recording unit 106.
2) When recording the activation time, the conference reservation list recording unit 103 is collated with the conference room name and the activation time, and among the conferences reserved in the corresponding conference room, the activation time of the conference having the start time closest to the activation time ,Record.
3) When the end time is recorded, the notified time is recorded as the conference end time recorded in the procedure 2.
That is, it can be said that if there is a conference in which the activation time is input but the end time is not recorded, the conference is in a conference.

図19は、デバイス使用履歴から該当会議を特定するフローチャート図である。図19を参照しながら、会議室に備え付けのデバイスとしてプロジェクタ114が存在する場合に会議候補から該当会議を判断する方法について説明する。
1)該当会議判断部101は、会議予約リスト記録部103から会議候補を取得する。
2)該当会議判断部101は、デバイス使用履歴記録部106から、指定した会議室のデバイス使用履歴を受信する。
3)該当会議判断部101は、受信したデバイス使用履歴から会議候補のうち該当する会議を判断する(図20参照)。
FIG. 19 is a flowchart for identifying the meeting from the device usage history. With reference to FIG. 19, a method for determining a corresponding conference from conference candidates when the projector 114 is present as a device provided in the conference room will be described.
1) The corresponding conference determination unit 101 acquires conference candidates from the conference reservation list recording unit 103.
2) The meeting determination unit 101 receives the device usage history of the designated conference room from the device usage history recording unit 106.
3) The meeting determination unit 101 determines a meeting corresponding to the meeting candidates from the received device usage history (see FIG. 20).

図20は、会議候補から該当会議を特定するフローチャート図である。図20において、S301,S302,S311,S312は、図14のS201,S202,S208と同等の処理である。該当会議判断部101は、会議候補が2つ以上ある場合、候補に挙げられた会議(前の時間帯の会議/現在の時間帯の会議)のデバイス使用履歴を取得する(S303)。   FIG. 20 is a flowchart for identifying the meeting from the meeting candidates. 20, S301, S302, S311, and S312 are the same processes as S201, S202, and S208 in FIG. When there are two or more conference candidates, the corresponding conference determination unit 101 acquires device usage history of the conferences listed as candidates (conference in the previous time zone / conference in the current time zone) (S303).

次に、前の会議におけるプロジェクタ114の使用履歴を参照し、起動時間が記録されているかを確認する(S304)。入力されている場合はS305、入力されていない場合はS308に進む。   Next, referring to the usage history of the projector 114 in the previous meeting, it is confirmed whether the activation time is recorded (S304). If it is input, the process proceeds to S305. If it is not input, the process proceeds to S308.

前の会議においてプロジェクタ114の起動時間が記録されている場合には、前の会議のプロジェクタ114の終了時間が入力されているかを確認する(S305)。終了時間が入力されている場合は、前の会議が終了して、現在の会議が予約通りに行われていると判断する(S306)。終了時間が入力されていない場合は、前の会議が終了せずに、延長していると判断する(S307)。   If the startup time of the projector 114 is recorded in the previous meeting, it is confirmed whether the end time of the projector 114 of the previous meeting is input (S305). If the end time has been input, it is determined that the previous conference has ended and the current conference is being performed as reserved (S306). If the end time has not been input, it is determined that the previous meeting has been extended without ending (S307).

前の会議でプロジェクタ114の起動時間が記録されていない場合は、デバイス使用履歴から現在の会議でプロジェクタ114が利用されているかを確認する(S308)。プロジェクタ114が利用されている場合は、現在の会議が予約通りに実施されていると判断する(S309)。現在の会議でもプロジェクタ114が利用されていない場合は、デバイス使用履歴だけから該当会議を判断することはできない(S310)。そのため、図14に記載した画像中の文字の量と撮影時間から該当する会議の判定を行う。デバイス使用履歴から会議を特定できた場合は、特定した会議と撮影画像とを関連づけて保存する(S312)。   If the startup time of the projector 114 has not been recorded in the previous conference, it is confirmed from the device usage history whether the projector 114 is used in the current conference (S308). If the projector 114 is used, it is determined that the current conference is being carried out as reserved (S309). If the projector 114 is not used even in the current conference, the conference cannot be determined from only the device usage history (S310). Therefore, the corresponding meeting is determined from the amount of characters in the image and the shooting time shown in FIG. If the conference can be identified from the device usage history, the identified conference and the captured image are stored in association with each other (S312).

本実施形態は、第1の実施形態による会議の特定の前段に会議室内にあるデバイスの使用履歴に基づく会議の特定を行う。そのため、本実施形態によれば、会議中に行う自然な動作(プロジェクタの電源を入れる/消す)によって、会議の延長判定を行うことができる。   In the present embodiment, the conference is specified based on the usage history of the devices in the conference room at the first stage of the conference according to the first embodiment. Therefore, according to the present embodiment, it is possible to determine whether to extend the conference by a natural operation (turning on / off the projector) performed during the conference.

<第3の実施形態>
本実施形態は、上記実施形態の構成に加えて、以下に説明するような会議室の位置を特定するための構成を備えることによって、位置の特定をさらに容易且つ正確ににする。
<Third Embodiment>
In addition to the configuration of the above-described embodiment, this embodiment includes a configuration for specifying the location of the conference room as described below, thereby making it easier and more accurate to specify the location.

図21は、会議室位置情報記録部102に保存されている情報テーブル(図10とは別の実施形態)を説明するための図である。図22は、撮影装置110により撮影された撮影画像を用いて会議室を特定する方法を説明するための図である。   FIG. 21 is a diagram for explaining an information table (an embodiment different from FIG. 10) stored in the conference room position information recording unit 102. FIG. 22 is a diagram for explaining a method for identifying a conference room using a captured image captured by the imaging device 110.

本実施形態は、第1の実施形態で説明したような図10,図11とは別の位置特定の実施例ではあるが組み合わせてもよい。各会議室に備え付けられているホワイトボードにマーカ(例としてQRコード(登録商標))を貼り付け、その対応関係を図7に示した前準備の段階で位置情報記録部に保存する。   Although this embodiment is an example of position specification different from FIGS. 10 and 11 as described in the first embodiment, it may be combined. A marker (for example, a QR code (registered trademark)) is pasted on a whiteboard provided in each conference room, and the corresponding relationship is stored in the position information recording unit at the stage of preparation shown in FIG.

会議中にホワイトボードを撮影する場合に、ホワイトボードに貼りつけたマーカーも一緒に映るように撮影を行う。マーカーを含む画像を撮影装置110から情報処理装置(サーバ)100に送信する。サーバでは画像中からマーカーを検出し、画像中のマーカーと図2に示した会議室位置情報記録部102に保存されている各会議室とマーカーを照合して、会議室を特定する。   When shooting a whiteboard during a meeting, take a picture so that the marker affixed to the whiteboard is also shown. An image including the marker is transmitted from the imaging device 110 to the information processing device (server) 100. The server detects a marker from the image and collates the marker in the image with each conference room stored in the conference room location information recording unit 102 shown in FIG. 2 to identify the conference room.

この実施例の場合、第1の実施形態で説明したような図10,図11の場合とは異なり、撮影装置110に位置特定手段として特別なデバイス(GPSなど)を搭載する必要がなく、全てサーバ上での処理で位置を特定することができる。   In the case of this example, unlike the case of FIG. 10 and FIG. 11 as described in the first embodiment, it is not necessary to mount a special device (GPS or the like) as a position specifying means in the photographing apparatus 110. The position can be specified by processing on the server.

<第4の実施形態>
本実施形態では、上記実施形態の構成に加えて、過去の判定履歴を用いて判定精度を高めている。以下、過去の会議の判断履歴から、該当する会議を判断する方法について説明する。
<Fourth Embodiment>
In this embodiment, in addition to the structure of the said embodiment, the determination precision is raised using the past determination log | history. Hereinafter, a method for determining a corresponding meeting from a past meeting determination history will be described.

図23は、会議の候補と過去の判定履歴から該当会議を判断する処理のフローチャート図である。図14、図20と比較して、S401,S402,S408の処理は、上記実施形態のものと同等の処理である。   FIG. 23 is a flowchart of processing for determining a conference from the conference candidates and the past determination history. Compared with FIG. 14 and FIG. 20, the processes of S401, S402, and S408 are the same as those of the above embodiment.

短い時間間隔で複数枚の写真を撮影した場合には、過去の判断結果を利用して判断を用意に行うことができる(S403〜S406)。例えば、会議Aと会議Bが連続した時間で予約されており、会議Aの方が早い時間帯である状況があったとする。会議Aと会議Bの狭間の時間帯である時刻t1で画像の撮影を行い、会議A/Bが候補に挙がり遅い時間である会議Bで取られた写真と判断して会議Bと関連付けて画像を保存したとする。 When a plurality of photographs are taken at short time intervals, the determination can be made using the past determination results (S403 to S406). For example, it is assumed that the conference A and the conference B are reserved at a continuous time, and the conference A is in an earlier time zone. An image is taken at time t 1 , which is a time zone between the meeting A and the meeting B, and the meeting A / B is determined as a photograph taken at the meeting B, which is a late time, and is associated with the meeting B. Suppose you save an image.

その後に、時刻t1よりも遅い時刻t2で画像撮影し、会議候補として会議A/Bが抽出された場合、過去の判断履歴において、同様の会議候補A/Bに対して、遅い方の会議Bを判断したという結果があるので、今回も会議Bを判断結果として扱う。何故なら、時刻t1における判断結果が会議Bであるのに、時刻t1よりも遅い時刻t2の段階で、会議Bより時間の早い会議Aが開催されていることは有り得ないからである。 After that, when an image is taken at a time t 2 later than the time t 1 and a conference A / B is extracted as a conference candidate, in the past determination history, the later one is compared with the similar conference candidate A / B. Since there is a result that the meeting B is determined, the meeting B is treated as a determination result again. This is because it is unlikely that the meeting A, which is earlier than the meeting B, is held at the time t 2 later than the time t 1 even though the judgment result at the time t 1 is the meeting B. .

過去の判断履歴の中に同じ会議候補が存在しない場合や、会議候補が同じ履歴が存在するがその判断結果が早い時間帯の会議であった場合は、判断履歴から今回の会議を判断することは不可能なので、図14,12、13の方法で会議の判断を行う(S407)。   If the same conference candidate does not exist in the past judgment history, or if the conference candidate has the same history but the result of the judgment is an earlier time zone, judge the current conference from the judgment history Since it is impossible, the conference is determined by the method shown in FIGS. 14, 12, and 13 (S407).

<第5の実施形態>
本実施形態では、上記実施形態の構成に加えて、撮影画像の撮影時刻に会議の予約がなかった場合に会議の候補を抽出する構成を備える。そのことによって、該当会議の判断、すなわち会議の特定の精度を高める。図24は、撮影時間に会議の予約が入っていない場合に、会議の候補を抽出する方法を説明するための図である。以下、会議の予約が連続していない場合の該当会議判断についての解説を行う。
<Fifth Embodiment>
In this embodiment, in addition to the configuration of the above-described embodiment, there is a configuration for extracting conference candidates when there is no conference reservation at the shooting time of the captured image. As a result, the determination of the meeting, that is, the specific accuracy of the meeting is enhanced. FIG. 24 is a diagram for explaining a method of extracting conference candidates when there is no conference reservation at the shooting time. In the following, explanations will be given regarding the relevant conference judgment when the conference reservation is not continuous.

図24に示す例のように、15時までの会議B、16時以降の会議Cが会議予約リストに登録されており、15−16時で会議の予約に空きがある場合に、15:10に画像を撮影したとする。この状況では、図12のフローに従うと、開始時間≦撮影時間≦終了時間を満たす会議Xが存在しない。そのため、会議終了時間≦撮影時刻を満たす会議として、会議A、Bを抽出する。その会議の中で終了時間が最も遅い会議は会議Bであるため、会議Bを会議候補として抽出する。   As in the example shown in FIG. 24, when the conference B up to 15:00 and the conference C after 16:00 are registered in the conference reservation list, and there is a vacancy in the conference reservation at 15-16, Assume that an image is taken. In this situation, according to the flow of FIG. 12, there is no meeting X that satisfies start time ≦ shooting time ≦ end time. Therefore, conferences A and B are extracted as conferences that satisfy conference end time ≦ shooting time. Since the conference with the latest end time is conference B, conference B is extracted as a conference candidate.

このように、会議の予約が連続していない場合は、会議候補が一つになりえる。会議候補が一つの場合においては、図14,図20,図23に示すフローのように候補に挙がっている会議と関連付けて画像を保存する。本実施形態によれば、会議予約リストに予約が入っていない時間帯に撮影を行っても、会議と関連付けて画像を保存することができる。   Thus, when conference reservations are not consecutive, there can be only one conference candidate. When there is only one conference candidate, an image is stored in association with the conference listed as a candidate, as in the flow shown in FIGS. According to the present embodiment, an image can be stored in association with a conference even if shooting is performed during a time period when there is no reservation in the conference reservation list.

<第6の実施形態>
本実施形態は、上記実施形態に加えて、撮影画像に会議との関連付けを行わないための構成を備えるものである。図25は、会議と関連付けずに画像を保存行いたい場合の撮影装置110のユーザインタフェース画面例である。図26は、会議と関連付けを行わずに画像の保存を行う場合のシーケンス図である。図27は、判断履歴記録部107に保存される情報テーブルである。以下、撮影した画像を予約されている会議と関連付けずに保存する場合について説明する。
<Sixth Embodiment>
In addition to the above-described embodiment, the present embodiment has a configuration for not associating a captured image with a conference. FIG. 25 shows an example of a user interface screen of the photographing apparatus 110 when it is desired to save an image without associating it with a conference. FIG. 26 is a sequence diagram when an image is stored without being associated with a conference. FIG. 27 is an information table stored in the determination history recording unit 107. Hereinafter, a case where a captured image is stored without being associated with a reserved conference will be described.

会議室の予約が入っておらず、空いている会議室で突発的に会議を行う場合を考える。そのような会議において、板書の画像を撮影した場合、図24の処理により、その時間帯の一つ前の会議と関連付けて画像がサーバに記録される。つまり、空いている会議室を突発的に利用した場合には、誤った会議と関連付けて画像が保存されてしまうことがありえる。   Consider a case in which a conference room is not reserved and a conference is suddenly held in an empty conference room. In such a meeting, when an image of a blackboard is photographed, the image is recorded on the server in association with the previous meeting of the time period by the processing of FIG. That is, when a vacant conference room is used unexpectedly, an image may be stored in association with an incorrect conference.

そこで、図25に示すように撮影装置110に撮影装置110に関連付け禁止のフラグを設定できるようにする。関連付け禁止ボタンを押下した上で画像を撮影した場合は、図26のシーケンス図に示すように、時間、位置の取得や、会議候補の抽出などを行わず、図27に示すように画像記録部105の会議欄を空欄にした状態で画像だけ保存する。   Therefore, as shown in FIG. 25, an association prohibition flag can be set in the photographing apparatus 110 for the photographing apparatus 110. When an image is captured after the association prohibition button is pressed, as shown in the sequence diagram of FIG. 26, time and position acquisition, conference candidate extraction, and the like are not performed. As shown in FIG. Only the image is saved with the conference column 105 blank.

本実施形態によれば、突発的に空いている会議室で会議を行った場合に、誤った会議と関連付けてしまう問題を防止することができる。   According to this embodiment, when a meeting is performed in a meeting room that is suddenly vacant, it is possible to prevent a problem associated with an incorrect meeting.

<第7の実施形態>
本実施形態は、上記実施形態の構成に加えて、会議の特定がなされた撮影画像を、その特定した情報と関連づけて保存する構成を備える。本実施形態によれば、議事録を作成する場合に、対応する画像の取り込み作業や会議の時間、場所などの入力を省略できるため手間を軽減することができる。
<Seventh Embodiment>
In addition to the configuration of the above-described embodiment, the present embodiment includes a configuration in which a captured image for which a conference is specified is stored in association with the specified information. According to the present embodiment, when creating the minutes, it is possible to save time and effort because it is possible to omit input of the corresponding image and the time and place of the meeting.

図28は、撮影画像から該当会議を判断し、該当する会議と関連付けて画像を保存する場合のシーケンス図である。以下、撮影画像から該当会議を判断し、該当する会議と関連付けて画像を保存する場合の処理のシーケンスについて説明する。図28は、図9とは手順7の部分のみ異なる。   FIG. 28 is a sequence diagram in the case where the meeting is determined from the captured image and the image is stored in association with the meeting. Hereinafter, a processing sequence in the case of determining the meeting from the captured image and storing the image in association with the meeting will be described. 28 differs from FIG. 9 only in the procedure 7.

1)ユーザは、画像撮影装置110を用いて、板書を撮影する。
2)画像撮影装置110は、時間取得部、位置情報取得部から撮影時の時間情報、位置情報を取得する。
3)画像撮影装置110は、手順1,2において取得した画像データ、時間情報、位置情報を情報処理装置(サーバ)100に送信する。
4)情報処理装置(サーバ)100は受信した位置情報と会議室位置情報記録部102を照合し、撮影が行われた会議室を特定する。
5)情報処理装置(サーバ)100は手順4で特定した会議室名と撮影時間、会議予約リスト記録部103を照合して、会議候補を抽出する。
6)情報処理装置(サーバ)100は抽出した会議候補と撮影時間、画像データを比較して、会議候補のうち該当する会議を判断する。
7)情報処理装置(サーバ)100は受信した画像データを手順6で特定した会議と関連付けて、画像記録部105に記憶する。
1) A user photographs a board using the image capturing device 110.
2) The image capturing apparatus 110 acquires time information and position information at the time of shooting from the time acquisition unit and the position information acquisition unit.
3) The image capturing apparatus 110 transmits the image data, time information, and position information acquired in steps 1 and 2 to the information processing apparatus (server) 100.
4) The information processing apparatus (server) 100 collates the received position information with the meeting room position information recording unit 102, and specifies the meeting room where the photographing was performed.
5) The information processing apparatus (server) 100 collates the conference room name specified in step 4 with the shooting time and the conference reservation list recording unit 103 to extract a conference candidate.
6) The information processing apparatus (server) 100 compares the extracted conference candidate with the shooting time and the image data, and determines the corresponding conference among the conference candidates.
7) The information processing apparatus (server) 100 stores the received image data in the image recording unit 105 in association with the conference specified in step 6.

図29は、保存された画像を元に議事録の自動生成を行う場合のシーケンス図である。図30は、自動生成された会議の議事録の例である。以下、画像と会議が関連付けられて保存されている状態から、議事録の生成を行う処理の流れについて説明する。ここでの会議の議事録生成とは、会議における会議名、会議場所、会議時間、添付画像を記載した議事録のテンプレート(図30参照)を生成することであり、議事内容は別途、議事録担当が手動で入力をしなければならない。   FIG. 29 is a sequence diagram when the minutes are automatically generated based on the stored image. FIG. 30 is an example of the conference minutes automatically generated. Hereinafter, a flow of processing for generating a minutes from a state in which an image and a meeting are stored in association with each other will be described. Here, the minutes generation of the meeting is to generate a minutes template (see FIG. 30) that describes the meeting name, meeting place, meeting time, and attached images in the meeting. The person in charge has to input manually.

1)ユーザは情報処理装置(端末)113から、議事録の自動生成を行いたい会議を指定する。
2)情報処理装置(サーバ)100は、通信部104で指定された会議名を受信する。
3)図4に示したように、会議予約リスト記録部103には、会議室、会議名、開始時間、終了時間が紐づいて記録されているので、指定された会議名から会議を実施した時間と場所を取得する。
4)図5に示したように、画像記録部105には会議名、撮影画像が紐づいて記録されているので、指定された会議名から対応する画像を取得する。
5)手順3,4で取得した情報を議事録に記載して、議事録のテンプレートを生成して、情報処理装置(端末)113に生成した議事録を送信する。
1) The user designates a meeting for which the minutes are to be automatically generated from the information processing apparatus (terminal) 113.
2) The information processing apparatus (server) 100 receives the conference name specified by the communication unit 104.
3) As shown in FIG. 4, the conference reservation list recording unit 103 records the conference room, the conference name, the start time, and the end time, so the conference was conducted from the designated conference name. Get time and place.
4) As shown in FIG. 5, since the conference name and the captured image are recorded in association with each other in the image recording unit 105, a corresponding image is acquired from the designated conference name.
5) The information obtained in steps 3 and 4 is described in the minutes, a minutes template is generated, and the generated minutes are transmitted to the information processing apparatus (terminal) 113.

生成される議事録の例としては、図30に示すようなものが生成される。本実施形態によれば、議事録を作成する場合に、対応する画像の取り込み作業や会議の時間、場所などの入力を省略できるため手間を軽減することができる。   As an example of the generated minutes, the one shown in FIG. 30 is generated. According to the present embodiment, when creating the minutes, it is possible to save time and effort because it is possible to omit input of the corresponding image and the time and place of the meeting.

100 情報処理装置(サーバ)
101 該当会議判断部
102 会議室位置情報記録部
103 会議予約リスト記録部
104 通信部
105 画像記録部
106 デバイス使用履歴記録部
107 判断履歴記録部
110 撮影装置
111 時間取得手段
112 位置取得手段
113 情報処理装置(端末)
114 プロジェクタ
100 Information processing device (server)
DESCRIPTION OF SYMBOLS 101 Corresponding meeting judgment part 102 Meeting room position information recording part 103 Conference reservation list recording part 104 Communication part 105 Image recording part 106 Device use history recording part 107 Judgment history recording part 110 Imaging device 111 Time acquisition means 112 Position acquisition means 113 Information processing Device (terminal)
114 Projector

特許第4886637号公報Japanese Patent No. 4886637

Claims (7)

会議名、会議時間及び会議室の場所を紐付けて会議予約リストとして記録する会議予約リスト記録部と、
会議室における会議に関する画像を撮影した撮影時刻及び撮影位置、並びに、前記会議予約リストに基づいて、撮影画像が該当する会議を判断する該当会議判断部と、
を備え、
前記該当会議判断部は、
前記撮影時刻、前記撮影位置及び前記会議予約リストに基づいて、前記撮影画像が該当する会議の候補を抽出し、
前記撮影画像中の文字の量及び前記撮影時刻に基づいて、抽出した会議の候補のうちどの会議の候補に該当するかの確率を計算し、
該当する会議を判断する
ことを特徴とする、情報処理装置。
A conference reservation list recording unit that records a conference reservation list by associating a conference name, a conference time, and a conference room location;
A corresponding meeting determination unit for determining a meeting corresponding to a captured image based on a shooting time and a shooting position at which an image related to the meeting in the meeting room is shot, and the conference reservation list;
With
The meeting determination unit
Based on the shooting time, the shooting position, and the conference reservation list, extract a conference candidate to which the captured image corresponds,
Based on the amount of characters in the captured image and the shooting time, calculate the probability of which meeting candidate among the extracted meeting candidates,
An information processing apparatus characterized by determining an applicable meeting.
前記該当会議判断部は、会議室に紐付けられたデバイスの使用履歴に基づいて、該当する会議を判断することを特徴とする、請求項1に記載の情報処理装置。   The information processing apparatus according to claim 1, wherein the corresponding meeting determination unit determines a corresponding meeting based on a use history of a device associated with a meeting room. 前記該当会議判断部は、前記撮影画像中に所定のマーカーが存在する場合に、会議室と前記所定のマーカーとの対応関係に基づき、撮影位置を特定することを特徴とする、請求項1又は2に記載の情報処理装置。   The said meeting determination part specifies an imaging | photography position based on the correspondence of a meeting room and the said predetermined marker, when a predetermined marker exists in the said picked-up image, The claim 1 or 2. The information processing apparatus according to 2. 前記該当会議判断部による判断結果を記録する判断履歴記録部を備え、
前記該当会議判断部は、記録された判断結果に基づいて、撮影画像が該当する会議を判断することを特徴とする、請求項1から3のいずれか1項に記載の情報処理装置。
A determination history recording unit for recording a determination result by the meeting determination unit;
The information processing apparatus according to claim 1, wherein the meeting determination unit determines a meeting to which a captured image corresponds based on a recorded determination result.
前記該当会議判断部は、撮影時刻に会議の予約がない場合、撮影時刻の前の時間帯の会議を、該当する会議として判断することを特徴とする、請求項1から4のいずれか1項に記載の情報処理装置。   The said applicable meeting determination part determines the meeting of the time slot | zone before imaging | photography time as an applicable meeting, when there is no meeting reservation at imaging | photography time. The information processing apparatus described in 1. 外部端末より、会議名とともに議事録の作成の指示を受ける通信部を備え、該通信部は、議事録を作成して前記外部端末に通知し、作成した議事録は、会議名に基づいて特定される、会議名と関連づけられている撮影画像を含むことを特徴とする、請求項1から5のいずれか1項に記載の情報処理装置。   A communication unit that receives an instruction to create the minutes together with the meeting name from the external terminal, the communication part creates the minutes and notifies the external terminal, and the created minutes are specified based on the meeting name The information processing apparatus according to claim 1, further comprising a captured image associated with a meeting name. 会議に関する画像と会議との関連付けを自動的に行うための情報処理方法であって、
会議予約リスト記録部が、会議名、会議時間及び会議室の場所を紐付けて会議予約リストとして記録する会議予約リスト記録工程と、
該当会議判断部が、会議室における会議に関する画像を撮影した撮影時刻及び撮影位置、並びに、前記会議予約リストに基づいて、撮影画像が該当する会議の候補を抽出する工程と、
前記該当会議判断部が、前記撮影画像中の文字の量及び前記撮影時刻に基づいて、抽出した会議の候補のうちどの会議の候補に該当するかの確率を計算する工程と、
前記該当会議判断部が、計算結果に基づいて該当する会議を判断する工程と、
を含むことを特徴とする、情報処理方法。
An information processing method for automatically associating a conference image with a conference,
The conference reservation list recording unit records the conference reservation list as a conference reservation list by associating the conference name, the conference time, and the location of the conference room, and
A step of extracting a conference candidate corresponding to the captured image based on the shooting time and shooting position at which the image regarding the conference in the conference room is captured, and the conference reservation list;
A step of calculating the probability of which meeting candidate corresponds to the extracted meeting candidate based on the amount of characters in the captured image and the shooting time;
The step of determining the corresponding meeting based on the calculation result,
An information processing method comprising:
JP2012284281A 2012-12-27 2012-12-27 Information processing apparatus and method Active JP6020152B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012284281A JP6020152B2 (en) 2012-12-27 2012-12-27 Information processing apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012284281A JP6020152B2 (en) 2012-12-27 2012-12-27 Information processing apparatus and method

Publications (2)

Publication Number Publication Date
JP2014127079A true JP2014127079A (en) 2014-07-07
JP6020152B2 JP6020152B2 (en) 2016-11-02

Family

ID=51406500

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012284281A Active JP6020152B2 (en) 2012-12-27 2012-12-27 Information processing apparatus and method

Country Status (1)

Country Link
JP (1) JP6020152B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017199292A (en) * 2016-04-28 2017-11-02 コニカミノルタ株式会社 Printing program and conference system
JP2019079404A (en) * 2017-10-26 2019-05-23 富士ゼロックス株式会社 Device, management system, and program
US11893814B2 (en) 2019-01-07 2024-02-06 Fujitsu Limited Extraction method, computer-readable recording medium storing extraction program, and information processing device
JP7472556B2 (en) 2020-03-10 2024-04-23 株式会社リコー Imaging device, communication system, and content transmission method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222476A (en) * 2004-02-09 2005-08-18 Fuji Xerox Co Ltd Facility usage support device, facility usage support method and program therefor
JP2006146415A (en) * 2004-11-17 2006-06-08 Ricoh Co Ltd Conference support system
JP2007334712A (en) * 2006-06-16 2007-12-27 Yafoo Japan Corp Photograph registration system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005222476A (en) * 2004-02-09 2005-08-18 Fuji Xerox Co Ltd Facility usage support device, facility usage support method and program therefor
JP2006146415A (en) * 2004-11-17 2006-06-08 Ricoh Co Ltd Conference support system
JP2007334712A (en) * 2006-06-16 2007-12-27 Yafoo Japan Corp Photograph registration system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017199292A (en) * 2016-04-28 2017-11-02 コニカミノルタ株式会社 Printing program and conference system
JP2019079404A (en) * 2017-10-26 2019-05-23 富士ゼロックス株式会社 Device, management system, and program
US11893814B2 (en) 2019-01-07 2024-02-06 Fujitsu Limited Extraction method, computer-readable recording medium storing extraction program, and information processing device
JP7472556B2 (en) 2020-03-10 2024-04-23 株式会社リコー Imaging device, communication system, and content transmission method

Also Published As

Publication number Publication date
JP6020152B2 (en) 2016-11-02

Similar Documents

Publication Publication Date Title
US8718373B2 (en) Determining the location at which a photograph was captured
CN101742260B (en) System for sharing video captured at jobsite
JP5287303B2 (en) Conference material search device, conference material search support device, conference material search support program, conference material search program, and conference support system
JP6020152B2 (en) Information processing apparatus and method
CN102332091A (en) Camera head and control method thereof, shooting back-up system and individual evaluation method
US20070167044A1 (en) Sharing meta information media file
JP2013149242A (en) Information processor, control method for the same and program
JP2008225862A (en) System for picking-up construction photograph with electric blackboard and automatically preparing construction management ledger and program for use in the same
WO2011096343A1 (en) Photographic location recommendation system, photographic location recommendation device, photographic location recommendation method, and program for photographic location recommendation
JP5532180B1 (en) Image processing apparatus and program
JP2008269411A (en) Image keyword editing system, image keyword provision server and image keyword editing device
US10339174B2 (en) Automated location visit verification for officer monitoring systems
JP2010218227A (en) Electronic album creation device, method, program, system, server, information processor, terminal equipment, and image pickup device
JP2007213183A (en) Device, method, and program for classifying digital image data
JP2006195786A (en) Method, apparatus and program for retrieving image data
JP2017033278A (en) Facility management ledger creation support system, facility management ledger creation support device, and program
JP4886637B2 (en) Image management system, image evaluation apparatus, image management method, program, and storage medium
JP2007020054A (en) Method and device for managing image
US8571357B2 (en) Image data management apparatus, method and program
JP2015070483A (en) Image acquisition program, image acquisition device, and image acquisition method
JP2007526680A (en) Method and apparatus for formatting and displaying content
US20120069215A1 (en) Method and apparatus for generating additional information of image
KR100884109B1 (en) Data management apparatus and its management method using by the event tag
JPH11341406A (en) Image processing unit, image processing method and recording medium storing the method
JP2016174260A (en) Imaging apparatus which performs group photographing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151112

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160826

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160919

R151 Written notification of patent or utility model registration

Ref document number: 6020152

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151