JP2012027604A - Server device, posting information processing method, posting information processing program and recording medium - Google Patents

Server device, posting information processing method, posting information processing program and recording medium Download PDF

Info

Publication number
JP2012027604A
JP2012027604A JP2010164098A JP2010164098A JP2012027604A JP 2012027604 A JP2012027604 A JP 2012027604A JP 2010164098 A JP2010164098 A JP 2010164098A JP 2010164098 A JP2010164098 A JP 2010164098A JP 2012027604 A JP2012027604 A JP 2012027604A
Authority
JP
Japan
Prior art keywords
information
posting
terminal
audiovisual
acquired
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010164098A
Other languages
Japanese (ja)
Inventor
Kenji Sugiura
健治 杉浦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rakuten Group Inc
Original Assignee
Rakuten Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rakuten Inc filed Critical Rakuten Inc
Priority to JP2010164098A priority Critical patent/JP2012027604A/en
Publication of JP2012027604A publication Critical patent/JP2012027604A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To enable the delivery of posting information so as for a website visitor to recognize trustworthiness of posting information.SOLUTION: A server device connectable to a terminal device through a network comprises: posting information acquisition means for acquiring posting information from the terminal device; terminal information acquisition means for acquiring terminal audiovisual information showing at least one of a sound and an image from the terminal device; extraction means for extracting specific information capable of specifying a posting subject from the acquired posting information; posting subject information acquisition means for acquiring posting subject audiovisual information showing at least one of the sound and the image of the posting subject specified by the extracted specific information; comparison means for comparing the acquired posting subject audiovisual information to the acquired terminal audiovisual information; and decision means for deciding an output aspect of posting information at the time of delivery based on a result of comparison by the comparison means.

Description

本発明は、ユーザから投稿された情報を掲載するための処理を行うサーバ装置、投稿情報処理方法、投稿情報処理プログラム及び記録媒体の技術分野に関する。   The present invention relates to a technical field of a server device, a posted information processing method, a posted information processing program, and a recording medium that perform processing for posting information posted by a user.

近年、インターネットにおいて、例えば、ブログ、ミニブログ、口コミサイト等といった、ユーザからの投稿によって成立する投稿サイトが注目されている。このような投稿サイトでは、ユーザからの投稿情報が他者からの閲覧が可能なようにWebページに掲載される。この仕組みを利用することにより、ユーザは、情報を自由に発信することができる。ところが、投稿情報の中には、掲載するには不適切な情報も存在する。そこで、従来、不適切な情報の掲載を防止する技術が提案されている。   In recent years, on the Internet, for example, posting sites established by postings from users, such as blogs, miniblogs, word-of-mouth sites, and the like, have attracted attention. In such a posting site, posted information from the user is posted on a Web page so that it can be viewed by others. By using this mechanism, the user can freely transmit information. However, some of the posted information is inappropriate for posting. Thus, techniques for preventing inappropriate information from being posted have been proposed.

例えば、特許文献1には、判定者による掲載可否の判定結果に基づいて、投稿情報を掲載するか否かを決定し、掲載が許可された投稿情報を閲覧した閲覧者による掲載禁止の判断結果に基づいて、投稿情報の掲載を継続するか否かを決定する技術が記載されている。   For example, in Patent Document 1, it is determined whether or not posting information is to be posted based on a determination result of whether or not posting by a determiner, and a determination result of posting prohibition by a reader who has viewed posting information permitted to be posted. Based on the above, a technique for determining whether or not to continue posting posted information is described.

特開2006−134040号公報JP 2006-134040 A

投稿サイトのユーザは、ある場所に存在する物や起きた出来事を投稿対象として投稿することがある。こうした投稿のうち、投稿対象をユーザが直接見聞きした場合と見聞きしていない場合とでは、投稿された情報の信頼性に差があると考えられる。つまり、投稿対象をユーザが直接見聞きした場合、ユーザは投稿対象についての直接的な情報を得て投稿したと考えられる。一方、投稿対象をユーザが直接見聞きしなかった場合、ユーザは投稿対象についての間接的な情報に基づいて投稿したと考えられる。従って、後者の場合の情報の方が、信頼性としては劣る傾向がある。   A user of a posting site may post an object existing in a certain place or an event that occurred as a posting target. Among these posts, it is considered that there is a difference in the reliability of posted information between the case where the user directly views and listens to the posting target. That is, when the user directly views and listens to the posting target, it is considered that the user has obtained direct information about the posting target and has posted. On the other hand, when the user does not directly see and hear the posting target, the user is considered to have posted based on indirect information about the posting target. Therefore, the information in the latter case tends to be inferior in reliability.

投稿サイトにおいては、ユーザからの情報が公開されることから、掲載された情報によって投稿対象に与える影響を考慮すると、信頼性にかかわらず、投稿された情報が全て一様に掲載されることは適切ではない。   In the posting site, since the information from the user is released, considering the effect of the posted information on the subject of posting, regardless of the reliability, all posted information will be posted uniformly. Not appropriate.

しかしながら、特許文献1に記載の技術においては、人間が投稿情報を見て掲載可否の判断を行うことから、投稿情報の信頼性を有効に判断することができない。そもそも内容の信頼性が疑わしいかもしれない投稿情報から、投稿対象をユーザが直接見聞きした上で投稿した情報であるか否かを判断することは困難だからである。   However, in the technique described in Patent Document 1, since humans see posted information and determine whether or not to post, it is impossible to effectively determine the reliability of posted information. In the first place, it is difficult to determine whether or not the information is the information posted after the user has directly viewed and asked the posting target from the posted information that may be questionable in the first place.

そのため、信頼性が低いと判断された投稿情報を、特許文献1に記載の技術のように不適切な情報として掲載を禁止することが適切ではない場合がある。信頼性が低いと判断された投稿情報の内容が、事実であるという可能性も残されているからである。   For this reason, it may not be appropriate to prohibit posting information that is determined to have low reliability as inappropriate information as in the technique described in Patent Document 1. This is because there is a possibility that the content of the posted information determined to be low in reliability is a fact.

そこで、本発明は以上の点に鑑みてなされたものであり、投稿情報の信頼性が閲覧者に認識可能なように投稿情報の掲載を可能とするサーバ装置、投稿情報処理方法、投稿情報処理プログラム及び記録媒体を提供することを目的とする。   Therefore, the present invention has been made in view of the above points, and a server device, posting information processing method, and posting information processing that enable posting of posted information so that the reliability of posted information can be recognized by a viewer. An object is to provide a program and a recording medium.

上記課題を解決するために、請求項1に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置であって、前記端末装置から投稿情報を取得する投稿情報取得手段と、前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得手段と、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段と、前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段と、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段と、前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段と、を備えることを特徴とする。   In order to solve the above-mentioned problem, the invention according to claim 1 is a server device to which a terminal device can be connected via a network, and a posted information acquisition unit that acquires posted information from the terminal device, and the terminal Terminal information acquisition means for acquiring terminal audiovisual information indicating at least one of sound and image from the apparatus, extraction means for extracting specific information that can specify a posting target from the acquired posting information, and the extracted Posting target information acquisition means for acquiring posting target audiovisual information indicating at least one of the sound or image of the posting target specified by the specific information, the acquired posting target audiovisual information, and the acquired terminal audiovisual information, And a determinant for determining an output mode of the acquired posted information at the time of posting based on a comparison result by the comparison unit Characterized in that it comprises a and.

この発明によれば、投稿情報から特定された投稿対象の音または画像と、投稿情報の取得先の端末装置から取得された音または画像と、が比較され、この比較結果に基づいて、掲載時における投稿情報の出力態様が決定される。そのため、ユーザが投稿対象を直接見聞きしたのであれば、投稿対象の音を入力し、または、投稿対象の画像を撮影することができるはずであることから、音または画像の証拠としての信憑性に応じて、投稿情報が掲載されるときの出力態様を決定することができる。従って、投稿情報が出力されている態様から、閲覧者がその投稿情報の信頼性を認識することができる。   According to this invention, the sound or image of the posting target specified from the posted information is compared with the sound or image acquired from the terminal device from which the posted information is acquired, and based on the comparison result, The output mode of the posted information is determined. Therefore, if the user has directly seen and heard the posting target, it should be possible to input the posting target sound or take a picture of the posting target. Accordingly, an output mode when posting information is posted can be determined. Therefore, the viewer can recognize the reliability of the posted information from the aspect in which the posted information is output.

請求項2に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置であって、前記端末装置から投稿情報を取得する投稿情報取得手段と、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段と、音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定手段と、前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信手段と、前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得手段と、前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段と、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段と、前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段と、を備えることを特徴とする。   The invention according to claim 2 is a server device to which a terminal device can be connected via a network, and posted information acquisition means for acquiring posted information from the terminal device, and a posting target from the acquired posted information. Extraction means for extracting identifiable specific information and condition determination for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information Means, control information transmitting means for transmitting control information for notifying the determined condition by the terminal device to the terminal device, and terminal information acquisition for receiving the terminal audiovisual information transmitted from the terminal device Posting object for obtaining posting object audiovisual information indicating sound or image corresponding to the means, the extracted specific information, and the determined condition Information acquisition means, comparison means for comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information, and output of the acquired posting information at the time of posting based on a comparison result by the comparison means Determining means for determining an aspect.

この発明によれば、投稿情報から特定された投稿対象に応じた条件に対応する音または画像と、決定された条件を通知した端末装置から取得された音または画像と、が比較され、この比較結果に基づいて、掲載時における投稿情報の出力態様が決定される。そのため、ユーザが投稿対象を直接見聞きしたのであれば、投稿対象に応じた条件を満たす音を入力し、または、投稿対象に応じた条件を満たす画像を撮影することができるはずであることから、音または画像の証拠としての信憑性に応じて、投稿情報が掲載されるときの出力態様を決定することができる。従って、投稿情報が出力されている態様から、閲覧者がその投稿情報の信頼性を認識することができる。   According to the present invention, the sound or image corresponding to the condition according to the posting target specified from the posting information is compared with the sound or image acquired from the terminal device that has notified the determined condition, and this comparison is performed. Based on the result, the output mode of the posted information at the time of posting is determined. Therefore, if the user has directly viewed and listened to the posting target, it should be possible to input a sound that satisfies the conditions corresponding to the posting target or to shoot an image that satisfies the conditions corresponding to the posting target. Depending on the credibility as sound or image evidence, the output mode when posting information is posted can be determined. Therefore, the viewer can recognize the reliability of the posted information from the aspect in which the posted information is output.

請求項3に記載の発明は、請求項1または請求項2に記載のサーバ装置において、前記投稿対象視聴覚情報を前記特定情報に対応付けて記憶する記憶装置に、前記抽出された特定情報に対応する前記投稿対象視聴覚情報が記憶されているか否かを判定する判定手段と、前記抽出された特定情報に対応する前記投稿対象視聴覚情報が記憶されていないと判定された場合には、前記取得された端末視聴覚情報を前記投稿対象視聴覚情報として、当該特定情報に対応付けて前記記憶装置に記憶させる記憶手段と、を更に備え、前記投稿対象情報取得手段は、前記記憶装置に記憶された前記投稿対象視聴覚情報を、前記比較手段による比較に用いられる前記投稿対象視聴覚情報として取得する。   According to a third aspect of the present invention, in the server device according to the first or second aspect, the storage device that stores the posting target audiovisual information in association with the specific information corresponds to the extracted specific information. And determining means for determining whether or not the posting target audiovisual information is stored, and when it is determined that the posting target audiovisual information corresponding to the extracted specific information is not stored, the acquisition is performed. Storage means for storing the terminal audio-visual information as the posting target audio-visual information in the storage device in association with the specific information, wherein the posting target information acquisition means is stored in the storage device. The target audiovisual information is acquired as the post target audiovisual information used for comparison by the comparison means.

この発明によれば、投稿情報の出力態様の決定のために用いられるべき投稿対象の視聴覚情報が記憶されていない場合には、端末装置から取得された視聴覚情報が投稿対象の視聴覚情報として記憶されて、投稿情報の出力態様の決定のために用いられる。従って、例えば事件や事故等のように、いつどこで起きるか予め知ることができない事物を投稿対象として投稿が行われた場合でも、投稿情報の出力態様を決定することができる。   According to this invention, when the audiovisual information to be posted that should be used for determining the output mode of the posted information is not stored, the audiovisual information acquired from the terminal device is stored as the audiovisual information to be posted. This is used for determining the output mode of the posted information. Therefore, even when a posting is made with an object that cannot be known in advance as to when and where it occurs, such as an incident or accident, for example, the output mode of the posted information can be determined.

請求項4に記載の発明は、請求項3に記載のサーバ装置において、前記判定手段は、前記抽出された特定情報に対応する前記投稿対象視聴覚情報が、前記記憶装置に予め定められた数以上記憶されているか否かを判定し、前記抽出された特定情報に対応する前記投稿対象視聴覚情報が予め定められた数以上記憶されていると判定された場合には、当該投稿対象視聴覚情報同士を比較する投稿対象情報比較手段と、前記投稿対象情報比較手段による比較結果に基づいて、前記比較手段による比較に用いられる前記投稿対象視聴覚情報を決定する投稿対象情報決定手段と、を更に備え、前記投稿対象情報取得手段は、前記投稿対象情報決定手段により決定された前記投稿対象視聴覚情報を取得することを特徴とする。   According to a fourth aspect of the present invention, in the server device according to the third aspect, the determination means includes a predetermined number or more of the posting target audiovisual information corresponding to the extracted specific information in the storage device. It is determined whether or not the posting target audiovisual information corresponding to the extracted specific information is stored in a predetermined number or more. A posting target information comparing means for comparing; and a posting target information determining means for determining the posting target audiovisual information used for comparison by the comparing means based on a comparison result by the posting target information comparing means; Posting target information acquisition means acquires the posting target audiovisual information determined by the posting target information determination means.

この発明によれば、端末装置から取得された視聴覚情報が所定数以上記憶されると、端末装置から取得された視聴覚情報同士が比較されて、この比較結果に基づいて、投稿情報の出力態様の決定のために用いられる投稿対象の視聴覚情報が決定される。従って、複数の視聴覚情報を用いて投稿対象の視聴覚情報が決定されることで、投稿対象の視聴覚情報の信頼性を高めることができる。   According to the present invention, when a predetermined number or more of audiovisual information acquired from the terminal device is stored, the audiovisual information acquired from the terminal device is compared with each other, and the output mode of the posted information is based on the comparison result. The audiovisual information to be posted that is used for the determination is determined. Therefore, by determining the audiovisual information to be posted using a plurality of audiovisual information, the reliability of the audiovisual information to be posted can be improved.

請求項5に記載の発明は、請求項2に記載のサーバ装置において、前記投稿情報取得手段が前記投稿情報を取得する都度変化し得る変化情報を取得する変化情報取得手段を更に備え、前記条件決定手段は、前記取得された変化情報に基づいて、前記端末装置により送信させる前記端末視聴覚情報の条件を、予め定められた複数の条件の中から決定することを特徴とする。   The invention according to claim 5 is the server device according to claim 2, further comprising change information acquisition means for acquiring change information that can change each time the post information acquisition means acquires the post information, The determining means determines a condition of the terminal audiovisual information to be transmitted by the terminal device from a plurality of predetermined conditions based on the acquired change information.

この発明によれば、随時変化する情報に基づいて、ユーザに入力させる音または撮影させる画像の条件を変更することができる。そのため、例えば、ユーザが同じ視聴覚データを使用する等の不正を防止することができる。   According to the present invention, it is possible to change the sound to be input by the user or the condition of the image to be captured based on information that changes from time to time. Therefore, for example, it is possible to prevent fraud such as a user using the same audiovisual data.

請求項6に記載の発明は、請求項1乃至5の何れか1項に記載のサーバ装置において、前記比較手段は、前記取得された端末視聴覚情報が示す音または画像の少なくとも何れか一方の特徴を示す端末特徴情報を生成する端末特徴情報生成手段と、前記取得された投稿対象視聴覚情報が示す音または画像の少なくとも何れか一方の特徴を示す投稿対象特徴情報を生成する投稿対象特徴情報生成手段と、前記生成された端末特徴情報と前記生成された投稿対象特徴情報との一致度を算出する特徴一致度算出手段と、を備え、前記決定手段は、前記算出された一致度に基づいて、掲載時における前記取得された投稿情報の出力態様を決定することを特徴とする。   According to a sixth aspect of the present invention, in the server device according to any one of the first to fifth aspects, the comparison unit is characterized by at least one of a sound and an image indicated by the acquired terminal audiovisual information. Terminal feature information generating means for generating terminal feature information indicating a post target feature information generating means for generating post target feature information indicating at least one of the characteristics of the sound or image indicated by the acquired post target audiovisual information And a feature matching degree calculating means for calculating a matching degree between the generated terminal feature information and the generated posting target feature information, and the determining means based on the calculated matching degree, An output mode of the acquired posted information at the time of posting is determined.

この発明によれば、端末装置において入力された音または撮影された画像の特徴と、投稿対象の音または画像の特徴と、の一致の程度に基づいて、ユーザが投稿対象を直接見聞きして投稿したという投稿情報の信頼性を、その出力態様で示すことができる。   According to the present invention, the user directly views and listens to the posting target based on the degree of coincidence between the sound input in the terminal device or the characteristic of the captured image and the sound or image characteristic of the posting target. The reliability of the posted information that has been done can be shown in its output form.

請求項7に記載の発明は、請求項6に記載のサーバ装置において、前記比較手段は、前記取得された端末視聴覚情報が示す音から発話語を認識し、当該発話語を示す端末発話語情報を生成する端末発話語情報生成手段と、前記取得された投稿対象視聴覚情報が示す音から発話語を認識し、当該発話語を示す投稿対象発話語情報を生成する投稿対象発話語情報生成手段と、前記生成された端末発話語情報と前記生成された投稿対象発話語情報との一致度を算出する発話語一致度算出手段と、を更に備え、前記決定手段は、前記特徴一致度算出手段により算出された一致度と、前記発話語一致度算出手段により算出された一致度と、に基づいて、掲載時における前記取得された投稿情報の出力態様を決定することを特徴とする。   According to a seventh aspect of the present invention, in the server device according to the sixth aspect, the comparing means recognizes an utterance word from the sound indicated by the acquired terminal audiovisual information, and terminal utterance word information indicating the utterance word A terminal utterance word information generating means for generating a post utterance word information generating means for recognizing a utterance word from the sound indicated by the acquired posting target audiovisual information and generating a posting target utterance word information indicating the utterance word; Utterance word matching degree calculating means for calculating a matching degree between the generated terminal utterance word information and the generated posting target utterance word information, and the determining means includes the feature matching degree calculating means. Based on the calculated degree of coincidence and the degree of coincidence calculated by the spoken word coincidence degree calculating means, an output mode of the acquired post information at the time of posting is determined.

この発明によれば、端末装置に入力された声を発した話者と、投稿対象の音としての声を発した話者と、の一致の程度に基づいて、投稿情報の信頼性をその出力態様で示すことができるとともに、端末装置に入力された声が示す語と、投稿対象の音が示す語と、の一致の程度に基づいて、投稿情報の信頼性をその出力態様で示すことができる。   According to this invention, the reliability of the posted information is output based on the degree of coincidence between the speaker who uttered the voice input to the terminal device and the speaker who uttered the voice as the sound to be posted. The reliability of the posted information can be indicated in the output mode based on the degree of matching between the word indicated by the voice input to the terminal device and the word indicated by the sound to be posted. it can.

請求項8に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置における投稿情報処理方法であって、前記端末装置から投稿情報を取得する投稿情報取得ステップと、前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得ステップと、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出ステップと、前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得ステップと、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較ステップと、前記比較ステップにおける比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定ステップと、を含むことを特徴とする。   The invention according to claim 8 is a posting information processing method in a server device to which a terminal device can be connected via a network, the posting information acquiring step for acquiring posting information from the terminal device, and a sound from the terminal device. Or a terminal information acquisition step of acquiring terminal audiovisual information indicating at least one of images, an extraction step of extracting specific information capable of specifying a posting target from the acquired post information, and the extracted specific information The posting target information acquisition step for acquiring the posting target audiovisual information indicating at least one of the specified posting target sound and image, and the acquired posting target audiovisual information and the acquired terminal audiovisual information are compared. Based on the comparison step and the comparison result in the comparison step, Characterized in that it comprises a determination step of determining a force mode, the.

請求項9に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置における投稿情報処理方法であって、前記端末装置から投稿情報を取得する投稿情報取得ステップと、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出ステップと、音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定ステップと、前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信ステップと、前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得ステップと、前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得ステップと、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較ステップと、前記比較ステップにおける比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定ステップと、を含むことを特徴とする。   The invention according to claim 9 is a posting information processing method in a server device to which a terminal device can be connected via a network, the posting information acquiring step for acquiring posting information from the terminal device, and the acquired posting Based on the extracted specific information, an extraction step for extracting specific information that can specify a posting target from information, and a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image A condition determining step determined by the terminal device, a control information transmitting step for transmitting the control information for notifying the determined condition by the terminal device to the terminal device, and the terminal audiovisual information transmitted from the terminal device. The sound or image corresponding to the terminal information acquisition step to be received, the extracted specific information, and the determined condition. Posting target information acquisition step for acquiring the posting target audiovisual information, a comparison step for comparing the acquired posting target audiovisual information and the acquired terminal audiovisual information, and a comparison result in the comparison step, And a determination step of determining an output mode of the acquired posted information at the time of posting.

請求項10に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、前記端末装置から投稿情報を取得する投稿情報取得手段、前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得手段、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、として機能させることを特徴とする。   The invention according to claim 10 is a post information acquisition means for acquiring post information from the terminal device, a computer included in a server device to which the terminal device can be connected via a network, and at least a sound or an image from the terminal device. Terminal information acquisition means for acquiring terminal audiovisual information indicating either one, extraction means for extracting specific information that can specify a posting target from the acquired posting information, and a posting target specified by the extracted specific information Post target information acquisition means for acquiring post target audiovisual information indicating at least one of sound and image, comparison means for comparing the acquired post target audiovisual information with the acquired terminal audiovisual information, and the comparison As a determining means for determining the output mode of the acquired posted information at the time of posting based on the comparison result by the means Characterized in that to.

請求項11に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、前記端末装置から投稿情報を取得する投稿情報取得手段、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定手段、前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信手段、前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得手段、前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、として機能させることを特徴とする。   The invention according to claim 11 is a posting information acquisition means for acquiring posting information from the terminal device, a computer included in a server device to which the terminal device can be connected via a network, and a posting target from the acquired posting information. Extraction means for extracting specific information that can identify the terminal, and condition determination for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information Means, control information transmitting means for transmitting the control information for notifying the determined condition by the terminal device to the terminal device, terminal information acquiring means for receiving the terminal audiovisual information transmitted from the terminal device, Acquire posting target audiovisual information indicating a sound or an image corresponding to the extracted specific information and the determined condition. Article target information acquisition means, comparison means for comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information, and the acquired posting information at the time of posting based on the comparison result by the comparison means It is made to function as a determination means which determines the output mode.

請求項12に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、前記端末装置から投稿情報を取得する投稿情報取得手段、前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得手段、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、として機能させる投稿情報処理プログラムがコンピュータ読み取り可能に記録されていることを特徴とする。   According to a twelfth aspect of the present invention, a computer included in a server device to which a terminal device can be connected via a network, posting information acquisition means for acquiring posting information from the terminal device, at least sound or image from the terminal device Terminal information acquisition means for acquiring terminal audiovisual information indicating either one, extraction means for extracting specific information that can specify a posting target from the acquired posting information, and a posting target specified by the extracted specific information Post target information acquisition means for acquiring post target audiovisual information indicating at least one of sound and image, comparison means for comparing the acquired post target audiovisual information with the acquired terminal audiovisual information, and the comparison As a determining means for determining the output mode of the acquired posted information at the time of posting based on the comparison result by the means Post information processing program to is characterized in that it is recorded in a computer-readable.

請求項13に記載の発明は、端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、前記端末装置から投稿情報を取得する投稿情報取得手段、前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定手段、前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信手段、前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得手段、前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、として機能させる投稿情報処理プログラムがコンピュータ読み取り可能に記録されていることを特徴とする。   The invention according to claim 13 is a posting information acquisition means for acquiring posting information from the terminal device, a computer included in a server device to which the terminal device can be connected via a network, and a posting target from the acquired posting information Extraction means for extracting specific information that can identify the terminal, and condition determination for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information Means, control information transmitting means for transmitting the control information for notifying the determined condition by the terminal device to the terminal device, terminal information acquiring means for receiving the terminal audiovisual information transmitted from the terminal device, Acquire posting target audiovisual information indicating a sound or an image corresponding to the extracted specific information and the determined condition. Article target information acquisition means, comparison means for comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information, and the acquired posting information at the time of posting based on the comparison result by the comparison means A posting information processing program that functions as a determining unit that determines the output mode of the computer is recorded in a computer-readable manner.

本発明によれば、端末装置から取得された視聴覚情報が示す音または画像の証拠としての信憑性に応じて、投稿情報が掲載されるときの出力態様を決定することができる。従って、投稿情報が出力されている態様から、閲覧者がその投稿情報の信頼性を認識することができる。   According to the present invention, it is possible to determine an output mode when posting information is posted according to the credibility as sound or image evidence indicated by audiovisual information acquired from a terminal device. Therefore, the viewer can recognize the reliability of the posted information from the aspect in which the posted information is output.

一実施形態に係る投稿システムSの概要構成の一例を示す図である。It is a figure showing an example of outline composition of contribution system S concerning one embodiment. 一実施形態に係る投稿システムSにおける基本的な処理の流れの一例を示すシーケンス図である。It is a sequence diagram which shows an example of the flow of a basic process in the posting system S which concerns on one Embodiment. 投稿情報掲載ページの画面表示例である。It is a screen display example of a contribution information posting page. 投稿情報掲載ページの画面表示例である。It is a screen display example of a contribution information posting page. 一実施形態に係る投稿情報管理サーバ1の概要構成の一例を示すブロック図である。It is a block diagram which shows an example of schematic structure of the contribution information management server 1 which concerns on one Embodiment. (a)は、会員情報DB12aに登録される内容の一例を示す図であり、(b)は、投稿情報DB12bに登録される内容の一例を示す図であり、(c)は、認証条件DB12cに登録される内容の一例を示す図であり、(d)は、音声・画像DB12dに登録される内容の一例を示す図である。(A) is a figure which shows an example of the content registered into member information DB12a, (b) is a figure which shows an example of the content registered into contribution information DB12b, (c) is authentication condition DB12c. FIG. 6D is a diagram showing an example of content registered in the audio / image DB 12d. (a)乃至(d)は、認証条件情報の登録例を示す図である。(A) thru | or (d) is a figure which shows the example of registration of authentication condition information. 一実施形態に係る投稿情報管理サーバ1のシステム制御部14の投稿データ受信時処理における処理例を示すフローチャートである。It is a flowchart which shows the process example in the process at the time of the contribution data reception of the system control part 14 of the contribution information management server 1 which concerns on one Embodiment. 一実施形態に係る投稿情報管理サーバ1のシステム制御部14の投稿データ受信時処理における処理例を示すフローチャートである。It is a flowchart which shows the process example in the process at the time of the contribution data reception of the system control part 14 of the contribution information management server 1 which concerns on one Embodiment. 一実施形態に係る投稿情報管理サーバ1のシステム制御部14の端末視聴覚データ取得処理における処理例を示すフローチャートである。It is a flowchart which shows the process example in the terminal audiovisual data acquisition process of the system control part 14 of the contribution information management server 1 which concerns on one Embodiment. 一実施形態に係る投稿情報管理サーバ1のシステム制御部14の投稿情報掲載ページリクエスト受信時処理における処理例を示すフローチャートである。It is a flowchart which shows the process example in the process at the time of the posting information posting page request reception of the system control part 14 of the posting information management server 1 which concerns on one Embodiment.

以下、図面を参照して本発明の実施形態について詳細に説明する。なお、以下に説明する実施の形態は、投稿システムに対して本発明を適用した場合の実施形態である。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The embodiment described below is an embodiment when the present invention is applied to a posting system.

[1.投稿システムの構成及び機能概要]
先ず、本実施形態に係る投稿システムSの構成及び概要機能について、図1乃至図4を用いて説明する。
[1. Outline of posting system and functions]
First, the configuration and outline function of the posting system S according to the present embodiment will be described with reference to FIGS.

図1は、本実施形態に係る投稿システムSの概要構成の一例を示す図である。   FIG. 1 is a diagram illustrating an example of a schematic configuration of a posting system S according to the present embodiment.

図1に示すように、投稿システムSは、サーバ装置の一例としての投稿情報管理サーバ1と、端末装置の一例としての複数のユーザ端末2とを含んで構成されている。そして、投稿情報管理サーバ1と各ユーザ端末2とは、ネットワークNWを介して、例えば、通信プロトコルにTCP/IP等を用いて相互にデータの送受信が可能になっている。なお、ネットワークNWは、例えば、インターネット、専用通信回線(例えば、CATV(Community Antenna Television)回線)、移動体通信網(基地局等を含む)、及びゲートウェイ等により構築されている。   As illustrated in FIG. 1, the posting system S includes a posting information management server 1 as an example of a server device and a plurality of user terminals 2 as an example of a terminal device. The posted information management server 1 and each user terminal 2 can exchange data with each other using, for example, TCP / IP as a communication protocol via the network NW. The network NW is constructed by, for example, the Internet, a dedicated communication line (for example, a CATV (Community Antenna Television) line), a mobile communication network (including a base station), a gateway, and the like.

投稿情報管理サーバ1は、ユーザから投稿されてくる投稿情報を受け付けて、投稿情報をWebページ上に掲載する投稿サイトを構成するWebサーバである。このような投稿サイトとしては、例えば、ブログ、ミニブログ、SNS(Social Network Service)、口コミサイト、電子掲示板、ユーザから投稿されたニュースにより成り立っているニュースサイト等がある。   The posting information management server 1 is a Web server that constitutes a posting site that accepts posting information posted by a user and posts the posting information on a Web page. Such posting sites include, for example, blogs, miniblogs, SNS (Social Network Service), word-of-mouth sites, electronic bulletin boards, and news sites made up of news posted by users.

ユーザ端末2は、ユーザが投稿サイトに情報を投稿したり、投稿された情報を閲覧したりするために、ユーザにより使用される端末装置である。このユーザ端末2には、Webページを閲覧するためのブラウザが組み込まれている。また、ユーザ端末2には、音声入力のためのマイクロフォン及び画像を撮影するためのカメラが組み込まれている。ユーザ端末2としては、例えば、パーソナルコンピュータ、PDA(Personal Digital Assistant)、スマートフォン等の携帯情報端末または携帯電話機等が用いられる。   The user terminal 2 is a terminal device used by a user so that the user can post information on a posting site or browse posted information. The user terminal 2 incorporates a browser for browsing web pages. Further, the user terminal 2 incorporates a microphone for voice input and a camera for taking an image. As the user terminal 2, for example, a personal computer, a PDA (Personal Digital Assistant), a portable information terminal such as a smartphone, a cellular phone, or the like is used.

投稿サイトに投稿される投稿情報は、ある事物を題材としたり話題の対象としたりして投稿される情報である。この投稿対象となり得る事物は、例えば、ある場所に存在する物(例えば、山等の自然物、建築物、店等)であったり、ある場所で起きた出来事(例えば、事件、事故、行事等)であったりする。ある場所に存在しまたは起きた事物を、ユーザ自身が体験もせず、且つ、直接見聞きもせずに、その事物を投稿対象として投稿を行っているのであれば、その投稿情報の信頼性は低いと考えられる。また、ユーザが実際にはその場にはいなかったのに、あたかも投稿対象をユーザ自身が体験したり見聞きしたりしたかのような虚偽の内容をユーザが投稿する可能性がある。   Posting information posted on a posting site is information posted on a subject or subject of a topic. Things that can be posted are, for example, things that exist in a certain place (for example, natural objects such as mountains, buildings, shops, etc.), or events that occurred in a certain place (for example, incidents, accidents, events, etc.) Or If a user posts something that is present or happened in a certain place and the user himself / herself does not experience it, and does not see or hear it directly, the reliability of the posted information is low. Conceivable. Further, there is a possibility that the user may post false content as if the user himself / herself experienced or watched the posting target even though the user was not actually there.

そこで、投稿情報管理サーバ1は、投稿対象をユーザが体験したり直接見聞きしたりした証拠として、ユーザにより投稿対象からの音を入力させて音声データとして送信させ、または、ユーザにより投稿対象を撮影させて画像データとして送信させる。このようにして、投稿情報管理サーバ1は、ユーザ端末2から音声データまたは画像データの少なくとも何れか一方(以下、「視聴覚データ」と称する)を取得する。そして、投稿情報管理サーバ1は、取得した視聴覚データ(端末視聴覚情報の一例)の証拠としての信頼性を判定し、判定した信頼性を、投稿情報の信頼性とする。その後、投稿情報管理サーバ1は、投稿情報をWebページ上に掲載するときに、投稿情報の信頼性に応じて、その投稿情報の表示形式(出力態様の一例)を制御する。   Therefore, the posting information management server 1 causes the user to input sound from the posting target and transmit it as voice data as evidence that the user has experienced or directly viewed the posting target, or the user posts the posting target. And transmit as image data. In this way, the posting information management server 1 acquires at least one of audio data and image data (hereinafter referred to as “audiovisual data”) from the user terminal 2. Then, the posted information management server 1 determines the reliability as evidence of the acquired audiovisual data (an example of terminal audiovisual information), and uses the determined reliability as the reliability of the posted information. Thereafter, when posting information is posted on the Web page, the posting information management server 1 controls the display format (an example of an output mode) of the posting information according to the reliability of the posting information.

投稿対象からの音としては、投稿対象が事件または事故である場合、例えば、事件または事故に駆けつけてきた救急車のサイレンの音等が該当する。また、投稿対象が店である場合、例えば、店員の声、店内アナウンス等が該当する。   As the sound from the posting target, for example, when the posting target is an incident or accident, the sound of the siren of an ambulance that has rushed to the incident or accident corresponds. Further, when the posting target is a store, for example, a store clerk's voice, an in-store announcement, and the like are applicable.

投稿対象の画像としては、例えば、投稿対象が建築物である場合、その建築物の画像が該当する。また投稿対象が事件または事故である場合、例えば、事件または事故の様子を映した画像等が該当する。また、投稿対象が店である場合、例えば、店の建物の画像、店の看板の画像、店員の顔の画像等が該当する。なお、画像は静止画であっても良いし、動画であっても良い。   For example, when the posting target is a building, the posting target image corresponds to the image of the building. In addition, when the posting target is an incident or an accident, for example, an image showing the state of the incident or the accident is applicable. Further, when the posting target is a store, for example, an image of a store building, an image of a store signboard, an image of a store clerk's face, and the like are applicable. The image may be a still image or a moving image.

投稿対象の音や画像は、投稿対象そのものではなくとも、投稿対象の一部とみなすことができるものの音や画像であっても良い。また、投稿対象が、例えば事故を起こした事故車両である場合、例えば、その事故車両が存在する現場に向かってきたパトカーや救急車の画像であったり、パトカーや救急車のサイレンの音であったりしても良い。つまり、投稿対象と同じ場所に存在する事物であったり、投稿対象のすぐ近くにあって投稿対象に直接関与した事物等であっても良い。どのような音または画像を証拠とするかは、投稿対象や投稿対象が属するカテゴリーに基づいて、後述する認証条件として決定される。   The sound or image to be posted may be the sound or image of what can be regarded as a part of the posting target, not the posting target itself. For example, if the subject of submission is an accident vehicle that has caused an accident, for example, it may be an image of a police car or ambulance heading to the site where the accident vehicle exists, or the sound of a police car or ambulance siren. May be. In other words, it may be an object that exists in the same place as the posting object, or an object that is directly related to the posting object that is immediately adjacent to the posting object. Which sound or image is used as evidence is determined as an authentication condition to be described later based on the posting target and the category to which the posting target belongs.

図2は、本実施形態に係る投稿システムSにおける基本的な処理の流れの一例を示すシーケンス図である。   FIG. 2 is a sequence diagram illustrating an example of a basic processing flow in the posting system S according to the present embodiment.

図2に示すように、ユーザは、ユーザ端末2を操作してテキストを入力することにより、投稿情報としてのテキストデータ(以下、「投稿データ」と称する)を作成すると(ステップS1)、ユーザ端末2は、投稿データを投稿情報管理サーバ1に送信する(ステップS2)。   As shown in FIG. 2, when a user creates text data (hereinafter referred to as “post data”) as post information by operating the user terminal 2 and inputting text (step S1), the user terminal 2 transmits the posted data to the posted information management server 1 (step S2).

投稿情報管理サーバ1は、受信した投稿データを、後述する投稿情報DB(データベース)12bに登録する(ステップS3)。次いで、投稿情報管理サーバ1は、投稿データから、投稿対象を示す語(以下、「投稿対象ワード」と称する)を抽出し、投稿対象を特定する(ステップS4)。   The posted information management server 1 registers the received posted data in a posted information DB (database) 12b described later (step S3). Next, the posting information management server 1 extracts a word indicating the posting target (hereinafter referred to as “posting target word”) from the posting data, and specifies the posting target (step S4).

次いで、投稿情報管理サーバ1は、認証条件を決定する(ステップS5)。認証条件とは、ユーザ端末2に送信させる視聴覚データの条件である。例えば、認証条件は、音声データの方を要求するものであったり、画像データの方を要求するものであったりする。また、例えば、認証条件は、投稿対象が属するカテゴリー(例えば、事件/事故、行事、建築物、店等)によって異なったりする。また、認証条件は、例えば、投稿時刻、投稿対象の被投稿回数等に応じて変化したりする。   Next, the posting information management server 1 determines authentication conditions (step S5). The authentication condition is a condition of audiovisual data to be transmitted to the user terminal 2. For example, the authentication condition may be a request for audio data or a request for image data. Further, for example, the authentication condition may differ depending on the category (for example, incident / accident, event, building, store, etc.) to which the posting object belongs. In addition, the authentication condition changes depending on, for example, the posting time, the number of postings to be posted, and the like.

投稿情報管理サーバ1は、所定の条件に基づいて認証条件を変更することにより、例えば、視聴覚データの使い回し(例えば、録音や撮影によって取得された視聴覚データを次回以降の投稿の際にも投稿情報管理サーバ1に送信すること等)や、ユーザが自ら録音しまたは撮影した以外の方法で視聴覚データを入手する等の、投稿するユーザによる不正を防止する。   The posting information management server 1 changes the authentication condition based on a predetermined condition, for example, by reusing audiovisual data (for example, posting audiovisual data acquired by recording or shooting at the next and subsequent postings) Etc.), and the user who makes the audio / visual data acquisition by a method other than recording or shooting by himself / herself is prevented.

次いで、投稿情報管理サーバ1は、後述する音声・画像DB12dに登録されている正解データとしての投稿対象の視聴覚データ(投稿対象視聴覚情報の一例)のうち、決定した認証条件に対応する視聴覚データを取得する(ステップS6)。   Next, the posting information management server 1 selects the audiovisual data corresponding to the determined authentication condition from the audiovisual data to be posted (an example of the posting audiovisual information) as correct answer data registered in the audio / image DB 12d described later. Obtain (step S6).

次いで、投稿情報管理サーバ1は、ユーザ端末2から視聴覚データを取得すべく、ユーザ端末2に視聴覚データ送信要求(制御情報の一例)を送信する(ステップS7)。   Next, the posting information management server 1 transmits an audiovisual data transmission request (an example of control information) to the user terminal 2 in order to acquire audiovisual data from the user terminal 2 (step S7).

視聴覚データ送信要求を受信したユーザ端末2は、ユーザに対して、認証条件として如何なる視聴覚データを取得すべきかをユーザに通知する(ステップS8)。これに応じて、ユーザが録音を行ったり、撮影を行ったりすることにより、ユーザ端末2は、視聴覚データを取得する(ステップS9)。そして、ユーザ端末2は、取得した視聴覚データを投稿情報管理サーバ1に送信する(ステップS10)。   Receiving the audiovisual data transmission request, the user terminal 2 notifies the user of what audiovisual data should be acquired as an authentication condition (step S8). In response to this, the user terminal 2 acquires audiovisual data when the user performs recording or shooting (step S9). Then, the user terminal 2 transmits the acquired audiovisual data to the posted information management server 1 (step S10).

投稿情報管理サーバ1は、ユーザ端末2から取得した視聴覚データと、正解データである投稿対象の視聴覚データとを比較してデータ間の一致度を算出する(ステップS11)。そして、投稿情報管理サーバ1は、比較結果に基づいて、投稿データの信頼度を決定する(ステップS12)。信頼度は、投稿データの信頼性の度合いを示す数値である。信頼度が高いほど、投稿データの信頼性が高いことを示す。ここで、投稿情報管理サーバ1は、算出した一致度を、投稿データの信頼度とする。一致度が高いほど、視聴覚データの証拠としての信頼性が高いと考えられるから、投稿データの信頼性も高くなると考えられる。   The posted information management server 1 compares the audiovisual data acquired from the user terminal 2 with the audiovisual data to be posted, which is correct data, and calculates the degree of coincidence between the data (step S11). Then, the posting information management server 1 determines the reliability of the posting data based on the comparison result (step S12). The reliability is a numerical value indicating the degree of reliability of the posted data. The higher the reliability, the higher the reliability of the posted data. Here, the posting information management server 1 sets the calculated coincidence as the reliability of the posting data. It is considered that the higher the matching degree, the higher the reliability of the audiovisual data as evidence, and the higher the reliability of the posted data.

その後、例えば別のユーザ端末2が、投稿データが掲載されるWebページ(以下、「投稿情報掲載ページ」と称する)のリクエストを投稿情報管理サーバ1に送信する(ステップS21)。   Thereafter, for example, another user terminal 2 transmits a request for a Web page on which posted data is posted (hereinafter referred to as “posted information posted page”) to the posted information management server 1 (step S21).

リクエストを受信した投稿情報管理サーバ1は、投稿情報掲載ページに掲載する投稿データの表示形式を、その信頼度に基づいて決定する(ステップS22)。具体的に、投稿情報管理サーバ1は、信頼度が高いほど、ユーザにとって投稿データが読みやすい表示形式とする。そして、投稿情報管理サーバ1は、決定した表示形式で投稿データが表示される投稿情報掲載ページを生成し(ステップS23)、生成した投稿情報掲載ページをユーザ端末2に送信する(ステップS24)。   The posting information management server 1 that has received the request determines the display format of the posting data to be posted on the posting information posting page based on the reliability (step S22). Specifically, the posting information management server 1 uses a display format in which the posting data is easier for the user to read as the reliability is higher. Then, the posting information management server 1 generates a posting information posting page on which posting data is displayed in the determined display format (step S23), and transmits the generated posting information posting page to the user terminal 2 (step S24).

ユーザ端末2は、受信した投稿情報掲載ページを画面に表示する(ステップS25)。   The user terminal 2 displays the received posting information posting page on the screen (step S25).

図3及び図4は、投稿情報掲載ページの画面表示例である。図3及び図4において、符号100は、投稿情報掲載ページである。投稿情報掲載ページ100には、例えば、投稿データ表示欄101a及び101b等が含まれる。投稿データ表示欄101aには、投稿データ102aが表示され、投稿データ表示欄101bには、投稿データ102bが表示されている。なお、投稿データ102a及び102bには、タイトル及び投稿内容としての文章が含まれている。   3 and 4 are screen display examples of the posted information posting page. 3 and 4, reference numeral 100 is a posted information posting page. The posted information posting page 100 includes, for example, posted data display columns 101a and 101b. Post data 102a is displayed in the post data display column 101a, and post data 102b is displayed in the post data display column 101b. The posted data 102a and 102b include a title and a sentence as posted content.

図3は、信頼度に応じて、投稿データのテキストの色を変えた場合の表示例である。この場合、例えば、信頼度が高いほど、投稿データのテキストの色を、投稿データ表示欄の背景色から遠い色とし、信頼度が低いほど、投稿データのテキストの色を、投稿データ表示欄の背景色に近い色とする。色が遠いまたは近いとは、例えば、視覚的な色の距離をいい、色の距離が遠いほど、テキストと背景との見分けがつきやすく、色の距離が近いほど、テキストと背景との見分けがしにくくなる。この色の距離は、例えば、色相差や輝度差等によって決まる。   FIG. 3 is a display example when the text color of the posted data is changed according to the reliability. In this case, for example, as the reliability is higher, the text color of the posted data is set to a color farther from the background color of the posted data display field, and as the reliability is lower, the text color of the posted data is changed to the post data display field. The color is close to the background color. For example, the color distance is the distance between visual colors. The farther the color distance is, the easier it is to distinguish the text from the background. The closer the color distance is, the more distinct the text from the background is. It becomes difficult to do. This color distance is determined by, for example, a hue difference or a luminance difference.

例えば、投稿データ表示欄101a及び101bの背景色は白色である場合、信頼度が高いほど、投稿データのテキストの色の輝度を低くする。例えば、投稿データ102aの信頼度は平均的な信頼度よりも高いため、投稿データ102aのテキストの色は、白色から遠い色(例えば、黒色等)となっている。一方、投稿データ102bの信頼度は平均的な信頼度よりも低いため、投稿データ102bのテキストの色は、白色に近い色(例えば、薄い灰色等)となっている。   For example, when the background color of the posting data display columns 101a and 101b is white, the higher the reliability, the lower the luminance of the text color of the posting data. For example, since the reliability of the posted data 102a is higher than the average reliability, the text color of the posted data 102a is a color far from white (for example, black). On the other hand, since the reliability of the posted data 102b is lower than the average reliability, the text color of the posted data 102b is a color close to white (for example, light gray).

また、信頼度に応じて、投稿データのテキストの透明度を変えても良い。この場合、例えば、信頼度が高いほど、投稿データのテキストの透明度を低くし、信頼度が低いほど、投稿データのテキストの透明度を高くする。この場合も、図3の例と同様の考え方に基づいている。ただし、投稿データ表示欄の背景が何らかの模様である場合、投稿データのテキストの透明度が高いほど、テキストの背景の模様がより良く見えることになる。   Further, the transparency of the text of the posted data may be changed according to the reliability. In this case, for example, the higher the reliability, the lower the transparency of the text of the posted data, and the lower the reliability, the higher the transparency of the text of the posted data. This case is also based on the same concept as the example of FIG. However, when the background of the posted data display column has some pattern, the higher the transparency of the text of the posted data, the better the background pattern of the text can be seen.

図4は、信頼度に応じて、投稿データのテキストのフォントサイズを変えた場合の表示例である。この場合、例えば、信頼度が高いほど、投稿データのテキストのフォントサイズを大きくし、信頼度が低いほど、投稿データのテキストのフォントサイズを小さくする。例えば、投稿データ102aの信頼度は平均的な信頼度よりも高いため、投稿データ102aのテキストのフォントサイズは、標準のフォントサイズよりも大きくなっている。一方、投稿データ102bの信頼度は平均的な信頼度よりも低いため、投稿データ102bのテキストのフォントサイズは、標準のフォントサイズよりも小さくなっている。   FIG. 4 is a display example when the font size of the text of the posted data is changed according to the reliability. In this case, for example, the higher the reliability, the larger the font size of the text of the posted data, and the lower the reliability, the smaller the font size of the text of the posted data. For example, since the reliability of the posted data 102a is higher than the average reliability, the font size of the text of the posted data 102a is larger than the standard font size. On the other hand, since the reliability of the posted data 102b is lower than the average reliability, the font size of the text of the posted data 102b is smaller than the standard font size.

また、信頼度に応じて、例えば、投稿データのテキストの文字の太さやフォントスタイル等を変えても良い。   Further, for example, the thickness of the text of the post data, the font style, etc. may be changed according to the reliability.

投稿情報掲載ページを閲覧したユーザは、投稿データの表示形式によって、投稿データの信頼度を認識することができる。そのため、ユーザは、例えば、投稿データの内容と投稿データの信頼度とを総合的に判断すること等により、投稿データを信頼すべきか否かを判断することができる。   The user who browses the posted information posting page can recognize the reliability of the posted data according to the display format of the posted data. Therefore, for example, the user can determine whether the post data should be trusted by comprehensively determining the content of the post data and the reliability of the post data.

なお、信頼度が高いほど、ユーザにとって投稿データが読みやすい表示形式としなくても良い。投稿データの表示形式が、ユーザによって投稿データの信頼度がおおよそ認識することができるような表示形式となれば良い。   It should be noted that the higher the reliability, the more the display data does not have to be displayed for the user. The display format of the posted data may be a display format that allows the user to roughly recognize the reliability of the posted data.

ところで、図2に示す処理は、正解データとしての投稿対象の視聴覚データが既に登録されていることを前提としているが、投稿対象によってはその視聴覚データを事前に登録しておくことができない場合がある。例えば、投稿対象が、事件や事故等の偶発的な出来事である場合、その出来事が起きた場所を事前に知ることができない。また、投稿対象の様子(例えば、投稿対象から発する音や投稿対象の外観等)が時の経過とともに変化する場合があるので、古いままの正解データでは、現状の投稿対象に対応することができない場合がある。また、認証条件と関連して、同じ正解データを長い間使用し続けると、ユーザによる視聴覚データの使い回し等の行為を誘発する場合がある。こうしたことを防止するためには、投稿対象の視聴覚データを常時新しいデータに更新する必要があるが、人手でこの作業を行うには負担が大きい。   By the way, although the process shown in FIG. 2 is based on the premise that the audiovisual data to be posted as correct data has already been registered, the audiovisual data may not be registered in advance depending on the posting target. is there. For example, when the posting target is an accidental event such as an incident or an accident, the location where the event occurred cannot be known in advance. In addition, since the state of the posting target (for example, the sound emitted from the posting target or the appearance of the posting target) may change over time, the correct answer data that is old cannot be used for the current posting target. There is a case. Further, in connection with the authentication condition, if the same correct answer data is used for a long time, an action such as reusing audiovisual data by the user may be induced. In order to prevent this, it is necessary to constantly update the audiovisual data to be posted to new data, but it is a heavy burden to perform this work manually.

そこで、投稿情報管理サーバ1は、認証条件に対応する投稿対象の視聴覚データが音声・画像DB12dに登録されていない場合には、ユーザ端末2から取得した視聴覚データの中から、正解データとしての投稿対象の視聴覚データを決定する。具体的に、投稿情報管理サーバ1は、ユーザ端末2から取得した視聴覚データを仮登録視聴覚データとして、音声・画像DB12dに登録する。そして、投稿情報管理サーバ1は、仮登録視聴覚データが所定数登録されると、複数の仮登録視聴覚データ同士を比較して、最も投稿対象の視聴覚データらしいと判定した仮登録視聴覚データを、正解データとして決定する。   Therefore, the posting information management server 1 posts as correct data from the audiovisual data acquired from the user terminal 2 when the audiovisual data to be posted corresponding to the authentication condition is not registered in the audio / image DB 12d. Determine target audiovisual data. Specifically, the posting information management server 1 registers the audiovisual data acquired from the user terminal 2 in the audio / image DB 12d as temporary registration audiovisual data. Then, when a predetermined number of provisionally registered audiovisual data is registered, the posting information management server 1 compares the plurality of provisionally registered audiovisual data with each other, and corrects the provisionally registered audiovisual data determined to be most likely to be the target audiovisual data to be posted. Determine as data.

投稿情報管理サーバ1は、正解データとしての視聴覚データが決定された以降は、その視聴覚データを用いて投稿データの信頼度を決定する。既に投稿情報DB12bに登録されている投稿データについては、投稿対象の視聴覚データが決定されるまで、信頼度の決定が保留される。   The post information management server 1 determines the reliability of the post data using the audiovisual data after the audiovisual data as the correct answer data is determined. For post data already registered in the post information DB 12b, the determination of reliability is suspended until the audiovisual data to be posted is determined.

投稿情報管理サーバ1は、音声・画像DB12dに登録されている投稿対象の視聴覚データを新しくするために、音声・画像DB12dから定期的に投稿対象の視聴覚データ及び仮登録視聴覚データを削除しても良い。視聴覚データが削除された後、投稿対象の視聴覚データが改めて決定される。   The posting information management server 1 periodically deletes the audiovisual data and provisionally registered audiovisual data to be posted from the audio / image DB 12d in order to update the audiovisual data to be posted registered in the audio / image DB 12d. good. After the audiovisual data is deleted, the audiovisual data to be posted is determined again.

[2.投稿情報管理サーバの構成]
次に、投稿情報管理サーバ1の構成について、図5乃至図7を用いて説明する。
[2. Post Information Management Server Configuration]
Next, the configuration of the posted information management server 1 will be described with reference to FIGS.

図5は、本実施形態に係る投稿情報管理サーバ1の概要構成の一例を示すブロック図である。また、図6(a)は、会員情報DB12aに登録される内容の一例を示す図である。また、図6(b)は、投稿情報DB12bに登録される内容の一例を示す図である。また、図6(c)は、認証条件DB12cに登録される内容の一例を示す図である。また、図6(d)は、音声・画像DB12dに登録される内容の一例を示す図である。   FIG. 5 is a block diagram illustrating an example of a schematic configuration of the posted information management server 1 according to the present embodiment. FIG. 6A shows an example of contents registered in the member information DB 12a. FIG. 6B is a diagram illustrating an example of contents registered in the posting information DB 12b. FIG. 6C is a diagram illustrating an example of contents registered in the authentication condition DB 12c. FIG. 6D is a diagram showing an example of contents registered in the audio / image DB 12d.

図5に示すように、投稿情報管理サーバ1は、通信部11と、記憶部12と、入出力インターフェース13と、システム制御部14と、を備えている。そして、システム制御部14と入出力インターフェース13とは、システムバス15を介して接続されている。   As illustrated in FIG. 5, the posting information management server 1 includes a communication unit 11, a storage unit 12, an input / output interface 13, and a system control unit 14. The system control unit 14 and the input / output interface 13 are connected via a system bus 15.

通信部11は、ネットワークNWに接続して、ユーザ端末2等との通信状態を制御するようになっている。   The communication unit 11 is connected to the network NW and controls the communication state with the user terminal 2 and the like.

記憶部12(記憶装置の一例)は、例えば、ハードディスクドライブ等により構成されている。この記憶部12には、会員情報DB12a、投稿情報DB12b、認証条件DB12c及び音声・画像DB12dが構築されている。   The storage unit 12 (an example of a storage device) is configured by, for example, a hard disk drive. In the storage unit 12, a member information DB 12a, a posting information DB 12b, an authentication condition DB 12c, and a voice / image DB 12d are constructed.

会員情報DB12aには、投稿サイトSに会員登録しているユーザに関する情報が登録されている。具体的に、会員情報DB12aには、図6(a)に示すように、ユーザの識別情報であるユーザID、パスワード、氏名、生年月日、性別、住所、電話番号、メールアドレス等が、ユーザ毎に対応付けて登録される。   In the member information DB 12a, information related to users registered as members in the posting site S is registered. Specifically, in the member information DB 12a, as shown in FIG. 6A, the user ID, password, name, date of birth, sex, address, telephone number, mail address, etc., which are user identification information, Registered in association with each other.

投稿情報DB12bには、ユーザから投稿された投稿情報が登録されている。具体的に、投稿情報DB12bには、図6(b)に示すように、投稿情報としての投稿データに対して投稿順に付与されるシリアルナンバー、投稿日時、投稿したユーザのユーザID、投稿データ、投稿データの信頼度、投稿対象を示すキーワードである投稿対象ワード(特定情報の一例)、及び掲載フラグが、投稿1件毎に対応付けて登録されている。   Post information posted by the user is registered in the post information DB 12b. Specifically, in the posting information DB 12b, as shown in FIG. 6B, the serial number given to the posting data as posting information in the order of posting, the posting date, the user ID of the posting user, the posting data, The reliability of posting data, a posting target word (an example of specific information) that is a keyword indicating a posting target, and a posting flag are registered in association with each posting.

掲載フラグは、投稿データの掲載の状態を示すフラグである。投稿データは、信頼度が決定されるまでは、その掲載が保留される。正解データとしての投稿対象の位置情報がまだ決定されておらず、信頼度の決定が保留されている場合、掲載フラグは「保留中」に設定され、信頼度が決定された場合、掲載フラグは「許可」に設定される。   The posting flag is a flag indicating the posting state of the posted data. Posting of post data is suspended until the reliability is determined. If the location information to be posted as correct answer data has not yet been determined and the determination of reliability is pending, the posting flag is set to “pending”, and if the reliability is determined, the posting flag is Set to “Allowed”.

認証条件DB12cには、認証条件が登録されている。具体的に、認証条件DB12cには、図6(c)に示すように、認証条件の識別情報である条件ID、認証条件を示す認証条件情報及び条件通知情報が登録されている。   Authentication conditions are registered in the authentication condition DB 12c. Specifically, as shown in FIG. 6C, a condition ID that is identification information of an authentication condition, authentication condition information indicating an authentication condition, and condition notification information are registered in the authentication condition DB 12c.

図7(a)乃至(d)は、認証条件情報の登録例を示す図である。   7A to 7D are diagrams illustrating registration examples of authentication condition information.

認証条件には、基準条件、認証条件及びデータ種別が含まれている。基準条件は、認証条件を決定する上での基準となる条件である。基準条件をその観点で大別すると、例えば、投稿対象が属するカテゴリー、投稿時刻、ユーザの信頼度、投稿対象の被投稿回数等がある。認証条件は、基準条件に対応した条件が登録される。データ種別は、認証条件に対応した視聴覚データの種類として、音声または画像を示す。なお、投稿時刻及び被投稿回数は、それぞれ変化情報の一例である。   The authentication condition includes a reference condition, an authentication condition, and a data type. The reference condition is a condition that serves as a reference for determining the authentication condition. The reference conditions are roughly classified from the viewpoint, for example, the category to which the posting target belongs, the posting time, the reliability of the user, the posting number of posting targets, and the like. As the authentication condition, a condition corresponding to the reference condition is registered. The data type indicates audio or image as the type of audiovisual data corresponding to the authentication condition. The posting time and the number of postings are examples of change information.

例えば、投稿対象のカテゴリーによって認証条件を設定すると、認証条件情報を、例えば、図7(a)に示す内容とすることができる。例えば、事件/事故に対して、「事件/事故の様子の音声」、「事件/事故の様子の画像」という認証条件が設定されている。このようにデータ種別だけを変えることができる。   For example, when the authentication condition is set according to the posting target category, the authentication condition information can be the content shown in FIG. 7A, for example. For example, for the incident / accident, authentication conditions of “voice of incident / accident situation” and “image of incident / accident situation” are set. In this way, only the data type can be changed.

また、店に対して、「店の看板の画像」、「特定の店員の声」、「特定の店員の顔の画像」、「店のレシートの画像」及び「店の天井の画像」という認証条件が設定されている。1つのカテゴリーに対して複数の認証条件が設定されている場合、任意の認証条件を選択することができる。なお、天井は、その模様が店毎に異なっていたり、天井に設置されている照明の配置が店毎に異なっていたりするので、天井の画像は、その店を特定するための情報となり得る。   In addition, for stores, authentication of “image of store signboard”, “voice of specific store clerk”, “image of face of specific store clerk”, “image of store receipt” and “image of store ceiling” The condition is set. When a plurality of authentication conditions are set for one category, an arbitrary authentication condition can be selected. Since the ceiling has a different pattern for each store or the arrangement of lighting installed on the ceiling differs for each store, the ceiling image can be information for specifying the store.

投稿時刻によって認証条件を設定すると、認証条件情報を、例えば、図7(b)に示す内容とすることができる。例えば、奇数時刻に対して「音声」が設定され、偶数時刻に対して「画像」が設定される。また、例えば、午前に対して「音声」が設定され、午後に対して「画像」が設定されても良い。   When the authentication condition is set according to the posting time, the authentication condition information can be set to the content shown in FIG. 7B, for example. For example, “voice” is set for an odd time, and “image” is set for an even time. Further, for example, “voice” may be set for the morning, and “image” may be set for the afternoon.

ユーザの信頼度は、同一のユーザが同一の投稿対象に対して過去に投稿した投稿データに対して決定された信頼度に基づいて算出される。例えば、過去の投稿データに対する信頼度の平均値が、ユーザの信頼度とされる。ユーザの信頼度によって認証条件を設定すると、認証条件情報を、例えば、図7(c)に示す内容とすることができる。例えば、ある投稿対象に対してユーザが初めて投稿する場合は、その投稿対象に対する過去の投稿データが存在しないので、ユーザの信頼度を算出することはできない。この場合に対しては、何らかの基準に基づいて決定されることが認証条件として設定されている。これは、例えば、カテゴリー、投稿時刻等に基づいて決定されても良いし、ランダムに決定されても良い。ユーザの信頼度の値がM未満である場合に対しては、前回の認証条件と異なる条件を選択することが認証条件として設定されている。一方、ユーザの信頼度の値がM以上である場合に対しては、前回の認証条件と同じ条件を選択することが認証条件として設定されている。   A user's reliability is calculated based on the reliability determined with respect to the posting data which the same user contributed to the same posting object in the past. For example, an average value of reliability with respect to past posted data is set as the reliability of the user. When the authentication condition is set according to the reliability of the user, the authentication condition information can be set to the content shown in FIG. 7C, for example. For example, when a user posts to a certain posting target for the first time, there is no past posting data for that posting target, and thus the user's reliability cannot be calculated. In this case, it is set as an authentication condition to be determined based on some standard. This may be determined based on, for example, a category, a posting time, or may be determined randomly. When the user reliability value is less than M, the authentication condition is set to select a condition different from the previous authentication condition. On the other hand, when the user reliability value is M or more, the selection of the same condition as the previous authentication condition is set as the authentication condition.

このような認証条件としているのは、次に述べる理由による。過去の投稿の実績によって、ある程度信頼度が高いと認められるユーザから投稿されてくる投稿データは、信頼度が高いとは認められないユーザから投稿されている投稿データよりも、信頼度が高いと考えられる。ユーザが投稿を行うときに、認証条件が前回と同じであれば、ユーザは、前回の経験から認証条件に適した視聴覚データを取得することができる。また、前回の投稿の際に取得した視聴覚データを使い回すことも可能である。そうすると、投稿データの信頼度が上がることとなる。そこで、信頼度が高いユーザが投稿したときには、前回と同じ認証条件とすることで、投稿データの信頼度が高くなりやすくする。   The reason for such an authentication condition is as follows. Post data submitted by a user who is recognized as having a high degree of reliability based on past posting results has a higher reliability than post data posted by a user who is not recognized as having a high degree of reliability. Conceivable. When the user performs posting, if the authentication condition is the same as the previous time, the user can obtain audiovisual data suitable for the authentication condition from the previous experience. It is also possible to reuse the audiovisual data acquired at the time of the previous posting. This will increase the reliability of the posted data. Therefore, when a user with a high degree of reliability makes a posting, the reliability of the posted data is easily increased by using the same authentication condition as the previous time.

なお、同一のユーザが全ての投稿対象に対して投稿した投稿データに対して決定された信頼度に基づいて、ユーザの信頼度が算出されるようにしても良い。また、例えば、所定期間内(例えば、1日間)に投稿された投稿データに対して決定された信頼度のみに基づいて、ユーザの信頼度が算出されるようにしても良い。   Note that the reliability of the user may be calculated based on the reliability determined for the posting data posted by the same user for all posting targets. Further, for example, the reliability of the user may be calculated based only on the reliability determined for the posted data posted within a predetermined period (for example, one day).

被投稿回数は、同一の投稿対象に対して行われた投稿の総数である。被投稿回数によって認証条件を設定すると、認証条件情報を、例えば、図7(d)に示す内容とすることができる。例えば、被投稿回数が0回、すなわち、ある投稿対象に対しての初めての投稿に対して、何らかの基準に基づいて決定されることが認証条件として設定されている。被投稿回数がN回以下である場合に対しては、前回の認証条件と同じ条件を選択することが認証条件として設定されている。被投稿回数がN回より多い場合に対しては、前回の認証条件と異なる条件を選択することが認証条件として設定されている。   The number of postings is the total number of postings made on the same posting target. If the authentication condition is set according to the number of postings, the authentication condition information can be the content shown in FIG. 7D, for example. For example, the authentication condition is set such that the number of postings is 0, that is, the first posting to a certain posting target is determined based on some criteria. When the number of postings is N or less, selecting the same condition as the previous authentication condition is set as the authentication condition. When the number of postings is more than N times, the selection of a condition different from the previous authentication condition is set as the authentication condition.

例えば、ある店について初めて投稿された場合、認証条件として、例えば、「特定の店員の声」が選択される。その後、同じ店についてM回投稿が行われるまでは、認証条件として「特定の店員の声」が選択される。そして、被投稿回数がM回を超えると、認証条件として、例えば、「店の看板の画像」が選択される。このとき、被投稿回数は0回にリセットされても良い。   For example, when a certain store is posted for the first time, “specific store clerk's voice” is selected as the authentication condition, for example. Thereafter, until the posting is made M times for the same store, “voice of a specific store clerk” is selected as the authentication condition. When the number of postings exceeds M, for example, “image of a store signboard” is selected as the authentication condition. At this time, the number of postings may be reset to zero.

このような認証条件としているのは、次に述べる理由による。投稿対象の視聴覚データを、ユーザ端末2から取得した視聴覚データの中から採用する場合、1つの認証条件について、ユーザ端末2からの視聴覚データが所定数集まらないと、投稿対象の視聴覚データを決定することができない。更に、投稿対象の視聴覚データを決定するまでは、投稿データの信頼度を決定することができない。そこで、投稿データの信頼度の決定を早い段階で行うことができるように、被投稿回数が所定回数になるまでは、認証条件を変更しない。   The reason for such an authentication condition is as follows. When the audiovisual data to be posted is adopted from the audiovisual data acquired from the user terminal 2, if a predetermined number of audiovisual data from the user terminal 2 is not collected for one authentication condition, the audiovisual data to be posted is determined. I can't. Further, the reliability of the posted data cannot be determined until the audiovisual data to be posted is determined. Therefore, the authentication condition is not changed until the number of postings reaches a predetermined number so that the reliability of the posted data can be determined at an early stage.

なお、被投稿回数については、例えば、所定期間内(例えば、1日間)の回数に限定されても良い。   Note that the number of postings may be limited to, for example, the number of times within a predetermined period (for example, one day).

また、カテゴリー、投稿時刻、ユーザの信頼度、投稿対象の中から複数の条件を組み合わせて認証条件を設定することもできる。例えば、投稿対象がある店である場合、投稿時刻が午前であるときには、認証条件として「店のレシートの画像」が設定され、投稿時刻が午後であるときには、認証条件として「店の天井の画像」が設定されても良い。   It is also possible to set an authentication condition by combining a plurality of conditions from the category, posting time, user reliability, and posting target. For example, when the posting target is a store, when the posting time is in the morning, the “reception image of the store” is set as the authentication condition, and when the posting time is in the afternoon, “the image of the ceiling of the store” is set as the authentication condition. "May be set.

また、認証条件が、例えば、「特定の店員の声」等の、特定の人物の声である場合には、認証条件として、特定の人物に話させるフレーズ(以下、「認証ワード」と称する)も合わせて設定されても良い。認証ワードとして、例えば、「いらっしゃいませ」、「ありがとうございました」や、特定の合い言葉等がある。この場合、認証ワードの内容は、話させる特定の人物に対して予め通知されるようにする。例えば、投稿対象が店である場合、投稿情報管理サーバ1は、認証ワードの内容を記載した電子メールを、対象の店宛てに送信しても良い。その一方で、投稿情報管理サーバ1は、投稿するユーザに対しては、認証ワードの内容を通知しない。これにより、ユーザが直接見聞きした投稿対象について投稿を行ったか否かを、より的確に判定することができる。   In addition, when the authentication condition is a voice of a specific person, such as “a voice of a specific store clerk”, for example, a phrase (hereinafter referred to as “authentication word”) that allows a specific person to speak as the authentication condition. May also be set. The authentication word includes, for example, “I welcome you”, “Thank you”, and a specific password. In this case, the content of the authentication word is notified in advance to a specific person to be told. For example, when the posting target is a store, the posting information management server 1 may transmit an e-mail describing the contents of the authentication word to the target store. On the other hand, the posting information management server 1 does not notify the posting user of the contents of the authentication word. Thereby, it can be determined more accurately whether or not the posting has been made on the posting target that the user has directly observed and heard.

また、認証条件を、例えば、「特定の店員の声及び顔」とし、データ種別として、音声及び画像の両方が設定されても良い。この認証条件の場合、投稿情報管理サーバ1は、ユーザ端末2から、視聴覚データとして音声データ及び画像データの両方を送信させ、受信した音声データ及び画像データについて、投稿対象の音声データ及び画像データとそれぞれ比較し、それぞれの一致度に基づいて、投稿データの信頼度を決定しても良い。   Further, the authentication condition may be, for example, “specific store clerk's voice and face”, and both voice and image may be set as the data type. In the case of this authentication condition, the posting information management server 1 causes the user terminal 2 to transmit both audio data and image data as audiovisual data, and for the received audio data and image data, the posting target audio data and image data Each may be compared, and the reliability of the posted data may be determined based on the degree of coincidence.

条件通知情報は、決定された認証条件をユーザに対して通知するメッセージを示すテキストデータ、音声データまたは画像データ等である。例えば、認証条件が「店の看板の画像」である場合、メッセージの内容は、例えば、「お店の看板を撮影して下さい。」等となる。また、例えば、認証条件が「特定の店員の声」である場合、メッセージの内容は、例えば、「○○さんというお店の人の声を入力して下さい。」等となる。   The condition notification information is text data, voice data, image data, or the like indicating a message for notifying the user of the determined authentication condition. For example, when the authentication condition is “image of a store signboard”, the content of the message is, for example, “Please photograph the store signboard”. Further, for example, when the authentication condition is “a voice of a specific store clerk”, the content of the message is, for example, “Please input the voice of the store person named Mr. XX”.

音声・画像DB12dには、事物の視聴覚データや、仮登録視聴覚データが登録されている。具体的に、音声・画像DB12dには、図6(d)に示すように、事物を示す語である事物ワード、認証条件の条件ID、視聴覚データ、及び状態フラグが対応付けて登録されている。   Audio / image DB 12d stores audiovisual data of things and provisionally registered audiovisual data. Specifically, as shown in FIG. 6D, an event word that is a word indicating an object, a condition ID for authentication conditions, audiovisual data, and a status flag are registered in the audio / image DB 12 d in association with each other. .

状態フラグは、登録されている視聴覚データが、事物の正解データであるか否かを示すフラグである。登録されている視聴覚データが正解データである場合、状態フラグは「正式登録」に設定され、登録されている視聴覚データが事物の正解データではない場合、状態フラグは「仮登録」に設定される。状態フラグが「正式登録」に設定されている視聴覚データは、例えば、投稿サイトの管理者によって予め登録された正解データであるか、または、ユーザ端末2から取得された視聴覚データのうち、正解データとして決定された視聴覚データである。状態フラグが「仮登録」に設定されている視聴覚データは、仮登録視聴覚データである。   The status flag is a flag indicating whether or not the registered audiovisual data is correct data of an object. If the registered audiovisual data is correct data, the status flag is set to “official registration”, and if the registered audiovisual data is not correct data of the thing, the status flag is set to “temporary registration”. . The audiovisual data in which the status flag is set to “official registration” is, for example, correct data registered in advance by the administrator of the posting site, or correct data among audiovisual data acquired from the user terminal 2 Audiovisual data determined as. The audiovisual data whose status flag is set to “temporary registration” is temporary registration audiovisual data.

状態フラグが「仮登録」に設定されている場合、音声・画像DB12dには、仮登録視聴覚データに対応付けて、投稿データに対して付与されたシリアルナンバーが登録される。投稿対象の正解データがまだ決定されていない場合、ユーザが入力した投稿データは、投稿情報DB12bに登録はされるが、信頼度の決定は保留される。このような投稿データについては、後で信頼度を決定する必要がある。そこで、仮登録視聴覚データとしてユーザ端末2から取得された視聴覚データと、ユーザが入力した投稿データとをシリアルナンバーで紐付けることにより、信頼度の決定が保留されている投稿データを特定することができるようにしている。   When the status flag is set to “temporary registration”, the serial number given to the post data is registered in the audio / image DB 12d in association with the provisional registration audiovisual data. If the correct answer data to be posted has not yet been determined, the posted data entered by the user is registered in the posted information DB 12b, but the determination of the reliability is suspended. For such post data, the reliability needs to be determined later. Therefore, it is possible to identify post data for which determination of reliability is suspended by associating audiovisual data acquired from the user terminal 2 as temporary registration audio-visual data with post data input by the user with a serial number. I can do it.

記憶部12には、また、Webページを構成するHTML(Hyper Text Markup Language)文書、XML(Extensible Markup Language)文書、CSS(Cascading Style Sheets)等のスタイルシート、画像データ、テキストデータ、電子文書等の各種データが記憶されている。   The storage unit 12 also includes HTML (Hyper Text Markup Language) documents, XML (Extensible Markup Language) documents, CSS (Cascading Style Sheets) style sheets, image data, text data, electronic documents, etc. Are stored.

また、記憶部12には、オペレーティングシステム及びWWW(World Wide Web)サーバプログラムが記憶されている。また、記憶部12には、投稿情報管理プログラム(投稿情報処理プログラムの一例)が記憶されている。この投稿情報管理プログラムは、投稿情報管理サーバ1が、ユーザ端末2から投稿情報を受信したときに、この投稿情報の信頼度を決定し、信頼度に基づいて投稿情報の表示形式を決定するためのプログラムである。なお、投稿情報管理プログラムは、例えば、他のサーバ装置等からネットワークNWを介して取得されるようにしても良いし、DVD(Digital Versatile Disc)等の記録媒体に記録されてドライブ装置を介して読み込まれるようにしても良い。   The storage unit 12 stores an operating system and a WWW (World Wide Web) server program. The storage unit 12 stores a posting information management program (an example of a posting information processing program). The posted information management program determines the reliability of the posted information when the posted information management server 1 receives the posted information from the user terminal 2, and determines the display format of the posted information based on the reliability. It is a program. The posted information management program may be acquired from, for example, another server device via a network NW, or recorded on a recording medium such as a DVD (Digital Versatile Disc) and via a drive device. It may be read.

入出力インターフェース13は、通信部11及び記憶部12とシステム制御部14との間のインターフェース処理を行うようになっている。   The input / output interface 13 performs interface processing between the communication unit 11 and the storage unit 12 and the system control unit 14.

システム制御部14は、CPU(Central Processing Unit)14a、ROM(Read Only Memory)14b、RAM(Random Access Memory)14c等により構成されている。そして、システム制御部14は、CPU14aが、投稿情報管理プログラムを読み出し実行することにより、本発明における投稿情報取得手段、端末情報取得手段、抽出手段、投稿対象情報取得手段、比較手段、決定手段、判定手段、記憶手段、投稿対象情報比較手段、投稿対象情報決定手段、条件決定手段、制御情報送信手段、端末特徴情報生成手段、投稿対象特徴情報生成手段、特徴一致度算出手段、端末発話語情報生成手段、投稿対象発話語情報生成手段及び発話語一致度算出手段として機能するようになっている。   The system control unit 14 includes a CPU (Central Processing Unit) 14a, a ROM (Read Only Memory) 14b, a RAM (Random Access Memory) 14c, and the like. Then, the system control unit 14 reads and executes the posting information management program by the CPU 14a, so that the posting information acquisition unit, the terminal information acquisition unit, the extraction unit, the posting target information acquisition unit, the comparison unit, the determination unit in the present invention, Determination means, storage means, posting target information comparison means, posting target information determination means, condition determination means, control information transmission means, terminal feature information generation means, posting target feature information generation means, feature coincidence calculation means, terminal utterance word information It functions as a generation means, a posting target utterance word information generation means, and an utterance word matching degree calculation means.

なお、投稿情報管理サーバが、複数のサーバ装置で構成されても良い。例えば、投稿情報を受け付けて信頼度を決定するサーバ装置、ユーザ端末2からのリクエストに応じて、決定された信頼度に対応する表示形式を決定し、決定された表示形式で投稿情報が掲載されたWebページを送信するサーバ装置、会員情報DB12a、投稿情報DB12b及び位置情報DB12c等のデータベースを管理するサーバ装置が、互いにLAN(Local Area Network)等で接続されても良い。   The posted information management server may be composed of a plurality of server devices. For example, a server device that accepts posted information and determines the reliability, a display format corresponding to the determined reliability is determined in response to a request from the user terminal 2, and the posted information is posted in the determined display format Server devices that transmit the Web page, server devices that manage databases such as the member information DB 12a, the posting information DB 12b, and the location information DB 12c may be connected to each other via a LAN (Local Area Network) or the like.

[3.投稿システムの動作]
次に、投稿システムSの動作について、図8乃至図10を用いて説明する。
[3. Posting System Operation]
Next, the operation of the posting system S will be described with reference to FIGS.

図8及び図9は、本実施形態に係る投稿情報管理サーバ1のシステム制御部14の投稿データ受信時処理における処理例を示すフローチャートである。   FIG. 8 and FIG. 9 are flowcharts showing a processing example in the post data reception process of the system control unit 14 of the post information management server 1 according to the present embodiment.

ユーザは、投稿サイトへ投稿するため、ユーザ端末2を操作する。すると、ユーザ端末2から投稿情報管理サーバ1にリクエストが送信され、これに応じて、投稿情報管理サーバ1は、投稿用のWebページを送信する。ユーザは、ユーザ端末2の画面に表示された投稿用のWebページに対して投稿データを入力する。すると、ユーザ端末2は、入力された投稿データを投稿情報管理サーバ1に送信する。   The user operates the user terminal 2 to post to the posting site. Then, a request is transmitted from the user terminal 2 to the posted information management server 1, and in response to this, the posted information management server 1 transmits a web page for posting. The user inputs posting data to the posting Web page displayed on the screen of the user terminal 2. Then, the user terminal 2 transmits the input post data to the post information management server 1.

投稿データ受信時処理は、システム制御部14が、投稿情報取得手段としてユーザ端末2から投稿データを受信したときに開始される。   The post data reception process is started when the system control unit 14 receives post data from the user terminal 2 as post information acquisition means.

図8に示すように、システム制御部14は、識別情報取得手段として、投稿データを送信してきたユーザ端末2のユーザのユーザIDを取得する(ステップS51)。例えば、システム制御部14は、投稿サイトへのログインの際にユーザが入力したユーザID及びパスワードをユーザ端末2から受信し、これらの情報を、会員情報DB12aに登録されている情報と照合してユーザの認証を行う。認証が成功すると、システム制御部14は、受信したユーザIDをセッション情報と対応付けてRAM14cに保持しておく。そして、システム制御部14は、ユーザ端末2が投稿データとともに送信してきたセッション情報を受信し、受信したセッション情報に対応するユーザIDを取得する。なお、システム制御部14は、ユーザを特定する情報として、ユーザIDに代えてユーザ端末2の識別情報を、ユーザ端末2から取得しても良い。ユーザ端末2の識別情報としては、例えば、ユーザ端末2が携帯電話機である場合、SIM(Subscriber Identity Module)カードに記憶されているIMSI(International Mobile Subscriber Identity)等がある。   As illustrated in FIG. 8, the system control unit 14 acquires the user ID of the user of the user terminal 2 that has transmitted the post data as the identification information acquisition unit (step S51). For example, the system control unit 14 receives the user ID and password input by the user at the time of login to the posting site from the user terminal 2, and collates these information with the information registered in the member information DB 12a. Authenticate the user. If the authentication is successful, the system control unit 14 stores the received user ID in the RAM 14c in association with the session information. And the system control part 14 receives the session information which the user terminal 2 transmitted with contribution data, and acquires user ID corresponding to the received session information. Note that the system control unit 14 may acquire identification information of the user terminal 2 from the user terminal 2 instead of the user ID as information for specifying the user. The identification information of the user terminal 2 includes, for example, an IMSI (International Mobile Subscriber Identity) stored in a SIM (Subscriber Identity Module) card when the user terminal 2 is a mobile phone.

次いで、システム制御部14は、投稿情報記憶手段として、投稿データ、ユーザID等の情報を登録する(ステップS52)。具体的に、システム制御部14は、新たなシリアルナンバーを生成し、現在の日時を投稿日時として取得する。そして、システム制御部14は、シリアルナンバー、投稿日時、ユーザID、投稿データ、及び「保留中」に設定された掲載フラグを対応付けて、投稿情報DB12bに登録する。   Next, the system control unit 14 registers information such as post data and a user ID as post information storage means (step S52). Specifically, the system control unit 14 generates a new serial number and acquires the current date and time as the posting date and time. Then, the system control unit 14 registers the serial number, the posting date / time, the user ID, the posting data, and the posting flag set to “pending” in association with the posting information DB 12b.

次いで、システム制御部14は、抽出手段として、投稿データから投稿対象を特定する(ステップS53)。具体的に、システム制御部14は、投稿データに対して形態素解析等を実行することにより、投稿対象ワードを抽出する。なお、形態素解析等に基づいてキーワードを抽出する技術自体は公知であるので、キーワードを抽出する処理の詳細な説明は省略する。システム制御部14は、抽出した投稿対象ワードを、生成したシリアルナンバーに対応付けて投稿情報DB12bに登録する。   Next, the system control unit 14 specifies a posting target from the posting data as an extraction unit (step S53). Specifically, the system control unit 14 extracts a posting target word by performing morphological analysis or the like on the posting data. In addition, since the technique itself which extracts a keyword based on a morphological analysis etc. is well-known, detailed description of the process which extracts a keyword is abbreviate | omitted. The system control unit 14 registers the extracted posting target word in the posting information DB 12b in association with the generated serial number.

次いで、システム制御部14は、条件決定手段として、認証条件を決定する(ステップS54)。具体的に、システム制御部14は、カテゴリーに基づいて認証条件を決定する場合には、抽出した投稿対象ワードに基づいて、特定した投稿対象が属するカテゴリーを特定する。また、システム制御部14は、投稿時刻に基づいて認証条件を決定する場合には、変化情報取得手段として、現在時刻を取得する。また、システム制御部14は、ユーザの信頼度に基づいて認証条件を決定する場合には、投稿情報DB12bに登録されている投稿データの中から、取得したユーザID及び抽出した投稿対象ワードに対応する投稿データを抽出する。次いで、システム制御部14は、抽出した投稿データに対応する信頼度を投稿情報DB12bから取得する。そして、システム制御部14は、取得した信頼度の平均値を算出することにより、ユーザの信頼度を算出する。また、システム制御部14は、被投稿回数に基づいて認証条件を決定する場合には、変化情報取得手段として、投稿情報DB12bに登録されている投稿データの中から、抽出した投稿対象ワードに対応する投稿データの個数を、被投稿回数として計算する。そして、システム制御部14は、カテゴリー、投稿時刻、ユーザの信頼度または被投稿回数のうち1つ以上の条件と、認証条件DB12cに登録されている認証条件情報とに基づいて、認証条件を選択する。そして、システム制御部14は、選択した認証条件の条件ID、認証条件情報及び条件通知情報を、認証条件DB12cから取得する。   Next, the system control unit 14 determines an authentication condition as a condition determination unit (step S54). Specifically, when determining the authentication condition based on the category, the system control unit 14 specifies the category to which the specified posting target belongs based on the extracted posting target word. Further, when determining the authentication condition based on the posting time, the system control unit 14 acquires the current time as change information acquisition means. Further, when determining the authentication condition based on the reliability of the user, the system control unit 14 corresponds to the acquired user ID and the extracted posting target word from the posting data registered in the posting information DB 12b. The post data to be extracted is extracted. Next, the system control unit 14 acquires the reliability corresponding to the extracted post data from the post information DB 12b. And the system control part 14 calculates a user's reliability by calculating the average value of the acquired reliability. In addition, when determining the authentication condition based on the number of postings, the system control unit 14 corresponds to the posting target word extracted from the posting data registered in the posting information DB 12b as change information acquisition means. The number of posting data to be calculated is calculated as the number of postings. Then, the system control unit 14 selects an authentication condition based on one or more conditions among the category, posting time, user reliability, or number of postings, and authentication condition information registered in the authentication condition DB 12c. To do. Then, the system control unit 14 acquires the condition ID, authentication condition information, and condition notification information of the selected authentication condition from the authentication condition DB 12c.

次いで、システム制御部14は、判定手段として、選択した認証条件に対応する投稿対象の視聴覚データが音声・画像DB12dに登録されているか否かを判定する(ステップS55)。具体的に、システム制御部14は、音声・画像DB12dに登録されている視聴覚データの中から、対応付けられている事物ワードが、抽出した投稿対象ワードと一致し、且つ、対応付けられている条件IDが、認証条件DB12cから取得した条件IDと一致する視聴覚データを検索する。該当する視聴覚データが検索された場合、システム制御部14は、検索された視聴覚データの中に、対応付けられている状態フラグが「正式登録」に設定されている視聴覚データが存在するか否かを判定する。   Next, the system control unit 14 determines, as determination means, whether or not the audiovisual data to be posted corresponding to the selected authentication condition is registered in the audio / image DB 12d (step S55). Specifically, the system control unit 14 matches the associated thing word with the extracted posting target word from the audiovisual data registered in the audio / image DB 12d. The audiovisual data whose condition ID matches the condition ID acquired from the authentication condition DB 12c is searched. When the corresponding audiovisual data is searched, the system control unit 14 determines whether or not there is audiovisual data in which the associated status flag is set to “official registration” in the searched audiovisual data. Determine.

このとき、システム制御部14は、状態フラグが「正式登録」に設定されている視聴覚データが存在する場合には、選択した認証条件に対応する投稿対象の視聴覚データが登録されていると判定する(ステップS55:YES)。この場合、システム制御部14は、投稿対象情報取得手段として、状態フラグが「正式登録」に設定されている視聴覚データを、認証条件に対応する投稿対象の視聴覚データとして、音声・画像DB12dから取得する(ステップS56)。   At this time, if there is audiovisual data in which the status flag is set to “official registration”, the system control unit 14 determines that the audiovisual data to be posted corresponding to the selected authentication condition is registered. (Step S55: YES). In this case, the system control unit 14 acquires the audiovisual data in which the status flag is set to “official registration” from the audio / image DB 12d as the posting target audiovisual data corresponding to the authentication condition as the posting target information acquisition unit. (Step S56).

次いで、システム制御部14は、後述する端末視聴覚データ取得処理を実行する(ステップS57)。端末視聴覚データ取得処理では、投稿データを送信してきたユーザ端末2から視聴覚データが取得される。   Next, the system control unit 14 executes a terminal audiovisual data acquisition process to be described later (step S57). In the terminal audiovisual data acquisition process, audiovisual data is acquired from the user terminal 2 that has transmitted the posted data.

次いで、システム制御部14は、比較手段として、ユーザ端末2から取得した視聴覚データと、音声・画像DB12dから取得した視聴覚データとを比較して、一致度を算出する(ステップS58)。具体的に、システム制御部14は、視聴覚データが音声データである場合には、音声データに対して高速フーリエ変換等を施して、音響的な特徴部分を抽出し、その特徴量(端末特徴情報、投稿対象特徴情報の一例)を算出する。また、システム制御部14は、視聴覚データが画像データである場合には、画像データから画像の特徴部分を抽出し、その特徴量(端末特徴情報、投稿対象特徴情報の一例)を算出する。画像の特徴部分の抽出方法としては、例えば、SIFT(登録商標:Scale Invariant Feature Transform)、SURF(Speeded-Up Robust Features)等がある。また、例えば、色相や彩度や明度や物体の輪郭線をエッジとして抽出し、エッジの集中度に基づいて、特徴部分を抽出しても良い。または、視覚的な注意を集める強度を示す顕著度に基づいて、特徴部分を抽出しても良い。なお、これらの方法は、公知であるため、詳細な説明は省略する。システム制御部14は、特徴量を算出すると、ユーザ端末2から取得した視聴覚データの特徴量と、音声・画像DB12dから取得した視聴覚データの特徴量とに基づいて、両者の一致度を算出する。   Next, the system control unit 14 compares the audiovisual data acquired from the user terminal 2 with the audiovisual data acquired from the audio / image DB 12d as a comparison unit, and calculates the degree of coincidence (step S58). Specifically, when the audiovisual data is audio data, the system control unit 14 performs fast Fourier transform or the like on the audio data, extracts an acoustic feature portion, and extracts the feature amount (terminal feature information). , One example of post target feature information) is calculated. Further, when the audiovisual data is image data, the system control unit 14 extracts a feature portion of the image from the image data, and calculates a feature amount (an example of terminal feature information and posting target feature information). As a method for extracting a feature portion of an image, for example, there are SIFT (registered trademark: Scale Invariant Feature Transform), SURF (Speeded-Up Robust Features), and the like. Further, for example, hue, saturation, lightness, or an outline of an object may be extracted as an edge, and a feature portion may be extracted based on the degree of edge concentration. Alternatively, the feature portion may be extracted based on the degree of saliency indicating the intensity of collecting visual attention. In addition, since these methods are well-known, detailed description is abbreviate | omitted. When the feature amount is calculated, the system control unit 14 calculates the degree of coincidence between the feature amount of the audiovisual data acquired from the user terminal 2 and the feature amount of the audiovisual data acquired from the audio / image DB 12d.

次いで、システム制御部14は、算出した一致度を、投稿データの信頼度として投稿情報DB12bに登録する(ステップS59)。具体的に、システム制御部14は、信頼度として算出した一致度を、生成したシリアルナンバーに対応付けて投稿情報DB12bに登録する。また、システム制御部14は、生成したシリアルナンバーに対応する投稿データの掲載フラグを「許可」に設定する。   Next, the system control unit 14 registers the calculated matching degree in the posting information DB 12b as the reliability of the posting data (step S59). Specifically, the system control unit 14 registers the degree of coincidence calculated as the reliability in the posted information DB 12b in association with the generated serial number. Further, the system control unit 14 sets the posting flag of the posted data corresponding to the generated serial number to “permitted”.

なお、システム制御部14は、今回ユーザ端末2から取得した視聴覚データと、今回のユーザと同一ユーザからの同一の投稿対象に対する同一の認証条件について過去に取得した視聴覚データとを比較し、この比較結果に基づいて、信頼度を決定しても良い。具体的に、システム制御部14は、今回取得した視聴覚データと過去に取得した視聴覚データとの一致度を算出し、両方の視聴覚データが完全に一致すると考えられる程度に一致度が高い場合には、ユーザにより視聴覚データの使い回しが行われたと判定し、信頼度を低く設定する。   The system control unit 14 compares the audiovisual data acquired from the user terminal 2 this time with the audiovisual data acquired in the past with respect to the same authentication condition for the same posting target from the same user as the current user. The reliability may be determined based on the result. Specifically, the system control unit 14 calculates the degree of coincidence between the audiovisual data acquired this time and the audiovisual data acquired in the past, and when the degree of coincidence is high enough that both audiovisual data are considered to be completely coincident with each other. Then, it is determined that the audiovisual data has been reused by the user, and the reliability is set low.

また、認証条件が、「特定の店員の声」等の特定の人物の声であり、且つ、特定の人物に話させる認証ワードの内容が決められている場合、システム制御部14は、話されているフレーズを比較しても良い。例えば、システム制御部14は、音声データを、所定時間間隔毎に区切ってそれぞれの特徴量を算出し、隠れマルコフモデル等に基づいて、話されているフレーズを抽出して、テキストデータ(端末発話語情報、投稿対象発話語情報の一例)として出力する。つまり、システム制御部14は、音声認識(話者認識を含まない意味での音声認識)を行う。なお、音声認識の方法は、公知であるため、詳細な説明は省略する。システム制御部14は、ユーザ端末2から取得した視聴覚データから生成したテキストデータと、音声・画像DB12dから取得した視聴覚データから抽出したテキストデータとを比較することにより、フレーズの一致度を算出する。そして、システム制御部14は、音響的な特徴量の一致度と、フレーズの一致度とに基づいて、投稿データの信頼度を決定する。具体的に、システム制御部14は、両方の一致度が高いほど、信頼度を高設定する。この場合、実際に話した人物が、認証条件により指定された特定の人物と同一人物であり、且つ、話されたフレーズが、認証ワードとほぼ同一である場合に、信頼度が最も高くなる。   In addition, when the authentication condition is a voice of a specific person such as “voice of a specific store clerk” and the content of an authentication word to be spoken to the specific person is determined, the system control unit 14 is spoken. You may compare the phrases you have. For example, the system control unit 14 divides speech data at predetermined time intervals to calculate respective feature amounts, extracts a spoken phrase based on a hidden Markov model or the like, and extracts text data (terminal utterance). Output as word information and posting target utterance word information). That is, the system control unit 14 performs speech recognition (speech recognition in a meaning that does not include speaker recognition). In addition, since the method of speech recognition is well-known, detailed description is abbreviate | omitted. The system control unit 14 calculates the phrase matching degree by comparing the text data generated from the audiovisual data acquired from the user terminal 2 with the text data extracted from the audiovisual data acquired from the audio / image DB 12d. And the system control part 14 determines the reliability of contribution data based on the coincidence degree of an acoustic feature-value, and the coincidence degree of a phrase. Specifically, the system control unit 14 sets the reliability higher as the degree of coincidence of both is higher. In this case, the reliability is highest when the actually spoken person is the same person as the specific person specified by the authentication condition and the spoken phrase is almost the same as the authentication word.

システム制御部14は、ステップS59の処理を終えると、投稿データ受信時処理を終了させる。   When finishing the process of step S59, the system control unit 14 ends the post data reception process.

ステップS55において、システム制御部14は、選択した認証条件に対応する投稿対象の視聴覚データが登録されていないと判定した場合には(ステップS55:NO)、図9に示すように、端末視聴覚データ取得処理を実行する(ステップS60)。   In step S55, when the system control unit 14 determines that the audiovisual data to be posted corresponding to the selected authentication condition is not registered (step S55: NO), as shown in FIG. 9, the terminal audiovisual data is displayed. An acquisition process is executed (step S60).

次いで、システム制御部14は、判定手段として、仮登録視聴覚データが所定数以上登録されているか否かを判定する(ステップS61)。具体的に、システム制御部14は、音声・画像DB12dに登録されている視聴覚データの中から、対応付けられている事物ワードが、抽出した投稿対象ワードと一致し、且つ、対応付けられている条件IDが、認証条件DB12cから取得した条件IDと一致する視聴覚データを検索する。次いで、システム制御部14は、検索された視聴覚データの個数を算出する。なお、このときに検索される視聴覚データは、全て仮登録視聴覚データである(状態フラグが「仮登録」に設定されている)。   Next, the system control unit 14 determines whether or not a predetermined number or more of temporarily registered audiovisual data has been registered as a determination unit (step S61). Specifically, the system control unit 14 matches the associated thing word with the extracted posting target word from the audiovisual data registered in the audio / image DB 12d. The audiovisual data whose condition ID matches the condition ID acquired from the authentication condition DB 12c is searched. Next, the system control unit 14 calculates the number of searched audiovisual data. Note that all the audiovisual data searched at this time is temporary registration audiovisual data (the status flag is set to “temporary registration”).

このとき、システム制御部14は、仮登録視聴覚データが所定数以上登録されていないと判定した場合には(ステップS61:NO)、投稿対象の正解データとしての視聴覚データを決定せず、また、投稿データの信頼度の決定を行わない。そのため、システム制御部14は、投稿データ受信時処理を終了させる。   At this time, if the system control unit 14 determines that the predetermined number or more of the temporarily registered audiovisual data has not been registered (step S61: NO), the system control unit 14 does not determine the audiovisual data as the correct answer data to be posted. Do not determine post data reliability. Therefore, the system control unit 14 ends the post data reception process.

一方、システム制御部14は、仮登録視聴覚データが所定数以上登録されていると判定した場合には(ステップS61:YES)、比較手段及び投稿対象情報比較手段として、検索された各仮登録視聴覚データを音声・画像DB12dから取得して、取得した仮登録視聴覚データ同士を比較する。そして、システム制御部14は、各仮登録視聴覚データ間の一致度を算出する(ステップS62)。このときの各仮登録視聴覚データの特徴量の算出方法及び一致度の算出方法は、ステップS58の場合と同様である。   On the other hand, when the system control unit 14 determines that a predetermined number or more of the temporarily registered audiovisual data has been registered (step S61: YES), each of the temporarily registered audiovisual data searched as the comparison unit and the posting target information comparison unit. Data is acquired from the audio / image DB 12d, and the temporarily registered audiovisual data acquired are compared. Then, the system control unit 14 calculates the degree of coincidence between the provisionally registered audiovisual data (step S62). At this time, the feature amount calculation method and the coincidence calculation method of each provisionally registered audiovisual data are the same as those in step S58.

次いで、システム制御部14は、投稿対象情報決定手段として、仮登録視聴覚データ同士の比較結果に基づいて、投稿対象の正解データとしての視聴覚データを決定する(ステップS63)。例えば、システム制御部14は、複数の仮登録視聴覚データのうち、平均的に他のどの仮登録視聴覚データとも特徴量が近い、すなわち、平均して一致度が高い仮登録視聴覚データを、投稿対象の視聴覚データとする。具体的に、システム制御部14は、各仮登録視聴覚データにつき、他の各仮登録視聴覚データとの一致度の平均値を計算する。ここで、システム制御部14は、計算した一致度の平均値が所定値よりも低い仮登録視聴覚データは、投稿対象とは関係がない視聴覚データとして、投稿対象の視聴覚データの候補から除外して、残りの仮登録視聴覚データについて、一致度の平均値を再計算する。そして、システム制御部14は、計算した一致度の平均値が最も大きい仮登録データを、投稿対象の視聴覚データとする。   Next, the system control unit 14 determines the audiovisual data as the correct answer data to be posted based on the comparison result between the temporarily registered audiovisual data as the posting target information determining means (step S63). For example, the system control unit 14 submits temporarily registered audiovisual data having a feature amount close to that of any other temporarily registered audiovisual data on average, that is, having a high degree of coincidence on average. Audio-visual data. Specifically, the system control unit 14 calculates an average value of the degree of coincidence with each other temporarily registered audiovisual data for each temporarily registered audiovisual data. Here, the system control unit 14 excludes the provisionally registered audiovisual data whose calculated coincidence average value is lower than a predetermined value as audiovisual data having no relation to the posting target from the candidates of the audiovisual data to be posted. The average value of the degree of coincidence is recalculated for the remaining provisionally registered audiovisual data. Then, the system control unit 14 sets the provisional registration data having the largest average value of the calculated matching degrees as the audiovisual data to be posted.

次いで、システム制御部14は、投稿対象の視聴覚データとして決定した視聴覚データに対応するシリアルナンバーを、音声・画像DB12dから取得する(ステップS64)。次いで、システム制御部14は、取得したシリアルナンバーに対応する投稿データの信頼度として、同一の視聴覚データ同士を比較した場合の一致度、すなわち、一致度としての最大値を投稿情報DB12bに登録する(ステップS65)。つまり、システム制御部14は、正解データとして決定された視聴覚データを送信してきたユーザ端末2がそのときに送信してきた投稿データの信頼性は最も高いと決定する。なお、登録処理の内容は、ステップS59と同様である。   Next, the system control unit 14 acquires a serial number corresponding to the audiovisual data determined as the audiovisual data to be posted from the audio / image DB 12d (step S64). Next, the system control unit 14 registers the degree of coincidence when the same audiovisual data is compared with each other as the reliability of the post data corresponding to the acquired serial number, that is, the maximum value as the degree of coincidence is registered in the post information DB 12b. (Step S65). That is, the system control unit 14 determines that the post data transmitted at that time by the user terminal 2 that has transmitted the audiovisual data determined as the correct answer data has the highest reliability. The contents of the registration process are the same as in step S59.

次いで、システム制御部14は、投稿対象の視聴覚データとして決定した視聴覚データを除いて、抽出した投稿対象ワード及び取得した条件IDに対応する仮登録視聴覚データを1つ特定する(ステップS66)。   Next, the system control unit 14 specifies one temporarily registered audiovisual data corresponding to the extracted posting target word and the acquired condition ID, excluding the audiovisual data determined as the posting target audiovisual data (step S66).

次いで、システム制御部14は、特定した仮登録視聴覚データに対応するシリアルナンバーを、音声・画像DB12dから取得する(ステップS67)。   Next, the system control unit 14 acquires a serial number corresponding to the specified provisionally registered audiovisual data from the audio / image DB 12d (step S67).

次いで、システム制御部14は、特定した仮登録視聴覚データと、投稿対象の視聴覚データとして決定した視聴覚データとの間の一致度を、投稿データの信頼度として投稿情報DB12bに登録する(ステップS68)。つまり、システム制御部14は、仮登録視聴覚データとしての視聴覚データを送信してきたユーザ端末2がそのときに送信してきた投稿データの信頼度を決定する。このときの登録処理の内容も、ステップS59と同様である。なお、この場合の一致度は、ステップS62において算出済みである。   Next, the system control unit 14 registers the degree of coincidence between the specified provisional registration audiovisual data and the audiovisual data determined as the audiovisual data to be posted as the reliability of the post data in the post information DB 12b (step S68). . That is, the system control unit 14 determines the reliability of the post data transmitted by the user terminal 2 that has transmitted the audiovisual data as the provisionally registered audiovisual data. The contents of the registration process at this time are the same as in step S59. In this case, the degree of coincidence has been calculated in step S62.

次いで、システム制御部14は、抽出した投稿対象ワード及び取得した条件IDに対応する仮登録視聴覚データを全て特定したか否かを判定する(ステップS69)。このとき、システム制御部14は、まだ特定していない仮登録視聴覚データが存在すると判定した場合には(ステップS69:NO)、次の仮登録視聴覚データを特定して(ステップS70)、ステップS67に移行する。   Next, the system control unit 14 determines whether or not all provisionally registered audiovisual data corresponding to the extracted posting target word and the acquired condition ID have been specified (step S69). At this time, if the system control unit 14 determines that there is temporary registration audiovisual data that has not yet been specified (step S69: NO), the system control unit 14 specifies the next temporary registration audiovisual data (step S70), and step S67. Migrate to

システム制御部14は、ステップS67〜S70の処理を繰り返すことにより、特定した投稿対象及び選択した認証条件について、これまで信頼度の決定を保留してきた投稿データの信頼度を決定する。そして、システム制御部14は、仮登録視聴覚データを全て特定したと判定した場合には(ステップS70:YES)、投稿データ受信時処理を終了させる。なお、システム制御部14は、投稿対象の視聴覚データとして決定した視聴覚データを除いて、仮登録視聴覚データを音声・画像DB12dから削除しても良い。   The system control unit 14 determines the reliability of post data for which the determination of the reliability has been suspended so far for the specified posting target and the selected authentication condition by repeating the processes of steps S67 to S70. If the system control unit 14 determines that all the provisionally registered audiovisual data has been specified (step S70: YES), the system control unit 14 ends the post data reception process. The system control unit 14 may delete the provisionally registered audiovisual data from the audio / image DB 12d except for the audiovisual data determined as the audiovisual data to be posted.

図10は、本実施形態に係る投稿情報管理サーバ1のシステム制御部14の端末視聴覚データ取得処理における処理例を示すフローチャートである。   FIG. 10 is a flowchart illustrating a processing example in the terminal audiovisual data acquisition process of the system control unit 14 of the posted information management server 1 according to the present embodiment.

図10に示すように、システム制御部14は、制御情報送信手段として、選択した認証条件に対応する条件通知情報を含む視聴覚データ送信要求を、投稿データを送信してきたユーザ端末2に送信する(ステップS101)。具体的に、システム制御部14は、認証条件DB12cから取得した条件通知情報をユーザ端末2に送信する。視聴覚データ送信要求を受信したユーザ端末2は、視聴覚データ送信要求に含まれる条件通知情報に基づいて、選択された認証条件を示すメッセージを、例えば画面に表示したり音声出力したりする。ユーザは、メッセージを見たり聞いたりすると、基本的にはメッセージに従って音声入力したり画像の撮影を行ったりする。すると、ユーザ端末2は、音声入力や画像撮影によって生成された視聴覚データを投稿情報管理サーバ1に送信する。   As shown in FIG. 10, the system control unit 14 transmits, as control information transmission means, an audiovisual data transmission request including condition notification information corresponding to the selected authentication condition to the user terminal 2 that has transmitted the posted data ( Step S101). Specifically, the system control unit 14 transmits condition notification information acquired from the authentication condition DB 12 c to the user terminal 2. The user terminal 2 that has received the audiovisual data transmission request displays, for example, a message indicating the selected authentication condition on the screen or outputs the voice based on the condition notification information included in the audiovisual data transmission request. When a user views or listens to a message, the user basically inputs voice or takes an image according to the message. Then, the user terminal 2 transmits audiovisual data generated by voice input or image shooting to the posting information management server 1.

なお、システム制御部14は、視聴覚データの使い回しの防止のため、認証条件がユーザに通知された後に音声入力されたり画像撮影されたりして生成された視聴覚データのみをユーザ端末2が送信可能なようにしても良い。また、システム制御部14は、所定時間内に音声入力や画像撮影が行われなかった場合には、投稿データの信頼度を低くしても良い。具体的に、システム制御部14は、視聴覚データ送信要求として、例えば、認証条件を表示するWebページのHTML文書をユーザ端末2に送信する。このとき、システム制御部14は、制御用のスクリプトを含むHTML文書を送信する。ユーザ端末2は、受信したHTML文書に基づいてWebページを表示する。ここで、ユーザが、Webページ内に表示された所定のボタンを選択すると、ユーザ端末2がスクリプトを実行することにより、認証条件に応じて音声入力または画像撮影を行う。また、ユーザ端末2は、音声入力または画像撮影によって生成された視聴覚データを、投稿情報管理サーバ1に送信する。システム制御部14は、HTML文書を送信してから所定時間が経過しても、視聴覚データを受信しなかった場合には、信頼度としてとりうる値の最低値を、投稿データの信頼度として決定する。   The system control unit 14 allows the user terminal 2 to transmit only the audiovisual data generated by voice input or image shooting after the authentication condition is notified to the user in order to prevent reuse of the audiovisual data. You may do it. Further, the system control unit 14 may reduce the reliability of the posted data when no voice input or image capturing is performed within a predetermined time. Specifically, the system control unit 14 transmits, for example, an HTML document of a Web page displaying authentication conditions to the user terminal 2 as an audiovisual data transmission request. At this time, the system control unit 14 transmits an HTML document including a control script. The user terminal 2 displays a web page based on the received HTML document. Here, when the user selects a predetermined button displayed in the Web page, the user terminal 2 executes a script to perform voice input or image shooting according to the authentication condition. In addition, the user terminal 2 transmits audiovisual data generated by voice input or image shooting to the posting information management server 1. If the audiovisual data is not received after a predetermined time has elapsed since the transmission of the HTML document, the system control unit 14 determines the minimum value that can be taken as the reliability as the reliability of the posted data. To do.

システム制御部14は、視聴覚データ送信要求を送信した後、端末情報取得手段としてユーザ端末2から視聴覚データを受信する(ステップS102)。次いで、システム制御部14は、記憶手段として、受信した視聴覚データを、仮登録視聴覚データとして、音声・画像DB12dに登録する(ステップS103)。具体的に、システム制御部14は、抽出した投稿対象ワード(事物ワード)、選択した認証条件の条件ID、ユーザ端末2から受信した視聴覚データ、「仮登録」に設定された状態フラグ、及び投稿データの登録時に生成したシリアルナンバーを対応付けて、音声・画像DB12dに登録する。システム制御部14は、ステップS103の処理を終えると、端末視聴データ取得処理を終了させる。   After transmitting the audiovisual data transmission request, the system control unit 14 receives audiovisual data from the user terminal 2 as terminal information acquisition means (step S102). Next, the system control unit 14 registers the received audiovisual data as temporary registration audiovisual data in the audio / image DB 12d as storage means (step S103). Specifically, the system control unit 14 extracts the extracted posting target word (thing word), the condition ID of the selected authentication condition, the audiovisual data received from the user terminal 2, the status flag set to “temporary registration”, and the posting The serial number generated at the time of data registration is associated and registered in the audio / image DB 12d. When completing the process of step S103, the system control unit 14 ends the terminal viewing data acquisition process.

図11は、本実施形態に係る投稿情報管理サーバ1のシステム制御部14の投稿情報掲載ページリクエスト受信時処理における処理例を示すフローチャートである。   FIG. 11 is a flowchart showing a processing example in the post information posting page request reception process of the system control unit 14 of the post information management server 1 according to the present embodiment.

ユーザは、投稿情報掲載ページを閲覧するため、ユーザ端末2を操作する。すると、ユーザ端末2は、投稿情報掲載ページのリクエストを投稿情報管理サーバ1に送信する。投稿情報掲載ページリクエスト受信時処理は、システム制御部14が、ユーザ端末2から投稿情報掲載ページのリクエストを受信したときに開始される。   The user operates the user terminal 2 to view the posted information posting page. Then, the user terminal 2 transmits a request for a posted information posting page to the posted information management server 1. The post information posting page request reception process is started when the system control unit 14 receives a post information posting page request from the user terminal 2.

先ず、システム制御部14は、受信したリクエストに対応する投稿情報掲載ページに掲載させる投稿データを特定する(ステップS201)。このとき、システム制御部14は、掲載フラグが「許可」に設定されている投稿データの中から、掲載する投稿データを特定する。投稿データの特定方法は、例えば、リクエストの内容や、投稿サイトが具体的にどのようなサイトであるか等により異なる。そのため、投稿データの特定方法についての詳細な説明は省略する。   First, the system control unit 14 specifies posting data to be posted on the posting information posting page corresponding to the received request (step S201). At this time, the system control unit 14 identifies posted data to be posted from among posted data whose posting flag is set to “permitted”. The method for specifying the posting data differs depending on, for example, the content of the request and what kind of site the posting site is. Therefore, the detailed description about the post data specifying method is omitted.

次いで、システム制御部14は、特定した投稿データ、及びその他投稿情報掲載ページに掲載される情報を投稿情報DB12bから取得するとともに、特定した投稿データに対応する信頼度を投稿情報DB12bから取得する(ステップS202)。   Next, the system control unit 14 acquires the specified posted data and other information posted on the posted information posting page from the posted information DB 12b, and acquires the reliability corresponding to the specified posted data from the posted information DB 12b ( Step S202).

次いで、システム制御部14は、投稿情報掲載ページ用のHTML文書を記憶部12から取得し、投稿情報DB12bから取得した投稿データを、取得したHTML文書に追加する(ステップS203)。   Next, the system control unit 14 acquires an HTML document for the posted information posting page from the storage unit 12, and adds the posted data acquired from the posted information DB 12b to the acquired HTML document (step S203).

次いで、システム制御部14は、決定手段として、投稿情報DB12bから取得した信頼度に応じて表示形式を決定する(ステップS204)。具体的に、システム制御部14は、例えば、スタイルシートに設定するcolorの値やfont-sizeの値等を決定する。このとき、システム制御部14は、例えば、所定の計算式に基づいて、信頼度から表示形式を示す値を算出しても良いし、信頼度と表示形式との対応関係を示すテーブルに基づいて、表示形式を決定しても良い。   Next, the system control unit 14 determines a display format according to the reliability acquired from the posting information DB 12b as a determination unit (step S204). Specifically, the system control unit 14 determines, for example, a color value and a font-size value set in the style sheet. At this time, for example, the system control unit 14 may calculate a value indicating the display format from the reliability based on a predetermined calculation formula, or based on a table indicating a correspondence relationship between the reliability and the display format. The display format may be determined.

次いで、システム制御部14は、投稿情報掲載ページ用のスタイルシートを記憶部12から取得し、決定した表示形式を、取得したスタイルシートに設定する(ステップS205)。   Next, the system control unit 14 acquires a post information posting page style sheet from the storage unit 12, and sets the determined display format in the acquired style sheet (step S205).

なお、システム制御部14は、掲載する投稿データを複数特定した場合、表示形式の決定及びスタイルシートへの設定を、投稿データ毎に行う。   When a plurality of posted data to be posted is specified, the system control unit 14 determines the display format and sets the style sheet for each posted data.

次いで、システム制御部14は、投稿情報掲載ページ用のHTML文書及びスタイルシートを、ユーザ端末2に送信して(ステップS206)、投稿情報掲載ページリクエスト受信時処理を終了させる。なお、システム制御部14は、スタイルシートを独立のデータとせず、HTML文書中にスタイルシートを含めてユーザ端末2に送信しても良い。   Next, the system control unit 14 transmits the HTML document and the style sheet for the posted information posting page to the user terminal 2 (step S206), and ends the processing when the posted information posting page request is received. Note that the system control unit 14 may transmit the style sheet to the user terminal 2 without including the style sheet in the HTML document, instead of using the style sheet as independent data.

ユーザ端末2は、受信したHTML文書及びスタイルシートに基づいて、投稿情報掲載ページを、例えば、図3や図4に示すように画面に表示する。   Based on the received HTML document and style sheet, the user terminal 2 displays a posted information posting page on the screen as shown in FIGS. 3 and 4, for example.

以上説明したように、本実施形態によれば、システム制御部14が、ユーザ端末2から投稿データと視聴覚データとを取得し、取得した投稿データから投稿対象ワードを抽出し、抽出した投稿対象ワードにより特定される投稿対象の視聴覚データを音声・画像DB12dから取得し、ユーザ端末2から取得した視聴覚データと、音声・画像DB12dから取得した投稿対象の視聴覚データとを比較し、比較結果に基づいて、取得した投稿データの表示形式を決定する。従って、投稿データの表示形式から、閲覧者がその投稿データの信頼性を認識することができる。   As described above, according to the present embodiment, the system control unit 14 acquires post data and audiovisual data from the user terminal 2, extracts a post target word from the acquired post data, and extracts the post target word extracted. Is obtained from the audio / image DB 12d, the audio-visual data acquired from the user terminal 2 is compared with the audio-visual data of the posting target acquired from the audio / image DB 12d, and based on the comparison result. , Decide the display format of the acquired post data. Therefore, the viewer can recognize the reliability of the posted data from the display format of the posted data.

また、システム制御部14が、ユーザ端末2により送信させる視聴覚データの条件としての認証条件を、抽出した投稿対象ワードに基づいて決定する。具体的に、システム制御部14は、投稿対象ワードにより特定される投稿対象が属するカテゴリーに基づいて、認証条件を決定する。そして、システム制御部14は、決定した認証条件をユーザに通知するための視聴覚データ送信要求を、ユーザ端末2に送信し、決定した認証条件を通知したユーザ端末2から送信された視聴覚データを受信し、抽出した投稿対象ワードと、決定した認証条件と、に対応する投稿対象の視聴覚データを音声・画像DB12dから取得し、音声・画像DB12dから取得した投稿対象の視聴覚データと、ユーザ端末2から受信した視聴覚データとを比較する。従って、投稿データの表示形式から、閲覧者がその投稿データの信頼性を認識することができる。   Further, the system control unit 14 determines an authentication condition as a condition of audiovisual data to be transmitted by the user terminal 2 based on the extracted posting target word. Specifically, the system control unit 14 determines the authentication condition based on the category to which the posting target specified by the posting target word belongs. Then, the system control unit 14 transmits an audiovisual data transmission request for notifying the user of the determined authentication condition to the user terminal 2, and receives the audiovisual data transmitted from the user terminal 2 that has notified the determined authentication condition. From the audio / image DB 12d, the audio-visual data 12d corresponding to the extracted posting target word and the determined authentication condition are acquired from the audio / image DB 12d, and the user terminal 2 The received audiovisual data is compared. Therefore, the viewer can recognize the reliability of the posted data from the display format of the posted data.

また、システム制御部14が、抽出した投稿対象ワードに対応する投稿対象の視聴覚データが投稿情報DB12bに登録されているか否かを判定し、抽出した投稿対象ワードに対応する投稿対象の視聴覚データが登録されていないと判定した場合には、取得した視聴覚データを仮登録視聴覚データとして、当該投稿対象ワードに対応付けて投稿情報DB12bに登録し、投稿対象の視聴覚データとして決定された仮登録視聴覚データを、投稿データの表示形式の決定に用いる投稿対象の視聴覚データとして取得する。従って、例えば事件や事故等のように、いつどこで起きるか予め知ることができない事物を投稿対象として投稿が行われた場合でも、投稿データの表示形式を決定することができる。   Further, the system control unit 14 determines whether or not the posting target audiovisual data corresponding to the extracted posting target word is registered in the posting information DB 12b, and the posting target audiovisual data corresponding to the extracted posting target word is determined. If it is determined that it is not registered, the acquired audiovisual data is registered as temporary registration audiovisual data in the posting information DB 12b in association with the posting target word, and temporarily registered audiovisual data determined as posting target audiovisual data. Is acquired as audiovisual data to be posted for use in determining the display format of the posted data. Therefore, even when a posting is made with an object that cannot be known in advance as to when and where it occurs, such as an incident or accident, for example, the display format of the posted data can be determined.

また、システム制御部14が、抽出した投稿対象ワードに対応する投稿対象の視聴覚データが、音声・画像DB12dに所定数以上登録されているか否かを判定し、抽出した投稿対象ワードに対応する投稿対象の視聴覚データが所定数以上登録されていると判定した場合には、当該視聴覚データ同士を比較し、比較結果に基づいて、投稿対象の視聴覚データを決定する。従って、複数の視聴覚データを用いて投稿対象の視聴覚データが決定されることで、投稿対象の視聴覚データの信頼性を高めることができる。   Further, the system control unit 14 determines whether or not a predetermined number or more of audiovisual data to be posted corresponding to the extracted posting target word is registered in the audio / image DB 12d, and the posting corresponding to the extracted posting target word If it is determined that a predetermined number or more of target audiovisual data is registered, the audiovisual data are compared with each other, and the audiovisual data to be posted is determined based on the comparison result. Accordingly, by determining the audiovisual data to be posted using a plurality of audiovisual data, the reliability of the audiovisual data to be posted can be improved.

また、システム制御部14が、投稿データを取得する都度前回の投稿データの取得時と内容が異なる可能性がある情報として、投稿時刻または被投稿回数を取得し、取得した情報に基づいて、認証条件を選択する。従って、例えば、投稿データの信頼性を上げるためにユーザが同じ視聴覚データを使用する等の不正を防止することができる。   Further, each time the system control unit 14 acquires post data, the system controller 14 acquires the post time or the number of postings as information that may differ from the previous post data acquisition time, and authenticates based on the acquired information. Select a condition. Therefore, for example, it is possible to prevent fraud such as a user using the same audiovisual data in order to increase the reliability of the posted data.

また、システム制御部14が、ユーザ端末2から取得した視聴覚データが示す音または画像の少なくとも何れか一方の特徴を示す特徴量を算出し、投稿対象の視聴覚データが示す音または画像の少なくとも何れか一方の特徴を示す特徴量を算出し、特徴量間の一致度を算出し、一致度に基づいて表示形式を決定する。従って、ユーザ端末2において入力した音または撮影した画像の特徴と、投稿対象の音または画像の特徴との一致の程度に基づいて、ユーザが投稿対象を直接見聞きして投稿したという投稿データの信頼性を、その表示形式で示すことができる。   In addition, the system control unit 14 calculates a feature amount indicating at least one of the features of the sound and the image indicated by the audiovisual data acquired from the user terminal 2, and at least one of the sound and the image indicated by the audiovisual data to be posted. A feature quantity indicating one feature is calculated, a matching degree between the feature quantities is calculated, and a display format is determined based on the matching degree. Therefore, based on the degree of coincidence between the sound input at the user terminal 2 or the characteristics of the captured image and the sound or image characteristics of the posting target, the reliability of the posting data that the user directly viewed and posted the posting target Can be shown in its display form.

また、システム制御部14が、ユーザ端末2から取得した音声データが示す音から、発話されたフレーズを認識し、認識したフレーズを示すテキストデータを生成し、投稿対象の音声データが示す音から、発話されたフレーズとしての認証ワードを認識し、当該認証ワードを示すテキストデータを生成し、生成したテキストデータ同士の一致度をフレーズ同士の一致度として算出し、音響的な特徴量同士の一致度と、フレーズ同士の一致度とに基づいて、表示形式を決定する。従って、ユーザ端末2に入力した音を発した話者と、投稿対象の音としての音声を発した話者との一致の程度に基づいて、投稿データの信頼性をその表示形式で示すことができるとともに、ユーザ端末2に入力した音が示すフレーズと、投稿対象の音が示す認証ワードとの一致の程度に基づいて、投稿データの信頼性をその表示形式で示すことができる。   Further, the system control unit 14 recognizes the spoken phrase from the sound indicated by the voice data acquired from the user terminal 2, generates text data indicating the recognized phrase, and from the sound indicated by the posting target voice data, Recognizes an authentication word as an uttered phrase, generates text data indicating the authentication word, calculates the degree of matching between the generated text data as the degree of matching between phrases, and the degree of matching between acoustic features The display format is determined based on the degree of matching between phrases. Therefore, the reliability of the posted data can be indicated in the display format based on the degree of coincidence between the speaker who has made the sound input to the user terminal 2 and the speaker who has made the sound as the sound to be posted. In addition, the reliability of the posted data can be shown in the display format based on the degree of matching between the phrase indicated by the sound input to the user terminal 2 and the authentication word indicated by the sound to be posted.

なお、システム制御部14は、投稿データから投稿対象ワードを抽出するとき、複数の投稿対象ワードを抽出することで、複数の投稿対象を特定しても良い。この場合、システム制御部14は、特定した投稿対象毎に投稿対象の視聴覚データを音声・画像DB12dから取得し、取得した投稿対象の視聴覚データをそれぞれユーザ端末2から取得した視聴覚データと比較して一致度を算出する。そして、システム制御部14は、特定した複数の投稿対象のうち、一致度の値が最も大きい投稿対象の視聴覚データと、ユーザ端末2から取得された視聴覚データとの比較結果に基づいて、投稿データの表示形式を決定しても良い。これにより、複数の事物を投稿対象としてユーザが投稿した場合であっても、表示形式を適切に決定することができる。   In addition, when extracting the posting target word from the posting data, the system control unit 14 may specify a plurality of posting targets by extracting a plurality of posting target words. In this case, the system control unit 14 acquires the audiovisual data of the posting target for each specified posting target from the audio / image DB 12d, and compares the acquired audiovisual data of the posting target with the audiovisual data acquired from the user terminal 2, respectively. The degree of coincidence is calculated. Then, the system control unit 14 posts the post data based on the comparison result between the audiovisual data of the posting target having the largest matching value and the audiovisual data acquired from the user terminal 2 among the plurality of specified posting targets. The display format may be determined. Thereby, even if it is a case where a user contributes to a plurality of things as a subject of contribution, a display format can be determined appropriately.

また、システム制御部14は、ユーザ端末2から受信した投稿データを投稿情報DB12bに登録するときに、その投稿データの表示形式を決定しても良い。この場合、システム制御部14は、信頼度に代えて、決定した表示形式を示す情報を投稿情報DB12bに登録する。   Further, the system control unit 14 may determine the display format of the posted data when the posted data received from the user terminal 2 is registered in the posted information DB 12b. In this case, the system control unit 14 registers information indicating the determined display format in the posting information DB 12b instead of the reliability.

また、システム制御部14は、ユーザ端末2から投稿データを受信したときにその投稿データの表示形式を決定した場合には、その投稿データが掲載される投稿情報掲載ページ用のHTML文書及びスタイルシートをその時点で生成しても良い。この場合、システム制御部14は、ユーザ端末2から投稿情報掲載ページのリクエストを受信したときに、予め生成しておいたHTML文書及びスタイルシートを送信すれば良い。   In addition, when the system control unit 14 determines the display format of the posted data when receiving the posted data from the user terminal 2, the HTML document and the style sheet for the posted information posting page on which the posted data is posted May be generated at that time. In this case, the system control unit 14 may transmit an HTML document and a style sheet generated in advance when receiving a request for a posted information posting page from the user terminal 2.

また、上記実施形態においては、システム制御部14が、認証条件を選択した後、ユーザ端末2から視聴覚データを送信させていたが、投稿データの送信と同時に視聴覚データを送信させても良い。この場合、システム制御部14は、ユーザ端末2から受信した視聴覚データが認証条件に適合しない視聴覚データである場合(例えば、認証条件のデータ種別が画像であるときに、ユーザ端末2から音声データを受信していた場合)には、ユーザ端末2に対して別の視聴覚データの送信の要求を行っても良い。   In the above embodiment, the system control unit 14 transmits the audiovisual data from the user terminal 2 after selecting the authentication condition. However, the audiovisual data may be transmitted simultaneously with the transmission of the post data. In this case, the system control unit 14 receives audio data from the user terminal 2 when the audiovisual data received from the user terminal 2 is audiovisual data that does not conform to the authentication condition (for example, when the data type of the authentication condition is an image). If it has been received), the user terminal 2 may be requested to transmit another audiovisual data.

また、投稿情報を音声データに適用し、マイクロフォンを備えるユーザ端末2によって、ユーザが投稿内容を音声で入力することができるようにしても良い。この場合、システム制御部14は、音声入力によって生成された音声データをユーザ端末2から受信し、この音声データを投稿情報DB12bに登録する。また、システム制御部14は、音声認識処理によって、音声データから、ユーザが話した言葉をテキストデータとして抽出する。そして、システム制御部14は、このテキストデータから投稿対象ワードを抽出して、投稿対象を特定する。また、システム制御部14は、決定した信頼度に基づいて、掲載時における投稿情報の出力態様として、投稿情報としての音声データの出力品質、すなわち、音質を決定する。具体的に、システム制御部14は、信頼度が高いほど音質を高くし、信頼度が低いほど音質を低くする。そして、システム制御部14は、決定した音質に応じて、投稿情報としての音声データを変換する。具体的にシステム制御部14は、信頼度がそのとりうる値の最大値である場合には、音声データの変換を行わないことにより、音質を変えないようにする。一方、システム制御部14は、信頼度が低くなるほど音質が劣化するように音声データを変換する。例えば、システム制御部14は、音声データのビットレート、サンプリング周波数、圧縮率等を変更することにより、音質を劣化させる。または、システム制御部14は、信頼度が低くなるほど、多くのノイズを音声に付加することにより、音質を劣化させても良い。そして、システム制御部14は、投稿情報としての音声データを、投稿サイトを閲覧するユーザが再生可能なように、WebページのHTML文書を生成する。ユーザは、音声データの再生によりユーザ端末2から出力された音声の音質から、投稿情報としての音声データの信頼性を認識することができる。   Further, the posting information may be applied to the voice data so that the user can input the posting contents by voice by the user terminal 2 including a microphone. In this case, the system control unit 14 receives voice data generated by voice input from the user terminal 2 and registers this voice data in the posting information DB 12b. Further, the system control unit 14 extracts the words spoken by the user as text data from the voice data by voice recognition processing. And the system control part 14 extracts a posting object word from this text data, and specifies a posting object. Further, the system control unit 14 determines the output quality of the audio data as the posting information, that is, the sound quality, as the output mode of the posting information at the time of posting based on the determined reliability. Specifically, the system control unit 14 increases the sound quality as the reliability is higher, and lowers the sound quality as the reliability is lower. And the system control part 14 converts the audio | voice data as posting information according to the determined sound quality. Specifically, when the reliability is the maximum value that can be taken, the system control unit 14 does not change the sound quality by not converting the sound data. On the other hand, the system control unit 14 converts the audio data so that the sound quality deteriorates as the reliability decreases. For example, the system control unit 14 deteriorates the sound quality by changing the bit rate, sampling frequency, compression rate, and the like of the audio data. Alternatively, the system control unit 14 may deteriorate the sound quality by adding more noise to the voice as the reliability becomes lower. And the system control part 14 produces | generates the HTML document of a web page so that the user who browses a contribution site can reproduce | regenerate the audio | voice data as contribution information. The user can recognize the reliability of the audio data as the posting information from the sound quality of the audio output from the user terminal 2 by reproducing the audio data.

また、認証条件のデータ種別が音声である場合、投稿情報としてユーザ端末2から送信された音声データを、投稿対象の音声データと比較する音声データとしても良い。具体的に、ユーザが投稿内容を音声で入力するとき、投稿対象からの音も合わせて入力する。システム制御部14は、ユーザ端末2から受信した投稿情報としての音声データからユーザの音声成分を除去することにより、比較用の音声データを生成する。例えば、ユーザの会員登録時等に、ユーザの音声を入力させて、その音声の特徴量を算出して会員DB12aに登録しておくと、この登録されている特徴量に基づいて、ユーザの音声成分を特定することができる。システム制御部14は、ユーザの音声成分が除去された比較用の音声データと投稿対象の音声データとを比較することにより、投稿情報としての音声データの表示形式を決定する。   Further, when the data type of the authentication condition is voice, the voice data transmitted from the user terminal 2 as post information may be used as voice data to be compared with the voice data to be posted. Specifically, when the user inputs the posted content by voice, the sound from the posting target is also input. The system control unit 14 generates audio data for comparison by removing the user's audio component from the audio data as post information received from the user terminal 2. For example, when a user's member is registered, the user's voice is input, the feature amount of the voice is calculated and registered in the member DB 12a, and the user's voice is calculated based on the registered feature amount. Ingredients can be identified. The system control unit 14 determines the display format of the audio data as the posting information by comparing the audio data for comparison from which the audio component of the user is removed and the audio data to be posted.

また、投稿情報を、音声データを含む動画データに適用し、マイクロフォン及びカメラを備えるユーザ端末2によって、ユーザが投稿内容を音声及び画像で入力することができるようにしても良い。この場合の投稿対象の特定方法は、音声データの場合と同様である。また、システム制御部14は、決定した信頼度に基づいて、掲載時における投稿情報の出力態様として、投稿情報としての動画データの出力品質、すなわち、画質を決定する。具体的に、システム制御部14は、信頼度が高いほど画質を高くし、信頼度が低いほど画質を低くする。そして、システム制御部14は、決定した画質に応じて、投稿情報としての動画データを変換する。具体的にシステム制御部14は、信頼度がそのとりうる値の最大値である場合には、動画データの変換を行わないことにより、画質を変えないようにする。一方、システム制御部14は、信頼度が低くなるほど画質が劣化するように動画データを変換する。例えば、システム制御部14は、動画データのビットレート、フレームレート、画像解像度、圧縮率等を変更することにより、画質を劣化させる。または、システム制御部14は、信頼度が低くなるほど、多くのノイズを動画データのフレーム画像に付加することにより、画質を劣化させても良い。そして、システム制御部14は、投稿情報としての動画データを、投稿サイトを閲覧するユーザが再生可能なように、WebページのHTML文書を生成する。ユーザは、動画データの再生によりユーザ端末2の画面に表示された動画の画質から、投稿情報としての動画データの信頼性を認識することができる。また、システム制御部14は、信頼度に基づいて動画データに含まれる音声データの音質を決定し、決定した音質に応じて動画データを変換しても良い。   Further, the posting information may be applied to moving image data including audio data, and the user terminal 2 including a microphone and a camera may allow the user to input the content of the posting as audio and an image. In this case, the posting target specifying method is the same as in the case of audio data. Further, the system control unit 14 determines the output quality of the moving image data as the posting information, that is, the image quality, as the output mode of the posting information at the time of posting based on the determined reliability. Specifically, the system control unit 14 increases the image quality as the reliability is higher, and lowers the image quality as the reliability is lower. Then, the system control unit 14 converts the moving image data as post information according to the determined image quality. Specifically, the system control unit 14 does not change the image quality by not converting the moving image data when the reliability is the maximum value that can be taken. On the other hand, the system control unit 14 converts the moving image data so that the image quality deteriorates as the reliability decreases. For example, the system control unit 14 degrades the image quality by changing the bit rate, frame rate, image resolution, compression rate, and the like of the moving image data. Alternatively, the system control unit 14 may deteriorate the image quality by adding more noise to the frame image of the moving image data as the reliability becomes lower. And the system control part 14 produces | generates the HTML document of a web page so that the user who browses a contribution site can reproduce | regenerate the moving image data as contribution information. The user can recognize the reliability of the moving image data as the posting information from the image quality of the moving image displayed on the screen of the user terminal 2 by reproducing the moving image data. Further, the system control unit 14 may determine the sound quality of the audio data included in the moving image data based on the reliability, and may convert the moving image data according to the determined sound quality.

また、認証条件のデータ種別が音声である場合、投稿情報としてユーザ端末2から送信された動画データに含まれる音声データを、投稿対象の音声データと比較する音声データとしても良い。また、認証条件のデータ種別が画像である場合、投稿情報としてユーザ端末2から送信された動画データに含まれるフレーム画像のデータを、投稿対象の画像データと比較する画像データとしても良い。   When the data type of the authentication condition is voice, the voice data included in the moving image data transmitted from the user terminal 2 as posting information may be used as voice data to be compared with the posting target voice data. Further, when the data type of the authentication condition is an image, the frame image data included in the moving image data transmitted from the user terminal 2 as the posting information may be image data to be compared with the image data to be posted.

また、上記実施形態においては、ユーザ端末2により送信させる視聴覚データが、選択された認証条件によって音声データであったり画像データであったりしていたが、音声データまたは画像データの何れか一方のみを対象としても良い。   In the above embodiment, the audiovisual data transmitted by the user terminal 2 is audio data or image data depending on the selected authentication condition. However, only one of the audio data and the image data is used. It is good as a target.

また、認証条件は、1つの条件に固定されていても良い。この場合、システム制御部14は、ユーザ端末2により認証条件をユーザに対して通知させるようにしなくても良い。   Further, the authentication condition may be fixed to one condition. In this case, the system control unit 14 may not cause the user terminal 2 to notify the user of the authentication condition.

1 投稿情報管理サーバ
2 ユーザ端末
11 通信部
12 記憶部
12a 会員情報DB
12b 投稿情報DB
12c 認証条件DB
12d 音声・画像DB
13 入出力インターフェース
14 システム制御部
14a CPU
14b ROM
14c RAM
15 システムバス
NW ネットワーク
S 投稿システム
1 Posting Information Management Server 2 User Terminal 11 Communication Unit 12 Storage Unit 12a Member Information DB
12b Posting information DB
12c Authentication condition DB
12d Audio / Image DB
13 Input / output interface 14 System controller 14a CPU
14b ROM
14c RAM
15 System Bus NW Network S Posting System

Claims (13)

端末装置がネットワークを介して接続可能なサーバ装置であって、
前記端末装置から投稿情報を取得する投稿情報取得手段と、
前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得手段と、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段と、
前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段と、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段と、
前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段と、
を備えることを特徴とするサーバ装置。
The terminal device is a server device connectable via a network,
Post information acquisition means for acquiring post information from the terminal device;
Terminal information acquisition means for acquiring terminal audiovisual information indicating at least one of sound and image from the terminal device;
Extraction means for extracting specific information that can specify a posting target from the acquired posting information;
Posting target information acquisition means for acquiring posting target audiovisual information indicating at least one of the sound or image of the posting target specified by the extracted specific information;
Comparison means for comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information;
A determination unit that determines an output mode of the acquired post information at the time of posting, based on a comparison result by the comparison unit;
A server device comprising:
端末装置がネットワークを介して接続可能なサーバ装置であって、
前記端末装置から投稿情報を取得する投稿情報取得手段と、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段と、
音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定手段と、
前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信手段と、
前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得手段と、
前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段と、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段と、
前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段と、
を備えることを特徴とするサーバ装置。
The terminal device is a server device connectable via a network,
Post information acquisition means for acquiring post information from the terminal device;
Extraction means for extracting specific information that can specify a posting target from the acquired posting information;
Condition determining means for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information;
Control information transmitting means for transmitting, to the terminal device, control information for causing the terminal device to notify the determined condition;
Terminal information acquisition means for receiving the terminal audiovisual information transmitted from the terminal device;
Posting target information acquisition means for acquiring posting target audiovisual information indicating a sound or an image corresponding to the extracted specific information and the determined condition;
Comparison means for comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information;
A determination unit that determines an output mode of the acquired post information at the time of posting, based on a comparison result by the comparison unit;
A server device comprising:
請求項1または請求項2に記載のサーバ装置において、
前記投稿対象視聴覚情報を前記特定情報に対応付けて記憶する記憶装置に、前記抽出された特定情報に対応する前記投稿対象視聴覚情報が記憶されているか否かを判定する判定手段と、
前記抽出された特定情報に対応する前記投稿対象視聴覚情報が記憶されていないと判定された場合には、前記取得された端末視聴覚情報を前記投稿対象視聴覚情報として、当該特定情報に対応付けて前記記憶装置に記憶させる記憶手段と、
を更に備え、
前記投稿対象情報取得手段は、前記記憶装置に記憶された前記投稿対象視聴覚情報を、前記比較手段による比較に用いられる前記投稿対象視聴覚情報として取得することを特徴とするサーバ装置。
In the server apparatus according to claim 1 or 2,
Determining means for determining whether or not the posting target audiovisual information corresponding to the extracted specific information is stored in a storage device that stores the posting target audiovisual information in association with the specific information;
If it is determined that the posting target audiovisual information corresponding to the extracted specific information is not stored, the acquired terminal audiovisual information is associated with the specific information as the posting target audiovisual information. Storage means for storing in the storage device;
Further comprising
The server apparatus characterized in that the posting target information acquisition means acquires the posting target audiovisual information stored in the storage device as the posting target audiovisual information used for comparison by the comparison means.
請求項3に記載のサーバ装置において、
前記判定手段は、前記抽出された特定情報に対応する前記投稿対象視聴覚情報が、前記記憶装置に予め定められた数以上記憶されているか否かを判定し、
前記抽出された特定情報に対応する前記投稿対象視聴覚情報が予め定められた数以上記憶されていると判定された場合には、当該投稿対象視聴覚情報同士を比較する投稿対象情報比較手段と、
前記投稿対象情報比較手段による比較結果に基づいて、前記比較手段による比較に用いられる前記投稿対象視聴覚情報を決定する投稿対象情報決定手段と、
を更に備え、
前記投稿対象情報取得手段は、前記投稿対象情報決定手段により決定された前記投稿対象視聴覚情報を取得することを特徴とするサーバ装置。
The server device according to claim 3,
The determination unit determines whether or not the posting target audiovisual information corresponding to the extracted specific information is stored in a predetermined number or more in the storage device,
If it is determined that a predetermined number or more of the posting target audiovisual information corresponding to the extracted specific information is stored, the posting target information comparing means for comparing the posting target audiovisual information;
Posting target information determining means for determining the posting target audiovisual information used for the comparison by the comparing means based on the comparison result by the posting target information comparing means;
Further comprising
The server apparatus characterized in that the posting target information acquisition means acquires the posting target audiovisual information determined by the posting target information determination means.
請求項2に記載のサーバ装置において、
前記投稿情報取得手段が前記投稿情報を取得する都度変化し得る変化情報を取得する変化情報取得手段を更に備え、
前記決定手段は、前記取得された変化情報に基づいて、前記端末装置により送信させる前記端末視聴覚情報の条件を、予め定められた複数の条件の中から決定することを特徴とするサーバ装置。
The server device according to claim 2,
The post information acquisition means further comprises change information acquisition means for acquiring change information that can change each time the post information is acquired,
The determination unit determines a condition of the terminal audiovisual information to be transmitted by the terminal apparatus from a plurality of predetermined conditions based on the acquired change information.
請求項1乃至5の何れか1項に記載のサーバ装置において、
前記比較手段は、
前記取得された端末視聴覚情報が示す音または画像の少なくとも何れか一方の特徴を示す端末特徴情報を生成する端末特徴情報生成手段と、
前記取得された投稿対象視聴覚情報が示す音または画像の少なくとも何れか一方の特徴を示す投稿対象特徴情報を生成する投稿対象特徴情報生成手段と、
前記生成された端末特徴情報と前記生成された投稿対象特徴情報との一致度を算出する特徴一致度算出手段と、
を備え、
前記決定手段は、前記算出された一致度に基づいて、掲載時における前記取得された投稿情報の出力態様を決定することを特徴とするサーバ装置。
The server apparatus according to any one of claims 1 to 5,
The comparison means includes
Terminal feature information generating means for generating terminal feature information indicating at least one of the characteristics of the sound or image indicated by the acquired terminal audiovisual information;
Posting target feature information generating means for generating posting target feature information indicating at least one of the features of the sound or image indicated by the acquired posting target audiovisual information;
A feature matching degree calculating means for calculating a matching degree between the generated terminal feature information and the generated posting target feature information;
With
The determination unit determines an output mode of the acquired post information at the time of posting based on the calculated degree of coincidence.
請求項6に記載のサーバ装置において、
前記比較手段は、
前記取得された端末視聴覚情報が示す音から発話語を認識し、当該発話語を示す端末発話語情報を生成する端末発話語情報生成手段と、
前記取得された投稿対象視聴覚情報が示す音から発話語を認識し、当該発話語を示す投稿対象発話語情報を生成する投稿対象発話語情報生成手段と、
前記生成された端末発話語情報と前記生成された投稿対象発話語情報との一致度を算出する発話語一致度算出手段と、
を更に備え、
前記決定手段は、前記特徴一致度算出手段により算出された一致度と、前記発話語一致度算出手段により算出された一致度と、に基づいて、掲載時における前記取得された投稿情報の出力態様を決定することを特徴とするサーバ装置。
The server device according to claim 6,
The comparison means includes
A terminal utterance word information generating means for recognizing an utterance word from the sound indicated by the acquired terminal audiovisual information and generating terminal utterance word information indicating the utterance word;
Posting target utterance word information generating means for recognizing an utterance word from the sound indicated by the acquired posting target audiovisual information and generating posting target utterance word information indicating the utterance word;
An utterance word matching degree calculating means for calculating a degree of matching between the generated terminal utterance word information and the generated posting target utterance word information;
Further comprising
The determining unit is configured to output the acquired post information at the time of posting based on the coincidence calculated by the feature coincidence calculating unit and the coincidence calculated by the spoken word coincidence calculating unit. A server apparatus characterized by determining
端末装置がネットワークを介して接続可能なサーバ装置における投稿情報処理方法であって、
前記端末装置から投稿情報を取得する投稿情報取得ステップと、
前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得ステップと、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出ステップと、
前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得ステップと、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較ステップと、
前記比較ステップにおける比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定ステップと、
を含むことを特徴とする投稿情報処理方法。
A posting information processing method in a server device to which a terminal device can be connected via a network,
A posting information acquisition step of acquiring posting information from the terminal device;
Terminal information acquisition step of acquiring terminal audiovisual information indicating at least one of sound and image from the terminal device;
An extraction step of extracting specific information that can specify a posting target from the acquired posting information;
A posting target information acquisition step of acquiring posting target audiovisual information indicating at least one of the sound or image of the posting target specified by the extracted specific information;
A comparison step of comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information;
Based on the comparison result in the comparison step, a determination step for determining an output mode of the acquired post information at the time of posting;
A post information processing method comprising:
端末装置がネットワークを介して接続可能なサーバ装置における投稿情報処理方法であって、
前記端末装置から投稿情報を取得する投稿情報取得ステップと、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出ステップと、
音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定ステップと、
前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信ステップと、
前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得ステップと、
前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得ステップと、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較ステップと、
前記比較ステップにおける比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定ステップと、
を含むことを特徴とする投稿情報処理方法。
A posting information processing method in a server device to which a terminal device can be connected via a network,
A posting information acquisition step of acquiring posting information from the terminal device;
An extraction step of extracting specific information that can specify a posting target from the acquired posting information;
A condition determining step for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information;
A control information transmission step for transmitting control information for notifying the terminal device of the determined condition to the terminal device;
A terminal information acquisition step of receiving the terminal audiovisual information transmitted from the terminal device;
A posting target information acquiring step for acquiring posting target audiovisual information indicating a sound or an image corresponding to the extracted specific information and the determined condition;
A comparison step of comparing the acquired posting target audiovisual information with the acquired terminal audiovisual information;
Based on the comparison result in the comparison step, a determination step for determining an output mode of the acquired post information at the time of posting;
A post information processing method comprising:
端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、
前記端末装置から投稿情報を取得する投稿情報取得手段、
前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得手段、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、
前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、
前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、
として機能させることを特徴とする投稿情報処理プログラム。
A computer included in a server device to which a terminal device can be connected via a network,
Post information acquisition means for acquiring post information from the terminal device,
Terminal information acquisition means for acquiring terminal audiovisual information indicating at least one of sound and image from the terminal device;
Extraction means for extracting specific information from which the posting target can be specified from the acquired posting information;
Posting target information acquisition means for acquiring posting target audiovisual information indicating at least one of the sound or image of the posting target specified by the extracted specific information;
Comparison means for comparing the acquired posting target audio-visual information with the acquired terminal audio-visual information, and
Determining means for determining an output mode of the acquired post information at the time of posting based on a comparison result by the comparing means;
Posting information processing program characterized by functioning as
端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、
前記端末装置から投稿情報を取得する投稿情報取得手段、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、
音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定手段、
前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信手段、
前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得手段、
前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、
前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、
として機能させることを特徴とする投稿情報処理プログラム。
A computer included in a server device to which a terminal device can be connected via a network,
Post information acquisition means for acquiring post information from the terminal device,
Extraction means for extracting specific information from which the posting target can be specified from the acquired posting information;
Condition determining means for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information;
Control information transmitting means for transmitting control information for notifying the terminal device of the determined condition to the terminal device;
Terminal information acquisition means for receiving the terminal audiovisual information transmitted from the terminal device;
Posting target information acquisition means for acquiring posting target audiovisual information indicating a sound or an image corresponding to the extracted specific information and the determined condition;
Comparison means for comparing the acquired posting target audio-visual information with the acquired terminal audio-visual information, and
Determining means for determining an output mode of the acquired post information at the time of posting based on a comparison result by the comparing means;
Posting information processing program characterized by functioning as
端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、
前記端末装置から投稿情報を取得する投稿情報取得手段、
前記端末装置から音または画像の少なくとも何れか一方を示す端末視聴覚情報を取得する端末情報取得手段、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、
前記抽出された特定情報により特定される投稿対象の音または画像の少なくとも何れか一方を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、
前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、
として機能させる投稿情報処理プログラムがコンピュータ読み取り可能に記録されていることを特徴とする記録媒体。
A computer included in a server device to which a terminal device can be connected via a network,
Post information acquisition means for acquiring post information from the terminal device,
Terminal information acquisition means for acquiring terminal audiovisual information indicating at least one of sound and image from the terminal device;
Extraction means for extracting specific information from which the posting target can be specified from the acquired posting information;
Posting target information acquisition means for acquiring posting target audiovisual information indicating at least one of the sound or image of the posting target specified by the extracted specific information;
Comparison means for comparing the acquired posting target audio-visual information with the acquired terminal audio-visual information, and
Determining means for determining an output mode of the acquired post information at the time of posting based on a comparison result by the comparing means;
A recording medium in which a posted information processing program that functions as a computer is recorded so as to be readable by a computer.
端末装置がネットワークを介して接続可能なサーバ装置に含まれるコンピュータを、
前記端末装置から投稿情報を取得する投稿情報取得手段、
前記取得された投稿情報から投稿対象を特定可能な特定情報を抽出する抽出手段、
音または画像の少なくとも何れか一方を示す情報として前記端末装置により送信させる端末視聴覚情報の条件を、前記抽出された特定情報に基づいて決定する条件決定手段、
前記決定された条件を前記端末装置により通知させるための制御情報を、前記端末装置に送信する制御情報送信手段、
前記端末装置から送信された前記端末視聴覚情報を受信する端末情報取得手段、
前記抽出された特定情報と、前記決定された条件と、に対応する音または画像を示す投稿対象視聴覚情報を取得する投稿対象情報取得手段、
前記取得された投稿対象視聴覚情報と前記取得された端末視聴覚情報とを比較する比較手段、及び、
前記比較手段による比較結果に基づいて、掲載時における前記取得された投稿情報の出力態様を決定する決定手段、
として機能させる投稿情報処理プログラムがコンピュータ読み取り可能に記録されていることを特徴とする記録媒体。
A computer included in a server device to which a terminal device can be connected via a network,
Post information acquisition means for acquiring post information from the terminal device,
Extraction means for extracting specific information from which the posting target can be specified from the acquired posting information;
Condition determining means for determining a condition of terminal audiovisual information to be transmitted by the terminal device as information indicating at least one of sound and image based on the extracted specific information;
Control information transmitting means for transmitting control information for notifying the terminal device of the determined condition to the terminal device;
Terminal information acquisition means for receiving the terminal audiovisual information transmitted from the terminal device;
Posting target information acquisition means for acquiring posting target audiovisual information indicating a sound or an image corresponding to the extracted specific information and the determined condition;
Comparison means for comparing the acquired posting target audio-visual information with the acquired terminal audio-visual information, and
Determining means for determining an output mode of the acquired post information at the time of posting based on a comparison result by the comparing means;
A recording medium in which a posted information processing program that functions as a computer is recorded so as to be readable by a computer.
JP2010164098A 2010-07-21 2010-07-21 Server device, posting information processing method, posting information processing program and recording medium Pending JP2012027604A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010164098A JP2012027604A (en) 2010-07-21 2010-07-21 Server device, posting information processing method, posting information processing program and recording medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010164098A JP2012027604A (en) 2010-07-21 2010-07-21 Server device, posting information processing method, posting information processing program and recording medium

Publications (1)

Publication Number Publication Date
JP2012027604A true JP2012027604A (en) 2012-02-09

Family

ID=45780480

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010164098A Pending JP2012027604A (en) 2010-07-21 2010-07-21 Server device, posting information processing method, posting information processing program and recording medium

Country Status (1)

Country Link
JP (1) JP2012027604A (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013168021A (en) * 2012-02-15 2013-08-29 Nifty Corp Event detection device
JP2013182422A (en) * 2012-03-01 2013-09-12 Nikon Corp Electronic device
JP2013196662A (en) * 2012-03-23 2013-09-30 Nintendo Co Ltd Display control program, display control device, display control system and display control method
JP2016051195A (en) * 2014-08-28 2016-04-11 Kddi株式会社 Content providing apparatus, method of providing content, and program
JP2017146950A (en) * 2016-02-18 2017-08-24 株式会社フィール Information providing system
JP2020129230A (en) * 2019-02-07 2020-08-27 株式会社メルカリ Information processing program, information processing terminal, information processing method, and information processing device
JP2022523811A (en) * 2019-03-04 2022-04-26 ツイッター インコーポレイテッド Capture and present media content

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013168021A (en) * 2012-02-15 2013-08-29 Nifty Corp Event detection device
JP2013182422A (en) * 2012-03-01 2013-09-12 Nikon Corp Electronic device
JP2013196662A (en) * 2012-03-23 2013-09-30 Nintendo Co Ltd Display control program, display control device, display control system and display control method
JP2016051195A (en) * 2014-08-28 2016-04-11 Kddi株式会社 Content providing apparatus, method of providing content, and program
JP2017146950A (en) * 2016-02-18 2017-08-24 株式会社フィール Information providing system
JP2020129230A (en) * 2019-02-07 2020-08-27 株式会社メルカリ Information processing program, information processing terminal, information processing method, and information processing device
JP2022523811A (en) * 2019-03-04 2022-04-26 ツイッター インコーポレイテッド Capture and present media content

Similar Documents

Publication Publication Date Title
JP5372254B2 (en) Server apparatus, posting information processing method, posting information processing program, and recording medium
JP2012027604A (en) Server device, posting information processing method, posting information processing program and recording medium
CN102782751B (en) Digital media voice tags in social networks
US9942337B2 (en) System and method for continuously monitoring and searching social networking media
US9230547B2 (en) Metadata extraction of non-transcribed video and audio streams
US20110055227A1 (en) Conference relay apparatus and conference system
WO2017117879A1 (en) Personal identification processing method, apparatus and system
CN104463423A (en) Formative video resume collection method and system
CN111462783A (en) Audio and video recording guiding method and device, computer equipment and storage medium
US20140074950A1 (en) Determining additional information associated with geographic location information
US20190075097A1 (en) Verification system
US11893815B2 (en) Systems and methods for generating search results based on optical character recognition techniques and machine-encoded text
CN110852193A (en) Face recognition method and device
US20160042302A1 (en) Information processing device, information processing method, and information processing program
US20130332170A1 (en) Method and system for processing content
KR20140060217A (en) System and method for posting message by audio signal
JP2012027603A (en) Server device, delivery determination method, delivery determination program and recording medium
CN113301382A (en) Video processing method, device, medium, and program product
CN116912478A (en) Object detection model construction, image classification method and electronic equipment
JP2018529149A (en) Method and apparatus for push distributing information
CN109064618A (en) Intelligent entrance guard terminal and system
JP4808763B2 (en) Audio information collecting apparatus, method and program thereof
JP5868881B2 (en) Useful information presentation system and control method of useful information presentation system
JP2022039764A (en) Information processing device, information processing program, information processing method, and information processing system
US20190073469A1 (en) Verification system