JP4866153B2 - Interactive question method, interactive question system, interactive question program, and recording medium recording the program - Google Patents

Interactive question method, interactive question system, interactive question program, and recording medium recording the program Download PDF

Info

Publication number
JP4866153B2
JP4866153B2 JP2006153961A JP2006153961A JP4866153B2 JP 4866153 B2 JP4866153 B2 JP 4866153B2 JP 2006153961 A JP2006153961 A JP 2006153961A JP 2006153961 A JP2006153961 A JP 2006153961A JP 4866153 B2 JP4866153 B2 JP 4866153B2
Authority
JP
Japan
Prior art keywords
hint
answer
correct answer
sentence
data group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006153961A
Other languages
Japanese (ja)
Other versions
JP2007322836A (en
Inventor
竜一郎 東中
秀樹 磯崎
英作 前田
泰浩 南
武士 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2006153961A priority Critical patent/JP4866153B2/en
Publication of JP2007322836A publication Critical patent/JP2007322836A/en
Application granted granted Critical
Publication of JP4866153B2 publication Critical patent/JP4866153B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Electrically Operated Instructional Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、正答に対応するヒントを質問として出力すると共に、質問に対応する回答に応じる対話型質問方法、対話型質問システム、対話型質問プログラム及びそのプログラムを記録した記録媒体に関する。   The present invention relates to an interactive question method, an interactive question system, an interactive question program, and a recording medium on which the program is recorded, which outputs a hint corresponding to a correct answer as a question and responds to an answer corresponding to the question.

従来、クイズ(ゲーム)の自動作成システムが知られている(例えば、非特許文献1参照)。非特許文献1に記載されたシステムは、駄洒落なぞなぞを生成するものである。また、「辞書の定義文を提示することにより逆に見出し語を当てる」クイズを生成するシステムが知られている。また、例えば、数字当てゲームのように、利用者(以下、ユーザという)の入力数字が、予め定められた正答の数字よりも大きいか小さいかという情報(正答に導く情報一般のこと:以下、ヒントという)を対話形式で自動的に与えるクイズ生成システムが知られている。   Conventionally, a quiz (game) automatic creation system is known (see, for example, Non-Patent Document 1). The system described in Non-Patent Document 1 generates a joke riddle. There is also known a system that generates a quiz that “reverses a headword by presenting a dictionary definition sentence”. Further, for example, as in a number guessing game, information on whether the input number of the user (hereinafter referred to as a user) is larger or smaller than a predetermined correct answer number (generally information leading to a correct answer: There are known quiz generation systems that automatically give hints) interactively.

また、クイズに限らず、ユーザとの対話を可能とする情報を生成する対話システムが知られている(例えば、非特許文献2参照)。非特許文献2に記載された対話システムは、ユーザと協同で予め決められたタスクを実行する目的指向型の対話システムであり、音声による気象情報案内を目的としている。また、対話システムの1つとして、質問応答(QA:Question Answering)システムが知られている(例えば、非特許文献3参照)。非特許文献3に記載されたQAシステムは、新聞記事などの大量の文書集合(データベース)から質問に対する解答を探し出して、要約を作成し、ユーザに提示するものである。また、ゲームの分野では、ユーザに複数(例えば20個)の質問を対話的に提示して回答を受け付けることで、ユーザの考えている事物を推定するシステム(商品名「20Q」、会社名「RADICA GAMES LTD.」)が知られている(例えば、非特許文献4参照)。
キムビンステッド、滝澤修、「日本語駄洒落なぞなぞ生成システム“BOKE”」、人工知能学会誌、1998年11月、vol.13、No.6、p.920−927 堂坂浩二、外4名、「音声対話システム「飛遊夢(ひゅうむ)」」電子情報通信学会2001年総合大会講演論文集、2001年、p.506−507 佐々木裕、外7名、「SAIQA:大量文書に基づく質問応答システム」、自然言語処理研究会/情報学基礎研究会、FI64/NL145−12、情報処理学会、2001年9月11日、p.77−82 [online]、[平成18年5月31日検索]、インターネット<URL:http://www.asovision.com/20q/top.html>
In addition, not only quizzes, but also a dialogue system that generates information that enables dialogue with a user is known (see, for example, Non-Patent Document 2). The dialogue system described in Non-Patent Document 2 is a goal-oriented dialogue system that executes a predetermined task in cooperation with a user, and is intended for weather information guidance by voice. Also, as one of dialogue systems, a question answering (QA) system is known (for example, see Non-Patent Document 3). The QA system described in Non-Patent Document 3 searches for answers to questions from a large collection of documents (database) such as newspaper articles, creates a summary, and presents it to the user. Also, in the game field, a system (product name “20Q”, company name “ RADICA GAMES LTD. ”) Is known (see, for example, Non-Patent Document 4).
Kim Binstead, Osamu Takizawa, “Japanese drunken riddle generation system“ BOKE ””, Japanese Society for Artificial Intelligence, November 1998, vol.13, No.6, p.920-927 Koji Dosaka, 4 others, “Spoken Dialogue System“ Hyumu ”” Proceedings of the 2001 IEICE General Conference, 2001, p.506-507 Hiroshi Sasaki, 7 others, “SAIQA: Question Answering System Based on Mass Documents”, Natural Language Processing Research Group / Informatics Fundamentals Study Group, FI64 / NL145-12, Information Processing Society of Japan, September 11, 2001, p. 77-82 [online], [Search May 31, 2006], Internet <URL: http://www.asovision.com/20q/top.html>

しかしながら、従来のクイズシステムは、ヒントを生成しないため、対話形式のクイズを実現できなかった。また、たとえ対話形式であったとしても、現状では、クイズの正答が単純な数字や記号であることを前提としている。また、非特許文献2に記載された対話システムは、目的指向型の対話システムなので対話を長引かせるような無駄な対話を避ける必要がある。また、QAシステムは、一問一答であり、ヒントの生成を前提とするものではない。また、ユーザの考えている事物を推定するゲームは、「はい」や「いいえ」などしか受け付けず、ヒントを生成するものではない。   However, since conventional quiz systems do not generate hints, interactive quizzes cannot be realized. Also, even if it is interactive, it is currently assumed that the correct answer of the quiz is a simple number or symbol. Further, since the dialogue system described in Non-Patent Document 2 is a purpose-oriented dialogue system, it is necessary to avoid a wasteful dialogue that prolongs the dialogue. Further, the QA system is one question one answer and does not assume the generation of hints. In addition, the game for estimating the thing that the user is thinking only accepts “Yes” or “No”, and does not generate a hint.

そこで、本発明では、前記した問題を解決し、質問を対話的に継続させることにより、娯楽や知識の習得に役立てることができる対話型質問方法、対話型質問システム、対話型質問プログラムおよび記録媒体を提供することを目的とする。   Therefore, in the present invention, an interactive question method, an interactive question system, an interactive question program, and a recording medium that can be used for learning and learning by resolving the above-described problems and continuing the questions interactively. The purpose is to provide.

前記課題を解決するため、請求項1に記載の対話型質問方法は、予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムの対話型質問方法であって、前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択ステップと、前記回答と前記正答とが一致するか否かを判定する一致判定ステップと、前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索ステップと、前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出ステップと、前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成ステップと、前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理ステップとを有することを特徴とする。   In order to solve the problem, the interactive question method according to claim 1 outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a problem to which a predetermined correct answer is applied, as the questions. The interactive question method of the interactive question system that outputs different questions according to the answers corresponding to the plurality of hint sentences is arranged in the priority order from the hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order. Therefore, when the hint sentence selecting step for selecting the hint sentence, the match determining step for determining whether or not the answer and the correct answer match, and the answer and the correct answer do not match, the predetermined text In the data group, a search step for searching a data group including the correct answer, a data group including the answer, and a data group including both the answer and the correct answer; Based on the retrieved result, a similarity calculation step for calculating the degree of co-occurrence between the answer and the correct answer in the text data group as a similarity between the answer and the correct answer; A response sentence generating step for generating a response sentence for the answer based on the similarity, and an question management step for repeatedly giving the different questions until the answer and the correct answer match.

かかる手順によれば、対話型質問システムは、ヒント文選択ステップで、優先順にしたがってヒント文を選択する。ここで、ユーザにとって正答がすぐに分かるようなヒント文は、優先順が低く、ヒントリストにおいて、なるべく後でユーザに提示するような順番に配置される。また、対話型質問システムは、回答と正答とが一致するまで異なる質問を繰り返し出題し、その間、回答と正答とが一致しない場合には、テキストデータ群における回答と正答との共起性の高さを基準にした類似度に基づいた応答文が生成される。ここで、テキストデータ群としては、インターネット等から取得可能なweb情報(webデータ)や専門家によって構築された辞書(辞書データ)を利用することができる。   According to such a procedure, the interactive question system selects hint sentences according to a priority order in the hint sentence selection step. Here, the hint sentences that allow the user to know the correct answer immediately have a low priority and are arranged in the hint list in an order that is presented to the user as much as possible later. In addition, the interactive question system repeatedly asks different questions until the answer and correct answer match, and if the answer and correct answer do not match during that time, the co-occurrence of the answer and correct answer in the text data group is high. A response sentence based on the similarity based on the length is generated. Here, as the text data group, web information (web data) that can be acquired from the Internet or the like, or a dictionary (dictionary data) constructed by an expert can be used.

また、請求項2に記載の対話型質問方法は、請求項1に記載の対話型質問方法において、複数の正答候補を格納した正答候補データベースから所定の正答候補を選択し、前記選択した正答候補を正答として生成する正答生成ステップと、前記生成された正答に対応するヒントとして、キーワードまたはフレーズで表現された複数のヒント表現を、前記テキストデータ群から取得するヒント表現取得ステップと、前記取得されたヒント表現を含む文を示すヒント文候補を生成するヒント文候補生成ステップと、前記生成された各ヒント文候補からキーワードを抽出するヒントキーワード抽出ステップと、前記テキストデータ群において、前記正答と前記抽出されたキーワードとの両方を含む文書に関する特徴量と、前記テキストデータ群におけるすべての文書に関する特徴量とを含む複数の特徴量を抽出する特徴量抽出ステップと、前記抽出された特徴量に基づいて、前記テキストデータ群における前記正答と前記抽出されたキーワードとの共起頻度と、前記テキストデータ群における前記抽出されたキーワードの一般性とを用いて、前記各ヒント文候補に対するスコアを算出するスコア算出ステップと、前記各ヒント文候補のスコアに基づいて、前記各ヒント文候補の優先順を決定し、前記決定された優先順で前記ヒント文候補を並べて、前記ヒント文リストを生成するソートステップとをさらに有することを特徴とする。   The interactive question method according to claim 2 is the interactive question method according to claim 1, wherein a predetermined correct answer candidate is selected from a correct answer candidate database storing a plurality of correct answer candidates, and the selected correct answer candidate is selected. A correct answer generating step for generating a correct answer, a hint expression acquiring step for acquiring, from the text data group, a plurality of hint expressions expressed as keywords or phrases as hints corresponding to the generated correct answer, and the acquired A hint sentence candidate generating step for generating a hint sentence candidate indicating a sentence including a hint expression, a hint keyword extracting step for extracting a keyword from each of the generated hint sentence candidates, and in the text data group, the correct answer and the Features related to the document including both the extracted keywords and the text data group. A feature amount extraction step for extracting a plurality of feature amounts including feature amounts relating to all documents, and a co-occurrence frequency of the correct answer and the extracted keyword in the text data group based on the extracted feature amounts A score calculation step of calculating a score for each hint sentence candidate using the extracted keyword generality in the text data group, and each hint sentence based on the score of each hint sentence candidate A sorting step of determining a priority order of candidates, arranging the hint sentence candidates in the determined priority order, and generating the hint sentence list.

かかる手順によれば、対話型質問システムは、ヒント文リストを以下の方法で予め生成しておく。すなわち、対話型質問システムは、予め生成した正答に対応するキーワードやフレーズをテキストデータ群から取得してヒント文候補を生成し、テキストデータ群における正答とヒント文候補に含まれるキーワードとの共起頻度を用いたスコアを算出する。ここで、抽出されたキーワードがユーザにとって分かりにくい特定の単語の場合には、ヒントたり得ないので、スコアには、テキストデータ群におけるキーワードの一般性を反映する。これにより、対話型質問システムでは、スコアから、ユーザにとって分かり易い順番を知見できるので、この順番を逆順とすることで、各ヒント文候補の優先順を適切に決定することができる。そして、対話型質問システムは、この優先順にしたがった順番でヒント文を並べ、ヒント文リストを生成する。   According to such a procedure, the interactive question system generates a hint sentence list in advance by the following method. That is, the interactive question system acquires a keyword or phrase corresponding to a correct answer generated in advance from the text data group to generate a hint sentence candidate, and the co-occurrence of the correct answer in the text data group and the keyword included in the hint sentence candidate A score using the frequency is calculated. Here, if the extracted keyword is a specific word that is difficult for the user to understand, no hint can be given. Therefore, the generality of the keyword in the text data group is reflected in the score. Thereby, in the interactive question system, since the order that is easy for the user to understand can be found from the score, the priority order of the hint sentence candidates can be appropriately determined by making this order the reverse order. Then, the interactive question system arranges hint sentences in the order according to the priority order, and generates a hint sentence list.

また、請求項3に記載の対話型質問方法は、請求項2に記載の対話型質問方法において、前記ヒント表現取得ステップが、前記複数のヒント表現を、ネットワークまたは/および前記対話型質問システムに備えられたテキストデータ群から取得し、前記特徴量抽出ステップが、前記ヒントキーワード抽出ステップで抽出されたキーワードの特徴量を前記ネットワークまたは/および前記対話型質問システムに備えられたテキストデータ群から抽出することを特徴とする。   Also, the interactive question method according to claim 3 is the interactive question method according to claim 2, wherein the hint expression obtaining step transfers the plurality of hint expressions to the network or / and the interactive question system. The feature amount extracting step acquires the feature amount of the keyword extracted in the hint keyword extraction step from the text data group provided in the network or / and the interactive question system. It is characterized by doing.

かかる手順によれば、対話型質問システムは、ネットワーク上のテキストデータ群からキーワードやフレーズを取得した場合には、ヒント表現の多様性が増し、ユーザが興味を持ち易くなりヒント文にふさわしくなる。また、対話型質問システムに備えるテキストデータ群からキーワードやフレーズを取得する場合には、対話型質問システムを利用するユーザ(一般、会社員、学生等)や利用する目的(娯楽、社内教育、学校教育等)に応じて、所望のテキスト群を、対話型質問システムの記憶手段に予め格納しておく。これにより、ユーザや利用目的に適切なヒント表現が含まれるヒント文を生成することが可能となる。また、対話型質問システムでは、ヒント文から抽出されるキーワードの特徴量を、例えば、ネットワーク上のテキストデータ群または対話型質問システムに備えられたテキストデータ群に含まれる文書数における当該キーワードを含む文書数の割合とすることができる。ここで、キーワードとは、例えば、名詞などの一般的な単語である。したがって、キーワードの特徴量が、優先順を決定するためのスコアにおけるキーワードの一般性の指標となり得る。   According to such a procedure, when a keyword or phrase is acquired from a text data group on the network, the interactive question system increases the diversity of hint expressions, making the user more interested and suitable for the hint sentence. In addition, when acquiring keywords and phrases from the text data group provided in the interactive question system, users (general, office workers, students, etc.) who use the interactive question system and the purpose (entertainment, in-house education, school) The desired text group is stored in advance in the storage means of the interactive question system according to the education or the like. As a result, it is possible to generate a hint sentence including a hint expression appropriate for the user and the purpose of use. In the interactive question system, the keyword feature amount extracted from the hint sentence includes, for example, the keyword in the number of documents included in the text data group on the network or the text data group provided in the interactive question system. It can be the ratio of the number of documents. Here, the keyword is a general word such as a noun, for example. Therefore, the keyword feature amount can be an index of the generality of the keyword in the score for determining the priority order.

また、請求項4に記載の対話型質問方法は、請求項2に記載の対話型質問方法において、前記ヒント表現取得ステップが、前記複数のヒント表現を、ネットワークまたは/および前記対話型質問システムに備えられた予め作成された辞書データベースのテキストデータ群から取得し、前記特徴量抽出ステップが、前記ヒントキーワード抽出ステップで抽出されたキーワードの特徴量を前記辞書データベースのテキストデータ群から抽出し、前記検索ステップによって、前記辞書データベースのテキストデータ群から前記回答に関する情報として前記回答に付随した付随データが検索された場合に、前記応答文生成ステップが、前記検索された付随データに基づいて、前記回答に対する応答文を生成することを特徴とする。   The interactive question method according to claim 4 is the interactive question method according to claim 2, wherein the hint expression obtaining step transfers the plurality of hint expressions to the network or / and the interactive question system. Obtained from a text data group of a prepared dictionary database provided, the feature amount extraction step extracts the feature amount of the keyword extracted in the hint keyword extraction step from the text data group of the dictionary database, When the search step searches for accompanying data associated with the answer as information related to the answer from the text data group of the dictionary database, the response sentence generating step is configured to use the answer based on the searched accompanying data. A response sentence to is generated.

かかる手順によれば、対話型質問システムは、辞書データベースのテキストデータ群からキーワードやフレーズを取得した場合には、ヒント表現が正答に対して正確で良質なものとなり、ユーザにとって分かり易くなりヒント文にふさわしくなる。また、対話型質問システムでは、ヒント文から抽出されるキーワードの特徴量を、例えば、辞書データベースの見出し語等のエントリ数における当該キーワードを含むエントリ数の割合とすることができる。また、対話型質問システムは、辞書データベースのテキストデータ群から検索された付随データに基づいて、回答に対する応答文を生成する。ここで、付随データは、正答をその事物の名称とすると、その事物に付随する性質や関連する事物の情報を指す。例えば、回答が人名であれば、付随データには、職業、生没年、居住地等の情報が含まれる。これにより、応答文生成ステップは、回答と正答の付随データをそれぞれ比較した応答文を生成することが可能となる。   According to such a procedure, when a keyword or phrase is acquired from the text data group of the dictionary database, the interactive question system makes the hint expression accurate and high quality with respect to the correct answer, making it easy for the user to understand the hint sentence. It becomes suitable for. In the interactive question system, the keyword feature amount extracted from the hint sentence can be, for example, the ratio of the number of entries including the keyword in the number of entries such as a dictionary word entry. The interactive question system generates a response sentence to the answer based on the accompanying data retrieved from the text data group of the dictionary database. Here, if the correct answer is the name of the thing, the accompanying data indicates the property attached to the thing and information on the related thing. For example, if the answer is a person's name, the accompanying data includes information such as occupation, birth date, and place of residence. Thereby, the response sentence generation step can generate a response sentence that compares the accompanying data of the answer and the correct answer.

また、請求項5に記載の対話型質問方法は、請求項2ないし請求項4のいずれか一項に記載の対話型質問方法において、前記回答を、前記正答候補データベースから抽出する回答抽出ステップをさらに有することを特徴とする。   The interactive question method according to claim 5 is the interactive question method according to any one of claims 2 to 4, further comprising: an answer extraction step of extracting the answer from the correct answer candidate database. Furthermore, it is characterized by having.

かかる手順によれば、対話型質問システムは、ユーザの代わりに回答を抽出し、抽出した回答が正答と一致するか否かを判別し、抽出した回答と正答との類似度を求め、適切な応答文を生成すると共に、抽出した回答が正答と一致するまで、質問を出題し続ける。つまり、対話型質問システムは、質問側と、擬似ユーザとしての回答側との2役を演じて対話を実現する。したがって、この一連の過程をユーザに提示することにより、娯楽や知識の習得に役立てることができる   According to such a procedure, the interactive question system extracts an answer on behalf of the user, determines whether or not the extracted answer matches the correct answer, determines the similarity between the extracted answer and the correct answer, A response sentence is generated, and questions are continued until the extracted answer matches the correct answer. That is, the interactive question system realizes a dialog by playing two roles of the question side and the answer side as a pseudo user. Therefore, by presenting this series of processes to the user, it can be used for entertainment and knowledge acquisition.

また、請求項6に記載の対話型質問方法は、請求項1ないし請求項5のいずれか一項に記載の対話型質問方法において、前記出題管理ステップは、前記回答と前記正答との類似度が所定値以上であるか否かを判別する判別ステップを有し、前記ヒント文選択ステップは、前記回答と前記正答との類似度に基づいて、前記ヒント文リストを前記優先順と異なる順序に並べ替え、前記並べ替えた順序にしたがって前記ヒント文を選択することを特徴とする。   The interactive question method according to claim 6 is the interactive question method according to any one of claims 1 to 5, wherein the question management step includes a similarity degree between the answer and the correct answer. And determining whether the hint sentence is greater than or equal to a predetermined value, wherein the hint sentence selecting step places the hint sentence list in an order different from the priority order based on the similarity between the answer and the correct answer. Rearranging and selecting the hint sentence according to the rearranged order.

かかる手順によれば、対話型質問システムは、回答と正答との類似度に基づいてヒント文を並べ替える。例えば、類似度が所定値よりも小さい場合に、ヒント文リストを優先順と異なる順序に並べ替える。当初、ヒント文リストは、当初、ユーザにとって分かりにくい順番に並べられているので、途中で並べ替えることにより、ユーザにとって分かり易いヒント文を当初よりも早く出題することが可能となる。ここで、並べ替えには、中抜き(スキップ)も含む。また、例えば、類似度が所定値よりも大きい場合に、ヒント文リストを優先順と異なる順序に並べ替えるようにしてもよい。これによれば、ヒント文の提示順序を、ユーザの個人差に合わせて動的に変更させることができる。   According to this procedure, the interactive question system rearranges the hint sentences based on the similarity between the answer and the correct answer. For example, when the similarity is smaller than a predetermined value, the hint sentence list is rearranged in an order different from the priority order. Initially, since the hint sentence list is initially arranged in an order that is difficult for the user to understand, the hint sentences that are easy to understand for the user can be presented earlier than before by rearranging the hint sentence list. Here, sorting includes skipping (skipping). Further, for example, when the similarity is larger than a predetermined value, the hint sentence list may be rearranged in an order different from the priority order. According to this, it is possible to dynamically change the order in which hint sentences are presented in accordance with individual differences among users.

また、前記課題を解決するため、請求項7に記載の対話型質問システムは、予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムであって、前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択手段と、前記回答と前記正答とが一致するか否かを判定する一致判定手段と、前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索手段と、前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出手段と、前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成手段と、前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理手段とを備えることを特徴とする。   In order to solve the problem, the interactive question system according to claim 7 outputs, as a question, a plurality of hint sentences which are sentences indicating hints corresponding to correct answers in a problem to which a predetermined correct answer is applied, An interactive question system that outputs different questions according to answers corresponding to the questions, wherein the hints are ordered in the priority order from a hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order. In a predetermined text data group when a hint sentence selecting means for selecting a sentence, a match determining means for determining whether or not the answer and the correct answer match, and the answer and the correct answer do not match Search means for searching a data group including the correct answer, a data group including the answer, and a data group including both the answer and the correct answer, and the searched result. Based on the similarity calculation means for calculating the degree of co-occurrence between the answer and the correct answer as the similarity between the answer and the correct answer, based on the calculated similarity Response sentence generation means for generating a response sentence for the answer, and question management means for repeatedly giving the different questions until the answer and the correct answer match.

かかる構成によれば、対話型質問システムは、ヒント文選択手段によって、優先順にしたがってヒント文を選択する。ここで、ユーザにとって正答がすぐに分かるようなヒント文は、優先順が低く、ヒントリストにおいて、なるべく後でユーザに提示するような順番に配置される。また、対話型質問システムは、出題管理手段によって、回答と正答とが一致するまで異なる質問を繰り返し出題する。また、対話型質問システムは、応答文生成手段によって、回答と正答とが一致しない場合には、テキストデータ群における回答と正答との共起性の高さを基準にした類似度に基づいた応答文を生成する。ここで、テキストデータ群としては、インターネット等から取得可能なweb情報(webデータ)や専門家によって構築された辞書(辞書データ)を利用することができる。   According to such a configuration, the interactive question system selects hint sentences according to the priority order by the hint sentence selecting means. Here, the hint sentences that allow the user to know the correct answer immediately have a low priority and are arranged in the hint list in an order that is presented to the user as much as possible later. The interactive question system repeatedly asks different questions by the question management means until the answer and the correct answer match. In addition, the interactive question system uses a response sentence generator to answer based on the similarity based on the high level of co-occurrence between the answer and the correct answer in the text data group when the answer and the correct answer do not match. Generate a statement. Here, as the text data group, web information (web data) that can be acquired from the Internet or the like, or a dictionary (dictionary data) constructed by an expert can be used.

また、請求項8に記載の対話型質問システムは、請求項7に記載の対話型質問システムにおいて、複数の正答候補を格納した正答候補データベースから所定の正答候補を選択し、前記選択した正答候補を正答として生成する正答生成手段と、前記生成された正答に対応するヒントとして、キーワードまたはフレーズで表現された複数のヒント表現を、前記テキストデータ群から取得するヒント表現取得手段と、前記取得されたヒント表現を含む文を示すヒント文候補を生成するヒント文候補生成手段と、前記生成された各ヒント文候補からキーワードを抽出するヒントキーワード抽出手段と、前記テキストデータ群において、前記正答と前記抽出されたキーワードとの両方を含む文書に関する特徴量と、前記テキストデータ群におけるすべての文書に関する特徴量とを含む複数の特徴量を抽出する特徴量抽出手段と、前記抽出された特徴量に基づいて、前記テキストデータ群における前記正答と前記抽出されたキーワードとの共起頻度と、前記テキストデータ群における前記抽出されたキーワードの一般性とを用いて、前記各ヒント文候補に対するスコアを算出するスコア算出手段と、前記各ヒント文候補のスコアに基づいて、前記各ヒント文候補の優先順を決定し、前記決定された優先順で前記ヒント文候補を並べて、前記ヒント文リストを生成するソート手段とをさらに備えることを特徴とする。   An interactive question system according to claim 8 is the interactive question system according to claim 7, wherein a predetermined correct answer candidate is selected from a correct answer candidate database storing a plurality of correct answer candidates, and the selected correct answer candidate is selected. Correct answer generating means for generating as a correct answer, hint expression acquiring means for acquiring a plurality of hint expressions expressed by keywords or phrases as hints corresponding to the generated correct answer from the text data group, and the acquired Hint sentence candidate generating means for generating a hint sentence candidate indicating a sentence including a hint expression, hint keyword extracting means for extracting a keyword from each of the generated hint sentence candidates, and in the text data group, the correct answer and the Features related to documents including both extracted keywords and all of the text data A feature amount extraction means for extracting a plurality of feature amounts including a feature amount relating to a document; and a co-occurrence frequency of the correct answer and the extracted keyword in the text data group based on the extracted feature amounts; Using the generality of the extracted keywords in the text data group, score calculation means for calculating a score for each hint sentence candidate, and based on the score of each hint sentence candidate, each hint sentence candidate Sorting means for determining a priority order, arranging the hint sentence candidates in the determined priority order, and generating the hint sentence list is further provided.

かかる構成によれば、対話型質問システムは、ヒント文候補生成手段によって、正答に対応するキーワードやフレーズをテキストデータ群から取得してヒント文候補を生成し、スコア算出手段によって、テキストデータ群における正答とヒント文候補に含まれるキーワードとの共起頻度を用いたスコアを算出する。ここで、スコア算出手段は、スコアには、テキストデータ群におけるキーワードの一般性を反映する。そして、対話型質問システムは、ソート手段によって、スコアから導かれるユーザにとって分かり易い順番を逆順とすることで、各ヒント文候補の優先順を適切に決定した順番でヒント文を並べ、ヒント文リストを生成する。   According to such a configuration, the interactive question system generates a hint sentence candidate by acquiring the keyword or phrase corresponding to the correct answer from the text data group by the hint sentence candidate generating means, and generates the hint sentence candidate by the score calculating means. A score using the co-occurrence frequency of the correct answer and the keyword included in the hint sentence candidate is calculated. Here, the score calculation means reflects the generality of the keyword in the text data group in the score. Then, the interactive question system arranges the hint sentences in the order in which the priority order of each hint sentence candidate is appropriately determined by reversing the order that is easy to understand for the user derived from the score by the sorting means, and the hint sentence list Is generated.

また、請求項9に記載の対話型質問プログラムは、予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムのコンピュータに、前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択ステップと、前記回答と前記正答とが一致するか否かを判定する一致判定ステップと、前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索ステップと、前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出ステップと、前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成ステップと、前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理ステップと、を実行させるためのプログラムである。このように構成されることにより、このプログラムをインストールされたコンピュータは、このプログラムに基づいた各機能を実現することができる。 Further, the interactive question program according to claim 9 outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a problem to which a predetermined correct answer is applied, as questions, and provides answers corresponding to the questions. A hint sentence selection for selecting the hint sentence according to the priority order from the hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order on a computer of an interactive question system that outputs different questions according to the question A data group including the correct answer in a predetermined text data group when a step, a match determination step for determining whether the answer and the correct answer match, and the answer and the correct answer do not match A search step for searching a data group including the answer, and a data group including both the answer and the correct answer, and the searched result Based on the calculated similarity, a similarity calculation step of calculating the degree of co-occurrence between the answer and the correct answer in the text data group as a similarity between the answer and the correct answer , a response sentence generating step of generating a response sentence for the reply, a program for executing a question presentation control step of questions repeatedly said different questions to the answers and said correct match. By being configured in this way, a computer in which this program is installed can realize each function based on this program.

また、請求項10に記載のコンピュータ読み取り可能な記録媒体は、予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムのコンピュータに、前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択ステップと、前記回答と前記正答とが一致するか否かを判定する一致判定ステップと、前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索ステップと、前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出ステップと、前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成ステップと、前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理ステップと、を実行させるための対話型質問プログラム記録したことを特徴とする。このように構成されることにより、この記録媒体を装着されたコンピュータは、この記録媒体に記録されたプログラムに基づいた各機能を実現することができる。 The computer-readable recording medium according to claim 10 outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a problem to which a predetermined correct answer is applied, as a question, and corresponds to the question. A hint for selecting the hint sentence according to the priority order from the hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order on a computer of an interactive question system that outputs different questions according to answers A sentence selection step; a match determination step for determining whether or not the answer and the correct answer match; and if the answer and the correct answer do not match, a predetermined text data group includes the correct answer A search step for searching a data group, a data group including the answer, and a data group including both the answer and the correct answer; Based on the retrieved result, a similarity calculation step for calculating the degree of co-occurrence between the answer and the correct answer in the text data group as a similarity between the answer and the correct answer; and the calculated An interactive question for executing a response sentence generation step for generating a response sentence for the answer based on the similarity, and an question management step for repeatedly giving the different questions until the answer and the correct answer match and characterized by recording a program. By being configured in this way, a computer equipped with this recording medium can realize each function based on a program recorded on this recording medium.

本発明によれば、質問を対話的に継続させることにより、娯楽や知識の習得に役立てることができる。   According to the present invention, questions can be continued interactively to be used for entertainment and knowledge acquisition.

以下、図面を参照して本発明の対話型質問方法および対話型質問システムを実施するための最良の形態(以下「実施形態」という)について、第1実施形態ないし第3実施形態に分けて詳細に説明する。   Hereinafter, the best mode (hereinafter referred to as “embodiment”) for carrying out the interactive question method and the interactive question system of the present invention with reference to the drawings will be described in detail in the first to third embodiments. Explained.

(第1実施形態)
[対話型質問システム]
図1は、本発明の第1実施形態に係る対話型質問システムに含まれるヒント生成装置の構成を示す機能ブロック図である。
対話型質問システム1は、予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、質問に対応する回答に応じて異なる質問を出力するものである。
以下の説明では、対話型質問システム1は、正答を人名として、人名を当てるヒントを質問として出力するものとする。
(First embodiment)
[Interactive Question System]
FIG. 1 is a functional block diagram showing a configuration of a hint generation device included in the interactive question system according to the first embodiment of the present invention.
The interactive question system 1 outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a problem to which a predetermined correct answer is applied, as a question, and outputs different questions according to the answers corresponding to the questions. It is.
In the following description, it is assumed that the interactive question system 1 outputs a correct answer as a person name and a hint for hitting the person name as a question.

対話型質問システム1は、ヒント生成装置2と、対話型質問装置3とを備えている。
ヒント生成装置2は、正答を生成し、生成した正答に対応する複数のヒント文を生成し、ヒント文リストとして対話型質問装置3に出力するものである。
対話型質問装置3は、ヒント生成装置2から取得したヒント文リストからヒント文を選択して質問として出力し、質問に対応する回答に応じて異なる質問を出力するものである。
The interactive question system 1 includes a hint generation device 2 and an interactive question device 3.
The hint generation device 2 generates a correct answer, generates a plurality of hint sentences corresponding to the generated correct answer, and outputs them to the interactive question apparatus 3 as a hint sentence list.
The interactive question apparatus 3 selects a hint sentence from the hint sentence list acquired from the hint generation apparatus 2 and outputs it as a question, and outputs a different question depending on an answer corresponding to the question.

ヒント生成装置2および対話型質問装置3は、例えば、CPU(Central Processing Unit)と、RAM(Random Access Memory)と、ROM(Read Only Memory)と、HDD(Hard Disk Drive)と、通信を行うためのNIC(Network Interface Card)等から構成される。   For example, the hint generation device 2 and the interactive question device 3 communicate with a central processing unit (CPU), a random access memory (RAM), a read only memory (ROM), and a hard disk drive (HDD). NIC (Network Interface Card) or the like.

ヒント生成装置2は、ネットワークNを介して、ネットワークデータサーバ4に接続されている。ネットワークNは、例えば、インターネットである。ネットワークデータサーバ4は、ネットワークデータベース4aを備えている。ネットワークデータベース4aは、テキストデータ群として、ヒント文に用いられる各種情報を格納している。なお、ネットワークデータサーバ4は、複数存在する。また、対話型質問装置3もネットワークNを介して、ネットワークデータサーバ4に接続されている(図3参照)。   The hint generation device 2 is connected to the network data server 4 via the network N. The network N is, for example, the Internet. The network data server 4 includes a network database 4a. The network database 4a stores various information used for the hint sentence as a text data group. There are a plurality of network data servers 4. The interactive questioning device 3 is also connected to the network data server 4 via the network N (see FIG. 3).

ヒント生成装置2は、質問応答システム5に接続されている。質問応答システム5は、公知のQA(Question Answering)システムであり、例えば、新聞記事などの大量の文書集合(データベース)を図示しない記憶手段に記憶し、データベースから質問に対する解答を探し出すものである。ここで、質問は、例えば、「○○の関連語は?」、「○○と関連のある場所は?」、「○○と関連のある人物は?」等である。   The hint generation device 2 is connected to the question answering system 5. The question answering system 5 is a well-known QA (Question Answering) system, for example, stores a large number of document sets (database) such as newspaper articles in a storage means (not shown), and searches for answers to the questions from the database. Here, the questions are, for example, “What is the related word of XX?”, “Where is related to XX?”, “Who is related to XX?”, And the like.

[ヒント生成装置の構成]
ヒント生成装置2は、図1に示すように、通信インタフェース11と、記憶手段12と、正答生成手段13と、ヒント表現取得手段14と、ヒント文候補生成手段15と、ヒント文リスト生成手段16とを備えている。
[Configuration of hint generation device]
As shown in FIG. 1, the hint generation device 2 includes a communication interface 11, a storage unit 12, a correct answer generation unit 13, a hint expression acquisition unit 14, a hint sentence candidate generation unit 15, and a hint sentence list generation unit 16. And.

通信インタフェース11は、ネットワークデータサーバ4から、所定の情報(キーワードまたはフレーズなどのヒント表現等)を入力するものである。
記憶手段12は、例えば、CPUによる演算処理等に利用されるRAMや、例えば、所定のプログラム、各種データベース、処理結果等を格納するROMやHDDを備えている。
The communication interface 11 inputs predetermined information (such as a hint expression such as a keyword or a phrase) from the network data server 4.
The storage unit 12 includes, for example, a RAM used for arithmetic processing by the CPU, and a ROM and HDD for storing predetermined programs, various databases, processing results, and the like.

記憶手段12は、正答候補データベース121と、ヒント文候補データベース122と、ヒント文リストデータベース123とを備えている。
正答候補データベース121は、複数の正答候補を格納するものであり、例えば、複数の人名が記録された人名リストである。
ヒント文候補データベース122は、ヒント文候補生成手段15で生成されたヒント文候補を格納するものである。ここで、ヒント文候補は、キーワードまたはフレーズなどのヒント表現を含む文である。
ヒント文リストデータベース123は、ヒント文リスト生成手段16で生成されたヒント文リストを格納するものである。ここで、ヒント文リストは、ヒント文候補から出題用に選択されて所定の順番に並べられた文(ヒント文)からなる。
The storage unit 12 includes a correct answer candidate database 121, a hint sentence candidate database 122, and a hint sentence list database 123.
The correct answer candidate database 121 stores a plurality of correct answer candidates, and is, for example, a person name list in which a plurality of person names are recorded.
The hint sentence candidate database 122 stores hint sentence candidates generated by the hint sentence candidate generating unit 15. Here, the hint sentence candidate is a sentence including hint expressions such as keywords or phrases.
The hint sentence list database 123 stores the hint sentence list generated by the hint sentence list generating unit 16. Here, the hint sentence list is composed of sentences (hint sentences) selected from the hint sentence candidates for questions and arranged in a predetermined order.

正答生成手段13は、正答候補データベース121から所定の正答候補を選択し、選択した正答候補を正答として生成し、ヒント表現取得手段14に出力するものである。
ここでは、一例として、人名を当てるクイズを取り上げる。例えば、正答生成手段13が、人名として「織田信長」を選択した場合、「織田信長」を当てるという問題となり、ユーザは、順次出されるヒントが誰のことを指しているのかを当てることとなる。以下では、例えば、「織田信長」という人名を当てるためのヒント文が生成されることとして説明する。なお、正答を作成する方法は、辞書の定義文提示による見出し語当てクイズの問題作成法と同様なので、公知の問題作成法を利用する。
The correct answer generation means 13 selects a predetermined correct answer candidate from the correct answer candidate database 121, generates the selected correct answer candidate as a correct answer, and outputs the correct answer candidate to the hint expression acquisition means 14.
Here, as an example, a quiz for hitting a person's name is taken up. For example, when the correct answer generation means 13 selects “Oda Nobunaga” as the personal name, it becomes a problem of hitting “Oda Nobunaga”, and the user hits who the hints that are sequentially issued indicate. . Hereinafter, for example, a description will be given assuming that a hint sentence for assigning a person name “Oda Nobunaga” is generated. The method for creating a correct answer is the same as the method for creating a headword guessing quiz by presenting a definition sentence in the dictionary, and thus a known problem creating method is used.

ヒント表現取得手段14は、正答生成手段13で生成された正答に対応するヒントとして、複数のヒント表現を、ネットワークNを介してネットワークデータサーバ4に格納されたデータベースから取得するものである。ここで、ヒント表現とは、キーワードまたはフレーズで表現されたヒントを示す。以下では、ネットワークNを介して取得可能なテキストデータ群をWebデータという。Webデータには、例えば、インターネット上の人物事典が含まれる。インターネット上では、例えば、「織田信長」であれば、「戦国武将」といったカテゴリ情報がメタデータとして付与されている人物事典も存在するのが現状である。したがって、Webデータという場合に、このようなデータを想定する。なお、Webデータに、ネットワークN以外の様々なソースから得られたデータを含めてもよい   The hint expression acquisition unit 14 acquires a plurality of hint expressions as a hint corresponding to the correct answer generated by the correct answer generation unit 13 from a database stored in the network data server 4 via the network N. Here, the hint expression indicates a hint expressed by a keyword or a phrase. Hereinafter, a text data group that can be acquired via the network N is referred to as Web data. Web data includes, for example, a personal dictionary on the Internet. On the Internet, for example, in the case of “Oda Nobunaga”, there is currently a personal dictionary in which category information such as “Sengoku warlord” is added as metadata. Therefore, such data is assumed in the case of Web data. The Web data may include data obtained from various sources other than the network N.

本実施形態では、ヒント表現取得手段14は、正答を説明していると考えられるヒント表現を取得するために、第1表現取得手段141と、第2表現取得手段142と、第3表現取得手段143と、第4表現取得手段144とを備えている。
第1表現取得手段141は、図示を省略するが、公知のフレーズ検索を実行する手段と、形態素解析を実行する手段とを備え、ネットワークNから得られるWebデータから特徴的な表現(キーワード)をヒント表現として抽出するものである。
第2表現取得手段142は、第1表現取得手段141による形態素解析から得られる正答の読み仮名をヒント表現として抽出するものである。
第3表現取得手段143は、ネットワークNから得られるWebデータからフレーズをヒント表現として抽出するものである。ここで、フレーズは、動詞句である。
第4表現取得手段144は、質問応答システム5に質問を出力し、質問応答システム5の応答をヒント表現として取得するものである。
なお、ヒント表現取得手段14の内部構成は、これに限定されるものではなく、前記した第1表現取得手段141ないし第4表現取得手段144以外に、さらに、1以上の表現取得手段(第5表現取得手段等)を備えるようにしてもよい。例えば、文書中に正答と共に出現する頻度の高い表現を、ヒント表現として取得する手段を第5表現取得手段としてもよい。また、ヒント表現取得手段14の内部構成は、前記した第1表現取得手段141ないし第4表現取得手段144のうちの少なくとも1つを備えるように構成してもよい。以下、第1表現取得手段141ないし第4表現取得手段144の詳細を説明する。
In the present embodiment, the hint expression acquisition means 14 is a first expression acquisition means 141, a second expression acquisition means 142, and a third expression acquisition means in order to acquire a hint expression that is considered to explain the correct answer. 143 and fourth expression acquisition means 144.
Although not shown, the first expression acquisition means 141 includes a means for executing a well-known phrase search and a means for executing a morpheme analysis. It is extracted as a hint expression.
The second expression acquisition unit 142 extracts the correct reading kana obtained from the morphological analysis by the first expression acquisition unit 141 as a hint expression.
The third expression acquisition unit 143 extracts phrases from the Web data obtained from the network N as hint expressions. Here, the phrase is a verb phrase.
The fourth expression acquisition unit 144 outputs a question to the question answering system 5 and acquires the response of the question answering system 5 as a hint expression.
Note that the internal configuration of the hint expression acquisition means 14 is not limited to this, and in addition to the first expression acquisition means 141 to the fourth expression acquisition means 144 described above, one or more expression acquisition means (fifth) Expression acquisition means, etc.) may be provided. For example, the fifth expression acquisition means may be a means for acquiring an expression that frequently appears with a correct answer in a document as a hint expression. The internal configuration of the hint expression acquisition unit 14 may be configured to include at least one of the first expression acquisition unit 141 to the fourth expression acquisition unit 144 described above. Hereinafter, details of the first expression acquisition unit 141 to the fourth expression acquisition unit 144 will be described.

<第1表現取得手段>
人物を説明するのに特徴的なパターンを捉えて、「織田信長などの戦国大名」といった文から、「戦国大名」というヒント表現を獲得する。特徴的な表現を用いて、人物などの定義を獲得する従来手法には次のものが挙げられる
Joho, H. and Sanderson, M. (2000)”Retrieving Descriptive Phrases from Large Amounts of Free Text”. In: Agah, A.,Callan, J.& Rundenstenier, E. (eds), Proceedings of the 9th International Conference on Information and Knowledge Management, 180-186, McLean, VA: ACM.
<First expression acquisition means>
Capturing a characteristic pattern for explaining a person, a hint expression “Sengoku Daimyo” is acquired from a sentence such as “Nobunaga Oda etc.”. The conventional methods for obtaining the definition of a person using a characteristic expression include the following:
Joho, H. and Sanderson, M. (2000) “Retrieving Descriptive Phrases from Large Amounts of Free Text”. In: Agah, A., Callan, J. & Rundenstenier, E. (eds), Proceedings of the 9th International Conference on Information and Knowledge Management, 180-186, McLean, VA: ACM.

本実施形態でいうところの特徴的な表現とは以下のとおりである。ただし、Aは正答、例えば「織田信長」、であり、Bは求めようとするヒント表現である。
(1)AというB、(2)AといったB、(3)A以外のB、(4)AなどのB、(5)AのようなB、(6)AというとB、(7)AといえばB、(8)AによるB、(9)AやB、(10)BやA
Characteristic expressions referred to in the present embodiment are as follows. However, A is a correct answer, for example, “Oda Nobunaga”, and B is a hint expression to be obtained.
(1) B as A, (2) B as A, (3) B other than A, (4) B as A, (5) B as A, (6) A as B, (7) Speaking of A, B, (8) B by A, (9) A and B, (10) B and A

具体的な手続きとしては、テキストデータ中から、「Aというと」という文字列でフレーズ検索を行い、「Aというと」という表現を含む文を取得する。その後、形態素解析と係り受け解析を行い、「Aというと」に係られる句を求める。例えば、「織田信長というと」という表現で、フレーズ検索を行い、「織田信長というと敦盛ですが…(後略)」という文が取得された場合、「織田信長というと」の係り先は「敦盛」であるため、「敦盛」がBとして、求められる。   As a specific procedure, a phrase search is performed from the text data with a character string “to say A”, and a sentence including the expression “to say A” is acquired. Thereafter, morphological analysis and dependency analysis are performed to obtain a phrase related to “A”. For example, if the phrase “Oda Nobunaga” is used to perform a phrase search and the sentence “Oda Nobunaga is brilliant… (omitted)” is acquired, Therefore, “Sheng Sheng” is obtained as B.

特徴的な表現は、以下のように4つに分けられる。
前記した(1)−(5)は、BがAのカテゴリ(例えば、「戦国大名」)を表すと考えられるものである。
前記した(6)−(7)は、BがAの連想(例えば、「敦盛」)を表すと考えられるものである。
前記した(8)は、BがAによって作られたもの・なされたこと(例えば、「安土城」)を表すと考えられるものである。
前記した(9)−(10)は、BがAと同じカテゴリに属する(例えば、「豊臣秀吉」)ことを表すと考えられるものである。
Characteristic expressions are divided into four as follows.
The above-mentioned (1) to (5) are considered that B represents a category of A (for example, “Sengoku Daimyo”).
The above-mentioned (6)-(7) is considered that B represents the association of A (for example, “enriched”).
The above-mentioned (8) is considered to represent that B is made / made by A (for example, “Azuchi Castle”).
The above (9) to (10) are considered to represent that B belongs to the same category as A (for example, “Hideyoshi Toyotomi”).

前記した(1)−(5)は、Bの上位語を用いることでさらにヒントを増やすことができる。例えば、織田信長についてのヒント表現として「武将」が取得された場合、例えば、「日本語語彙体系CD-ROM版」(NTTコミュニケーション科学基礎研究所監修、池原悟ほか編集、岩波書店)の概念辞書を用いることで、「武将」の上位語に「人間」があることが分かる。この場合、「人間」というヒント表現が得られたものとすることができる。なお、本実施形態では、Bの精度を高めるために、Bが「人間」の下位語でなかった場合、用いないこととする。   In the above (1) to (5), hints can be further increased by using the broader word of B. For example, if “Bushou” is acquired as a hint expression for Oda Nobunaga, for example, the concept dictionary of “Japanese vocabulary system CD-ROM version” (supervised by NTT Communication Science Laboratories, edited by Satoru Ikehara et al., Iwanami Shoten) By using, it is understood that “human” is the broader term of “military general”. In this case, the hint expression “human” can be obtained. In this embodiment, in order to improve the accuracy of B, it is not used when B is not a subordinate term of “human”.

また、本実施形態では、Bの形態素解析結果に、「接続詞」や「副詞」を含むものはヒント表現として用いないこととした。その理由は、形態素解析や係り受け解析の誤りなどから、Bが必ずしもヒントとして適切であるとは限らないことと、ヒントとしてユーザに提示するときには文脈から独立して使われるため、Bに文脈依存性があってはならないためである。   In the present embodiment, the B morphological analysis result including “connective” and “adverb” is not used as a hint expression. The reason is that B is not always suitable as a hint due to errors in morphological analysis or dependency analysis, and is used independently of the context when presented to the user as a hint. This is because there should be no sex.

<具体例>
表1は、正答「織田信長」に関して、フレーズ検索に検索エンジンgoo(登録商標)を用いたときの検索結果と共に表示されるsnippetと呼ばれる要旨のテキストをWebデータとして用いて作成されたヒント表現である。
<Specific example>
Table 1 is a hint expression created using the text of the gist called snippet displayed as a Web data with the search result when using the search engine goo (registered trademark) for the phrase search for the correct answer “Nobunaga Oda”. is there.

Figure 0004866153
Figure 0004866153

<第2表現取得手段>
第2表現取得手段142は、正答(人名)の表記(最初の文字、最後の文字)からヒント文を作成する。対象となる人名を形態素解析すると、読み仮名が取得できるため、この最初の文字、最後の文字を取得する。
<Second expression acquisition means>
The second expression acquisition unit 142 creates a hint sentence from the correct answer (person name) notation (first character, last character). If the subject person name is analyzed by morphological analysis, the reading character can be acquired, so the first character and the last character are acquired.

<第3表現取得手段>
第3表現取得手段143は、特徴的な表現を用いず、A(正答)を含む文自体からヒント文を作成する。この場合、「Aが」という表現の係り先の動詞句が見つかれば、その動詞句をヒント表現として用いる。例えば、「織田信長が楽市楽座を開いた」とあれば、「織田信長が」は「楽市楽座を開いた」に係るため、「楽市楽座を開いた」をヒント表現とする。正答が「織田信長」の場合、例えば、以下の表2に示すヒント表現を取得することができる。この中で、「た」で終わるものだけを使用することとする。
<Third expression acquisition means>
The third expression acquisition unit 143 creates a hint sentence from the sentence itself including A (correct answer) without using a characteristic expression. In this case, if a related verb phrase of the expression “A is” is found, the verb phrase is used as a hint expression. For example, if “Oda Nobunaga opened Rakuichi Rakuza”, “Oda Nobunaga” opened “Rakuichi Rakuza”, so “Rakuichi Rakuza was opened” is used as a hint expression. When the correct answer is “Nobunaga Oda”, for example, the hint expressions shown in Table 2 below can be acquired. Of these, only those that end with “た” will be used.

Figure 0004866153
Figure 0004866153

<第4表現取得手段>
第4表現取得手段144は、「○○の関連語は?」、「○○に関連する場所は?」、「○○に関連する人物は?」という3つの質問文を生成し、それらを質問応答システム5に送り、その応答をヒント表現とする。正答が「織田信長」の場合、例えば、以下の表3に示すヒント表現を質問応答システム5から取得することができる。
<Fourth expression acquisition means>
The fourth expression acquisition unit 144 generates three question sentences, “What is the related word of XX?”, “What is the place related to XX?”, And “What is the person related to XX?” This is sent to the question answering system 5 and the response is used as a hint expression. When the correct answer is “Nobunaga Oda”, for example, hint expressions shown in Table 3 below can be acquired from the question answering system 5.

Figure 0004866153
Figure 0004866153

ヒント文候補生成手段15は、ヒント表現取得手段14で取得されたヒント表現を含む文を示すヒント文候補を生成するものであり、第1候補生成手段151と、第2候補生成手段152と、第3候補生成手段153と、第4候補生成手段154とを備えている。   The hint sentence candidate generating unit 15 generates a hint sentence candidate indicating a sentence including the hint expression acquired by the hint expression acquiring unit 14, and includes a first candidate generating unit 151, a second candidate generating unit 152, Third candidate generation means 153 and fourth candidate generation means 154 are provided.

第1候補生成手段151は、第1表現取得手段141で取得されたヒント表現に対して、「○○だよ」、「○○だね」というテンプレートを用いてヒント文を作成する。例えば、その人物に関するカテゴリ情報が「戦国武将」である場合、第1候補生成手段は、「戦国武将だよ」というヒント文を作成する。
また、その人物に関する生年/没年情報が付与されている場合、第1候補生成手段151は、「○○よ」というテンプレートを用いてヒント文を作成する。例えば、その人物に関する生年/没年が「1534年/1582年」ならば、「1534年に生まれたよ」や「1582年に死んだよ」といったヒント文を生成する。
ヒント表現を取得する際に用いた特徴的な表現が、前記した(6)−(7)の場合には、第1候補生成手段151は、例えば、「○○といえば?」というテンプレートを用いてヒント文を作成する。
ヒント表現を取得する際に用いた特徴的な表現が、前記した(8)−(10)の場合には、第1候補生成手段151は、例えば、「○○に関係があるよ」というテンプレートを用いてヒント文を作成する。
The first candidate generation unit 151 creates a hint sentence for the hint expression acquired by the first expression acquisition unit 141 by using templates “XXX” and “XXX”. For example, when the category information related to the person is “Sengoku warlord”, the first candidate generating means creates a hint sentence “It ’s a warrior warrior”.
In addition, when the birth year / year-end information relating to the person is given, the first candidate generation unit 151 creates a hint sentence using a template “Yoyo”. For example, if the birth year / year of death of the person is “1534/1582”, a hint sentence such as “I was born in 1534” or “I died in 1582” is generated.
When the characteristic expression used when acquiring the hint expression is (6) to (7) described above, the first candidate generating unit 151 uses, for example, a template “Speaking of OO?” To create a hint sentence.
When the characteristic expression used when acquiring the hint expression is (8)-(10) described above, the first candidate generating unit 151, for example, the template “I have a relationship with XX”. Create a hint sentence using.

第2候補生成手段152は、第2表現取得手段142で取得されたヒント表現に対して、テンプレートを用いてヒント文を作成する。第2候補生成手段152は、人名から、「最初の文字は○だよ」と、「最後の文字は○だよ」というテンプレートを用いてヒント文を作成する。   The second candidate generating unit 152 creates a hint sentence using a template for the hint expression acquired by the second expression acquiring unit 142. The second candidate generating means 152 creates a hint sentence from the name of the person using the templates “the first character is ○” and “the last character is ○”.

第3候補生成手段153は、第3表現取得手段143で取得されたヒント表現に対して、テンプレートを用いてヒント文を作成する。この第3候補生成手段153は、文章の語尾に対して、統語的なルールを適用することで最終の動詞を過去形にしてから、「よ」を付与する。つまり、「○○○たよ」というテンプレートを用いてヒント文を作成する。例えば、ヒント表現が「明智光秀に殺される」の場合、「明智光秀に殺されたよ」というヒント文になる。ただし、「○○○ったよ」、「○○○だよ」というテンプレートの方が適切な場合テンプレートを変更する。なお、最終の動詞を過去形にするのは、通例、人物に関する事実は過去のことが多いという知見に基づいている。   The third candidate generation unit 153 creates a hint sentence using the template for the hint expression acquired by the third expression acquisition unit 143. The third candidate generating means 153 applies “yo” after making the final verb a past form by applying a syntactic rule to the ending of the sentence. That is, a hint sentence is created using a template “OO Tayo”. For example, when the hint expression is “killed by Akechi Mitsuhide”, the hint sentence is “I was killed by Akechi Mitsuhide”. However, the template is changed when the templates “XXOO” and “XXX” are more appropriate. It should be noted that the final verb is in the past tense, based on the knowledge that facts about people are usually in the past.

第4候補生成手段154は、第4表現取得手段144で取得されたヒント表現に対して、テンプレートを用いてヒント文を作成する。この第4候補生成手段154は、第3候補生成手段153と同様に、文章の語尾に対して、シンクタクティックなルールを適用することで最終の動詞を過去形にしてから、「よ」を付与するものである。
なお、ヒント文候補生成手段15の内部構成は、これに限定されるものではなく、前記した第1候補生成段151ないし第4候補生成手段154以外に、さらに、1以上の候補生成手段(第5候補生成手段等)を備えるようにしてもよい。例えば、第5候補生成手段が前記した第5表現取得手段に対応する場合には、第5表現取得手段で取得されたヒント表現を用いて、例えば、「○○に関係あるよ。」というテンプレートを用いてヒント文を作成する。
The fourth candidate generation unit 154 creates a hint sentence using a template for the hint expression acquired by the fourth expression acquisition unit 144. Similar to the third candidate generation unit 153, the fourth candidate generation unit 154 applies a syntactic rule to the end of the sentence to make the final verb a past tense, It is given.
Note that the internal configuration of the hint sentence candidate generating unit 15 is not limited to this, and in addition to the first candidate generating stage 151 to the fourth candidate generating unit 154, one or more candidate generating units (first 5 candidate generation means). For example, when the fifth candidate generation unit corresponds to the fifth expression acquisition unit described above, for example, a template “relevant to OO” using the hint expression acquired by the fifth expression acquisition unit. Create a hint sentence using.

ヒント文リスト生成手段16は、図1に示すように、ヒントキーワード抽出手段161と、特徴量抽出手段162と、スコア算出手段163と、ソート手段164と、格納手段165とを備えている。
ヒントキーワード抽出手段161は、ヒント文候補データベース122に格納された各ヒント文候補からキーワードを抽出するものである。以下では、ヒントキーワード抽出手段161で抽出されたキーワードのことを、単にキーワードという。キーワードは、例えば、形態素解析の結果、名詞とされたものである。例えば、ヒント文候補が「明智光秀に殺されたよ」ならば、「明智光秀」がキーワードとなる。また、ヒント文候補が「武将だよ」の場合には、「武将」がキーワードとなる。
As shown in FIG. 1, the hint sentence list generation unit 16 includes a hint keyword extraction unit 161, a feature amount extraction unit 162, a score calculation unit 163, a sort unit 164, and a storage unit 165.
The hint keyword extraction unit 161 extracts a keyword from each hint sentence candidate stored in the hint sentence candidate database 122. Hereinafter, the keyword extracted by the hint keyword extraction unit 161 is simply referred to as a keyword. The keyword is, for example, a noun as a result of morphological analysis. For example, if the hint sentence candidate is “Akechi Mitsuhide was killed”, “Akechi Mitsuhide” is the keyword. In addition, when the hint sentence candidate is “warrior”, “warrior” is a keyword.

特徴量抽出手段162は、Webデータにおいて、正答を含む文書(例えば、html文書)の個数(文書に関する特徴量)Eと、正答とキーワードとの両方を含む文書の個数(文書に関する特徴量)Fと、対象とするWebデータにおけるすべての文書の個数(文書に関する特徴量)Gと、対象とするWebデータにおけるキーワードのヒット数(文書に関する特徴量)Hとを抽出するものである。なお、特徴量Gを非常に大きな数値で代用してもよい。   The feature amount extraction unit 162 includes, in the Web data, the number of documents including the correct answer (for example, html document) E (feature amount related to the document) E and the number of documents including both the correct answer and the keyword (feature amount related to the document) F. And the number of all documents (features related to documents) G in the target Web data and the number of keyword hits (features related to documents) H in the target Web data. Note that the feature amount G may be replaced with a very large value.

スコア算出手段163は、特徴量抽出手段162で抽出された各特徴量(E,F,G,H)に基づいて、Webデータにおける正答とキーワードとの共起頻度と、Webデータにおけるキーワードの一般性とを用いて、各ヒント文候補に対するスコア(第1スコア)S1を、式(1)に基づいて算出するものである。 The score calculation means 163, based on each feature quantity (E, F, G, H) extracted by the feature quantity extraction means 162, the co-occurrence frequency of correct answers and keywords in the Web data, and general keywords in the Web data The score (first score) S 1 for each hint sentence candidate is calculated based on the formula (1).

1=log(F/E)+log(H/G) …式(1) S 1 = log (F / E) + log (H / G) (1)

式(1)では、正答とキーワードとの共起頻度に、正答と回答との関連度F/Eを用いた。関連度F/Eが高いヒント文候補は、ユーザにとって正答がすぐに分かるものであると考えられる。ただし、キーワードの中には、正答とは共起が強いが、滅多に使用されずユーザには分かりにくいものが混じる可能性がある。そこで、式(1)では、Webデータにおけるキーワードの一般性をH/Gとした。このH/Gの値が大きいほど、キーワードは、ユーザになじみがあるものとなる。つまり、式(1)は、第1スコアS1の値が大きいほど、正答が分かりにくいことを示す。例えば、織田信長の場合、「武将だよ」というヒントよりも「明智光秀に殺されたよ」というヒントの方が、内容において、織田信長と関連が高く、答えに直結すると思われる。 In Equation (1), the degree of association F / E between the correct answer and the answer is used as the co-occurrence frequency of the correct answer and the keyword. A hint sentence candidate having a high degree of relevance F / E is considered to be one in which the correct answer can be readily understood by the user. However, some of the keywords have a strong co-occurrence with the correct answer, but may be rarely used and difficult to understand for the user. Therefore, in the formula (1), the generality of the keyword in the Web data is H / G. The larger the value of H / G, the more familiar the keyword is to the user. That is, equation (1) indicates that the correct answer is harder to understand as the value of the first score S 1 is larger. For example, in the case of Oda Nobunaga, the hint that “I was killed by Mitsuhide Akechi” is more related to the hint than Oda Nobunaga, and it seems to be directly linked to the answer.

なお、スコア算出手段163は、例えば「日本語の語彙特性CD-ROM版」(NTTコミュニケーション科学基礎研究所監修、天野成昭ほか編、三省堂)におけるキーワードの親密度と、前記した「日本語語彙体系CD-ROM版」の概念木をキーワードから上位にたどって行き、いくつのノードを経るかといったルート概念までのパス長の情報とを求めておく。これらの情報を求めておく理由は、一般性を求める上で、これらの情報が必要となる場合があると考えられるからである。   Note that the score calculation means 163 includes, for example, keyword intimacy in “Japanese vocabulary characteristics CD-ROM version” (supervised by NTT Communication Science Laboratories, Noriaki Amano et al., Sanseido) and the “Japanese vocabulary system” described above. Trace the concept tree of “CD-ROM version” from the keyword to the top, and obtain the path length information to the root concept such as how many nodes it passes. The reason for obtaining these pieces of information is that these pieces of information may be necessary in order to obtain generality.

ソート手段164は、各ヒント文候補のスコア(第1スコアS1)に基づいて、各ヒント文候補の優先順を決定し、決定された優先順でヒント文候補を並べて、ヒント文リストを生成するものである。ここでは、ソート手段164は、第1スコアS1の値が小さいヒント文候補ほど優先的にヒント文リストの上位(始め)に配置する。このように配置することで、正答がなるべくすぐに分からないような並べ方を実現できる。このように並べる理由は、すぐに正答が分かってしまったのでは、対話にならず、ユーザもクイズの過程を楽しめないと考えられるからである。 The sorting unit 164 determines the priority order of each hint sentence candidate based on the score (first score S 1 ) of each hint sentence candidate, arranges the hint sentence candidates in the determined priority order, and generates a hint sentence list. To do. Here, sorting means 164 arranged above (the beginning) of about the first score S 1 value is less hint sentence candidate preferentially hint statement list. By arranging in this way, it is possible to realize an arrangement in which correct answers are not immediately known. The reason for arranging them in this way is that if the correct answers are immediately known, it will not be a dialogue and the user will not enjoy the quiz process.

具体的には、ヒント文候補が多数ある場合、ランキングが低いヒント文候補(第1スコアS1の値が低いキーワード)は、関連度が低く、一般性も低いと考えられる。そのため、ランキングが低いヒント文候補は、ヒント文として必要ではない可能性が高い。そこで、ソート手段164は、多数のヒント文候補のうち、ランキングがトップJ位(例えばJ=10)のものだけを残す。そして、ソート手段164は、トップJ位までのヒント文を逆順にし、ヒント文リストとする。 Specifically, if there hint sentence candidate number, ranking lower hint sentence candidates (keywords first value of the score S 1 is low), the relevance is low, generality is also considered to be low. Therefore, a hint sentence candidate with a low ranking is highly likely not necessary as a hint sentence. Therefore, the sorting unit 164 leaves only the one with the top J ranking (for example, J = 10) among the many hint sentence candidates. Then, the sorting unit 164 reverses the hint sentences up to the top J position into a hint sentence list.

本実施形態では、ソート手段164は、いくつかのヒント文候補を別扱いにして、第1のスコアS1として所定の規定値を与え、経験則によりヒント文リストに加えることとする。例えば、第2表現取得手段142で取得された「読みを用いたヒント文候補」は、正答に直結しているため分かりやすい。そこで、ソート手段164は、「読みを用いたヒント文候補」をヒント文リストの末尾(最後)に追加する。また、ネットワークN上の人物事典から得られる「カテゴリ情報(例えば、「戦国武将」)」や「生年/没年」は、その人物の大まかな情報を表し、ユーザにとってクイズの答えを考え始めるのに役に立つ情報である。そこで、ソート手段164は、「カテゴリ情報」や「生年/没年」を用いたヒント文をヒント文リストの先頭(最初)に追加する。また、ネットワークN上の人物事典によって、ヒント文候補のキーワードに親密度が定義されている場合には、ソート手段164は、正規の第1のスコアS1の値を調整して、それらのヒント文をヒント文リストの最初の方に移動する。これにより、ソート手段164は、最終的なヒント文リストを生成する。 In the present embodiment, the sorting unit 164 treats some hint sentence candidates separately, gives a predetermined specified value as the first score S 1 , and adds it to the hint sentence list based on an empirical rule. For example, “a hint sentence candidate using a reading” acquired by the second expression acquisition unit 142 is directly connected to a correct answer, and thus is easy to understand. Therefore, the sorting unit 164 adds “a hint sentence candidate using reading” to the end (last) of the hint sentence list. In addition, “category information (eg“ Sengoku warlord ”)” and “birth / year of death” obtained from a personal encyclopedia on the network N represent rough information of the person and begin to think about the quiz answer for the user. Useful information. Therefore, the sorting unit 164 adds a hint sentence using “category information” or “birth year / dead year” to the head (first) of the hint sentence list. Further, when the closeness is defined for the hint sentence candidate keyword by the personal dictionary on the network N, the sorting unit 164 adjusts the value of the regular first score S 1 to provide the hint. Move the sentence toward the beginning of the hint list. As a result, the sorting unit 164 generates a final hint sentence list.

格納手段165は、ソート手段164で生成されたヒント文リストを正答別にヒント文リストデータベース123に格納する。
なお、正答生成手段13、ヒント表現取得手段14、ヒント文候補生成手段15、およびヒント文リスト生成手段16は、CPUが記憶手段12のHDD等に格納された所定のプログラムをRAMに展開して実行することにより実現されるものである。
The storage unit 165 stores the hint sentence list generated by the sorting unit 164 in the hint sentence list database 123 for each correct answer.
The correct answer generating means 13, the hint expression acquiring means 14, the hint sentence candidate generating means 15, and the hint sentence list generating means 16 are obtained by the CPU developing a predetermined program stored in the HDD or the like of the storage means 12 in the RAM. It is realized by executing.

[ヒント生成装置の動作]
図1に示したヒント生成装置の動作について図2を参照(適宜図1参照)して説明する。図2は、図1に示したヒント生成装置の動作を示すフローチャートである。ヒント生成装置2は、正答生成手段13によって、正答候補を選択して正答を生成し(ステップS1)、ヒント表現取得手段14によって、正答に対応するヒント表現を取得する(ステップS2)。そして、ヒント生成装置2は、ヒント文候補生成手段15によって、取得したヒント表現でヒント文候補を生成し(ステップS3)、ヒントキーワード抽出手段161によって、各ヒント文候補からキーワードを抽出する(ステップS4)。そして、ヒント生成装置2は、特徴量抽出手段162によって、キーワードに関する複数の特徴量をネットワークNを介してWebデータから抽出し(ステップS5)、スコア算出手段163によって、抽出した特徴量に基づいて、各ヒント文候補に対する第1スコアを算出する(ステップS6)。続いて、ヒント生成装置2は、ソート手段164によって、各ヒント文候補のスコアと出題ルールとに基づいて、ヒント文リストを生成し(ステップS7)、格納手段165によって、ヒント文リストを問題別に格納する(ステップS8)。
[Operation of hint generation device]
1 will be described with reference to FIG. 2 (refer to FIG. 1 as appropriate). FIG. 2 is a flowchart showing the operation of the hint generation device shown in FIG. The hint generation device 2 selects a correct answer candidate by the correct answer generating means 13 to generate a correct answer (step S1), and acquires a hint expression corresponding to the correct answer by the hint expression acquiring means 14 (step S2). Then, the hint generation device 2 generates a hint sentence candidate using the acquired hint expression by the hint sentence candidate generation means 15 (step S3), and extracts a keyword from each hint sentence candidate by the hint keyword extraction means 161 (step S3). S4). Then, the hint generation device 2 extracts a plurality of feature amounts related to the keyword from the Web data via the network N by the feature amount extraction unit 162 (step S5), and based on the feature amount extracted by the score calculation unit 163. The first score for each hint sentence candidate is calculated (step S6). Subsequently, the hint generation device 2 generates a hint sentence list based on the score of each hint sentence candidate and the question rule by the sorting unit 164 (step S7), and the storage unit 165 sorts the hint sentence list by problem. Store (step S8).

<具体例>
表4および表5は、正答「織田信長」に関して、検索エンジンgoo(登録商標)を用いて取得されたWebデータによって作成されたヒント文リストである。ヒント文リストには、ヒント文ごとに、ヒント番号、ヒント文の内容およびキーワードと、type、score、HitCount、targetHitCount、psy、pathlenのそれぞれの数値が、この順番に記載されている。
typeの数値は、ヒント表現がどこから取得されたかを示すものである。
type=「1」は、表1の「カテゴリ情報」から取得されたものである。
type=「2」は、表1の「連想」から取得されるものである(該当なし)。
type=「3」は、表1の「作られたもの」から取得されたものである。
type=「4」は、表1の「同じカテゴリ」から取得されたものである。
type=「5」は、表2から取得されたものである。
type=「6」は、正答の読み(最初の1文字)から取得されたものである。
type=「7」は、正答の読み(最後の1文字)から取得されたものである。
type=「8」は、表3の「関連語」から取得されたものである。
type=「9」は、表3の「場所」から取得されたものである。
type=「10」は、表3の「人物」から取得されたものである。
scoreは、第1スコアS1の値である。HitCount、targetHitCountは、それぞれ、キーワードのヒット数、キーワードと答えを両方含むヒット数である。なお、psyとはキーワードの日本語語彙特性における親密度であり、pathlenとは日本語語彙体系におけるキーワードからルート概念までのパス長である。
<Specific example>
Tables 4 and 5 are hint sentence lists created by Web data acquired using the search engine goo (registered trademark) regarding the correct answer “Nobunaga Oda”. In the hint sentence list, for each hint sentence, hint numbers, hint sentence contents and keywords, and numerical values of type, score, HitCount, targetHitCount, psy, and pathlen are described in this order.
The numerical value of type indicates from where the hint expression is obtained.
type = “1” is obtained from “category information” in Table 1.
type = “2” is obtained from “association” in Table 1 (not applicable).
type = “3” is acquired from “made” in Table 1.
type = “4” is obtained from “same category” in Table 1.
type = “5” is obtained from Table 2.
type = “6” is obtained from reading the correct answer (first one character).
type = “7” is obtained from reading the correct answer (last one character).
type = “8” is obtained from “Related Words” in Table 3.
type = “9” is obtained from “place” in Table 3.
type = “10” is obtained from “person” in Table 3.
score is the value of the first score S 1 . HitCount and targetHitCount are the number of keyword hits and the number of hits including both keywords and answers, respectively. Note that psy is the familiarity in the Japanese vocabulary characteristics of the keyword, and pathlen is the path length from the keyword to the root concept in the Japanese vocabulary system.

Figure 0004866153
Figure 0004866153

Figure 0004866153
Figure 0004866153

[対話型質問装置の構成]
図3は、本発明の第1実施形態に係る対話型質問システムに含まれる対話型質問装置の構成を示す機能ブロック図である。
対話型質問装置3は、図3に示すように、通信インタフェース31と、記憶手段32と、一致判定手段33と、検索手段34と、類似度算出手段35と、ヒント文選択手段36と、応答文生成手段37と、出題管理手段38とを備えている。
[Configuration of interactive question system]
FIG. 3 is a functional block diagram showing the configuration of the interactive question apparatus included in the interactive question system according to the first embodiment of the present invention.
As shown in FIG. 3, the interactive question apparatus 3 includes a communication interface 31, a storage unit 32, a match determination unit 33, a search unit 34, a similarity calculation unit 35, a hint sentence selection unit 36, a response Sentence generation means 37 and question management means 38 are provided.

通信インタフェース31は、ネットワークデータサーバ4から、所定の検索情報(正答、回答、あるいは、その両方が含まれる文書数等)を入力するものである。
記憶手段32は、例えば、CPUによる演算処理等に利用されるRAMや、例えば、所定のプログラム、各種データベース、処理結果等を格納するROMやHDDを備えている。
The communication interface 31 inputs predetermined search information (the number of documents including correct answers, answers, or both) from the network data server 4.
The storage unit 32 includes, for example, a RAM used for arithmetic processing by the CPU, and a ROM and HDD that store predetermined programs, various databases, processing results, and the like.

記憶手段32は、ヒント文リストデータベース321と、応答文データベース322とを備えている。
ヒント文リストデータベース321は、ヒント生成装置2で生成されたヒント文リストを格納するものである。
応答文データベース322は、回答に対する応答文を格納するものである。応答文として、出題開始宣言文、回答が正答と一致するときの応答文、回答が正答と不一致のときの応答文等が準備される。それぞれの応答文は、例えば、「なぞなぞスタート!」、「あたり!」、「惜しい!」、「全然違う!」等である。
The storage unit 32 includes a hint sentence list database 321 and a response sentence database 322.
The hint sentence list database 321 stores the hint sentence list generated by the hint generation device 2.
The response sentence database 322 stores response sentences for answers. As the response sentence, a question start declaration sentence, a response sentence when the answer matches the correct answer, a response sentence when the answer does not match the correct answer, and the like are prepared. Each response sentence is, for example, “Mystery start!”, “Oh!”, “Amazing!”, “A completely different!”, Etc.

一致判定手段33は、回答(入力)がある場合に、回答と正答とが一致するか否かを判定するものである。この一致判定手段33は、回答と正答とが一致する場合には、応答文生成手段37にその旨を通知し、回答と正答とが一致しない場合には、検索手段34と類似度算出手段にその旨を通知する。   The coincidence determination means 33 determines whether or not the answer and the correct answer match when there is an answer (input). The match determination means 33 notifies the response sentence generation means 37 when the answer and the correct answer match, and if the answer and the correct answer do not match, the match determination means 33 notifies the search means 34 and the similarity calculation means. Notify that.

検索手段34は、一致判定手段33から、回答と正答とが一致しない旨を通知された場合に、Webデータにおいて、正答を含むデータ群と、回答を含むデータ群と、回答と正答との両方を含むデータ群とのそれぞれの文書数を検索するものである。検索結果は、類似度算出手段35に出力される。
具体的には、検索手段34は、例えば、ネットワークN上の人物事典を利用して、回答と正答とをそれぞれ示す2つの人名に関する記事(説明ページ)が、その人物事典の記事全体からどのようにハイパーリンクによって参照されているかを検索する。すなわち、
検索手段34は、回答を示す人名に関する記事(説明ページ)と、正答を示す人名に関する記事(説明ページ)とに対して、これら両方を参照する共通の記事(人名に限らない)がどれくらいあるか検索する。
When the search means 34 is notified from the match determination means 33 that the answer and the correct answer do not match, in the Web data, both the data group containing the correct answer, the data group containing the answer, and both the answer and the correct answer The number of documents in each of the data group including “” is searched. The search result is output to the similarity calculation means 35.
Specifically, the search means 34 uses, for example, a person encyclopedia on the network N to find out how articles (explanation pages) relating to two person names respectively indicating an answer and a correct answer from the articles of the person encyclopedia. To see if it is referenced by a hyperlink. That is,
For the article (explanation page) related to the person name indicating the answer and the article (explanation page) related to the person name indicating the correct answer, the search means 34 has a common article (not limited to the person name) referring to both. Search for.

類似度算出手段35は、検索手段34で検索された結果に基づいて、ネットワークN(テキストデータ群)における回答と正答との共起性の高さを、回答と正答との類似度として算出するものである。算出された類似度は、応答文生成手段37および出題管理手段38に出力される。本実施形態では、例えば、類似度算出手段35は、共起性の高さを、フィッシャー直接検定(フィッシャーの正確確率検定、FET:Fisher’s Exact Test)によって検定し、検定結果であるp値を類似度として算出する。類似度算出手段35がFETにより類似度を算出する場合に、例えば、正答が「織田信長」で、回答が「豊臣秀吉」であり、「織田信長」に関する記事のページ数と、「豊臣秀吉」に関する記事のページ数と、対象とする人物事典のページ数Qとが、表6に示すように求められた場合には、FETのp値は、式(2)で示される。なお、FETについては、「Agresti A,(1992), A Survey of Exact Inference for Contingencey Tables, Statical Science,7,131-153」に記載されている。ここで、類似度の算出は、FETに限定されるものではなく、統計量の検定に用いられるカイ二乗値(χ2)、カイ二乗値を0〜1の範囲に正規化した値であるφ2などを用いることができる。 The similarity calculation means 35 calculates the degree of co-occurrence between the answer and the correct answer in the network N (text data group) as the similarity between the answer and the correct answer based on the result searched by the search means 34. Is. The calculated similarity is output to the response sentence generation unit 37 and the question management unit 38. In the present embodiment, for example, the similarity calculation means 35 tests the co-occurrence level by the Fisher's exact test (Fisher's exact test, FET: Fisher's Exact Test). Calculate as degrees. When the similarity calculation unit 35 calculates the similarity by using an FET, for example, the correct answer is “Nobunaga Oda”, the answer is “Hideyoshi Toyotomi”, the number of pages of the article relating to “Nobunaga Oda”, and “Hideyoshi Toyotomi” When the page number of the article and the page number Q of the target person encyclopedia are obtained as shown in Table 6, the p value of the FET is expressed by Equation (2). The FET is described in “Agresti A, (1992), A Survey of Exact Inference for Contingence Tables, Statical Science, 7, 131-153”. Here, the calculation of the similarity is not limited to the FET, but the chi-square value (χ 2 ) used for the statistical test, and the value obtained by normalizing the chi-square value to a range of 0 to 1 2 etc. can be used.

Figure 0004866153
Figure 0004866153

Figure 0004866153
Figure 0004866153

ヒント文選択手段36は、ヒント文リストデータベース321に正答ごとに格納されたヒント文リストの中から優先順にしたがってヒント文を選択するものである。
ヒント文選択手段36は、出題管理手段38の指示に基づいて、ヒント文リストの並べ替え処理をした場合には、並べ替えられた順番に基づいて、ヒント文を選択すると共に、並び替えられた順序の情報を出題管理手段38に通知する。
The hint sentence selection means 36 selects hint sentences according to the priority order from the hint sentence list stored for each correct answer in the hint sentence list database 321.
When the hint sentence list is rearranged based on the instruction from the question management means 38, the hint sentence selecting unit 36 selects the hint sentence based on the rearranged order and rearranges the hint sentence list. The order information is notified to the question management means 38.

例えば、ヒント文リストに記録されたヒント文の数が10個で、6問出題された後に、並び替え処理をすると、出題順が当初「9」番目であったヒント文が、新たに「7」番目となった後に、当初「7」番目であったヒント文が、新たに「8」番目となる。ここで、並べ替えには、中抜きも含まれる。例えば、当初「7」〜「9」番目であったヒント文を中抜き(スキップ)して、出題順が当初「10」番目であったヒント文を新たに「7」番目として、スキップしたヒント文をキャンセルする。   For example, when the number of hint sentences recorded in the hint sentence list is 10 and 6 questions are given and then rearranged, a hint sentence that was initially “9” in the order of questions is newly added to “7 After the “th” mark, the hint sentence that was originally “7th” is newly “8th”. Here, the rearrangement includes hollowing out. For example, the hint sentence which was originally “7” to “9” is omitted (skip), and the hint sentence which was initially “10” in the order of questions is newly set as “7”, and the hint is skipped. Cancel the statement.

応答文生成手段37は、類似度算出手段35で算出された類似度に基づいて、回答に対する応答文を生成するものである。この場合の応答文は、回答が正答にどれだけ近いのかをユーザに知らせるためのものである。
また、応答文生成手段37は、回答と正答とが一致する場合に、回答に対する応答文を生成する。この場合の応答文は、回答が正答であることをユーザに知らせるためのものである。なお、応答文は、所定の規則にしたがって生成される。
本実施形態では、応答文生成手段37は、応答文データベース322から応答文を選択することにより、応答文を生成する。この応答文生成手段37は、出題管理手段38から、ヒント文リストの並べ替え処理が行われたことを通知されると、通知された情報に基づいた応答文を生成する。ヒント文を単に並べ替えたときの応答文は、例えば、「これなら分かるかな?」などである。また、ヒント文の並べ替えの結果、中抜きをして最後のヒント文を出題するときの応答文は、例えば、「これが最後のヒントだよ。」などとなる。
The response sentence generation unit 37 generates a response sentence for the answer based on the similarity calculated by the similarity calculation unit 35. The response sentence in this case is for informing the user how close the answer is to the correct answer.
In addition, the response sentence generation unit 37 generates a response sentence for the answer when the answer and the correct answer match. The response sentence in this case is for informing the user that the answer is a correct answer. The response sentence is generated according to a predetermined rule.
In the present embodiment, the response sentence generation unit 37 generates a response sentence by selecting a response sentence from the response sentence database 322. When notified from the question management means 38 that the hint sentence list has been rearranged, the response sentence generating means 37 generates a response sentence based on the notified information. The response sentence when the hint sentences are simply rearranged is, for example, “Can you understand this?”. In addition, as a result of the rearrangement of hint sentences, the response sentence when the last hint sentence is given after removing the middle part is, for example, “This is the last hint”.

出題管理手段38は、回答が入力されたか判定し、入力された回答と正答とが一致するまで異なる質問を繰り返し出題するものである。この出題管理手段38は、入力装置Mから受け付けた回答を一致判定手段33に出力し、応答文生成手段37で生成された応答文と、ヒント文選択手段36で選択されたヒント文とを出力装置Dに出力する。ここで、入力装置Mは、例えば、キーボードやマウス等であり、出力装置Dは、例えば、液晶ディスプレイ等である。   The question management means 38 determines whether an answer has been input, and repeatedly questions different questions until the input answer matches the correct answer. The question management means 38 outputs the answer received from the input device M to the coincidence determination means 33, and outputs the response sentence generated by the response sentence generation means 37 and the hint sentence selected by the hint sentence selection means 36. Output to device D. Here, the input device M is, for example, a keyboard or a mouse, and the output device D is, for example, a liquid crystal display.

出題管理手段38は、クイズの開始時には、初期状態の応答文(出題開始宣言文)を出力してから、第1番目のヒント文を出力する。出題管理手段38は、クイズの開始後は、回答が正解ならば、正解に対応した応答文を出力し、不正解ならば類似度に対応した応答文を出力してから次のヒント文を出力する。このため、出題管理手段38は、出題数(回答数)を管理し、出題数に応じて、応答文生成手段37と、ヒント文選択手段36とを制御する。   When the quiz starts, the question management means 38 outputs an initial response sentence (question start declaration sentence) and then outputs the first hint sentence. After starting the quiz, if the answer is correct, the question management means 38 outputs a response sentence corresponding to the correct answer, and if it is incorrect, outputs a response sentence corresponding to the similarity and then outputs the next hint sentence To do. For this reason, the question management means 38 manages the number of questions (number of answers) and controls the response sentence generation means 37 and the hint sentence selection means 36 according to the number of questions.

また、本実施形態では、出題管理手段38は、類似度算出手段38から取得した類似度(p値)が所定値γ以上であるか否かを判別し、所定値γよりも小さい場合に、ヒント文リストの並べ替え処理をするようにヒント文選択手段36に指示する。なお、所定値γを例えば、0.01としてもよい。また、出題管理手段38は、ヒント文選択手段36から並べ替え処理の結果を取得し、応答文生成手段37に通知する。   In the present embodiment, the question management unit 38 determines whether or not the similarity (p value) acquired from the similarity calculation unit 38 is equal to or greater than a predetermined value γ. The hint sentence selection means 36 is instructed to sort the hint sentence list. The predetermined value γ may be set to 0.01, for example. The question management unit 38 acquires the result of the rearrangement process from the hint sentence selection unit 36 and notifies the response sentence generation unit 37 of the result.

[対話型質問装置の動作]
図3に示した対話型質問装置の動作について図4を参照(適宜図3参照)して説明する。図4は、図3に示した対話型質問装置の動作を示すフローチャートである。対話型質問装置3は、出題管理手段38によって、制御変数iを初期化(i=0)し(ステップS11)、応答文生成手段37によって、出題開始宣言文(i=0)を生成する(ステップS12)。そして、対話型質問装置3は、出題管理手段38によって、制御変数iの現在の値に「1」を加算し(ステップS13)、類似度(p値)が所定値γ以上であるか否かを判別する(ステップS14)。そして、類似度(p値)が所定値γ以上である場合(ステップS14:No)、対話型質問装置3は、ヒント文選択手段36によって、i番目のヒント文を選択し(ステップS15)、出題管理手段38によって、ヒント文を表示させる。そして、対話型質問装置3は、出題管理手段38によって、入力があるか否かを判別する(ステップS16)。入力がある場合(ステップS16:Yes)、対話型質問装置3は、一致判定手段33によって、一致するか否かを判別する(ステップS17)。一方、一致しない場合(ステップS17:No)、対話型質問装置3は、検索手段34によって、Webデータにおいて、正答を含むデータ群と、回答を含むデータ群と、回答と正答との両方を含むデータ群とのそれぞれの文書数を検索する(ステップS18)。そして、対話型質問装置3は、類似度算出手段35によって、類似度を算出し(ステップS19)、応答文生成手段37によって、応答文を生成する(ステップS20)。
[Operation of interactive question system]
The operation of the interactive questioning apparatus shown in FIG. 3 will be described with reference to FIG. 4 (refer to FIG. 3 as appropriate). FIG. 4 is a flowchart showing the operation of the interactive question apparatus shown in FIG. The interactive question apparatus 3 initializes the control variable i (i = 0) by the question management means 38 (step S11), and generates the question start declaration sentence (i = 0) by the response sentence generation means 37 (step S11). Step S12). Then, the interactive question apparatus 3 adds “1” to the current value of the control variable i by the question management unit 38 (step S13), and whether or not the similarity (p value) is equal to or greater than a predetermined value γ. Is determined (step S14). If the similarity (p value) is equal to or greater than the predetermined value γ (step S14: No), the interactive question apparatus 3 selects the i-th hint sentence by the hint sentence selection unit 36 (step S15), The question management means 38 displays a hint sentence. Then, the interactive question apparatus 3 determines whether or not there is an input by the question management means 38 (step S16). When there is an input (step S16: Yes), the interactive question apparatus 3 determines whether or not they match by the match determination unit 33 (step S17). On the other hand, when they do not match (step S17: No), the interactive question apparatus 3 includes both the data group including the correct answer, the data group including the answer, and both the answer and the correct answer in the Web data by the search means 34. The number of each document with the data group is searched (step S18). Then, the interactive question apparatus 3 calculates the similarity by the similarity calculation unit 35 (step S19), and generates a response sentence by the response sentence generation unit 37 (step S20).

一方、ステップS17において、一致する場合(ステップS17:Yes)、対話型質問装置3は、ステップS20に進む。ステップS20に続いて、対話型質問装置3は、出題管理手段38によって、クイズの終了であるか否かを判別する(ステップS21)。クイズの終了である場合(ステップS21:Yes)、対話型質問装置3は、処理を終了する。一方、クイズの終了ではない場合(ステップS21:No)、対話型質問装置3は、ステップS13に戻る。   On the other hand, if they match in step S17 (step S17: Yes), the interactive question apparatus 3 proceeds to step S20. Subsequent to step S20, the interactive question apparatus 3 determines whether or not the quiz has ended by the question management unit 38 (step S21). When it is the end of the quiz (step S21: Yes), the interactive question apparatus 3 ends the process. On the other hand, when it is not the end of the quiz (step S21: No), the interactive question apparatus 3 returns to step S13.

また、ステップS14において、類似度(p値)が所定値γよりも小さい場合(ステップS14:Yes)、対話型質問装置3は、ヒント文選択手段36によって、並び替え処理を実行し(ステップS22)、ヒント文を選択する(ステップS23)。
また、ステップS16において、入力がない場合(ステップS16:No)、対話型質問装置3は、出題管理手段38によって、所定時間Tが経過したか否かを判別する(ステップS24)。所定時間Tが経過した場合(ステップS24:Yes)、対話型質問装置3は、テップS20に進む。一方、所定時間Tが経過しない場合(ステップS24:No)、対話型質問装置3は、ステップS16に戻る。
In step S14, when the similarity (p value) is smaller than the predetermined value γ (step S14: Yes), the interactive question apparatus 3 executes a rearrangement process by the hint sentence selection unit 36 (step S22). ), A hint sentence is selected (step S23).
If there is no input in step S16 (step S16: No), the interactive question apparatus 3 determines whether or not the predetermined time T has elapsed by using the question management unit 38 (step S24). When the predetermined time T has elapsed (step S24: Yes), the interactive question apparatus 3 proceeds to step S20. On the other hand, when the predetermined time T has not elapsed (step S24: No), the interactive question apparatus 3 returns to step S16.

<具体例>
表7は、正答「織田信長」を例に取ったユーザと対話型質問装置3との対話例である。
対話型質問装置3は、表4および表5に示したヒント文を順次提示し、ユーザの回答に応じて、正答との類似度に基づく応答文を生成する。
<Specific example>
Table 7 shows an example of dialogue between the user and the interactive questioning apparatus 3 taking the correct answer “Nobunaga Oda” as an example.
The interactive question apparatus 3 sequentially presents the hint sentences shown in Table 4 and Table 5, and generates a response sentence based on the similarity to the correct answer according to the user's answer.

Figure 0004866153
Figure 0004866153

なお、対話型質問装置3は、一般的なコンピュータに、前記した各ステップを実行させる対話型質問プログラムを実行することで実現することもできる。これらのプログラムは、通信回線を介して配布することも可能であるし、CD−ROM等の記録媒体に書き込んで配布することも可能である。   The interactive question apparatus 3 can also be realized by executing an interactive question program that causes a general computer to execute the above steps. These programs can be distributed via a communication line, or can be written on a recording medium such as a CD-ROM for distribution.

第1の実施形態によれば、クイズに対するヒントを生成する際に、クイズの正答とヒント文中のキーワードの共起頻度と、キーワードの一般性とを用いて、順位付けを行うとともに順位の逆順にヒントをユーザに提示することができる。その結果、質問を対話的に継続させることにより、娯楽や知識の習得に役立てることができる。また、コストをかけずにヒント付きクイズが実現できる。さらに、従来の目的指向型の対話システムとは異なり雑談等を行う話し相手となるシステムとして利用できる。   According to the first embodiment, when generating a hint for a quiz, ranking is performed using the correct answer of the quiz, the keyword co-occurrence frequency in the hint sentence, and the generality of the keyword, and the order of the order is reversed. Tips can be presented to the user. As a result, questions can be continued interactively, which can be used for entertainment and knowledge acquisition. In addition, a quiz with hints can be realized without cost. Further, unlike a conventional purpose-oriented dialog system, the system can be used as a system to be a conversation partner for chatting.

(第2実施形態)
第2実施形態に係る対話型質問システム1Aは、ヒント生成装置2Aと、対話型質問装置3Aとを備えている。
[ヒント生成装置の構成]
図5は、本発明の第2実施形態に係る対話型質問システムに含まれるヒント生成装置の構成を示す機能ブロック図である。
ヒント生成装置2Aの構成において、図1に示したヒント生成装置2と同一の構成には同一の符号を付して説明を省略する。
ヒント生成装置2Aは、図5に示すように、通信インタフェース11と、記憶手段12と、正答生成手段13と、ヒント表現取得手段14Aと、ヒント文候補生成手段15Aと、ヒント文リスト生成手段16Aとを備えている。
(Second Embodiment)
An interactive question system 1A according to the second embodiment includes a hint generation device 2A and an interactive question device 3A.
[Configuration of hint generation device]
FIG. 5 is a functional block diagram showing the configuration of the hint generation device included in the interactive question system according to the second embodiment of the present invention.
In the configuration of the hint generator 2A, the same components as those of the hint generator 2 shown in FIG.
As shown in FIG. 5, the hint generation device 2A includes a communication interface 11, a storage unit 12, a correct answer generation unit 13, a hint expression acquisition unit 14A, a hint sentence candidate generation unit 15A, and a hint sentence list generation unit 16A. And.

記憶手段12は、他のデータベースと共に、正答候補事典データベース124をさらに備えている。正答候補事典データベース124は、複数の正答候補に関する情報を有した事典を格納するものであり、例えば、人物事典である。以下では、正答候補事典データベース124に格納されたデータを辞書データと呼ぶ。なお、辞書データには、ネットワークN上の人物事典のデータも含む。   The storage unit 12 further includes a correct answer candidate encyclopedia database 124 together with other databases. The correct answer candidate encyclopedia database 124 stores an encyclopedia having information on a plurality of correct answer candidates, for example, a person encyclopedia. Hereinafter, data stored in the correct answer candidate encyclopedia database 124 will be referred to as dictionary data. It should be noted that the dictionary data includes personal dictionary data on the network N.

ヒント表現取得手段14Aは、正答候補事典データベース124から、正答に関するすべての文を抜き出し、抜き出した文をヒント文候補としてヒント文候補生成手段15Aに出力するものである。ただし、ヒント表現取得手段14Aは、抜き出した文のうち、以下の条件に当てはまるものは、ヒント文として不適切なものとして除外する。ヒント文として不適切なものとは、文脈依存性があるもの、文長が極端に短すぎる/長すぎるもの(例えば、20形態素以上もしくは5形態素以下の文)、正答(人名)を含む文、その他特定の条件(例えば、動詞またはサ変接続の名詞を含まない文)である。ここで、文脈依存性があるものとは、「接続詞や接続助詞や副詞を含む文」、「代名詞を含む文」、「参照表現(「この」、「その」、「これ」、「それ」、「これら」、「それら」)を含む文」などである。これら文脈依存性がある文は、それぞれ、その文だけでは文の意味が分からないような文である。なお、正答候補事典データベース124に正答(人物)の記述がない場合は、ネットワークNを介してWebデータからヒント表現を取得し、ヒント文候補生成手段15Aに出力する。この場合のヒント表現取得方法は、図1に示したヒント表現取得手段14と同様なので説明を省略する。   The hint expression acquisition unit 14A extracts all sentences related to correct answers from the correct answer candidate encyclopedia database 124, and outputs the extracted sentences as hint sentence candidates to the hint sentence candidate generating means 15A. However, the hint expression acquisition unit 14A excludes the extracted sentence that meets the following conditions as an inappropriate hint sentence. Inappropriate hint sentences include context-dependent sentences, sentences that are extremely short / too long (for example, sentences with 20 or more morphemes or less than 5 morphemes), sentences with correct answers (person names), Other specific conditions (for example, a sentence that does not include a verb or a noun of a divergent connection). Here, the context-dependent ones are “sentences that contain conjunctions, conjunctions and adverbs”, “sentences that contain pronouns”, “reference expressions (“ this ”,“ that ”,“ this ”,“ it ” , “These”, “sentences containing them”), etc. Each of these context-dependent sentences is a sentence whose meaning is unknown only by that sentence. If there is no description of the correct answer (person) in the correct answer candidate encyclopedia database 124, a hint expression is acquired from the Web data via the network N and output to the hint sentence candidate generating means 15A. The hint expression acquisition method in this case is the same as the hint expression acquisition unit 14 shown in FIG.

ヒント文候補生成手段15Aは、ヒント表現取得手段14Aから取得するヒント文候補をヒント文候補データベース122に格納するものである。このヒント文候補生成手段15Aは、正答候補事典データベース124に正答(人物)の記述がない場合には、図1に示したヒント文候補生成手段15と同様な動作を行う。   The hint sentence candidate generating unit 15A stores the hint sentence candidate acquired from the hint expression acquiring unit 14A in the hint sentence candidate database 122. The hint sentence candidate generating means 15A performs the same operation as the hint sentence candidate generating means 15 shown in FIG. 1 when there is no description of the correct answer (person) in the correct answer candidate encyclopedia database 124.

ヒント文リスト生成手段16Aは、図5に示すように、ヒントキーワード抽出手段161と、特徴量抽出手段162Aと、スコア算出手段163Aと、ソート手段164と、格納手段165とを備えている。
特徴量抽出手段162Aは、辞書データにおいて、キーワードを含むエントリ(見出し語)の個数(文書に関する特徴量)Lと、正答とキーワードとの両方を含むエントリの個数(文書に関する特徴量)Kと、対象とする辞書データにおけるすべてのエントリの個数(文書に関する特徴量)Wとを抽出するものである。
As shown in FIG. 5, the hint sentence list generation unit 16A includes a hint keyword extraction unit 161, a feature amount extraction unit 162A, a score calculation unit 163A, a sort unit 164, and a storage unit 165.
In the dictionary data, the feature quantity extraction unit 162A includes the number of entries (keywords) including keywords (feature quantities related to documents) L, the number of entries including both correct answers and keywords (feature quantities related to documents) K, The number of all entries (characteristics related to a document) W in the target dictionary data is extracted.

スコア算出手段163Aは、特徴量抽出手段162Aで抽出された各特徴量(L,K,W)から導かれる、辞書データにおける正答とキーワードとの共起頻度と、辞書データにおけるキーワードの一般性とを用いて、各ヒント文候補に対するスコア(第2スコア)S2を、式(3)に基づいて算出するものである。ここでは、正答とキーワードとの共起頻度に関連度K/Wを用いて、辞書データにおけるキーワードの一般性をL/Wとした。このように表記した場合、関連度と一般性との分母(F)が等しいので、式(3)では、Wを省略した。なお、ソート手段164は、式(3)に示した第2スコアS2に基づいて、各ヒント文候補の優先順を決定することとなる。 The score calculation unit 163A includes the co-occurrence frequency of the correct answer and the keyword in the dictionary data, the generality of the keyword in the dictionary data, which is derived from each feature amount (L, K, W) extracted by the feature amount extraction unit 162A. Is used to calculate the score (second score) S 2 for each hint sentence candidate based on the equation (3). Here, the generality of the keyword in the dictionary data is set to L / W by using the degree of association K / W as the co-occurrence frequency of the correct answer and the keyword. When expressed in this way, the denominator (F) of the relevance and the generality is equal, and therefore W is omitted in Equation (3). Note that the sorting unit 164 determines the priority order of the hint sentence candidates based on the second score S 2 shown in Expression (3).

2=log(α×K+β×L) …式(3)
ここで、αとβとは、共起頻度と一般性とのどちらを優先するかという優先度に基づく所定の重みである。例えば、一般性を重視する場合には、αを「1」、βを「1000.0」としてもよい。また、第2スコアS2は、式(3)に限定されるものではなく、自動文書要約に用いられるようなTF*IDFを用いてもよい。
S 2 = log (α × K + β × L) Equation (3)
Here, α and β are predetermined weights based on the priority of which one of the co-occurrence frequency and the generality is given priority. For example, when importance is attached to generality, α may be “1” and β may be “1000.0”. The second score S 2 is not limited to the expression (3), and TF * IDF used for automatic document summarization may be used.

[ヒント生成装置の動作]
図6は、図5に示したヒント生成装置の動作を示すフローチャートである。
ヒント生成装置2Aが実行する処理であるステップS31〜ステップS38は、図1に示したヒント生成装置2が実行する処理であるステップS1〜ステップS8(図2参照)と同様なので説明を省略する。ただし、ステップS35では、ヒント生成装置2Aは、特徴量抽出手段162Aによって、キーワードに関する複数の特徴量を正答候補事典データベース124から抽出する。また、ステップS36では、ヒント生成装置2Aは、スコア算出手段163Aによって、抽出した特徴量に基づいて、各ヒント文候補に対する第2スコアを算出する。
[Operation of hint generation device]
FIG. 6 is a flowchart showing the operation of the hint generation device shown in FIG.
Steps S31 to S38, which are processes executed by the hint generation device 2A, are the same as steps S1 to S8 (see FIG. 2) that are the processes executed by the hint generation device 2 shown in FIG. However, in step S35, the hint generation device 2A extracts a plurality of feature amounts related to the keyword from the correct answer candidate dictionary database 124 by the feature amount extraction unit 162A. In step S36, the hint generation device 2A calculates a second score for each hint sentence candidate based on the extracted feature amount by the score calculation unit 163A.

<具体例>
表8は、正答「織田信長」に関して、ネットワークN上の人物事典を用いて作成されたヒント文リストである。ヒント文リストには、ヒント文ごとに、ヒント番号、ヒント文の内容および第2スコアS2が、この順番に記載されている。ここで、J=10として、ヒント文のトップ10を決定し、さらに、その後に、読みから得たヒントを追加した。また、ヒント文のトップ10の前に、カテゴリ情報、生年/没年からそれぞれ得られたヒント文を追加した。そのため、ヒント文リストには、合計15個のヒント文が記録されている。なお、後から追加したヒント文の第2スコアS2は、規定値を「0.0」とした。
<Specific example>
Table 8 is a hint sentence list created using a personal dictionary on the network N regarding the correct answer “Nobunaga Oda”. In the hint sentence list, for each hint sentence, the hint number, the contents of the hint sentence, and the second score S 2 are described in this order. Here, assuming that J = 10, the top 10 hint sentences were determined, and then a hint obtained from reading was added. In addition, the hint sentence obtained from the category information and the year of birth / year of death is added before the top 10 of the hint sentence. Therefore, a total of 15 hint sentences are recorded in the hint sentence list. It should be noted that the second score S 2 of the added hint statement at a later time, was the prescribed value as "0.0".

Figure 0004866153
Figure 0004866153

[対話型質問装置の構成]
図7は、本発明の第2実施形態に係る対話型質問システムに含まれる対話型質問装置の構成を示す機能ブロック図である。
対話型質問装置3Aは、記憶手段12に正答候補事典データベース323を備えると共に、検索手段34Aおよび応答文生成手段37Aの機能が異なる点を除いて、図3に示した対話型質問装置3と同一の構成なので、図3と同一の構成には同一の符号を付して説明を省略する。
[Configuration of interactive question system]
FIG. 7 is a functional block diagram showing a configuration of an interactive question apparatus included in the interactive question system according to the second embodiment of the present invention.
The interactive question apparatus 3A is the same as the interactive question apparatus 3 shown in FIG. 3 except that the storage means 12 includes the correct answer candidate dictionary database 323 and the functions of the search means 34A and the response sentence generation means 37A are different. Therefore, the same components as those in FIG.

正答候補事典データベース323は、ヒント生成装置2Aに格納された正答候補事典データベース124と同様なものであり、例えば、人物事典である。この正答候補事典データベース323は、ヒント生成装置2Aから取得してもよいし、別のものであってもよい。   The correct answer candidate encyclopedia database 323 is similar to the correct answer candidate encyclopedia database 124 stored in the hint generating device 2A, and is, for example, a person encyclopedia. This correct answer candidate encyclopedia database 323 may be acquired from the hint generation device 2A, or may be a different one.

検索手段34Aは、正答候補事典データベース323から、回答に付随した付随データを検索する機能をさらに有している。例えば、人名に付随したデータは、その人物の職業(カテゴリ)、生没年、業績等の関連する情報などがある。正答が「織田信長」であり、回答が「聖徳太子」である場合には、カテゴリが「政治家」で共通である。この場合、生没年は、「安土桃山時代」と「飛鳥時代」であるため異なる。これらの付随データは、類似度算出手段35を介して応答文生成手段37Aに出力される。   The search means 34A further has a function of searching the accompanying data attached to the answer from the correct answer candidate dictionary database 323. For example, the data associated with a person name includes related information such as the occupation (category), birth date, and achievement of the person. When the correct answer is “Nobunaga Oda” and the answer is “Prince Shotoku”, the category is common to “politicians”. In this case, the birth and death years are different because they are “Azuchi Momoyama period” and “Asuka period”. These accompanying data are output to the response sentence generation unit 37A via the similarity calculation unit 35.

応答文生成手段37Aは、検索手段34Aで検索された付随データに基づいて、回答に対する付随ヒント(応答文)を生成する。例えば、正答が「織田信長」であり、回答が「聖徳太子」である場合には、回答の付随データは、「政治家」や「飛鳥時代」等である。
応答文生成手段37Aは、回答の付随データと正答の付随データとを用いて、例えば、「政治家というのは合ってるよ。」、「飛鳥・奈良時代の皇族じゃないよ。もう少し後の時代だよ。」などの応答文を生成する。
The response sentence generating unit 37A generates an accompanying hint (response sentence) for the answer based on the accompanying data searched by the searching unit 34A. For example, when the correct answer is “Oda Nobunaga” and the answer is “Seioku Prince”, the accompanying data of the answer is “politician”, “Asuka period” or the like.
The response sentence generation means 37A uses the accompanying data of the answer and the accompanying data of the correct answer, for example, “A politician is right.”, “It is not the royal family of the Asuka / Nara period. Generate a response sentence such as "

[対話型質問装置の動作]
図8は、図7に示した対話型質問装置の動作を示すフローチャートである。
対話型質問装置3Aが実行する処理であるステップS41〜ステップS48およびステップS51〜ステップS56は、図3に示した対話型質問装置3が実行する処理であるステップS11〜ステップS18およびステップS19〜ステップS24(図4参照)と同様なので説明を省略する。
[Operation of interactive question system]
FIG. 8 is a flowchart showing the operation of the interactive question apparatus shown in FIG.
Steps S41 to S48 and Steps S51 to S56, which are processes executed by the interactive question apparatus 3A, are steps S11 to S18 and Step S19 to Steps that are executed by the interactive question apparatus 3 shown in FIG. Since it is the same as S24 (see FIG. 4), the description is omitted.

ステップS48に続いて、対話型質問装置3Aは、応答文生成手段37Aによって、検索手段34Aから付随データを取得したか否かを判別する(ステップS49)。付随データがある場合には(ステップS49:Yes)。対話型質問装置3Aは、応答文生成手段37Aによって、付随ヒントを生成し(ステップS50)、ステップS51に進む。一方、付随データがない場合には(ステップS49:No)。対話型質問装置3Aは、ステップS50をスキップしてステップS51に進む。
<具体例>
Subsequent to step S48, the interactive question apparatus 3A determines whether or not accompanying data has been acquired from the search unit 34A by the response sentence generation unit 37A (step S49). If there is accompanying data (step S49: Yes). The interactive question apparatus 3A generates an accompanying hint by the response sentence generation unit 37A (step S50), and proceeds to step S51. On the other hand, when there is no accompanying data (step S49: No). The interactive question apparatus 3A skips step S50 and proceeds to step S51.
<Specific example>

表9は、正答「織田信長」を例に取ったユーザと対話型質問装置3Aとの対話例である。
対話型質問装置3Aは、表6に示したヒント文を順次提示し、ユーザの回答に応じて、正答との類似度に基づく応答文を生成する。また、応答文として、職業(カテゴリ情報:戦国大名)が同じことを指摘した付随ヒントをユーザに提示する。これにより、ユーザは、正答を考えやすくなる。また、対話型質問装置3Aは、正答と回答のそれぞれの人名の生年が両方とも分かる場合、それらを比較し、応答文として、時代が後か先かをユーザに伝える付随ヒントを生成する。
Table 9 shows an example of dialogue between the user and the interactive questioning apparatus 3A taking the correct answer “Nobunaga Oda” as an example.
The interactive question apparatus 3A sequentially presents the hint sentences shown in Table 6, and generates a response sentence based on the similarity to the correct answer according to the user's answer. In addition, as a response sentence, an accompanying hint indicating that the occupation (category information: Sengoku Daimyo) is the same is presented to the user. This makes it easier for the user to think about the correct answer. In addition, when both the correct answer and the year of birth of each person's name are known, the interactive question apparatus 3A compares them and generates an accompanying hint that tells the user whether the time is later or earlier as a response sentence.

Figure 0004866153
Figure 0004866153

第2の実施形態によれば、ヒント生成装置2Aは、正答候補事典データベース124から、ヒント表現を取得する。そのため、ヒント表現が正答に対して正確で良質なものとなる。その結果、ユーザにとって分かり易くなるので、ヒント文としてふさわしくなる。また、対話型質問装置3Aは、検索された付随データに基づいて、回答に対する応答文を付随ヒントとして生成するので、ユーザの思考を補助することができる。   According to the second embodiment, the hint generation device 2 </ b> A acquires a hint expression from the correct answer candidate encyclopedia database 124. Therefore, the hint expression is accurate and of good quality for the correct answer. As a result, it becomes easy for the user to understand, and is suitable as a hint sentence. Moreover, since the interactive question apparatus 3A generates a response sentence to an answer as an accompanying hint based on the retrieved accompanying data, it can assist the user's thought.

(第3実施形態)
第3実施形態に係る対話型質問システム1Bは、ヒント生成装置2(または2A)と、対話型質問装置3Bとを備えている。
[対話型質問装置の構成]
図9は、本発明の第3実施形態に係る対話型質問システムに含まれる対話型質問装置の構成を示す機能ブロック図である。対話型質問装置3Bは、擬似ユーザと対話をするものである。擬似ユーザとは、実際のユーザの代わりとなって対話を行うプログラムのことである。対話型質問装置3Bは、回答抽出手段39および正答候補データベース324を備えると共に、出題管理手段38Bの機能が異なる点を除いて、図7に示した対話型質問装置3Aと同一の構成なので、図7と同一の構成には同一の符号を付して説明を省略する。
(Third embodiment)
An interactive question system 1B according to the third embodiment includes a hint generation device 2 (or 2A) and an interactive question device 3B.
[Configuration of interactive question system]
FIG. 9 is a functional block diagram showing the configuration of the interactive question apparatus included in the interactive question system according to the third embodiment of the present invention. The interactive question apparatus 3B interacts with a pseudo user. A pseudo user is a program that interacts on behalf of an actual user. The interactive question apparatus 3B has the same structure as the interactive question apparatus 3A shown in FIG. 7 except that it includes an answer extraction means 39 and a correct answer candidate database 324, and the function of the question management means 38B is different. The same components as those in FIG.

正答候補データベース324は、ヒント生成装置2(または2A)に格納された正答候補データベース121と同様なものであり、例えば、人名リストである。この正答候補データベース324は、ヒント生成装置2(または2A)から取得してもよいし、別のものであってもよい。   The correct answer candidate database 324 is similar to the correct answer candidate database 121 stored in the hint generation device 2 (or 2A), and is, for example, a personal name list. This correct answer candidate database 324 may be acquired from the hint generation device 2 (or 2A), or may be another one.

回答抽出手段39は、回答を正答候補データベース121から抽出し、抽出した回答を出題管理手段38Bに出力するものである。
出題管理手段38Bは、回答抽出手段39から受け付けた回答を一致判定手段33に出力する。なお、出題管理手段38Bは、入力装置Mから、所定の命令(クイズの開始、終了、ヒント文のスキップ等)を受け付ける。
The answer extraction means 39 extracts answers from the correct answer candidate database 121 and outputs the extracted answers to the question management means 38B.
The question management unit 38B outputs the answer received from the answer extraction unit 39 to the match determination unit 33. The question management unit 38B receives a predetermined command (start / end of a quiz, skip of a hint sentence, etc.) from the input device M.

[対話型質問装置の動作]
図10は、図9に示した対話型質問装置の動作を示すフローチャートである。
対話型質問装置3Bが実行する処理であるステップS61〜ステップS75は、図7に示した対話型質問装置3Aが実行する処理であるステップS41〜ステップS55(図8参照)と同様なので説明を省略する。ただし、ステップS66では、対話型質問装置3Bは、回答抽出手段39によって、回答を正答候補データベース121から抽出し、抽出した回答を出題管理手段38Bに出力し、ステップS67に進む。
[Operation of interactive question system]
FIG. 10 is a flowchart showing the operation of the interactive question apparatus shown in FIG.
Steps S61 to S75 which are processes executed by the interactive question apparatus 3B are the same as steps S41 to S55 (see FIG. 8) which are processes executed by the interactive question apparatus 3A shown in FIG. To do. However, in step S66, the interactive question apparatus 3B extracts the answer from the correct answer candidate database 121 by the answer extraction means 39, outputs the extracted answer to the question management means 38B, and proceeds to step S67.

<具体例>
表10は、対話型質問システム1Bにおいて擬似ユーザに対するヒント文の例である。
<Specific example>
Table 10 is an example of a hint sentence for the pseudo user in the interactive question system 1B.

Figure 0004866153
Figure 0004866153

表11は、対話型質問装置3Bにおける擬似ユーザとの対話例である。   Table 11 shows an example of interaction with a pseudo user in the interactive question apparatus 3B.

Figure 0004866153
Figure 0004866153

なお、擬似ユーザが、最初のヒント文を受け取った後、回答(人名)を正答候補データベース324から抽出し、類似度算出手段35を用いて、正答に近い回答を複数得た後、それらを回答として順次用いることで対話を行うように構成してもよい。   After the pseudo user receives the first hint sentence, the answer (person name) is extracted from the correct answer candidate database 324, and a plurality of answers close to the correct answer are obtained by using the similarity calculation means 35, and then the answers are given. It is also possible to configure such that dialogues are carried out by using them sequentially.

第3の実施形態によれば、対話型質問装置3Bにおける擬似ユーザとのクイズのやり取りを視聴することで、間接的に情報を取得できる。ユーザが直接対話をしなくても正答についての知識を得ることができる。   According to the third embodiment, information can be indirectly acquired by viewing a quiz exchange with a pseudo user in the interactive question apparatus 3B. Knowledge about correct answers can be obtained even if the user does not interact directly.

以上、本発明の各実施形態について説明したが、本発明はこれらに限定されるものではなく、その趣旨を変えない範囲で実施することができる。例えば、各実施形態では、人名当てクイズとして説明したが、これに限定されるものではない。例えば、動物名や植物名などの生物名、地名などの無生物名、商品名、学習用語名、学術専門用語名等でもよい。
また、本実施形態では、ヒント文選択手段36は、類似度(p値)が所定値γよりも小さい場合に、ヒント文リストの並べ替え処理をするものとして説明したが、例えば、類似度が所定値よりも大きい場合に、ヒント文リストを優先順と異なる順序に並べ替えるようにしてもよい。この場合には、ヒント文選択手段36は、例えば、第1番目のヒント文を、ヒント文リストの順番に関わらず途中から選択して出題し、類似度が所定値よりも大きい場合には、続いて、出題済みのヒント文よりも難易度の高いヒント文を出題できるようにヒント文を並べ替える。ここで、出題済みのヒント文よりも難易度の高いヒント文は、元のヒント文リストの上位(前方)に配置されていたものである。そして、類似度が所定値よりも大きい場合に、出題済みのヒント文よりも難易度の高いヒント文を出題することにより、正答と回答との類似度が下がり易くなる。その結果、対話を長期間継続させることが可能となる。さらに、類似度が所定値よりも小さい場合の処理と組み合わせるようにしてもよい。
As mentioned above, although each embodiment of this invention was described, this invention is not limited to these, It can implement in the range which does not change the meaning. For example, in each embodiment, although it described as a personal name guessing quiz, it is not limited to this. For example, an organism name such as an animal name or a plant name, an inanimate name such as a place name, a product name, a learning term name, or an academic terminology name may be used.
In the present embodiment, the hint sentence selection unit 36 is described as performing the hint sentence list rearrangement process when the similarity (p value) is smaller than the predetermined value γ. When it is larger than the predetermined value, the hint sentence list may be rearranged in an order different from the priority order. In this case, for example, the hint sentence selection unit 36 selects the first hint sentence from the middle regardless of the order of the hint sentence list, and when the similarity is larger than a predetermined value, Subsequently, the hint sentences are rearranged so that a hint sentence having a higher degree of difficulty than the hint sentence already given can be given. Here, the hint sentence having a higher degree of difficulty than the hint sentence that has been presented is one that is arranged at the top (front) of the original hint sentence list. Then, when the similarity is greater than a predetermined value, a hint sentence having a higher degree of difficulty than the questioned hint sentence is given, so that the similarity between the correct answer and the answer is likely to decrease. As a result, the dialogue can be continued for a long time. Further, it may be combined with a process when the similarity is smaller than a predetermined value.

また、ヒント生成装置2とヒント生成装置2Aの機能を併せ持つようにヒント生成装置を構成してもよい。この場合、問題の正答に合わせてヒント表現の取得先や特徴量(文書数/エントリ数)の取得先を、Webデータと辞書データとで適宜切り替えるようにしてもよい。また、ヒント生成装置2(または2A)を対話型質問装置3(または3A,3B)に含めて構成するようにしてもよい。この場合、各種データベースを共用することができる。さらに、公知の音声対話手段を用いて音声による対話を行うように構成してもよい。ここで、音声対話手段には、音響モデルと言語モデルを備えた音声認識装置と、音声データベース等を含む音声合成手段とを含む。この場合には、入力装置Mにはマイクが含まれ、出力装置Dには、スピーカが含まれる。   Further, the hint generation device may be configured to have the functions of the hint generation device 2 and the hint generation device 2A. In this case, the acquisition destination of the hint expression and the acquisition destination of the feature amount (number of documents / number of entries) may be appropriately switched between the Web data and the dictionary data in accordance with the correct answer of the problem. Further, the hint generation device 2 (or 2A) may be included in the interactive questioning device 3 (or 3A, 3B). In this case, various databases can be shared. Furthermore, you may comprise so that a dialog with a voice | voice may be performed using a well-known voice dialog means. Here, the voice interaction means includes a voice recognition device having an acoustic model and a language model, and a voice synthesis means including a voice database. In this case, the input device M includes a microphone, and the output device D includes a speaker.

本発明の第1実施形態に係る対話型質問システムに含まれるヒント生成装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the hint production | generation apparatus contained in the interactive question system which concerns on 1st Embodiment of this invention. 図1に示したヒント生成装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the hint production | generation apparatus shown in FIG. 本発明の第1実施形態に係る対話型質問システムに含まれる対話型質問装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the interactive question apparatus contained in the interactive question system which concerns on 1st Embodiment of this invention. 図3に示した対話型質問装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the interactive type question apparatus shown in FIG. 本発明の第2実施形態に係る対話型質問システムに含まれるヒント生成装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the hint production | generation apparatus contained in the interactive question system which concerns on 2nd Embodiment of this invention. 図5に示したヒント生成装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the hint production | generation apparatus shown in FIG. 本発明の第2実施形態に係る対話型質問システムに含まれる対話型質問装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the interactive question apparatus contained in the interactive question system which concerns on 2nd Embodiment of this invention. 図7に示した対話型質問装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the interactive type question apparatus shown in FIG. 本発明の第3実施形態に係る対話型質問システムに含まれる対話型質問装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the interactive question apparatus contained in the interactive question system which concerns on 3rd Embodiment of this invention. 図9に示した対話型質問装置の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the interactive type question apparatus shown in FIG.

符号の説明Explanation of symbols

1(1A,1B) 対話型質問システム
2(2A) ヒント生成装置
3(3A,3B) 対話型質問装置
4 ネットワークデータサーバ
4a データベース
5 質問応答システム
11 通信インタフェース
12 記憶手段
121 正答候補データベース
122 ヒント文候補データベース
123 ヒント文リストデータベース
124 正答候補事典データベース
13 質問生成手段
14(14A) ヒント表現取得手段
141 第1表現取得手段
142 第2表現取得手段
143 第3表現取得手段
144 第4表現取得手段
15(15A) ヒント文候補生成手段
151 第1候補生成手段
152 第2候補生成手段
153 第3候補生成手段
154 第4候補生成手段
16(16A) ヒント文リスト生成手段
161 ヒントキーワード抽出手段
162 特徴量抽出手段
163 スコア算出手段
164 ソート手段
165 格納手段
162A 特徴量抽出手段
163A スコア算出手段
31 通信インタフェース
32 記憶手段
321 ヒント文リストデータベース
322 応答文データベース
323 正答候補事典データベース
324 正答候補データベース
33 一致判定手段
34(34A) 検索手段
35 類似度算出手段
36 ヒント文選択手段
37(37A) 応答文生成手段
38(38B) 出題管理手段
39 回答候補抽出手段
N ネットワーク
M 入力装置
D 出力装置
1 (1A, 1B) Interactive question system 2 (2A) Hint generation device 3 (3A, 3B) Interactive question device 4 Network data server 4a Database 5 Question answering system 11 Communication interface 12 Storage means 121 Correct answer candidate database 122 Hint sentence Candidate database 123 Hint sentence list database 124 Correct answer candidate encyclopedia 13 Question generation means 14 (14A) Hint expression acquisition means 141 First expression acquisition means 142 Second expression acquisition means 143 Third expression acquisition means 144 Fourth expression acquisition means 15 ( 15A) hint sentence candidate generating means 151 first candidate generating means 152 second candidate generating means 153 third candidate generating means 154 fourth candidate generating means 16 (16A) hint sentence list generating means 161 hint keyword extracting means 162 Quantity extraction means 163 Score calculation means 164 Sort means 165 Storage means 162A Feature quantity extraction means 163A Score calculation means 31 Communication interface 32 Storage means 321 Hint sentence list database 322 Response sentence database 323 Correct answer candidate dictionary database 324 Correct answer candidate database 33 Match determination means 34 (34A) Search means 35 Similarity calculation means 36 Hint sentence selection means 37 (37A) Response sentence generation means 38 (38B) Question management means 39 Answer candidate extraction means N Network M Input device D Output device

Claims (10)

予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムの対話型質問方法であって、
前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択ステップと、
前記回答と前記正答とが一致するか否かを判定する一致判定ステップと、
前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索ステップと、
前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出ステップと、
前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成ステップと、
前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理ステップと、
を有することを特徴とする対話型質問方法。
Interactive type interactive question system that outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a question to which a predetermined correct answer is applied, and outputs different questions according to the answers corresponding to the questions. Question method,
A hint sentence selecting step of selecting the hint sentence according to the priority order from a hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order;
A match determination step of determining whether or not the answer and the correct answer match;
When the answer and the correct answer do not match, in a predetermined text data group, a data group including the correct answer, a data group including the answer, and a data group including both the answer and the correct answer; A search step to search for,
Based on the retrieved result, a similarity calculation step of calculating the degree of co-occurrence between the answer and the correct answer in the text data group as the similarity between the answer and the correct answer;
A response sentence generation step for generating a response sentence for the answer based on the calculated similarity;
A question management step that repeatedly questions the different questions until the answer and the correct answer match;
An interactive question method characterized by comprising:
複数の正答候補を格納した正答候補データベースから所定の正答候補を選択し、前記選択した正答候補を正答として生成する正答生成ステップと、
前記生成された正答に対応するヒントとして、キーワードまたはフレーズで表現された複数のヒント表現を、前記テキストデータ群から取得するヒント表現取得ステップと、
前記取得されたヒント表現を含む文を示すヒント文候補を生成するヒント文候補生成ステップと、
前記生成された各ヒント文候補からキーワードを抽出するヒントキーワード抽出ステップと、
前記テキストデータ群において、前記正答と前記抽出されたキーワードとの両方を含む文書に関する特徴量と、前記テキストデータ群におけるすべての文書に関する特徴量とを含む複数の特徴量を抽出する特徴量抽出ステップと、
前記抽出された特徴量に基づいて、前記テキストデータ群における前記正答と前記抽出されたキーワードとの共起頻度と、前記テキストデータ群における前記抽出されたキーワードの一般性とを用いて、前記各ヒント文候補に対するスコアを算出するスコア算出ステップと、
前記各ヒント文候補のスコアに基づいて、前記各ヒント文候補の優先順を決定し、前記決定された優先順で前記ヒント文候補を並べて、前記ヒント文リストを生成するソートステップと、
をさらに有することを特徴とする請求項1に記載の対話型質問方法。
A correct answer generation step of selecting a predetermined correct answer candidate from a correct answer candidate database storing a plurality of correct answer candidates, and generating the selected correct answer candidate as a correct answer;
As a hint corresponding to the generated correct answer, a hint expression acquisition step of acquiring a plurality of hint expressions expressed by keywords or phrases from the text data group;
A hint sentence candidate generating step for generating a hint sentence candidate indicating a sentence including the acquired hint expression;
A hint keyword extraction step of extracting a keyword from each of the generated hint sentence candidates;
In the text data group, a feature quantity extracting step of extracting a plurality of feature quantities including a feature quantity relating to a document including both the correct answer and the extracted keyword and a feature quantity relating to all documents in the text data group. When,
Based on the extracted feature amount, the co-occurrence frequency of the correct answer and the extracted keyword in the text data group, and the generality of the extracted keyword in the text data group, and A score calculating step for calculating a score for the hint sentence candidate;
A sorting step of determining a priority order of the hint sentence candidates based on the score of the hint sentence candidates, arranging the hint sentence candidates in the determined priority order, and generating the hint sentence list;
The interactive question method according to claim 1, further comprising:
前記ヒント表現取得ステップは、前記複数のヒント表現を、ネットワークまたは/および前記対話型質問システムに備えられたテキストデータ群から取得し、
前記特徴量抽出ステップは、前記ヒントキーワード抽出ステップで抽出されたキーワードの特徴量を前記ネットワークまたは/および前記対話型質問システムに備えられたテキストデータ群から抽出することを特徴とする請求項2に記載の対話型質問方法。
The hint expression obtaining step obtains the plurality of hint expressions from a text data group provided in the network or / and the interactive question system,
The feature amount extraction step extracts the feature amount of the keyword extracted in the hint keyword extraction step from a text data group provided in the network or / and the interactive question system. The interactive question method described.
前記ヒント表現取得ステップは、前記複数のヒント表現を、ネットワークまたは/および前記対話型質問システムに備えられた予め作成された辞書データベースのテキストデータ群から取得し、
前記特徴量抽出ステップは、前記ヒントキーワード抽出ステップで抽出されたキーワードの特徴量を前記辞書データベースのテキストデータ群から抽出し、
前記検索ステップによって、前記辞書データベースのテキストデータ群から前記回答に関する情報として前記回答に付随した付随データが検索された場合に、前記応答文生成ステップは、前記検索された付随データに基づいて、前記回答に対する応答文を生成することを特徴とする請求項2に記載の対話型質問方法。
The hint expression acquisition step acquires the plurality of hint expressions from a text data group of a dictionary database prepared in advance in a network or / and the interactive question system;
The feature amount extraction step extracts the feature amount of the keyword extracted in the hint keyword extraction step from the text data group of the dictionary database;
When the search step searches for accompanying data associated with the answer as information related to the answer from the text data group of the dictionary database, the response sentence generating step is based on the searched accompanying data. The interactive question method according to claim 2, wherein a response sentence to the answer is generated.
前記回答を、前記正答候補データベースから抽出する回答抽出ステップをさらに有することを特徴とする請求項2ないし請求項4のいずれか一項に記載の対話型質問方法。   The interactive question method according to any one of claims 2 to 4, further comprising an answer extraction step of extracting the answer from the correct answer candidate database. 前記出題管理ステップは、前記回答と前記正答との類似度が所定値以上であるか否かを判別する判別ステップを有し、
前記ヒント文選択ステップは、前記回答と前記正答との類似度に基づいて、前記ヒント文リストを前記優先順と異なる順序に並べ替え、前記並べ替えた順序にしたがって前記ヒント文を選択する、
ことを特徴とする請求項1ないし請求項5のいずれか一項に記載の対話型質問方法。
The question management step has a determination step of determining whether or not the similarity between the answer and the correct answer is a predetermined value or more,
The hint sentence selection step rearranges the hint sentence list in an order different from the priority order based on the similarity between the answer and the correct answer, and selects the hint sentence according to the sorted order.
6. The interactive question method according to any one of claims 1 to 5, wherein:
予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムであって、
前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択手段と、
前記回答と前記正答とが一致するか否かを判定する一致判定手段と、
前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索手段と、
前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出手段と、
前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成手段と、
前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理手段と、
を備えることを特徴とする対話型質問システム。
An interactive question system that outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a problem to which a predetermined correct answer is applied, as a question, and outputs different questions depending on the answer corresponding to the question. ,
A hint sentence selecting means for selecting the hint sentence according to the priority order from a hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order;
Match determination means for determining whether or not the answer and the correct answer match;
When the answer and the correct answer do not match, in a predetermined text data group, a data group including the correct answer, a data group including the answer, and a data group including both the answer and the correct answer; A search means for searching for,
Based on the retrieved result, similarity calculation means for calculating the degree of co-occurrence between the answer and the correct answer in the text data group as the similarity between the answer and the correct answer;
A response sentence generating means for generating a response sentence for the answer based on the calculated similarity;
Question management means for repeatedly giving the different questions until the answer matches the correct answer;
An interactive question system characterized by comprising:
複数の正答候補を格納した正答候補データベースから所定の正答候補を選択し、前記選択した正答候補を正答として生成する正答生成手段と、
前記生成された正答に対応するヒントとして、キーワードまたはフレーズで表現された複数のヒント表現を、前記テキストデータ群から取得するヒント表現取得手段と、
前記取得されたヒント表現を含む文を示すヒント文候補を生成するヒント文候補生成手段と、
前記生成された各ヒント文候補からキーワードを抽出するヒントキーワード抽出手段と、
前記テキストデータ群において、前記正答と前記抽出されたキーワードとの両方を含む文書に関する特徴量と、前記テキストデータ群におけるすべての文書に関する特徴量とを含む複数の特徴量を抽出する特徴量抽出手段と、
前記抽出された特徴量に基づいて、前記テキストデータ群における前記正答と前記抽出されたキーワードとの共起頻度と、前記テキストデータ群における前記抽出されたキーワードの一般性とを用いて、前記各ヒント文候補に対するスコアを算出するスコア算出手段と、
前記各ヒント文候補のスコアに基づいて、前記各ヒント文候補の優先順を決定し、前記決定された優先順で前記ヒント文候補を並べて、前記ヒント文リストを生成するソート手段と、
をさらに備えることを特徴とする請求項7に記載の対話型質問システム。
A correct answer generating means for selecting a predetermined correct answer candidate from a correct answer candidate database storing a plurality of correct answer candidates, and generating the selected correct answer candidate as a correct answer;
As a hint corresponding to the generated correct answer, a hint expression acquisition means for acquiring a plurality of hint expressions expressed by a keyword or a phrase from the text data group;
Hint sentence candidate generating means for generating a hint sentence candidate indicating a sentence including the acquired hint expression;
Hint keyword extraction means for extracting a keyword from each of the generated hint sentence candidates;
Feature amount extraction means for extracting a plurality of feature amounts including a feature amount relating to a document including both the correct answer and the extracted keyword and feature amounts relating to all documents in the text data group in the text data group. When,
Based on the extracted feature amount, the co-occurrence frequency of the correct answer and the extracted keyword in the text data group, and the generality of the extracted keyword in the text data group, and Score calculating means for calculating a score for the hint sentence candidate;
Sort means for determining a priority order of the hint sentence candidates based on the score of each hint sentence candidate, arranging the hint sentence candidates in the determined priority order, and generating the hint sentence list;
The interactive question system according to claim 7, further comprising:
予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムのコンピュータに
前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択ステップと、
前記回答と前記正答とが一致するか否かを判定する一致判定ステップと、
前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索ステップと、
前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出ステップと、
前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成ステップと、
前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理ステップと、
を実行させるための対話型質問プログラム。
To a computer of an interactive question system that outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a question to which a predetermined correct answer is applied, and outputs different questions according to the answers corresponding to the questions. ,
A hint sentence selecting step of selecting the hint sentence according to the priority order from a hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order;
A match determination step of determining whether or not the answer and the correct answer match;
When the answer and the correct answer do not match, in a predetermined text data group, a data group including the correct answer, a data group including the answer, and a data group including both the answer and the correct answer; A search step to search for,
Based on the retrieved result, a similarity calculation step of calculating the degree of co-occurrence between the answer and the correct answer in the text data group as the similarity between the answer and the correct answer;
A response sentence generation step for generating a response sentence for the answer based on the calculated similarity;
A question management step that repeatedly questions the different questions until the answer and the correct answer match;
Interactive question program for the execution.
予め定められた正答を当てる問題における正答に対応するヒントを示す文である複数のヒント文を質問として出力し、前記質問に対応する回答に応じて異なる質問を出力する対話型質問システムのコンピュータに、
前記複数のヒント文が予め定められた優先順に並べられたヒント文リストの中から、前記優先順にしたがって前記ヒント文を選択するヒント文選択ステップと、
前記回答と前記正答とが一致するか否かを判定する一致判定ステップと、
前記回答と前記正答とが一致しない場合に、予め定められたテキストデータ群において、前記正答を含むデータ群と、前記回答を含むデータ群と、前記回答と前記正答との両方を含むデータ群とを検索する検索ステップと、
前記検索された結果に基づいて、前記テキストデータ群における前記回答と前記正答との共起性の高さを、前記回答と前記正答との類似度として算出する類似度算出ステップと、
前記算出された類似度に基づいて、前記回答に対する応答文を生成する応答文生成ステップと、
前記回答と前記正答とが一致するまで前記異なる質問を繰り返し出題する出題管理ステップと、を実行させるための対話型質問プログラム記録したコンピュータ読み取り可能な記録媒体。
To a computer of an interactive question system that outputs a plurality of hint sentences, which are sentences indicating hints corresponding to correct answers in a question to which a predetermined correct answer is applied, and outputs different questions according to the answers corresponding to the questions. ,
A hint sentence selecting step of selecting the hint sentence according to the priority order from a hint sentence list in which the plurality of hint sentences are arranged in a predetermined priority order;
A match determination step of determining whether or not the answer and the correct answer match;
When the answer and the correct answer do not match, in a predetermined text data group, a data group including the correct answer, a data group including the answer, and a data group including both the answer and the correct answer; A search step to search for,
Based on the retrieved result, a similarity calculation step of calculating the degree of co-occurrence between the answer and the correct answer in the text data group as the similarity between the answer and the correct answer;
A response sentence generation step for generating a response sentence for the answer based on the calculated similarity;
A computer-readable recording medium interactive question program for executing a question presentation control step of questions repeatedly said different questions to the answers and said correct match.
JP2006153961A 2006-06-01 2006-06-01 Interactive question method, interactive question system, interactive question program, and recording medium recording the program Expired - Fee Related JP4866153B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006153961A JP4866153B2 (en) 2006-06-01 2006-06-01 Interactive question method, interactive question system, interactive question program, and recording medium recording the program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006153961A JP4866153B2 (en) 2006-06-01 2006-06-01 Interactive question method, interactive question system, interactive question program, and recording medium recording the program

Publications (2)

Publication Number Publication Date
JP2007322836A JP2007322836A (en) 2007-12-13
JP4866153B2 true JP4866153B2 (en) 2012-02-01

Family

ID=38855690

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006153961A Expired - Fee Related JP4866153B2 (en) 2006-06-01 2006-06-01 Interactive question method, interactive question system, interactive question program, and recording medium recording the program

Country Status (1)

Country Link
JP (1) JP4866153B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021032911A (en) * 2019-08-13 2021-03-01 株式会社フォーサイト Dialogue learning system, method, and program

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010129033A (en) * 2008-12-01 2010-06-10 Nippon Telegr & Teleph Corp <Ntt> Interactive mental state learning device and method thereof, interactive control device and method thereof, program and recording medium
JP5128514B2 (en) * 2009-02-10 2013-01-23 日本電信電話株式会社 Multi-person thought arousing dialogue apparatus, multi-person thought arousing dialogue method, multi-person thought arousing dialogue program, and computer-readable recording medium recording the program
JP5402307B2 (en) * 2009-06-25 2014-01-29 富士ゼロックス株式会社 Data output device, display device, and program
JP6134746B2 (en) * 2015-01-07 2017-05-24 株式会社スマイルラボ Video game control server and video game control program
JP6519249B2 (en) * 2015-03-16 2019-05-29 富士通株式会社 Answer support program, answer support device, and answer support method
CN108347646B (en) * 2018-03-20 2019-07-02 百度在线网络技术(北京)有限公司 Multimedia content playing method and device
CN112337081B (en) * 2020-10-27 2022-10-14 四川长虹电器股份有限公司 Interactive method for realizing voice guessing game
CN117151122B (en) * 2023-10-30 2024-03-22 湖南三湘银行股份有限公司 Bank customer service session question-answering processing method and system based on natural language processing

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002132812A (en) * 2000-10-19 2002-05-10 Nippon Telegr & Teleph Corp <Ntt> Method and system for answering question and recording medium with recorded question answering program
JP3339853B2 (en) * 2000-11-24 2002-10-28 株式会社ナムコ Game device and information storage medium
JP2003173335A (en) * 2001-12-06 2003-06-20 Canon Inc Natural language conversation device and method, and storage medium
JP4083610B2 (en) * 2003-03-25 2008-04-30 株式会社東芝 Question answering system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021032911A (en) * 2019-08-13 2021-03-01 株式会社フォーサイト Dialogue learning system, method, and program

Also Published As

Publication number Publication date
JP2007322836A (en) 2007-12-13

Similar Documents

Publication Publication Date Title
JP4866153B2 (en) Interactive question method, interactive question system, interactive question program, and recording medium recording the program
US7519529B1 (en) System and methods for inferring informational goals and preferred level of detail of results in response to questions posed to an automated information-retrieval or question-answering service
Bailin et al. Readability: Text and context
US7430505B1 (en) Inferring informational goals and preferred level of detail of answers based at least on device used for searching
Burgess et al. Explorations in context space: Words, sentences, discourse
US8700382B2 (en) Personal text assistant
Mandera et al. Recognition times for 62 thousand English words: Data from the English Crowdsourcing Project
US20070112554A1 (en) System of interactive dictionary
Boulton Integrating corpus tools and techniques in ESP courses
Isard et al. Individuality and alignment in generated dialogues
JP4347226B2 (en) Information extraction program, recording medium thereof, information extraction apparatus, and information extraction rule creation method
Derewianka Pedagogical grammars: Their role in English language teaching
US20210117458A1 (en) Response selecting apparatus, response selecting method, and response selecting program
Fantinuoli The use of comparable corpora in interpreting practice and training
Jackson Corpus and concordance: Finding out about style
Lancia Word co-occurrence and similarity in meaning
Downs et al. KidSpell: Making a difference in spellchecking for children
JP4466334B2 (en) Information classification method and apparatus, program, and storage medium storing program
JP4468294B2 (en) EXPERIENCE INFORMATION EVALUATION DEVICE, PROGRAM, AND COMPUTER-READABLE RECORDING MEDIUM
KR100353549B1 (en) Method and system for learning a language
JP4153843B2 (en) Natural sentence search device, natural sentence search method, natural sentence search program, and natural sentence search program storage medium
Mutanen Philosophy of communication: A logico-conceptual approach
Cowles et al. Conceptual similarity effects on working memory in sentence contexts: Testing a theory of anaphora
WO2000014700A1 (en) Apparatus and method for personalized language exercise generation
Rüdian et al. Educational Text Summarizer: Which sentences are worth asking for?

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080730

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110331

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110531

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110621

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20110805

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111108

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141118

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4866153

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees