JP6014725B2 - 単文/複文構造の自然言語クエリに対する検索および情報提供方法並びにシステム - Google Patents

単文/複文構造の自然言語クエリに対する検索および情報提供方法並びにシステム Download PDF

Info

Publication number
JP6014725B2
JP6014725B2 JP2015138524A JP2015138524A JP6014725B2 JP 6014725 B2 JP6014725 B2 JP 6014725B2 JP 2015138524 A JP2015138524 A JP 2015138524A JP 2015138524 A JP2015138524 A JP 2015138524A JP 6014725 B2 JP6014725 B2 JP 6014725B2
Authority
JP
Japan
Prior art keywords
information
search
entity
query
language
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015138524A
Other languages
English (en)
Other versions
JP2016018566A (ja
Inventor
宰 赫 張
宰 赫 張
基 永 金
基 永 金
明 石 金
明 石 金
智 惠 崔
智 惠 崔
元 振 李
元 振 李
フン ア イ
フン ア イ
龍 訓 李
龍 訓 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Naver Corp
Original Assignee
Naver Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Naver Corp filed Critical Naver Corp
Publication of JP2016018566A publication Critical patent/JP2016018566A/ja
Application granted granted Critical
Publication of JP6014725B2 publication Critical patent/JP6014725B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43Querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/242Query formulation
    • G06F16/243Natural language query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2452Query translation
    • G06F16/24522Translation of natural language queries to structured queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2453Query optimisation
    • G06F16/24534Query rewriting; Transformation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Description

本発明は、自然言語クエリに対する情報抽出および情報提供方法などに係り、具体的には、単文/複文構造の意味タグ付けされた自然言語クエリに対して、ユーザーの意図に合致する検索結果、およびクエリエンティティと連関のある関連情報を効率よく提供する方法およびシステムに関する。
オントロジー(Ontology)は、実世界のオブジェクト間の意味的関係を定義することにより、コンピュータがオブジェクト間の複雑な関係から推論される情報にアクセスするための情報に対する意味的仕様を提供するものであって、人工知能、情報検索、ユビキタス、電子商取引などの様々な分野で応用できる。
特に、オントロジーは、ウェブ上の様々な情報を対象間の意味的関係で表現することにより、情報検索分野で既存のキーワードベースの検索では見つけることができなかった論理的クエリ結果を得ることができる。たとえば、オントロジーを利用する場合、“人口が7000万以上で、海に面した国の首都はどこなのか?”のようなクエリに対する結果を得ることができる。
このようなオントロジー情報検索は、キーワードベースの検索に比べて3つの側面から有用性を持つ。第一に、キーワードベースの検索の結果は、入力キーワードが含まれている文書のみを検索結果として提供するが、オントロジー情報検索は、ユーザーが探している特定の対象とこれに対する属性情報を直接提供することができる。第二に、キーワードベースの検索は入力キーワード間の関係が反映された検索結果を保障することができないが、オントロジー情報検索は探している対象を特徴付けることが可能な他の対象との関係から情報を見つけることができる。第三に、キーワードベースの検索は既に存在する情報のみを検索することができるが、オントロジー情報検索は対象間の関係から新たな関係を見つけることにより、既存には存在しなかった新しい情報を推論することができる。
ところが、このようなオントロジー情報検索は、ユーザーが所望のクエリ対象を直ちに見つけることにより、ユーザーの便宜性の側面で大きく役立つが、一般ユーザーが慣れていないオントロジークエリ言語を使用しなければならないため、一般ユーザーの立場でアクセスが難しいという問題点がある。結局、一般ユーザーが、オントロジーとして構築された情報にアクセスするためには、オントロジーの構造またはオントロジークエリ言語を覚えなければならないので、オントロジーの効用性は劣る。
一方、自然言語は、オントロジークエリ言語で表現される論理的意味を表現するのに十分であり、一般ユーザーが慣れている。したがって、自然言語クエリでオントロジー情報にアクセスすることができれば、一般ユーザーのアクセスを容易にしてオントロジー情報検索の効用性を高めることができる。
オントロジー情報を自然言語クエリでアクセスするためには、自然言語クエリをオントロジークエリ言語に変換する技術が求められる。そのためには、まず、自然言語処理技術を活用して自然言語クエリに対する構造および意味を分析し、分析された自然言語クエリ情報から自然言語の表現に対応するオントロジーのオブジェクトおよび関係を探し、オントロジークエリ言語の文法構造に合わせて自然言語クエリをオントロジークエリ言語に変換しなければならない。
ところが、この方法は、自然言語クエリに対する構造分析および意味分析などの誤りにより、アクセスすることができないオントロジークエリ言語が発生するという問題点がある。さらに具体的に説明すると、一般的な自然言語処理技術が検索対象オントロジーにアクセスすることが可能な自然言語の表現を処理するのに必要なすべての言語資源を備えているという保障がなく、些細な文法的誤りにより誤った分析結果をもたらすおそれがあるので、アクセスすることができないオントロジークエリ言語が発生することがある。
結局、既存の検索方法によれば、ユーザーは、誤りが発生するクエリに対して複数回の試行錯誤を経て、システムが処理することが可能なクエリ類型を覚えなければならないが、こうなると、オントロジーベースの情報検索を初めて利用するユーザーは、自然言語処理技術が収容することが可能なクエリの形態およびオントロジーに構築された情報の具体的な内容を知らないため、どんなクエリが有用であるか分からなくなる。
また、サービス提供者の立場から、構築されたオントロジー情報をすべて提供することはできない。また、保有している情報の有用性を十分に示すことができない。
ところが、ほとんどのユーザーは、サービス提供者が準備したオントロジーに関する情報またはクエリ入力方法を入念に熟知するよりは、キーワードベースの情報検索を行うように直観的に使用することを望んでおり、新しいシステムへの適応に投資する時間および努力に比例してそのシステムに対する活用度または満足度は減ることになる。
したがって、情報検索の効用性および正確性を高めるための自然言語理解技術(Natural Language Understanding:NLU)に関する研究が続けられている。自然言語技術は、‘ユーザー問い合わせ’を対象としてユーザーの問い合わせの意図を把握しようとするもので、音声で発話した或いはテキストとして入力した問い合わせが入力され、自然言語技術で問い合わせの意図を把握して抽出したリストが該当問い合わせに対する出力になることを意味する。
意味タグ付けベースの自然言語クエリは、既存のキーワードベースのクエリに比べて複雑なクエリを可能にする一方、クエリに含まれているユーザークエリの意図を正確に把握し、それに合致する検索結果を提供することが難しい。
本発明の目的は、上述した問題点を解決するために案出されたもので、意味タグ付けされた単文/複文構造の自然言語クエリを分析し、階層的なツリー構造で上位エンティティから下位エンティティへ段階的にデータを検索することにより、ユーザーの意図に合致する情報を段階的に提供する方法およびシステムを提供することにある。
また、本発明の他の目的は、複文構造の自然言語クエリを構成するエンティティに基づいて検索したエンティティ情報を抽出し、ユーザークエリに対する検索結果と共に効率よく提供することができるレイアウト方法を提供することにある。
本発明で解決しようとする技術的課題は、上述した技術的課題に限定されず、上述していない別の技術的課題は、以降の記載から、本発明の属する技術分野における通常の知識を有する者に明確に理解できるであろう。
上述した課題を解決するための本発明の一様態の一実施例に係る単文/複文構造の自然言語クエリに対する検索および情報提供方法は、自然言語クエリの意味分析を介して、前記自然言語クエリに含まれている1つ以上のクエリエンティティに基づいて、多数のレベルからなるツリー構造のマッシュアップ検索言語を生成することと、前記マッシュアップ検索言語の属性情報に基づいてレベル別のマッシュアップ検索言語を構成するクエリエンティティを介して、前記マッシュアップ検索言語の各レベルがリンキング(linking)されているか否かを判断することと、前記判断の結果に基づいて、知識データベースから前記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを検索し、前記検索の結果として導出したデータから前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することと、前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることを含む。
本発明の実施例に係る前記マッシュアップ検索言語を生成することは、前記自然言語クエリの意味分析を介して、前記自然言語クエリが単文構造であるか複文構造であるかを判断することと、前記自然言語クエリが複文構造である場合、複文構造のクエリ言語から2つ以上のクエリ句を導出することと、前記導出した2つ以上のクエリ句に基づいて前記ツリー構造のマッシュアップ検索言語を生成することを含むことができる。
本発明の実施例に係る前記マッシュアップ検索言語の属性情報に基づいてレベル別のマッシュアップ検索言語を構成するクエリエンティティを介して、前記マッシュアップ検索言語の各レベルがリンキング(linking)されているか否かを判断することは、前記マッシュアップ検索言語の属性およびドメイン情報を分析することと、前記分析の結果に基づいて、前記マッシュアップ検索言語に対応する検索環境情報を選択することと、前記選択した検索環境情報を用いて前記マッシュアップ検索言語を正規化することを含むことができる。また、前記マッシュアップ検索言語の属性情報に基づいてレベル別のマッシュアップ検索言語を構成するクエリエンティティを介して、前記マッシュアップ検索言語の各レベルがリンキング(linking)されているか否かを判断することは、前記正規化されたマッシュアップ検索言語を前記選択した検索環境情報を用いて前記対象検索言語に変換することをさらに含むことができる。
本発明の一実施例に係る前記判断の結果に基づいて、知識データベースから前記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを検索し、前記検索の結果として導出したデータから前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することは、前記判断の結果に基づいて前記マッシュアップ検索言語の各レベルがリンキング(linking)されている場合、前記知識データベースから前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータを検索および導出することと、前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータに基づいて、前記知識データベースから連続する下位レベルのエンティティに対応するデータを検索および導出することとを含み、前記判断の結果に基づいて、知識データベースから前記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを検索し、前記検索の結果として導出したデータから前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することは、前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを検索および導出するまで順次繰り返し行われ得る。
このとき、本発明の実施例に係る前記判断の結果に基づいて、知識データベースから前記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを検索し、前記検索の結果として導出したデータから前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することは、前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを前記主要情報として導出し、残りの導出されたレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することをさらに含むことができる。そして、本発明の実施例に係る前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、前記検索結果画面の上段部に前記マッシュアップ検索言語の最上位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最上位レベルのエンティティ情報の下段部に連続する下位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最下位レベルのエンティティ情報を前記主要情報として出力する方式を利用することができる。
一方、本発明の実施例に係る前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、前記主要情報および前記一つ以上のエンティティ情報を、一つ以上の属性情報、イメージ情報および映像情報の少なくとも一つを含む要約された情報形態に加工することを含むことができる。
さらに、本発明の実施例に係る前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、前記検索結果画面上の多数のエンティティ情報のいずれか一つに対するユーザー選択信号の入力の際に、前記ユーザー選択信号に対応するエンティティに関する情報をエンティティ詳細情報に加工することと、前記検索結果画面を、前記主要情報および前記一つ以上のエンティティ情報が出力される要約情報領域と、前記エンティティ詳細情報が出力される詳細情報領域に区分してレイアウト変更することをさらに含むことができる。
本発明の他の実施例に係る前記判断の結果に基づいて、知識データベースから前記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを検索し、前記検索の結果として導出したデータから前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することは、前記判断の結果に基づいて前記マッシュアップ検索言語の各レベルがリンキングされていない場合、前記知識データベースから前記マッシュアップ検索言語のレベル別のエンティティに対応するデータを検索および導出することと、前記導出したマッシュアップ検索言語のレベル別のエンティティに対応するデータを対象として、前記自然言語クエリの意味分析の結果に基づく論理演算を適用して最終結果データを導出することとをさらに含むことができる。
このとき、本発明の実施例に係る前記判断の結果に基づいて、知識データベースから前記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを検索し、前記検索の結果として導出したデータから前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することは、前記最終結果データを前記主要情報として導出し、前記導出したレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することをさらに含むことができる。
そして、本発明の実施例に係る前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、前記検索結果画面を、前記主要情報および主要情報関連情報が出力される主要情報領域と、前記一つ以上のエンティティ情報が出力されるエンティティ領域に区分してレイアウトすることができる。
一方、本発明の実施例に係る前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、前記主要情報が単一属性の情報である場合、前記主要情報を自然言語ベースの応答形態に加工して提供することをさらに含むことができる。
上述した課題を解決するための本発明の他の態様の一実施例に係る自然言語クエリベースの検索システムは、ユーザーデバイスから入力された自然言語クエリの意味分析を介して、前記自然言語クエリに含まれている1つ以上のクエリエンティティに基づいて、多数のレベルからなるツリー構造のマッシュアップ検索言語に変換する自然言語処理エンジンと、前記マッシュアップ検索言語の属性情報に基づいて、前記マッシュアップ検索言語の各レベルがリンキング(linking)されているか否かを判断し、レベル別のマッシュアップ検索言語を構成するクエリエンティティに対応するデータを検索する検索エンジンを含んでなり、前記検索エンジンは、前記レベル別のマッシュアップ検索言語を構成するクエリエンティティに対応するデータから、前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を加工して、同じ検索結果画面上にレイアウトすることができる。
本発明の実施例に係る前記自然言語処理エンジンは、前記自然言語クエリの意味分析を介して、前記自然言語クエリが単文構造であるか複文構造であるかを判断し、前記自然言語クエリが複文構造である場合、複文構造のクエリ言語から二つ以上のクエリ句を導出する意味分析モジュールと、前記導出した二つ以上のクエリ句に基づいて前記ツリー構造のマッシュアップ検索言語を生成するマッシュアップ検索言語変換モジュールとを含むことができる。
本発明の実施例に係る前記検索エンジンは、前記マッシュアップ検索言語の属性情報を分析して、前記マッシュアップ検索言語に対応する検索環境情報を選択し、前記選択した検索環境情報を用いて前記マッシュアップ検索言語を正規化するマッシュアップ検索言語正規化モジュールと、前記検索環境情報に基づいて前記正規化されたマッシュアップ検索言語を前記対象検索言語に変換する対象検索言語変換モジュールと、前記検索環境情報に基づいて前記知識データベースから前記対象検索言語に対する物理的データを検索および導出して結果データを生成するデータ導出モジュールと、前記検索環境情報に基づいて前記データ導出モジュールで生成した結果データを加工し、前記加工されたデータを含む検索結果画面を生成するデータ加工モジュールとを含むことができる。
このとき、本発明の一実施例に係る前記データ導出モジュールは、前記マッシュアップ検索言語正規化モジュールでの属性分析結果に基づいてマッシュアップ検索言語の各レベルがリンキング(linking)されている場合、前記知識データベースから前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータを導出し、前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータに基づいて前記知識データベースから連続する下位レベルのエンティティに対応するデータを導出し、前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを導出するまで順次データ導出を行うことができる。
また、前記データ導出モジュールは、前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを前記主要情報として導出し、残りの導出されたレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することをさらに含むことができる。
そして、本発明の実施例に係る前記データ加工モジュールは、前記検索結果画面の上段部に前記マッシュアップ検索言語の最上位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最上位レベルのエンティティ情報の下段部に連続する下位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最下位レベルのエンティティ情報を前記主要情報として出力する方式を利用することができる。
好ましくは、前記データ加工モジュールは、前記主要情報および前記一つ以上のエンティティ情報を、一つ以上の属性情報、イメージ情報および映像情報の少なくとも一つを含む要約された情報形態に加工することができる。
本発明の実施例に係る前記データ加工モジュールは、前記検索結果画面上の多数のエンティティ情報のいずれか一つに対するユーザー選択信号の入力の際に、前記ユーザー選択信号に対応するエンティティに関する情報をエンティティ詳細情報として加工し、前記検索結果画面を、前記主要情報および前記一つ以上のエンティティ情報が出力される要約情報領域と、前記エンティティ詳細情報が出力される詳細情報領域に区分してレイアウト変更することができる。
本発明の他の実施例に係る前記データ導出モジュールは、前記判断の結果に基づいて前記マッシュアップ検索言語の各レベルがリンキングされていない場合、前記知識データベースから前記マッシュアップ検索言語のレベル別のエンティティに対応するデータを検索および導出し、前記導出したマッシュアップ検索言語のレベル別のエンティティに対応するデータを対象として、前記自然言語クエリの意味分析の結果に基づく論理演算を適用して最終結果データを導出することができる。
このとき、本発明の実施例に係る前記データ導出モジュールは、前記最終結果データを前記主要情報として導出し、前記導出したレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することができる。
そして、本発明の実施例に係る前記データ加工モジュールは、前記検索結果画面を前記主要情報および主要情報関連情報が出力される主要情報領域と、前記一つ以上のエンティティ情報が出力されるエンティティ領域に区分してレイアウトすることができる。
一方、本発明の実施例に係る前記データ加工モジュールは、前記主要情報が単一属性の情報である場合、前記主要情報を自然言語ベースの応答形態に加工して提供することができる。
前記実施形態は本発明の好適な実施例の一部に過ぎず、本発明の技術的特徴が反映された様々な実施例は当該技術分野における通常の知識を有する者によって本発明の詳細な説明に基づいて導出および理解できる。
本発明の実施例によれば、意味タグ付けされた複文構造の自然言語クエリを分析し、階層的ツリー構造で上位エンティティから下位エンティティへ段階的にデータを検索することにより、ユーザーの意図に合致する情報の正確度を向上させることができる。
また、本発明の実施例によれば、複文構造の自然言語クエリに含まれている1つ以上のエンティティと連関のあるエンティティ情報を抽出してユーザークエリに対する検索結果と一緒に提供することにより、情報提供の多様性、ユーザーの便宜性および検索サービスの効率性を向上させることができる。
本発明に関する理解を助けるために詳細な説明の一部として含まれる添付図面は、本発明の実施例を提供し、詳細な説明と共に本発明の技術的思想を説明する。
本発明の実施例に係る自然言語クエリベースの検索システムの一例を示す図である。 本発明の実施例によって自然言語クエリから変換したツリー構造のマッシュアップ検索言語の一例を示す図である。 本発明の実施例に係る検索エンジンが自然言語処理エンジンから受信したメッセージアップ検索言語に基づいて情報を提供するまでの過程の一例を示す図である。 本発明の実施例に係る検索エンジンでツリー構造のマッシュアップ検索言語の属性に基づいてデータを検索し、主要情報およびエンティティ情報を導出する過程の一例を示す図である。 本発明の実施例に係る検索エンジンが導出した情報をレイアウトする方式の一例を示す図である。 本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の一例を示す図である。 本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の他の例を示す図である。 本発明の実施例に係る検索エンジンが導出した情報をレイアウトする方式の他の例を示す図である。 本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の別の例を示す図である。 本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の別の例を示す図である。
本発明は、様々な変形を加えることができ、様々な実施例を有することができるが、特定の実施例を図面に例示し、本発明の詳細な説明で説明する。本発明を説明するにあたり、関連した公知の技術に対する具体的な説明が本発明の要旨を曖昧にするおそれがあると判断される場合、その詳細な説明を省略する。
以下、本発明に係る好適な実施形態を添付図面に基づいて詳細に説明する。添付図面と共に以下に開示される詳細な説明は、本発明の例示的な実施形態を説明しようとするもので、本発明が実施され得る唯一の実施形態を示そうとするものではない。以下の詳細な説明は、本発明の完全な理解を提供するための具体的な詳細説明を含む。ところが、当業者は、本発明がこのような具体的詳細説明なしにも実施され得ることを理解するであろう。
本発明は、自然言語クエリに対する情報抽出および情報提供方法などに関し、具体的には、意味タグ付けされた自然言語クエリに対して、ユーザーの意図に合致する検索結果およびクエリ対象と関連のある関連情報を効率よく提供する方法およびシステムに関する。
図1は本発明の実施例に係る自然言語クエリベースの検索システムの一例を示す図である。
図1を参照すると、本発明の実施例に係る検索システム100は、ユーザーデバイス110を介して入力されたユーザークエリ言語を分析するための自然言語理解技術(Natural Language Understanding:NLU)ベースの自然言語処理エンジン120、検索エンジン130および知識データベース140から構成される。
自然言語処理エンジン120は、ユーザーデバイス110を介して入力された意味タグ付け自然言語ベースの複雑なクエリ言語を分析し、意味分析を介してマッシュアップ検索言語(mashup Query Language:MQL)に変換し、検索エンジン130は、自然言語処理エンジン120で生成されたMQLに基づいて、既に構築された知識データベースからクエリ要請された情報を導出してユーザーデバイス110へ提供する。
好ましくは、検索エンジン130は、MQLを介して最終的に導出することが可能なユーザークエリに符合する検索結果、およびクエリエンティティに対応するエンティティ情報を導出して提供することができる。本明細書において、クエリエンティティとは、知識データベースを介して検索結果を導出することが可能な“検索対象”を意味するもので、1つのユーザークエリには1つ以上のクエリエンティティが含まれ得る。
以下、本発明の実施例に係る検索システムの各構成について簡略的に説明する。
自然言語処理エンジン120は、ユーザークエリの意味分析を行う意味分析モジュール121、および意味分析結果に基づいて自然言語ベースのユーザークエリ言語を推論可能なMQLに変換するMQL変換モジュール122を含む。
意味分析モジュール121は、ユーザークエリ言語が単文構造であるか複文構造であるかを分析し、クエリ言語を構成する多数の形態素間の関係分析を介してユーザークエリの意図、およびクエリ言語に含まれている詳細クエリ句を導出する。
たとえば、“A歌手グループのメンバーが出演した映画は?”とは、ユーザークエリに対する分析の結果、“A歌手グループ”と“メンバー”との連関性、“メンバー”と“出演映画”との連関性、および“映画”と“情報”との連関性を導出することができる。これに基づいて、該当クエリから、“A歌手グループのメンバー”、“各メンバーが出演した映画”および“該当映画の基本情報”のように上位概念から下位概念へと階層的構造をなす階層型クエリ句を構成することができる。
別の例として、“女優Bと年齢の同じ女優は?”とは、ユーザークエリに対する意味分析の結果、“女優Bの年齢(N)は?”や“年齢Nの女優は?”などの同一レベルのクエリ句を導出することができる。
MQL変換モジュール122は、意味分析モジュール121で行った分析の結果に基づいて、ユーザークエリに含まれている1つ以上のクエリ句を推論することができるように、ツリー構造のMQLを生成する。すなわち、MQL変換モジュール122は、自然言語ベースのユーザークエリ言語を検索用言語のMQLに変換するモジュールである。
本明細書において、MQLとは、クエリ言語を分析し、サービス端の属性を指定する検索言語であって、自然言語で表現されたユーザークエリに意味タグ付けして知識データベースに問い合わせるために考案された言語と定義することができる。MQLは、外部的には論理的属性を用い、内部的には知識データベースの物理的属性を用いて検索結果を生成する二重構造からなる。
すなわち、MQLは、知識データベースの物理的構造に従わず、独自の論理的構造を構築して、設定を介して論理的構造と物理的構造との関係を定義してクエリ類型別、サービス類型別に適切なデータの提供ができるようにするための言語である。たとえば、ユーザークエリ言語に“何歳ですか”という句が含まれる場合、これを基に変換されたMQLは“年齢”という属性を指定することができる。
MQL変換モジュール122で生成するツリー構造のMQLは、図2に例示されているとおりである。これについては図2を参照して後述する。
次に、検索エンジン130は、自然言語処理エンジン120で生成された自然言語クエリベースのツリー構造MQLに基づいて知識データベース140からの情報検索を行う。具体的には、ツリー構造のMQLを介して最終的に導出することが可能なユーザークエリに符合する主要情報、および各クエリ句またはクエリエンティティに対応するエンティティ情報を導出して提供することができる。
本明細書において、“主要情報”とは、ユーザークエリが要請する事項に対する検索結果であって、複文構造のクエリに対してレベルごとに導出した一つ以上の物理的データに基づいて、クエリの意図に応じて論理的に演算して導出した情報として定義することができる。また、“エンティティ情報”とは、ユーザークエリを構成するエンティティまたはレベル別に導出したデータとして定義することができる。すなわち、エンティティ情報は、最終的に主要情報を導出するために、中間段階で用いた情報であるか、或いは主要情報の導出に用いた物理的データに連関付けられている情報である。
下記表1は、本発明に係るユーザークエリに対する検索結果として提供される主要情報およびエンティティ情報の一例を示すものである。

このような主要情報およびエンティティ情報の提供のために、検索エンジン130は、自然言語処理エンジン120から伝送されるMQLの属性を分析して正規化するMQL正規化モジュール131と、正規化されたMQLを知識データベース検索のための対象検索言語(Object Query Language:OQL)に変換するOQL変換モジュール132と、知識データベース140に基づいて、OQLに対応するデータを検索し導出するためのデータ導出モジュール133と、導出した検索データを、複文構造のユーザークエリに符合するように加工して検索結果画面をレイアウトするデータ加工モジュール134を含む
本明細書において、OQLとは、知識データベースの検索に最適化された言語と定義することができる。OQLは、知識データベースが使用する物理的構造を用いる。たとえば、前述した実施例において、ユーザークエリ言語である“何歳ですか”から変換された属性言語MQL“年齢”に対して、“現在年度の値と出生年度の値を用いて年齢を計算するための検索言語”で表現されるOQLに変換することができる。
知識データベース140は、MQL属性に基づいて選択することができる様々な検索環境情報(MQL_config)を格納するMQL config DB141と、MQLからOQLへの変換に必要な属性情報および規則情報を格納するOQL DB142と、知識情報DB143と、データ加工規則DB144とを含む。
検索エンジン130の各構成について考察すると、MQL正規化モジュール131は、ツリー構造のMQL属性の分析を介して、MQL config DB141から、クエリの意図に合致するMQL configを導出し、これを適用して、自然言語処理エンジン120から受信したMQLを正規化されたMQL(MQL_normalization)に変換する。
本明細書において、MQL_configとは、検索モード(mode)、検索ドメイン(domain)および検索プロパティ(property)などを考慮して、クエリの意図に合致する検索条件、検索条件および検索データ加工方式の少なくとも一つを定義する検索環境情報として定義することができる。このとき、検索モードは、ユーザークエリの類型を意味するもので、正解型、比較型、関係型、グラフ型などを例として挙げることができ、検索ドメインは、クエリ対象または属性が属した意味上の範疇を意味するもので、“人物、映画、放送、出版物、ウェブトゥーン(Webtoon)、美術作品、植物、動物、文化財、ワイン、ゲーム”などを例として挙げることができ、検索プロパティは、クエリ対象間の関係または対象を叙述する単位を意味する。
したがって、MQL正規化モジュール131は、ツリー構造のMQLに対して検索モード、検索ドメインおよび検索プロパティの少なくとも一つに関連する属性分析を介して、MQL config DB141からクエリの意図に合致するMQL configを選択し、これに基づいてMQL_normalizationに変換することができる。
このとき、MQL正規化モジュール131は、MQL configに応じて、ユーザークエリの意図に近づけるための追加データ導出のための手がかり情報を含ませてMQL_normalizationを構成することができる。
OQL変換モジュール132は、MQL正規化モジュール131で変換されたMQL_normalizationに対してOQL DB142に基づいてOQLに変換する。このとき、OQL変換モジュール132は、MQL_configを基にMQLの論理的ドメインおよび属性に基づいて知識情報DB143の物理的属性値として所望のデータを導出することが可能なOQLに変換することができる。
データ導出モジュール133は、OQL変換モジュール132で変換されたOQLを基に知識情報DB143を検索して物理的データを導出し、物理的データを用いてMQL configによる主要情報およびエンティティ情報を導出する。主要情報は、OQLベースの物理的構造結果を論理的構造に変換し、論理的構造による最終的に導出された結果データとみなすことができ、エンティティ情報は、ツリー構造の階層的MQLから段階ごとに導出された物理的データであるか、或いはクエリエンティティと連関のある物理的データとみなすことができる。
データ加工モジュール134は、データ導出モジュール133で導出した主要情報およびエンティティ情報をMQL configに応じて加工し、これを含む検索結果画面をレイアウトする。このとき、MQL config DB141と連動するデータ加工規則DB144から、MQL configに符合するデータ加工規則をもたらし、これに基づいてデータを加工することができる。たとえば、MQL config_domainに基づいて定義された基本露出属性、イメージ提供方式、データ整列方式、リンク生成方式などに基づいてデータ加工および検索結果画面をレイアウトすることができる。
また、データ加工モジュール134は、同じ主要情報およびエンティティ情報であっても、検索結果画面上に出力されるレイアウト方式を様々に設定することができる。
たとえば、ユーザークエリの類型に応じて、主要情報またはエンティティ情報は、単一のオブジェクトに関する情報、或いは同じレベルの2つ以上のオブジェクトに関する情報である。データ加工モジュール134は、主要情報またはエンティティ情報の検索結果に基づいて、シングル型レイアウトまたは多数の検索結果が並べられるリスト型レイアウトを構成することができ、単一検索結果が“数字”または“名称”などの短答型の情報である場合、主要情報は、該当検索情報を含む一種の文章形態に加工することができる。
さらに、データ加工モジュール134は、ユーザーが主要情報またはエンティティ情報に対する詳細情報を要請する場合、検索結果画面上に主要情報およびエンティティ情報の要約情報を提供するとともに、ユーザーが選択した特定のエンティティ情報に対する詳細情報を露出させるように検索結果画面を加工することができる。
図2は本発明の実施例によって自然言語クエリから変換したツリー構造のMQLの一例を示す図である。
図2を参照すると、ユーザークエリ言語は“少女時代のメンバーが出演した映画は?”であり、自然言語処理エンジンはクエリ言語を意味分析して“少女時代(歌手グループ名)、メンバー(属性)、映画(属性)”のようなエンティティを抽出し、各エンティティ間の連関性を分析して“少女時代のメンバー>メンバーが出演した映画>映画情報”のような上位概念から下位概念へのクエリ句を構成し、これに基づいて、図2に示したような階層的ツリー構造のMQL200で表すことができる。例示されたツリー構造において、1レベル210は、“少女時代のメンバー”をMQL変換したもので、“object/name”:“少女時代”211とそれに対する属性情報としての“person/member”212に変換することができる。2レベル220は、“メンバーが出演した映画”をMQL変換したもので、“person/member”212に対する属性情報としての“person/movie_performed”221および“movie/person(member)”222に変換することができる。3レベル230は、“movie/person(member)”222に対する属性情報であって、該当映画に対する詳細情報を意味する“movie_member performed”231のように構成することができる。
図2に例示されているツリー構造MQLは、自然言語処理エンジンで生成されたもので、検索エンジンは、このようなツリー構造MQLを用いてユーザークエリに対する主要情報およびエンティティ情報を導出する。
図3は本発明の実施例に係る検索エンジンが自然言語処理エンジンから受信したMQLに基づいて情報を提供するまでの過程の一例を示す図である。
図3を参照すると、本発明の実施例に係る検索エンジンは、自然言語処理エンジンから伝送されるMQLに対して、MQLに含まれているツリー構造およびMQLドメインを分析する(S301)。
分析結果に基づいて、検索エンジンは、MQL config DBからユーザークエリの意図に合致するMQL configを導出し、これに基づいて、自然言語処理エンジンから受信したMQLをMQL_normalizationに正規化する作業を行う(S302)。
MQL configは、表1を参照して上述したように、クエリ言語の属性に基づいてクエリモード、クエリドメイン、クエリプロパティなどの特性に応じて定義される検索環境情報であって、ユーザークエリの意図に応じて適用されるMQL configは変わりうる。このとき、該当MQLに適用するMQL config特性に応じて、ユーザークエリの意図に最適化された主要情報およびクエリエンティティ別のエンティティ情報属性が変わり、情報提供方式も様々に変動できる。
ひいては、MQL正規化過程で主要情報およびエンティティ情報を提供するための追加データ検索事項をさらに含ませてMQL_normalizationを構成することができる。たとえば、特定の人物に対する情報(例えば、出演映画)がクエリ属性である場合、該当映画についての情報、およびその映画に出演した他の人物についての情報もクエリエンティティにリンキングされているエンティティ情報として一緒に提供することができるように、追加のデータ検索事項を設定してMQL_normalizationを構成することができる。
MQL正規化が行われると、検索エンジンは、前の段階(S302)で適用したMQLconfigに応じてMQL_normalizationを知識データベースに問い合わせるための検索言語OQLに変換する(S303)。
そして、変換されたOQLを用いて知識データベースを検索し、対応する物理的データであるOQLデータを導出するが、データ導出過程でもMQL config_modeに応じてクエリの類型による属性別検索値の最大個数、検索用属性使用個数、結果用属性使用個数などを異にすることができる(S304)。
次に、前の段階(S304)で導出したOQLデータを、MQL configに応じて、既に設定されたデータ加工方式でMQL結果データに変換する(S305)。
MQL結果データが導出されることにより、検索エンジンは、MQL configに符合するデータ加工規則を適用してユーザーの意図を反映した検索結果提供方式で検索結果画面をレイアウトしてユーザーに提供する(S306)。
一実施例として、クエリの類型が単一検索結果を要請する場合、主要情報は、検索に基づいて導出された単一検索結果に加工できる。例えば、検索クエリが“C映画の観客数”である場合、検索結果として提供される主要情報は、S305で導出される“C映画の観客数=N”というデータから、“C映画の観客数はN名です。”のように文章形態の単一検索結果に加工され、これを含むシングル型レイアウトを構成することができる。
他の実施例として、クエリの類型が2つ以上の検索結果を要請する場合、主要情報は、2つ以上の検索結果を含む複数の検索結果を並べる形態に加工できる。例えば、検索クエリが“D小説家の本”である場合、検索結果として提供される主要情報は、S305で導出した“D小説家が著者である一つ以上の本”というデータからそれぞれの本に関する情報を加工し、加工された1つ以上の主要情報がリスト形態で並べられるリスト型レイアウトを構成することができる。
図4は本発明の実施例に係る検索エンジンでツリー構造のMQL属性に基づいてデータを検索し、主要情報およびエンティティ情報を導出する過程の一例を示す図である。
本発明の実施例に係る検索エンジンは、ツリー構造MQLの属性を分析してMQLのレベル構造でそれぞれのレベルがクエリエンティティによってリンキングされているか否かを判断する(S401)。ツリー構造MQLは、上述したように複文構造のユーザークエリに対する意味分析を介して、一つのクエリに含まれている多数のクエリ句を導出し、各クエリ句を一つのレベルに設定してMQLに変換した形態である。
判断の結果、ツリー構造MQLの各レベルがエンティティによってリンキング(linking)されている場合、上位エンティティから下位エンティティへのデータ検索を行う(S402、S403)。
たとえば、“A歌手グループのメンバーが出演した映画は?”とは、ユーザークエリに対する分析の結果、“A歌手グループのメンバー”、“各メンバーが出演した映画”および“該当映画の基本情報”などの3つのクエリ句を導出することができる。そして、それぞれのクエリ句は“A歌手グループ”、A歌手グループの“メンバー”、A歌手グループのメンバーが出演した“映画”というエンティティを含み、それぞれのエンティティは上位エンティティから下位エンティティにリンキングされ得る。
これに対し、段階S401での判断の結果、ツリー構造MQLの各レベルがエンティティによってリンキングされていない場合、論理演算に基づいて各レベルに対するデータ検索を行う(S402、S404)。
たとえば、“女優Bと年齢の同じ女優は?”とは、ユーザークエリに対する意味分析の結果、“女優Bの年齢(N)は?”や“年齢Nの女優は?”などのクエリ句を導出することができる。このとき、“女優B”に該当するエンティティに対して、“年齢(N)”は、別途のエンティティではなく“女優B”というエンティティに対する属性値なので、“女優Bの年齢(N)”と“年齢Nの女優”はリンキングされている上位−下位レベルと見なすことができない。このような場合、論理演算に基づいて、“女優Bの年齢(N)”に対応するデータを導出し、“年齢N”を属性値として持つ“人物”情報を逆に検索し、検索された“人物”データの中から、“職業−俳優”および“性別−女性”属性を満足するデータを選別する方式でデータ検索を行う。
検索エンジンは、上述した検索過程(S402〜S404)を介して最終的に導出された検索データを主要情報として導出し、データ検索過程でクエリエンティティに対応して導出された検索データをエンティティ情報として導出することができる(S405)。
たとえば、“A歌手グループのメンバーが出演した映画は?”とは、ユーザークエリに対して、主要情報は各メンバーが出演した映画情報となり、エンティティ情報はA歌手グループに関する情報、各メンバーに関する人物情報などとなることができる。別の例として、“女優Bと年齢の同じ女優は?”とは、ユーザークエリに対して、主要情報は年齢Nの女優たちの情報となり、エンティティ情報は女優Bに対する情報、年齢Nの女優それぞれに対する人物情報となることができる。
図5は本発明の実施例に係る検索エンジンが導出した情報をレイアウトする方式の一例を示す図であり、具体的には、単文構造のクエリに対する検索結果を提供する場合を示す。
図5を参照すると、検索エンジンは、ユーザークエリに対する検索結果として導出した主要情報511およびエンティティ情報521を同時に提供する。このとき、主要情報511およびエンティティ情報521が露出する領域を主要情報領域510およびエンティティ領域520に区分し、主要情報領域510内の主要情報511および主要情報関連情報512が露出し、エンティティ領域520内のエンティティ情報521およびエンティティ関連情報522が露出するようにレイアウトすることができる。
また、主要情報511が露出する形態は、ユーザークエリによる検索の結果、主要情報が単一のオブジェクトに対する情報である場合にはシングル型にレイアウトし、主要情報が2つ以上のオブジェクトに対する情報である場合にはリスト型にレイアウトすることができる。ひいては、エンティティ情報も2つ以上のオブジェクトに関する情報である場合、リスト型に構成することができる。
主要情報511、主要情報関連情報512、エンティティ情報521およびエンティティ関連情報522は、それぞれ要約された情報であって、ユーザーの選択に応じて主要情報511、主要情報関連情報512、エンティティ情報521およびエンティティ関連情報522のそれぞれに対する詳細情報が別途さらに提供されるように構成することができる。
図6は本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の一例を示す図であり、具体的には、単文構造のクエリに対するシングル型検索結果画面の一例を示す。
図6を参照すると、検索結果画面600は、ユーザークエリ601に対する最終検索結果が露出する主要情報領域610、およびクエリエンティティ関連情報が提供されるエンティティ領域620に区分できる。例えば、図6に例示されているように、検索結果画面600の左側は主要情報領域610から構成し、検索結果画面600の右側はエンティティ領域620から構成することができる。
主要情報領域610には、ユーザークエリを介して最終的に導出した主要情報611、およびユーザークエリをキーワードで検索して導出した関連情報612が露出し、エンティティ領域620には、エンティティ情報621およびエンティティと連関関係にある関連情報622が露出する。
このとき、ユーザークエリの類型が“数字”のように単一検索結果でありながら、テキスト形式の検索結果を要請する場合、検索エンジンは、MQL configに応じて導出したデータを含む文章形態に主要情報を加工することができる。
図7は本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の他の例を示す図であり、具体的には、単文構造のクエリに対するリスト型検索結果画面の一例を示す。
図7を参照すると、同様に、検索結果画面700を、ユーザークエリ701に対する最終検索結果が露出する主要情報領域710、およびクエリエンティティ関連情報が提供されるエンティティ領域720に区分し、一例として、図7に例示されているように、検索結果画面700の左側は主要情報領域710から構成し、検索結果画面700の右側はエンティティ領域720から構成することができる。
このとき、ユーザークエリに対する検索の結果、主要情報として導出される情報が2つ以上のオブジェクトに対するデータである場合、主要情報領域710には、ユーザークエリを介して最終的に導出した2つ以上の主要情報711、712をリスト形態で露出させるように構成することができる。それぞれの主要情報711、712は、該当オブジェクトに対する詳細情報を要約した形態で露出させることができる。
同様に、主要情報領域710には、図7に示されてはいないが、主要情報と連関のある関連情報をさらに露出させることができる。
エンティティ領域720には、ユーザークエリに含まれているエンティティに基づいて検索したエンティティ情報721、およびエンティティと連関のある関連情報722が露出する。
図5〜図7を参照して上述した本発明の一実施例に係る検索結果レイアウト方式は、単文構造のユーザークエリの属性に基づいて最終的に導出された主要情報と一緒にエンティティ情報を同じ検索画面を介して提供することにより、ユーザーの便宜性を図ることができる。
図8は本発明の実施例に係る検索エンジンが導出した情報をレイアウトする方式の他の例を示す図であり、具体的には、複文構造のクエリに対する検索結果を提供する場合を示す。
検索エンジンは、複文構造のユーザークエリから生成されたツリー構造MQLの属性に基づいてユーザークエリに対する検索結果として導出した主要情報およびエンティティ情報を階層型構造で提供する。
図8の(a)を参照すると、ツリー構造MQLが、クエリを構成する多数のエンティティが互いにリンキングされる多数のレベルからなる階層型構造である場合、上位エンティティから下位エンティティへリンクに応じて導出したデータの露出位置を階層的にレイアウトすることができる。すなわち、図8の(a)に例示されているように、第1レベルのエンティティ(上位エンティティ)に対応する情報801を最上位段に出力し、第1レベルエンティティ(上位エンティティ)に対応する情報801の下段には第2レベルエンティティ(中間エンティティ)に対応する情報802を出力し、第2レベルエンティティ(中間エンティティ)に対応する情報802の下段には第nレベルエンティティに対応する情報803を出力する方式によって階層的構造でレイアウトすることにより、複文構造のクエリ言語を解析する過程によって検出されるデータを階層的に提供することができる。このとき、各レベルのリンクに応じて最終的に導出される第nレベルエンティティ情報803が主要情報803となり、その他の情報801、802はエンティティ情報となる。
また、同様に、ユーザークエリが単一のオブジェクトに対する情報要請である場合、主要情報はシングル型にレイアウトし、ユーザークエリが2つ以上のオブジェクトに対する情報要請である場合、主要情報をリスト型にレイアウトすることができる。さらに、エンティティ情報も2つ以上である場合には、エンティティ情報を提供する方式もリスト型に構成することができる。
一方、主要情報803およびエンティティ情報801、802は、関連した詳細情報が要約された形態で提供されるので、ユーザーの選択に応じて、それぞれのエンティティに対応する詳細情報がさらに提供できる。
図8の(b)を参照すると、図8の(a)と同じ検索結果画面で、ユーザーが、出力されたエンティティ情報801〜803のいずれか一つを選択する場合、検索エンジンは、選択されたエンティティに対応する詳細情報804を検索結果画面の一定領域に出力するように検索画面レイアウトを変更することができる。すなわち、検索結果画面を、階層型エンティティ要約情報が提供される要約情報領域810、およびユーザーの選択による特定のエンティティの詳細情報が提供される詳細情報領域820に区分して再加工することができる。
図9は本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の別の例を示す図であり、具体的には、複文構造のクエリに対するリスト型検索結果画面の一例を示す。
図9を参照すると、検索結果画面900は、複文構造のユーザークエリ901から導出した多数のレベルのリンキングされたエンティティに関する情報を提供するが、上位エンティティ情報902から下位エンティティ情報903を階層的に出力する。このとき、階層型構造上で最下位レベルに該当するエンティティ情報903が、ユーザークエリで要請する最終検索結果であって主要情報903に該当する。
図9に例示されているエンティティ情報902および主要情報903は、検索結果と2つ以上のオブジェクトに関する情報を含んでいるので、それぞれリスト型にレイアウトされた。
図10は本発明の実施例に係る検索システムでユーザークエリに対する検索結果画面の別の例を示す図である。
具体的には、図10は、複文構造のクエリに対するリスト型検索結果画面の別の例を示すもので、図9に例示されている検索結果画面におけるユーザーの選択によるエンティティ詳細情報が含まれている検索結果画面の一例を示す。
図10を参照すると、検索結果画面1000は、図9と同じユーザークエリ1001に対してエンティティの詳細説明の要請に応えてエンティティ要約情報が提供される要約情報領域1010、およびエンティティ詳細情報が提供される詳細情報領域1020に区分できる。要約情報領域1010は、図9で上述したように、検索過程で導出される上位エンティティ情報1011から下位エンティティ情報1012へ段階的に各レベルのエンティティが提供される階層構造を用いる。
詳細情報領域1020は、多数のレベルの多数のエンティティ情報のうち、ユーザーが選択した特定のエンティティに対する詳細情報1021が露出する。特定のエンティティに対する詳細情報1021は、MQL configに応じてエンティティ属性、ドメインおよびプロパティの少なくとも一つに基づいて導出された情報でありうる。
したがって、図9および図10を参照すると、検索エンジンでユーザーが入力したユーザークエリに基づいて階層構造のエンティティ情報をベースにした主要情報およびレベル別のエンティティ情報を段階的にレイアウトして検索結果画面を提供し、ユーザーが、検索結果画面に露出した特定のエンティティに対する詳細情報を要請する場合には、検索結果画面上に情報が出力される空間を再配置し、要約情報および詳細情報が同時に提供できるように検索結果画面のレイアウトを変更することができる。
このように、図8〜図10を参照して上述した本発明の他の実施例に係る検索結果レイアウト方式は、複文構造のユーザークエリの属性に基づいてエンティティ別の要約情報がエンティティレベルに応じて段階的に出力され、ユーザーがエンティティ詳細情報を要請する場合、階層構造のエンティティ要約情報および特定のエンティティ詳細情報を同一の検索画面を介して提供することにより、ユーザーの便宜性を図ることができる。
以上の説明は、本発明の技術思想を例示的に説明したものに過ぎず、本発明の属する技術分野における通常の知識を有する者であれば、本発明の本質的な特性から逸脱することなく、様々な修正および変形を加えることが可能であろう。したがって、本発明に記載された実施例は、本発明の技術思想を限定するためのものではなく、説明するためのものである。このような実施例によって本発明の技術思想が限定されるのではない。本発明の保護範囲は添付した特許請求の範囲によって解釈されるべきであり、それと同等の範囲内にあるすべての技術思想は本発明の権利範囲に含まれるものと解釈されるべきである。

Claims (25)

  1. コンピュータが実行する、単文/複文構造の自然言語クエリに対する検索および情報提供方法であって、
    自然言語クエリの意味分析を介して、前記自然言語クエリに含まれている2つ以上のクエリエンティティを抽出し、
    各クエリエンティティの連関性を分析し、
    前記分析結果に基づいて、多数のレベルからなるツリー構造のマッシュアップ検索言語を生成し、
    前記マッシュアップ検索言語を生成するとき、
    所定の属性と判断されたクエリエンティティについては、属性情報と対応付けられて前記マッシュアップ検索言語として用いられ、
    それ以外の属性と判断されたクエリエンティティについては、属性情報が前記マッシュアップ検索言語として用いられ、
    記マッシュアップ検索言語の各レベル別のクエリエンティティに対応するデータを知識データベースから検索し、
    前記検索の結果として導出したデータから、前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を導出することと、
    前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることを含むことを特徴とする、単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  2. 前記マッシュアップ検索言語を生成することは、
    前記自然言語クエリの意味分析を介して、前記自然言語クエリが複文構造であるかを判断することと、
    前記自然言語クエリが複文構造である場合、複文構造のクエリ言語から2つ以上のクエリ句を導出することと、
    前記導出した2つ以上のクエリ句に基づいて前記ツリー構造のマッシュアップ検索言語を生成することを含むことを特徴とする、請求項1に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  3. 記マッシュアップ検索言語の属性およびドメイン情報を分析することと、
    前記分析の結果に基づいて、前記マッシュアップ検索言語に対応する検索環境情報を選択することと、
    前記選択した検索環境情報を用いて前記マッシュアップ検索言語を正規化することを含むことを特徴とする、請求項1に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  4. 記正規化されたマッシュアップ検索言語を、前記選択した検索環境情報を用いて対象検索言語に変換することをさらに含むことを特徴とする、請求項3に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  5. 記マッシュアップ検索言語の各レベルが連関している場合、
    前記知識データベースから前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータを検索および導出することと、
    前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータに基づいて、前記知識データベースから連続する下位レベルのエンティティに対応するデータを検索および導出することを含み、
    前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを検索および導出するまで順次繰り返し行われることを特徴とする、請求項1に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  6. 記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを前記主要情報として導出し、残りの導出されたレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することをさらに含むことを特徴とする、請求項5に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  7. 前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、
    前記検索結果画面の上段部に前記マッシュアップ検索言語の最上位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最上位レベルのエンティティ情報の下段部に連続する下位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最下位レベルのエンティティ情報を前記主要情報として出力する方式を利用することを特徴とする、請求項6に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  8. 前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、
    前記主要情報および前記一つ以上のエンティティ情報を、一つ以上の属性情報、イメージ情報および映像情報の少なくとも一つを含む要約された情報形態に加工することを含むことを特徴とする、請求項1または7に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  9. 前記検索結果画面上の多数のエンティティ情報のいずれか一つに対するユーザー選択信号の入力の際に、前記ユーザー選択信号に対応するエンティティに関する情報をエンティティ詳細情報に加工することと、
    前記検索結果画面を、前記主要情報および前記一つ以上のエンティティ情報が出力される要約情報領域、および前記エンティティ詳細情報が出力される詳細情報領域に区分してレイアウト変更することをさらに含むことを特徴とする、請求項8に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  10. 記マッシュアップ検索言語の各レベルが連関していない場合、
    前記知識データベースから前記マッシュアップ検索言語のレベル別のエンティティに対応するデータを検索および導出することと、
    前記導出したマッシュアップ検索言語のレベル別のエンティティに対応するデータを対象として、前記自然言語クエリの意味分析の結果に基づく論理演算を適用して最終結果データを導出することをさらに含むことを特徴とする、請求項1に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  11. 記最終結果データを前記主要情報として導出し、前記導出したレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することをさらに含むことを特徴とする、請求項10に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  12. 前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、
    前記検索結果画面を、前記主要情報および主要情報関連情報が出力される主要情報領域と、前記一つ以上のエンティティ情報が出力されるエンティティ領域に区分してレイアウトすることを含むことを特徴とする、請求項11に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  13. 前記主要情報および前記一つ以上のエンティティ情報を含む検索結果画面をレイアウトすることは、
    前記主要情報が単一属性の情報である場合、前記主要情報を自然言語ベースの応答形態に加工して提供することをさらに含むことを特徴とする、請求項1に記載の単文/複文構造の自然言語クエリに対する検索および情報提供方法。
  14. ユーザーデバイスから入力された自然言語クエリの意味分析を介して、前記自然言語クエリに含まれている2つ以上のクエリエンティティを抽出し、各クエリエンティティの連関性を分析し、前記分析結果に基づいて、多数のレベルからなるツリー構造のマッシュアップ検索言語を生成する自然言語処理エンジンと、
    レベル別のマッシュアップ検索言語を構成するクエリエンティティに対応するデータを検索する検索エンジンを含み、
    前記自然言語処理エンジンは、
    前記マッシュアップ検索言語を生成するとき、所定の属性と判断されたクエリエンティティについては、属性情報と対応付けられて前記マッシュアップ検索言語として用い、それ以外の属性と判断されたクエリエンティティについては、属性情報を前記マッシュアップ検索言語として用い、
    前記検索エンジンは、
    前記レベル別のマッシュアップ検索言語を構成するクエリエンティティに対応するデータから、前記自然言語クエリに対応する主要情報および1つ以上のエンティティ情報を加工して、同じ検索結果画面上にレイアウトすることを特徴とする、単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  15. 前記自然言語処理エンジンは、
    前記自然言語クエリの意味分析を介して、前記自然言語クエリが複文構造であるかを判断し、前記自然言語クエリが複文構造である場合、複文構造のクエリ言語から二つ以上のクエリ句を導出する意味分析モジュールと、
    前記導出した二つ以上のクエリ句に基づいて前記ツリー構造のマッシュアップ検索言語を生成するマッシュアップ検索言語変換モジュールを含むことを特徴とする、請求項14に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  16. 前記検索エンジンは、
    前記マッシュアップ検索言語の属性情報を分析して、前記マッシュアップ検索言語に対応する検索環境情報を選択し、前記選択した検索環境情報を用いて前記マッシュアップ検索言語を正規化するマッシュアップ検索言語正規化モジュールと、
    前記検索環境情報に基づいて前記正規化されたマッシュアップ検索言語を対象検索言語に変換する対象検索言語変換モジュールと、
    前記検索環境情報に基づいて、知識データベースから前記対象検索言語に対する物理的データを検索および導出して結果データを生成するデータ導出モジュールと、
    前記検索環境情報に基づいて前記データ導出モジュールで生成した結果データを加工し、
    前記加工されたデータを含む検索結果画面を生成するデータ加工モジュールを含むことを特徴とする、請求項14に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  17. 前記データ導出モジュールは、
    前記マッシュアップ検索言語正規化モジュールでの属性分析結果に基づいてマッシュアップ検索言語の各レベルが連関している場合、
    前記知識データベースから前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータを導出し、前記マッシュアップ検索言語の最上位レベルのエンティティに対応するデータに基づいて、前記知識データベースから連続する下位レベルのエンティティに対応するデータを導出し、前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを導出するまで順次データ導出を行うことを特徴とする、請求項16に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  18. 前記データ導出モジュールは、
    前記マッシュアップ検索言語の最下位レベルのエンティティに対応するデータを前記主要情報として導出し、残りの導出されたレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出する段階をさらに含むことを特徴とする、請求項17に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  19. 前記データ加工モジュールは、
    前記検索結果画面の上段部に前記マッシュアップ検索言語の最上位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最上位レベルのエンティティ情報の下段部に連続する下位レベルのエンティティ情報を出力し、前記マッシュアップ検索言語の最下位レベルのエンティティ情報を前記主要情報として出力する方式を利用することを特徴とする、請求項18に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  20. 前記データ加工モジュールは、
    前記主要情報および前記一つ以上のエンティティ情報を、一つ以上の属性情報、イメージ情報および映像情報の少なくとも一つを含む要約された情報形態に加工することを特徴とする、請求項16に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  21. 前記データ加工モジュールは、
    前記検索結果画面上の多数のエンティティ情報のいずれか一つに対するユーザー選択信号の入力の際に、
    前記ユーザー選択信号に対応するエンティティに関する情報をエンティティ詳細情報として加工し、前記検索結果画面を、前記主要情報および前記一つ以上のエンティティ情報が出力される要約情報領域と、前記エンティティ詳細情報が出力される詳細情報領域に区分してレイアウト変更することを特徴とする、請求項20に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  22. 前記データ導出モジュールは、
    前記判断の結果に基づいて前記マッシュアップ検索言語の各レベルが連関していない場合、
    前記知識データベースから前記マッシュアップ検索言語のレベル別のエンティティに対応するデータを検索および導出し、前記導出したマッシュアップ検索言語のレベル別のエンティティに対応するデータを対象として、前記自然言語クエリの意味分析の結果に基づく論理演算を適用して最終結果データを導出することを特徴とする、請求項16に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  23. 前記データ導出モジュールは、
    前記最終結果データを前記主要情報として導出し、前記導出したレベル別のエンティティに対応するデータを一つ以上のエンティティ情報として導出することを特徴とする、請求項22に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  24. 前記データ加工モジュールは、
    前記検索結果画面を、前記主要情報および主要情報関連情報が出力される主要情報領域と、前記一つ以上のエンティティ情報が出力されるエンティティ領域に区分してレイアウトすることを特徴とする、請求項23に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
  25. 前記データ加工モジュールは、
    前記主要情報が単一属性の情報である場合、前記主要情報を自然言語ベースの応答形態に加工して提供することを特徴とする、請求項14に記載の単文/複文構造の自然言語クエリに対する検索および情報提供システム。
JP2015138524A 2014-07-10 2015-07-10 単文/複文構造の自然言語クエリに対する検索および情報提供方法並びにシステム Active JP6014725B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140086954A KR101661198B1 (ko) 2014-07-10 2014-07-10 단문/복문 구조의 자연어 질의에 대한 검색 및 정보 제공 방법 및 시스템
KR10-2014-0086954 2014-07-10

Publications (2)

Publication Number Publication Date
JP2016018566A JP2016018566A (ja) 2016-02-01
JP6014725B2 true JP6014725B2 (ja) 2016-10-25

Family

ID=55067741

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015138524A Active JP6014725B2 (ja) 2014-07-10 2015-07-10 単文/複文構造の自然言語クエリに対する検索および情報提供方法並びにシステム

Country Status (3)

Country Link
US (1) US10157201B2 (ja)
JP (1) JP6014725B2 (ja)
KR (1) KR101661198B1 (ja)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10762434B2 (en) * 2015-01-05 2020-09-01 Amdocs Development Limited Method and software for obtaining answers to complex questions based on information retrieved from big data systems
US10872094B2 (en) * 2016-11-29 2020-12-22 Sap Se Hierarchical computations in relational database management systems
RU2646380C1 (ru) * 2016-12-22 2018-03-02 Общество с ограниченной ответственностью "Аби Продакшн" Использование верифицированных пользователем данных для обучения моделей уверенности
KR102117287B1 (ko) * 2017-04-14 2020-06-01 얄리주식회사 대화 시스템을 위한 대화 시나리오 데이터베이스 구축 방법 및 장치
JP6839360B2 (ja) 2017-05-15 2021-03-10 富士通株式会社 表示プログラム、表示方法および表示装置
US11023461B2 (en) * 2018-01-19 2021-06-01 Servicenow, Inc. Query translation
US11010566B2 (en) * 2018-05-22 2021-05-18 International Business Machines Corporation Inferring confidence and need for natural language processing of input data
US11036726B2 (en) 2018-09-04 2021-06-15 International Business Machines Corporation Generating nested database queries from natural language queries
CN109710742B (zh) * 2018-12-27 2021-01-01 清华大学 一种个股公告自然语言查询处理的方法、***及设备
US11256870B2 (en) * 2019-09-25 2022-02-22 Rovi Guides, Inc. Systems and methods for inserting dialogue into a query response
US11449496B2 (en) * 2019-10-25 2022-09-20 Servicenow, Inc. Enhanced natural language processing with semantic shortcuts
CN111159381B (zh) * 2019-12-31 2023-05-26 中国银行股份有限公司 数据搜索方法及装置
US11263195B2 (en) 2020-05-11 2022-03-01 Servicenow, Inc. Text-based search of tree-structured tables
US11403286B2 (en) * 2020-07-28 2022-08-02 Sap Se Bridge from natural language processing engine to database engine
US11526509B2 (en) * 2020-12-31 2022-12-13 International Business Machines Corporation Increasing pertinence of search results within a complex knowledge base
CN115221198A (zh) * 2022-01-19 2022-10-21 支付宝(杭州)信息技术有限公司 一种数据查询方法及装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6076051A (en) * 1997-03-07 2000-06-13 Microsoft Corporation Information retrieval utilizing semantic representation of text
JPH11250073A (ja) * 1998-02-26 1999-09-17 Nippon Telegr & Teleph Corp <Ntt> 複数データベース意味的階層検索方法及び装置及び複数データベース意味的階層検索プログラムを格納した記憶媒体
US6453312B1 (en) * 1998-10-14 2002-09-17 Unisys Corporation System and method for developing a selectably-expandable concept-based search
US6510434B1 (en) * 1999-12-29 2003-01-21 Bellsouth Intellectual Property Corporation System and method for retrieving information from a database using an index of XML tags and metafiles
JP2003330959A (ja) 2002-05-13 2003-11-21 Just Syst Corp カタログ検索システム
US8155951B2 (en) * 2003-06-12 2012-04-10 Patrick William Jamieson Process for constructing a semantic knowledge base using a document corpus
JP2005208825A (ja) 2004-01-21 2005-08-04 Toshiba Corp データ検索システム、データ検索方法及びプログラム
JP4654745B2 (ja) * 2005-04-13 2011-03-23 富士ゼロックス株式会社 質問応答システム、およびデータ検索方法、並びにコンピュータ・プログラム
US8195683B2 (en) * 2006-02-28 2012-06-05 Ebay Inc. Expansion of database search queries
JP2008021270A (ja) * 2006-07-14 2008-01-31 Univ Of Tokyo データ変換装置および方法、データベース管理装置および方法、ならびにデータベース検索システムおよび方法
US20080249764A1 (en) * 2007-03-01 2008-10-09 Microsoft Corporation Smart Sentiment Classifier for Product Reviews
US20090326925A1 (en) * 2008-06-27 2009-12-31 Microsoft Corporation Projecting syntactic information using a bottom-up pattern matching algorithm
US8370129B2 (en) * 2009-01-07 2013-02-05 Guangsheng Zhang System and methods for quantitative assessment of information in natural language contents
KR20110070725A (ko) * 2009-12-18 2011-06-24 한국전자통신연구원 자동 매쉬업 서비스 장치 및 방법
KR100980579B1 (ko) 2010-02-03 2010-09-06 경북대학교 산학협력단 온톨로지에 대한 자연어 질의 검색 방법 및 시스템
KR20110133909A (ko) * 2010-06-07 2011-12-14 박동민 모든 자연어 표현의 각각의 의미마다 별도의 용어를 동적으로 생성하는 방법 및 이를 기반으로 하는 사전 관리기,문서작성기, 용어 주석기, 검색 시스템 및 문서정보체계 구축장치

Also Published As

Publication number Publication date
KR20160007040A (ko) 2016-01-20
US10157201B2 (en) 2018-12-18
US20160012105A1 (en) 2016-01-14
KR101661198B1 (ko) 2016-10-04
JP2016018566A (ja) 2016-02-01

Similar Documents

Publication Publication Date Title
JP6014725B2 (ja) 単文/複文構造の自然言語クエリに対する検索および情報提供方法並びにシステム
US11080295B2 (en) Collecting, organizing, and searching knowledge about a dataset
US8972440B2 (en) Method and process for semantic or faceted search over unstructured and annotated data
Jacksi et al. State of the art exploration systems for linked data: a review
US20130262449A1 (en) System and method for search refinement using knowledge model
Rodríguez-García et al. Creating a semantically-enhanced cloud services environment through ontology evolution
US20140115001A1 (en) Structured query generation
US11699034B2 (en) Hybrid artificial intelligence system for semi-automatic patent infringement analysis
Taibi et al. Towards integration of web data into a coherent educational data graph
US11188533B1 (en) Generating query answers from a user&#39;s history
JP2024091709A (ja) 文作成装置、文作成方法および文作成プログラム
KR20230005797A (ko) 질의어를 처리하는 장치, 방법 및 컴퓨터 프로그램
KR101602342B1 (ko) 의미 태깅된 자연어 질의의 의도에 부합하는 정보 추출 및 제공 방법 및 시스템
Maree Multimedia context interpretation: a semantics-based cooperative indexing approach
KR101072147B1 (ko) 블로그 포스트를 온톨로지 기반 정보로 변환하는 방법 및 그 시스템
US11150871B2 (en) Information density of documents
Trotman et al. Current research in focused retrieval and result aggregation
KR101593214B1 (ko) 논리적 물리적 2중 구조를 이용한 자연어 질의 검색 방법 및 시스템
Chatterjee An entity-oriented approach for answering topical information needs
Paulus et al. Recommending Semantic Concepts for Improving the Process of Semantic Modeling
Ceri et al. Semantic search
Zhang Smart Image Search System Using Personalized Semantic Search Method
Dessi Toward Automatic RDF Property Tagging
Said et al. Interlinking video with DBpedia using knowledge-based Word Sense Disambiguation algorithms.
Hinze et al. Introducing Capisco: a semantically-enhanced search and discovery system for large-scale text corpora

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160415

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160726

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160830

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160926

R150 Certificate of patent or registration of utility model

Ref document number: 6014725

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250