JP6012700B2 - 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム - Google Patents
情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム Download PDFInfo
- Publication number
- JP6012700B2 JP6012700B2 JP2014258767A JP2014258767A JP6012700B2 JP 6012700 B2 JP6012700 B2 JP 6012700B2 JP 2014258767 A JP2014258767 A JP 2014258767A JP 2014258767 A JP2014258767 A JP 2014258767A JP 6012700 B2 JP6012700 B2 JP 6012700B2
- Authority
- JP
- Japan
- Prior art keywords
- search result
- keyword
- displayed
- information processing
- list
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000010365 information processing Effects 0.000 title claims description 34
- 238000004590 computer program Methods 0.000 title claims description 5
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000000034 method Methods 0.000 claims description 55
- 239000013598 vector Substances 0.000 description 27
- 230000006870 function Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 7
- 238000000926 separation method Methods 0.000 description 6
- 238000005520 cutting process Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 239000003086 colorant Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
また、特許文献2では、原稿内の部品ごとにベクトルデータに変換し、部品ごとに適したファイル形式のファイルを作成することが記載されている。
図1は本発明の実施形態1の画像処理システム10の構成例を示すブロック図である。
なお、図1の構成は一例であり、これに限るものではない。
図3に原稿画像のオブジェクト分離に関する全体をフローチャートで示す。
その後、ステップS315では、当該JPEG圧縮されたイメージ領域のデータをその領域に関する領域情報(オブジェクト情報)と関連付けてBOXに保存する。
まず、入力画像を白黒に二値化し、輪郭線追跡を行って黒画素輪郭で囲まれる画素の塊を抽出する。面積が予め決定しておいた閾値より大きい黒画素の塊については、内部にある白画素に対しても輪郭線追跡を行って白画素の塊を抽出し、そして、一定面積以上の白画素の塊がある場合は、更にその白画素の塊の内部から更に黒画素の塊を抽出する。また、反転文字領域に関しては白黒反転して、最終的な2値画像を得る。なお、二値化処理はこれに限るものではなく、公知の技術を用いることが可能である。
S308の領域分離処理(オブジェクト分離処理)では、最終的な2値画像から黒画素の塊を抽出し、当該抽出した黒画素の塊を大きさ及び形状で分類し、異なる属性を持つ領域へ分類していく。このとき、所定距離内の黒画素塊は同じ領域であると判断して領域の統合も行う。例えば、縦横比が1に近く、大きさが一定の範囲の領域は文字画像相当の画素塊とし、さらに近接する文字画像相当の画素塊が整列良く並んでいれば、グループ化(統合)して文字領域と判別する。また、不定形の画素塊が散在している領域を写真などのイメージ領域とする。それ以外の任意形状の画素塊をグラフィックス領域とする。なお、本実施形態ではこのようにして分類するものとしたが、これに限るものではなく、公知の領域分離技術を適用することができる。また、領域の属性として表属性(テーブル属性)を更に加えてもよい。この場合、表属性領域内から文字属性領域が抽出できるので、その文字属性部分はOCR処理・ベクトル化処理が行われる。また、文字属性領域以外の表属性領域部分に対しては、グラフィックス領域と同様にベクトル化処理をして、罫線をベクトルデータに変換するようにしてもよい。このようにして、属性毎の領域(オブジェクト)に分離される。
特徴ベクトルの抽出には種々の公知手法があり、例えば、文字をメッシュ状に分割し、各メッシュブロック内の文字線を方向別に線素としてカウントしたメッシュ数次元ベクトルを特徴とする方法がある。なお、テキスト領域に対する文字認識処理を行う場合は、まず、S311で記載したように、テキスト領域に対して横書き/縦書きの判定を行い、判定された方向に基づいて文字列を切り出し、更にその切り出された文字列から文字を切り出して文字画像を取得する。横書き/縦書きの判定は、例えば、各テキスト領域内で、画素値に対する水平/垂直方向の射影を取り、水平射影の分散が大きい場合は横書き、垂直射影の分散が大きい場合は縦書きと判定する。また、文字列及び文字への分解は、横書きのテキスト領域である場合には、その水平方向の射影を利用して行を切り出し、さらに切り出された行に対する垂直方向の射影から、文字を切り出すことで行う。一方、縦書きのテキスト領域に対しては、水平と垂直を逆にすれば良い。なお、この文字認識処理を行う際に、文字のサイズを検出することもできる。
図8に示すように、メタデータの構成は、階層的である。例えば、基礎情報801には、オブジェクトが作成された日時や作成者、原稿ID等が記載されている。また、各付加情報には、各オブジェクトの形状や原稿における位置などに関する情報が記載されている。また、OCR結果から作成したキーワードを、付加情報に格納することもできる。このように、メタデータは、1つの原稿画像から抽出した複数のオブジェクトのそれぞれに対して付与された付加情報802−804と、該原稿画像全体に対して付加された基礎情報801とが原稿画像ごとに関連付けられて保持される。
ステップS316で、入力画像に対して、オブジェクトに分離してBOXに保存する処理が行われた結果が、図9のようなUI画面上に表示される。図9は、図4の原稿を領域毎にオブジェクト分離した後、メタデータの生成処理・ベクトルデータ生成処理・BOX保存処理がなされたオブジェクトを、MFPのUI画面901に表示した例である。
実施形態2では、グループに関する付加情報(例えば、1604〜1605、1609〜1611)に、該グループでの再利用時に加工されたオブジェクトの形状も同時に記憶しておくことを特徴とする。加工される形状とは、例えば拡縮や変形や回転などである。
上述した実施形態1〜2では、MFP(複合機)の制御部において検索や表示などの制御が行われるものとした。MFPの制御部はCPU(コンピュータ)を含み、コンピュータ読み取り可能な記憶媒体(例えば、ハードディスク)に記憶されているコンピュータプログラムを読み込んで実行することにより、上述した検索や表示の処理を行うものとする。すなわち、コンピュータは、プログラムを実行することにより、各処理を行うための制御手段として機能することになる。
Claims (26)
- オブジェクトを特定する特定手段と、
前記特定されたオブジェクトに対して他のオブジェクトをユーザー指示に基づいて関連付ける関連付け手段と、
前記関連付け後、前記特定されたオブジェクトがヒットするキーワードで検索を行うことで得られる前記特定されたオブジェクトを含む検索結果に加えて、前記キーワードに対して前記関連付け前にはヒットしないオブジェクトであるにも関わらず前記関連付けられた前記他のオブジェクトも表示手段に表示可能とする表示制御手段と、
を有し、
前記他のオブジェクトとともに表示されている前記検索結果は、前記特定されたオブジェクトの他に、前記キーワードにヒットする少なくとも1つのオブジェクトを含み、前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記特定されたオブジェクトと関連付いていることがユーザーにとって識別可能なように表示されることを特徴とする情報処理装置。 - キーワードの入力を受け付ける第1の受け付け手段と、
前記キーワードにヒットするオブジェクトのなかからオブジェクトを特定する指示を受け付ける第2の受け付け手段と、
前記特定されたオブジェクトに対して他のオブジェクトを関連付ける指示を受け付ける第3の受け付け手段と、
前記関連付ける指示に基づく関連付け後、前記キーワードで検索を行うことで得られる前記特定されたオブジェクトを含む検索結果に加えて、前記キーワードに対して前記関連付け前にはヒットしないオブジェクトであるにも関わらず前記関連付けられた前記他のオブジェクトも表示手段に表示可能とする表示制御手段と、
を有し、
前記他のオブジェクトとともに表示されている前記検索結果は、前記特定されたオブジェクトの他に、前記キーワードでヒットする少なくとも1つのオブジェクトを含み、前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記特定されたオブジェクトと関連付いていることがユーザーにとって識別可能なように表示されることを特徴とする情報処理装置。 - 前記検索結果に含まれているオブジェクトのうちの、ユーザーによって選択されたオブジェクトに対してアクセスする手段をさらに有することを特徴とする請求項1または2に記載の情報処理装置。
- 前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記少なくとも1つのオブジェクトと関連付いていることまでユーザーにとって識別可能なように表示されはしないことを特徴とする請求項1乃至3の何れか1項に記載の情報処理装置。
- 前記検索結果に加えて表示される前記他のオブジェクトの表示位置は、前記検索結果に含まれている前記特定されたオブジェクトの表示位置に基づいていることを特徴とする請求項1乃至4の何れか1項に記載の情報処理装置。
- 前記検索結果は、前記特定されたオブジェクトおよび前記少なくとも1つのオブジェクトの一覧であることを特徴とする請求項1乃至5の何れか1項に記載の情報処理装置。
- 前記検索結果に加えて表示される前記他のオブジェクトは、前記一覧とは区別される別の一覧に含まれた態様で表示され、
前記別の一覧は、前記一覧に含まれている前記特定されたオブジェクトに関連していることがユーザーにとって識別可能であることを特徴とする請求項6に記載の情報処理装置。 - 前記別の一覧は、さらに、前記一覧に含まれている前記少なくとも1つのオブジェクトには関連していないことがユーザーにとって識別可能であることを特徴とする請求項7に記載の情報処理装置。
- 前記別の一覧は、当該別の一覧に含まれているオブジェクトが、前記一覧に含まれている前記特定されたオブジェクトに関連付けられていることを示しているが、前記一覧に含まれている前記少なくとも1つのオブジェクトに関連付けられていることまでは示していないことを特徴とする請求項8に記載の情報処理装置。
- 前記別の一覧の表示位置は、前記一覧に含まれている前記特定されたオブジェクトの表示位置に基づいていることを特徴とする請求項7乃至9の何れか1項に記載の情報処理装置。
- 前記他のオブジェクトは、前記関連付け前でも前記関連付け後でも、前記キーワードとは異なる所定のキーワードに対してヒットすることを特徴とする請求項1乃至10の何れか1項に記載の情報処理装置。
- オブジェクトを特定する特定手段と、
前記特定されたオブジェクトに対して他のオブジェクトをユーザー指示に基づいて関連付ける関連付け手段と、
前記関連付け後、前記特定されたオブジェクトがヒットするキーワードで検索を行うことで得られる前記特定されたオブジェクトを含む検索結果に加えて、前記キーワードに対して前記関連付け前にはヒットしないオブジェクトであるにも関わらず前記関連付けられた前記他のオブジェクトも表示手段に表示可能とする表示制御手段と、
を有し、
前記他のオブジェクトとともに表示されている前記検索結果は、前記特定されたオブジェクトの他に、前記キーワードにヒットする少なくとも1つのオブジェクトを含み、前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記特定されたオブジェクトと関連付いていることがユーザーにとって識別可能なように表示されることを特徴とする情報処理システム。 - キーワードの入力を受け付ける第1の受け付け手段と、
前記キーワードにヒットするオブジェクトのなかからオブジェクトを特定する指示を受け付ける第2の受け付け手段と、
前記特定されたオブジェクトに対して他のオブジェクトを関連付ける指示を受け付ける第3の受け付け手段と、
前記関連付ける指示に基づく関連付け後、前記キーワードで検索を行うことで得られる前記特定されたオブジェクトを含む検索結果に加えて、前記キーワードに対して前記関連付け前にはヒットしないオブジェクトであるにも関わらず前記関連付けられた前記他のオブジェクトも表示手段に表示可能とする表示制御手段と、
を有し、
前記他のオブジェクトとともに表示されている前記検索結果は、前記特定されたオブジェクトの他に、前記キーワードでヒットする少なくとも1つのオブジェクトを含み、前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記特定されたオブジェクトと関連付いていることがユーザーにとって識別可能なように表示されることを特徴とする情報処理システム。 - 前記検索結果に含まれているオブジェクトのうちの、ユーザーによって選択されたオブジェクトに対してアクセスする手段をさらに有することを特徴とする請求項12または13に記載の情報処理システム。
- 前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記少なくとも1つのオブジェクトと関連付いていることまでユーザーにとって識別可能なように表示されはしないことを特徴とする請求項12乃至14の何れか1項に記載の情報処理システム。
- 前記検索結果に加えて表示される前記他のオブジェクトの表示位置は、前記検索結果に含まれている前記特定されたオブジェクトの表示位置に基づいていることを特徴とする請求項12乃至15の何れか1項に記載の情報処理システム。
- 前記検索結果は、前記特定されたオブジェクトおよび前記少なくとも1つのオブジェクトの一覧であることを特徴とする請求項12乃至16の何れか1項に記載の情報処理システム。
- 前記検索結果に加えて表示される前記他のオブジェクトは、前記一覧とは区別される別の一覧に含まれた態様で表示され、
前記別の一覧は、前記一覧に含まれている前記特定されたオブジェクトに関連していることがユーザーにとって識別可能であることを特徴とする請求項17に記載の情報処理システム。 - 前記別の一覧は、さらに、前記一覧に含まれている前記少なくとも1つのオブジェクトには関連していないことがユーザーにとって識別可能であることを特徴とする請求項18に記載の情報処理システム。
- 前記別の一覧は、当該別の一覧に含まれているオブジェクトが、前記一覧に含まれている前記特定されたオブジェクトに関連付けられていることを示しているが、前記一覧に含まれている前記少なくとも1つのオブジェクトに関連付けられていることまでは示していないことを特徴とする請求項19に記載の情報処理システム。
- 前記別の一覧の表示位置は、前記一覧に含まれている前記特定されたオブジェクトの表示位置に基づいていることを特徴とする請求項18乃至20の何れか1項に記載の情報処理システム。
- 前記他のオブジェクトは、前記関連付け前でも前記関連付け後でも、前記キーワードとは異なる所定のキーワードに対してヒットすることを特徴とする請求項12乃至21の何れか1項に記載の情報処理システム。
- オブジェクトを特定する特定工程と、
前記特定されたオブジェクトに対して他のオブジェクトをユーザー指示に基づいて関連付ける関連付け工程と、
前記関連付け後、前記特定されたオブジェクトがヒットするキーワードで検索を行うことで得られる前記特定されたオブジェクトを含む検索結果に加えて、前記キーワードに対して前記関連付け前にはヒットしないオブジェクトであるにも関わらず前記関連付けられた前記他のオブジェクトも表示手段に表示可能とする表示制御工程と、
を有し、
前記他のオブジェクトとともに表示されている前記検索結果は、前記特定されたオブジェクトの他に、前記キーワードにヒットする少なくとも1つのオブジェクトを含み、前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記特定されたオブジェクトと関連付いていることがユーザーにとって識別可能なように表示されることを特徴とする情報処理方法。 - キーワードの入力を受け付ける第1の受け付け工程と、
前記キーワードにヒットするオブジェクトのなかからオブジェクトを特定する指示を受け付ける第2の受け付け工程と、
前記特定されたオブジェクトに対して他のオブジェクトを関連付ける指示を受け付ける第3の受け付け工程と、
前記関連付ける指示に基づく関連付け後、前記キーワードで検索を行うことで得られる前記特定されたオブジェクトを含む検索結果に加えて、前記キーワードに対して前記関連付け前にはヒットしないオブジェクトであるにも関わらず前記関連付けられた前記他のオブジェクトも表示手段に表示可能とする表示制御工程と、
を有し、
前記他のオブジェクトとともに表示されている前記検索結果は、前記特定されたオブジェクトの他に、前記キーワードでヒットする少なくとも1つのオブジェクトを含み、前記検索結果に加えて表示される前記他のオブジェクトは、当該検索結果に含まれている前記特定されたオブジェクトと関連付いていることがユーザーにとって識別可能なように表示されることを特徴とする情報処理方法。 - 前記検索結果に含まれているオブジェクトのうちの、ユーザーによって選択されたオブジェクトに対してアクセスする工程をさらに有することを特徴とする請求項23または24に記載の情報処理方法。
- コンピューターを請求項1乃至11の何れか1項に記載の各手段として機能させるためのコンピュータープログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014258767A JP6012700B2 (ja) | 2014-12-22 | 2014-12-22 | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014258767A JP6012700B2 (ja) | 2014-12-22 | 2014-12-22 | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013241050A Division JP5745010B2 (ja) | 2013-11-21 | 2013-11-21 | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015097101A JP2015097101A (ja) | 2015-05-21 |
JP6012700B2 true JP6012700B2 (ja) | 2016-10-25 |
Family
ID=53374337
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014258767A Expired - Fee Related JP6012700B2 (ja) | 2014-12-22 | 2014-12-22 | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6012700B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019197337A (ja) * | 2018-05-08 | 2019-11-14 | 凸版印刷株式会社 | メタデータ生成装置、画像表示システム、メタデータ生成方法、及びプログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020093678A1 (en) * | 2000-10-17 | 2002-07-18 | Skidgel John M. | Managing and searching digital images |
US7644101B2 (en) * | 2005-09-07 | 2010-01-05 | Ricoh Co., Ltd. | System for generating and managing context information |
JP5028858B2 (ja) * | 2006-05-09 | 2012-09-19 | セイコーエプソン株式会社 | 画像管理装置 |
-
2014
- 2014-12-22 JP JP2014258767A patent/JP6012700B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2015097101A (ja) | 2015-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5063422B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
JP4181892B2 (ja) | 画像処理方法 | |
JP4251629B2 (ja) | 画像処理システム及び情報処理装置、並びに制御方法及びコンピュータプログラム及びコンピュータ可読記憶媒体 | |
JP4371965B2 (ja) | 画像処理装置、画像処理方法 | |
JP4266695B2 (ja) | 画像処理装置及び画像処理方法 | |
US7593961B2 (en) | Information processing apparatus for retrieving image data similar to an entered image | |
JP4405831B2 (ja) | 画像処理装置及びその制御方法、プログラム | |
US7551753B2 (en) | Image processing apparatus and method therefor | |
JP4510535B2 (ja) | 画像処理装置及びその制御方法、プログラム | |
JP2005157450A (ja) | 画像処理装置及びその制御方法、プログラム | |
JP4261988B2 (ja) | 画像処理装置及び方法 | |
US20100070854A1 (en) | Device for editing metadata of divided object | |
JP6012700B2 (ja) | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム | |
US8380685B2 (en) | Information processing apparatus, control method thereof, computer program, and storage medium | |
JP2006333248A (ja) | 画像処理装置、画像処理方法、プログラム及び記憶媒体 | |
JP5745010B2 (ja) | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム | |
JP5420032B2 (ja) | 情報処理装置、情報処理方法、情報処理システム、コンピュータプログラム | |
JP2004334340A (ja) | 画像処理方法及び装置 | |
JP2006134042A (ja) | 画像処理システム | |
JP2005149210A (ja) | 画像処理装置及びその制御方法、プログラム | |
JP2005174227A (ja) | 画像処理装置及びその制御方法、プログラム | |
JP2007048057A (ja) | 画像処理装置 | |
JP2006195886A (ja) | 画像処理システム | |
JP2005208872A (ja) | 画像処理システム | |
JP2008084127A (ja) | 画像形成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151013 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160129 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160607 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160729 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160823 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160920 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6012700 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |