JP7116369B2 - 印刷用画像の審査を支援するための情報処理装置、方法、プログラム、及び情報処理システム - Google Patents

Description

本発明は、印刷用画像の審査を支援するための情報処理装置、方法、プログラム、及び情報処理システムに関する。

従来、広告、商品ラベルやパッケージなどを作成する際に用いられる様々な印刷用画像を印刷する前には、当該印刷用画像に対して、校正、校閲などの審査業務を行っている。審査業務は、印刷用画像を生成する基となる原稿と比較する原稿比較審査、或いは対象の業界や組織に特有の禁止文言や必須文言をチェックするレギュレーション審査などである。審査業務においては、文字認識可能なアプリケーションを用いて抽出した文字を用いるものの、人間の目で確認を行うことが多かった。

特開２０１８－６７１５９号公報

近年、様々な分野で業務自動化が進められている。例えば特許文献１は、英語のスペルミスをチェックする答案採点の自動化に関する技術であって、原稿画像から取得される文章を校閲してその結果及び正解を当該文書に示した画像を簡単に作成可能にする技術を開示している。

このような状況において、印刷用画像の審査業務は、原稿比較審査やレギュレーション審査などの複数の審査に複数の人間が関与するものであり、省力化を実現するのが難しかった。本発明は、このような課題を解決するためになされたものであり、印刷用画像の審査業務を省力化することが可能な情報処理装置等を提供することを主目的とする。

本発明の一実施形態の情報処理装置は、
印刷用画像の審査を支援するための情報処理装置であって、
印刷用画像を生成する基となる文字列を含む原稿データ及び印刷用画像に含まれる文字列をチェックするための所定条件を定める規則データを記憶する記憶部と、
入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する画像認識部と、
要素領域の各々において、前記画像認識部が認識した文字列の各文字が前記原稿データに含まれる文字列の各文字と一致するか否かを判定する原稿判定部と、
要素領域の各々において、前記画像認識部が認識した文字列が前記規則データにより定められる所定条件を満たすか否かを判定する規則判定部と、
前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字の領域又は前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面を表示装置に表示するように制御する表示制御部と、
を備える情報処理装置である。

また、本発明の一実施形態として、
前記表示制御部は、前記確認用画面内に、要素領域の各々に対する前記原稿判定部又は前記規則判定部の判定結果を示す判定結果表示領域を表示するように制御し、
前記判定結果表示領域は、前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域又は前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域に対応付けられた確認用オブジェクトを含み、
前記確認用オブジェクトの各々は、該確認用オブジェクトを確認したか否かを示すチェック入力オブジェクトを含む。

また、本発明の一実施形態として、
前記表示制御部は、ユーザ入力に応じて、前記確認用画面内に、前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字の領域が明示された印刷用画像と前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像とを切り替えて表示するように制御する。

また、本発明の一実施形態として、
前記原稿データは、各々が出力される内容に応じた文字列を含む複数の要素原稿データを含み、
前記原稿判定部は、要素領域の各々において、前記画像認識部が認識した文字列が前記複数の要素原稿データのいずれか１つの要素原稿データに含まれる文字列と一致するか否かを判定し、
前記表示制御部は、前記確認用画面内に、前記原稿判定部が一致すると判定した文字の領域及び前記原稿判定部が一致しないと判定した文字の領域に対して異なる色又は模様で塗りつぶした印刷用画像を表示するように制御する。

また、本発明の一実施形態として、
前記規則データが定める所定条件は、前記画像認識部が認識した文字列が所定の禁止文言を含まないこと、前記画像認識部が認識した文字列が所定の誤字を含まないこと、前記画像認識部が認識した文字列が所定の必須文言を含むこと、前記画像認識部が認識した画像が特定の画像を含むこと、及び前記画像認識部が認識した特定の文字又は特定の画像が所定の形式で表示されることの少なくとも１つを含む。

また、本発明の一実施形態として、
前記情報処理装置はサーバであり、
前記表示制御部は、前記確認用画面をクライアント端末の表示装置に表示するように制御する。

本発明の一実施形態の方法は、
コンピュータにより実行される印刷用画像の審査を支援するための方法であって、
入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する画像認識ステップと、
要素領域の各々において、前記画像認識ステップにおいて認識した文字列の各文字が、印刷用画像を生成する基となる文字列を含む原稿データに含まれる文字列の各文字と一致するか否かを判定する原稿判定ステップと、
要素領域の各々において、前記画像認識ステップにおいて認識した文字列が、印刷用画像に含まれる文字列をチェックするための所定条件を定める規則データにより定められる所定条件を満たすか否かを判定する規則判定ステップと、
前記原稿判定ステップが前記原稿データに含まれる文字列と一致しないと判定した文字の領域又は前記規則判定ステップが前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面を表示装置に表示するように制御する表示制御ステップと、
を含む方法である。

本発明の一実施形態のプログラムは、上記の方法の各ステップをコンピュータに実行させる。

本発明の一実施形態の情報処理システムは、
情報処理装置及びユーザ端末を含む、印刷用画像の審査を支援するための情報処理システムであって、
印刷用画像を生成する基となる文字列を含む原稿データ及び印刷用画像に含まれる文字列をチェックするための所定条件を定める規則データを記憶する記憶部と、
入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する画像認識部と、
要素領域の各々において、前記画像認識部が認識した文字列の各文字が前記原稿データに含まれる文字列の各文字と一致するか否かを判定する原稿判定部と、
要素領域の各々において、前記画像認識部が認識した文字列が前記規則データにより定められる所定条件を満たすか否かを判定する規則判定部と、
前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字の領域又は前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面をユーザ端末の表示装置に表示するように制御する表示制御部と、
を備える、情報処理システムである。

本発明によれば、印刷用画像の審査業務を省力化することができる。

本発明の一実施形態の情報処理システムの全体構成図である。 本発明の一実施形態の情報処理装置のハードウェア構成を示すブロック図である。 本発明の一実施形態のユーザ端末のハードウェア構成を示すブロック図である。 本発明の一実施形態の情報処理装置の機能ブロック図である。 印刷用画像が印刷された印刷対象物の一例を示す図である。 図５に示す印刷用画像の一例を示す図である。 原稿データの一部の一例を示す図である。 要素原稿データに対応する要素領域の一例を示す図である。 要素原稿データに対応する要素領域の一例を示す図である。 規則データの一部の一例を示す図である。 印刷用画像の一例を示す図である。 図１０の印刷用画像における画像認識部が認識した文字列を含む要素領域と文字列を含まない要素領域の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 表示制御部が表示装置に表示させる確認用画面の一例を示す図である。 本発明の一実施形態の情報処理装置において実行される情報処理を説明するフローチャートである。

以下、図面を参照して、本発明の実施形態を説明する。本発明の実施形態は、情報処理装置１０又は情報処理装置１０を含む情報処理システム１により実現される。各図において同一の符号は、特に言及が無い限り同一又は相当部分を示すものとし、必要以上に詳細な説明は省略する場合がある。本発明の実施形態で説明するデータベースにおけるデータ構造やデータベース構造は一例であって、これらに限定されない。

図１は、本発明の一実施形態の情報処理システム１の全体構成図である。図１に示すように、情報処理システム１は、情報処理装置１０と、１又は複数のユーザ端末３０とを含み、これらはインターネットなどのネットワーク２に接続され、互いに通信可能である。

図２は本発明の一実施形態の情報処理装置１０のハードウェア構成を示すブロック図である。情報処理装置１０は、プロセッサ１１、入力装置１２、表示装置１３、記憶装置１４、及び通信装置１５を備える。これらの各構成装置はバス１６によって接続される。なお、バス１６と各構成装置との間には必要に応じてインタフェースが介在しているものとする。

プロセッサ１１は、情報処理装置１０全体の動作を制御する。例えばプロセッサ１１は、ＣＰＵである。プロセッサ１１は、記憶装置１４に格納されているプログラムやデータを読み込んで実行することにより、様々な処理を実行する。プロセッサ１１は、複数のプロセッサから構成されてもよい。

入力装置１２は、情報処理装置１０に対するユーザからの入力を受け付けるユーザインタフェースであり、例えば、タッチパネル、タッチパッド、キーボード、又はマウスである。表示装置１３は、プロセッサ１１の制御に従って、アプリケーション画面などを情報処理装置１０のユーザに表示するディスプレイである。

記憶装置１４は、主記憶装置及び補助記憶装置を含む。主記憶装置は、例えばＲＡＭのような半導体メモリである。ＲＡＭは、情報の高速な読み書きが可能な揮発性の記憶媒体であり、プロセッサ１１が情報を処理する際の記憶領域及び作業領域として用いられる。主記憶装置は、読み出し専用の不揮発性記憶媒体であるＲＯＭを含んでいてもよい。補助記憶装置は、様々なプログラムや、各プログラムの実行に際してプロセッサ１１が使用するデータを格納する。補助記憶装置は、情報を格納できるものであればいかなる不揮発性ストレージ又は不揮発性メモリであってもよく、着脱可能なものであっても構わない。

通信装置１５は、ネットワークを介してユーザ端末又はサーバなどの他のコンピュータとの間でデータの授受を行うものであり、例えば無線ＬＡＮモジュールである。通信装置１５は、Ｂｌｕｅｔｏｏｔｈ（登録商標）モジュールなどの他の無線通信用のデバイスやモジュールなどとすることもできるし、イーサネット（登録商標）モジュールやＵＳＢインタフェースなどの有線通信用のデバイスやモジュールなどとすることもできる。

図３は本発明の一実施形態のユーザ端末３０のハードウェア構成を示すブロック図である。ユーザ端末３０は、プロセッサ３１、入力装置３２、表示装置３３、記憶装置３４、及び通信装置３５を備える。これらの各構成装置はバス３６によって接続される。なお、バス３６と各構成装置との間には必要に応じてインタフェースが介在しているものとする。プロセッサ３１、入力装置３２、表示装置３３、記憶装置３４、及び通信装置３５の各要素は、前述したプロセッサ１１、入力装置１２、表示装置１３、記憶装置１４、及び通信装置１５に各々対応するものであり、同様の構成を有するため、説明は省略する。

情報処理装置１０は、印刷用画像の審査を支援するための装置であり、ユーザ端末３０に対してサービスを提供するサーバである。情報処理装置１０は、一般的なサーバと同様の構成を含むことができる。１つの例では、情報処理装置１０は、公知のサーバコンピュータである。情報処理装置１０は、複数の装置を含んで構成されてもよい。ユーザ端末３０は、印刷用画像の審査を支援するためのサービスを利用するユーザが使用するコンピュータであり、例えば、パーソナルコンピュータ、タブレット端末、スマートフォン、携帯電話機などとすることができる。

本実施形態では、情報処理装置１０は、ユーザ端末３０を介して、対象となる印刷用画像の入力（送信）を受け付ける。

図４は本発明の一実施形態の情報処理装置１０の機能ブロック図である。情報処理装置１０は、記憶部２１、画像認識部２２、原稿判定部２３、規則判定部２４、及び表示制御部２５を備える。本実施形態においては、プログラムがプロセッサ１１により実行されることにより又は記憶装置１４によりこれらの機能が実現される。例えば実行されるプログラムは、記憶装置１４に記憶されている又は通信装置１５を介して受信したプログラムである。プログラム読み込みにより実現される機能は、１つのパート（機能ブロック）の一部又は全部の機能を他のパートが有していてもよい。ただし、各機能の一部又は全部を実現するための電子回路等を構成することによりハードウェアによってもこれらの機能は実現してもよい。

記憶部２１は、プログラムやデータなどを記憶する機能を備える。記憶部２１の当該機能は、記憶装置１４により実現される。本実施形態では、記憶部２１は、データベース機能を備える。データベース機能は、記憶装置１４が各種データベース用のデータ（例えばテーブル）やプログラムを記憶し、プログラムが実行されることにより実現される。

記憶部２１は、ユーザ端末３０を介して受け取った印刷用画像を記憶する。記憶部２１は、印刷用画像を生成する基となる文字列（文字）を含む原稿データ及び印刷用画像に含まれる文字列（文字）をチェックするための所定条件を定める規則データを記憶する。本実施形態では、文字列は、１文字も含む概念である。ここで印刷用画像は、広告、商品ラベルやパッケージなどを作成する際に用いられる印刷用画像であり、例えばパッケージ画像である。印刷用画像は、広告、商品ラベルやパッケージなどの印刷対象物（例えば紙媒体）への印刷用画像である。ただし、印刷用画像は、あるデータを基に出力される画像を意味するものであって、電子媒体への印刷用画像であってもよい。例えば、印刷用画像は、審査を必要とするＷｅｂ画像や電子契約書であってもよい。

図５は、印刷用画像４０が印刷された印刷対象物の一例を示す図である。印刷用画像４０は、ペットボトルに包装された広告ラベルに印刷された画像である。図６は、図５に示す印刷用画像４０の一例を示す図である。印刷用画像４０は、商品に関連するデザイン、イラストや文言が印刷される領域４１、商品情報や会社情報が印刷される領域４２、栄養成分表示が印刷される領域４３、資源関連のロゴが印刷される領域４４、商品関連のロゴが印刷される領域４５、商品が属する業界共通の文言やデザインが印刷される領域４６、商品識別用コードが印刷される領域４７、及び印刷対象物を接着するための領域４８を含む。このように、印刷用画像４０は、複数の要素領域（４１ａ，４１ｂ，４２ａ，４２ｂ，４２ｃ，４３ａ，４３ｂ，４４ａ，４４ｂ，４４ｃ，４５，４６ａ，４６ｂ，４６ｃ，４７，４８）から構成される。要素領域は、印刷用画像を構成する単位領域であり、例えばある情報を伝えるための最小単位の領域である。例えば、複数の要素領域の各領域は、文字列及び色のみを含む領域、文字列並びに所定の画像若しくはイラストのみを含む領域、又は所定の画像若しくはイラストのみを含む領域のいずれかである。

印刷用画像は、文字列のデータを含む原稿データに基づいて生成される。例えば、情報処理装置１０は、ユーザ端末３０からユーザにより作成された原稿データを受け取り、記憶部２１に記憶する。図７は、原稿データの一部の一例を示す図である。図７に示すシーケンス番号１～６とシーケンス番号７～１１の各々は、要素原稿データであり、図７は、２つの要素原稿データを示すものである。要素原稿データは、１つの要素領域が含む文字列のデータである。図８は、要素原稿データに対応する要素領域の一例を示す図である。図８ａが示す印刷用画像の要素領域は、商品情報や会社情報が印刷される領域であり、図７に示すシーケンス番号１～６の要素原稿データに対応する。図８ｂが示す印刷用画像の要素領域は、栄養成分表示が印刷される領域であり、図７に示すシーケンス番号７～１１の要素原稿データに対応する。なお、本実施形態では、情報処理装置１０は、ユーザにより作成された原稿データを記憶して利用する。ユーザにより作成されたデータが任意のフォーマットであった場合、情報処理装置１０は、図７に示すような所定のフォーマットに予め変換された原稿データを記憶部２１に記憶する。

画像認識部２２は、入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、該印刷用画像内の複数の要素領域を決定する。複数の要素領域の各々は、認識された文字列を含む。画像認識部２２は、既知の文字認識機能と画像認識機能を備えることができる。非文字オブジェクトは、写真画像、絵柄、又は図形である。なお、画像認識部２２は、文字列を含まない領域であっても、予め定められた所定の非文字オブジェクトを含む領域を１つの要素領域として決定することができる。要素領域の定義は、画像認識部２２の設定により変更することができる。

１つの例では、画像認識部２２は、文字を認識するとともに所定の非文字オブジェクトを認識し、文字や非文字オブジェクトの配置から複数の要素領域を認識し、各要素領域を決定する。１つの例では、画像認識部２２は、印刷用画像内の座標を用いて各要素領域を認識し、各要素領域を領域ＩＤに関連付けて識別可能に記憶部２１に記憶する。１つの例では、画像認識部２２は、認識した文字を、該文字を含む要素領域に関連付けて記憶部２１に記憶する。この場合、画像認識部２２は、認識した非文字オブジェクトを、該非文字オブジェクトを含む要素領域に関連付けて記憶部２１に記憶することもできる。１つの例では、画像認識部２２は、文字を認識するとき、各文字の位置情報を記憶部２１に記憶する。この場合、画像認識部２２は、非文字オブジェクトを認識するとき、文字と同様にして非文字オブジェクトの位置情報を記憶することもできる。位置情報は、例えば印刷用画像内の座標により表される。画像認識部２２が要素領域や文字などの対象の位置情報を記憶する場合、認識した対象の所定位置（例えば中心や左上端）と対象の大きさを用いた位置情報を記憶してもよいし、認識した対象の占める範囲を示す位置情報を記憶してもよい。

１つの例では、画像認識部２２は、画像特徴量のパターンに基づく画像認識又はＯＣＲのようなレイアウト解析に基づく画像認識を用いて実現することができる。

原稿判定部２３は、要素領域の各々において、画像認識部２２が認識した文字列の各文字が原稿データに含まれる文字列の各文字と一致するか否かを判定する。本実施形態では、原稿判定部２３は、要素領域の各々において、画像認識部２２が認識した文字列が複数の要素原稿データのいずれか１つの要素原稿データに含まれる文字列と一致するか否かを判定する。本実施形態では、原稿判定部２３は、要素領域の各々において、文字ごとに判定処理を行う。

規則判定部２４は、要素領域の各々において、画像認識部２２が認識した文字列が規則データにより定められる所定条件を満たすか否かを判定する。規則判定部２４は、要素領域の各々において、規則データの対象となる文字列（文字又は文言）ごとに判定処理を行うことができる。例えば、情報処理装置１０は、作成する予定の印刷用画像が用いられる分野や業界に応じて予め作成された規則データを記憶部２１に記憶する。情報処理装置１０は、これに加えて、又はこれに代えて、ユーザ端末３０からユーザにより作成された規則データを受け取って記憶部２１に記憶することもできる。情報処理装置１０が、ユーザにより作成された任意のフォーマットの規則データを用いる場合、情報処理装置１０は、図９に示すような所定のフォーマットに予め変換された規則データを記憶部２１に記憶する。

図９は、規則データの一部の一例を示す図である。ルールＩＤの各々が所定条件の１つを示す。例えばルールＩＤ１００１の所定条件は、印刷用画像から認識される文字列に「ＸＸ」又は「ＹＹ」が含まれる場合、当該文字列を修正する必要があることを定める。1つの例では、画像認識部２２は、印刷用画像から認識した文字列に対して自然言語処理である形態素解析・構文解析を行い、名詞・動詞・形容詞等を判定する。その結果、例えば所定条件が「［もつ］→［持つ］に修正してください」である場合、規則判定部２４は、「商品をもって」「商品をもつ」「商品をもった」等の「もつ」という文字列をすべて認識し、判定処理を実行する。また１つの例では、禁止ワードとして最大級表現（「最高」「ナンバー１」「至上」等）が登録されている場合、規則判定部２４は、最大級表現が商品名称にかかっているのか、その他の表現にかかっているのかなど、景品表示法の誇大表示への違反等の可否を判別し、判定処理を実行する。例えば規則判定部２４は、「最高のビール」という表現に対しては誇大表示に該当すると判断して所定条件を満たさないと判定し、「ビール好きには最高の場所」という表現に対しては誇大表示に該当しないと判断して所定条件を満たすと判定する。

１つの例では、規則データが定める所定条件は、画像認識部２２が認識した文字列が所定の禁止文言を含まないこと、該認識した文字列が所定の誤字を含まないこと、及び該認識した文字列が必須文言を含むことの少なくとも１つを含む。所定の禁止文言や所定の必須文言は、作成する予定の印刷用画像が用いられる分野や業界に基づいて予め定められるものであってもよいし、作成する予定の印刷用画像ごとに予め定められるものであってもよい。所定の誤字のチェックは、予め定められる所定の誤字と比較して実行してもよいし、既知の誤字チェック用プログラムを用いて実行してもよい。例えば既知の誤字チェック用プログラムを用いる場合、１つの所定条件に当該プログラムが関連付けられ、規則判定部２４は、当該プログラムを起動して誤字をチェックするように構成されてもよい。既知の誤字チェック用プログラムは、既知のプログラムにより作成された学習済みデータを用いてもよい。

規則判定部２４は、要素領域の各々において、画像認識部２２が認識した非文字オブジェクトが規則データにより定められる所定条件を満たすか否かを判定することもできる。例えば規則データが定める所定条件は、上記例示の代わりに、又は上記例示に加えて、画像認識部２２が認識した画像が特定の画像を含むことができる。例えば規則データが定める所定条件は、上記例示の代わりに、又は上記例示に加えて、画像認識部２２が認識した特定の文字又は特定の画像が所定の形式で表示されることの少なくとも１つを含むことができる。この場合、画像認識部２２は、特定の文字又は特定の画像を、その位置及び形状とともに、認識することができる。

表示制御部２５は、原稿判定部２３及び規則判定部２４の判定結果に応じた画像処理又は加工が行われた印刷用画像を含む確認用画面６０を表示するためのデータを生成し、該確認用画面６０を表示装置３３又は表示装置１３に表示するように制御する。ここで、表示制御部２５が確認用画面６０を表示装置３３に表示するように制御することは、表示制御部２５が確認用画面６０を表示装置３３に表示させることを含み、例えば表示制御部２５（情報処理装置１０）が確認用画面６０を表示させるためのデータをユーザ端末３０に送信し、表示装置３３が当該画面を表示することを意味する。表示制御部２５が確認用画面６０を表示装置１３に表示するように制御することは、表示制御部２５（情報処理装置１０）が確認用画面６０を表示装置１３に表示することである。表示制御部２５は、確認用画面６０を表示装置３３及び表示装置１３に表示するように制御してもよい。本明細書では、説明の便宜上、表示制御部２５が画面や画像を表示するとは、画面や画像を表示装置３３や表示装置１３に表示するように制御することを意味することができる。

１つの例では、記憶装置１４は、Ｗｅｂアプリケーションを記憶し、情報処理装置１０は、Ｗｅｂアプリケーションにアクセスするユーザ端末３０に対してウェブページを提供する。ユーザは、ウェブページを介して、ユーザ端末３０を操作することにより、印刷用画像や印刷用画像を生成する基となる文字列を含む原稿データなどを情報処理装置１０に送信することができ、情報処理装置１０は、当該データを受け付けることができる。表示制御部２５は、ウェブページを介して、確認用画面６０を表示装置３３に表示させる。この場合、表示制御部２５は、ユーザ端末３０の画面にウェブページを表示させるために必要な一般的なサーバの機能を含むことができる。

確認用画面６０は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域（文字が表示される領域）又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域（文字又は文言が表示される領域）が明示された印刷用画像を含む画面である。１つの例では、表示制御部２５は、ユーザ操作に応じて、確認用画面６０内に、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域が明示された印刷用画像又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像のいずれか一方を表示する。確認用画面６０は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域が明示された印刷用画像を含む画面であってもよい。

１つの例では、表示制御部２５は、確認用画面６０を表示するときに、当該領域を明示するための描画オブジェクトを重畳させた印刷用画像を表示する。この場合、表示制御部２５は、例えば記憶部２１に記憶された画像認識部２２が記憶した文字又は非文字オブジェクトの位置情報を用いて、描画オブジェクトを重畳させる。１つの例では、表示制御部２５は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域については、一文字単位で判定結果を確認できるように、各文字に対して描画オブジェクトを描画する。この場合、描画オブジェクトは、各文字を囲む枠状のオブジェクトとすることもできるし、各文字を塗りつぶすオブジェクトとすることもできる。１つの例では、表示制御部２５は、規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域については、当該領域が確認可能な位置に描画オブジェクトを描画する。この場合、描画オブジェクトは、識別可能な番号又は文字を含むオブジェクトとすることができる。なお、表示制御部２５による印刷用画像に対する描画オブジェクトを重畳させる画像処理又は加工は、領域を明示するための１つの例であって、同様の効果を与える画像処理や加工などであれば、これに限定されない。

図１０は、印刷用画像５０の一例を示す図である。以下に、一のユーザが図１０に示す印刷用画像５０の審査を行う場合の情報処理装置１０の動作について、図１１～２０とともに説明する。

情報処理装置１０は、ユーザ端末３０を介して、印刷用画像５０の入力を受け付ける。画像認識部２２は、入力を受け付けた印刷用画像５０に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する。

図１１は、図１０の印刷用画像５０における画像認識部２２が認識した文字列を含む要素領域５１と文字列を含まない要素領域５２の一例を示す図である。要素領域５１は、文字列のみを含む領域であるか、文字列及び非文字オブジェクトを含む領域である。要素領域５２は、非文字オブジェクトのみを含む領域である。画像認識部２２は、文字列と非文字オブジェクトを認識し、文字列を含む要素領域５１を決定する。画像認識部２２は、文字列を含まない要素領域５２を決定してもよい。

原稿判定部２３は、要素領域５１の各々において、画像認識部２２が認識した文字列が複数の要素原稿データのうちの対応する１つの要素原稿データに含まれる文字列と一致するか否かを判定する。１つの例では、原稿判定部２３は、１つの領域ＩＤに関連付けられた画像認識部２２が認識した文字列が、複数の要素原稿データのうちの対応する１つの要素原稿データに含まれる文字列と一致するか否かを判定する。原稿判定部２３は、文字ごとに判定処理を行う。判定処理される文字は、要素領域５１（領域ＩＤ）に関連付けられている。

規則判定部２４は、要素領域５１の各々において、画像認識部２２が認識した文字列が規則データにより定められる所定条件を満たすか否かを判定する。本例示では、規則判定部２４が判定する文字列は、要素領域５１に関連付けられている。

図１２は、表示制御部２５が表示する確認用画面６０の一例を示す図である。確認用画面６０は、判定結果表示領域７０、メイン画面領域８０、及びサブ画面領域９０を含む。表示制御部２５は、メイン画面領域８０内に、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像５０を表示する。表示制御部２５は、上記の明示に加えて、又は上記の明示に代えて、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域５１又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域５１が明示された印刷用画像５０を表示することもできる。１つの例では、メイン画面領域８０は、確認用画面６０内の中央部分に位置する。

判定結果表示領域７０は、要素領域５１の各々に対する原稿判定部２３又は規則判定部２４の判定結果を示す。判定結果表示領域７０は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域５１又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域５１に対応付けられた確認用オブジェクト７２を含む。判定結果表示領域７０は、原稿判定部２３による判定結果を表示するための「原稿比較」タブ及び規則判定部２４による判定結果を表示するための「レギュレーション」タブを含むタブ領域７１を含む。タブはボタンやスイッチなどでもよい。

表示制御部２５は、「原稿比較」タブが選択されている場合、判定結果表示領域７０内に、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域５１に対応付けられた確認用オブジェクト７２を表示する。このとき表示制御部２５は、メイン画面領域８０内に、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域が明示された印刷用画像５０を表示する。表示制御部２５は、「レギュレーション」タブが選択されている場合、判定結果表示領域７０内に、規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域５１に対応付けられた確認用オブジェクト７２を表示する。このとき表示制御部２５は、メイン画面領域８０内に、規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像５０を表示する。

表示制御部２５は、「原稿比較」タブ又は「レギュレーション」タブが表示される位置へマウスのポインタを合わせてクリックするなどのユーザ入力に応じて、選択されるタブを切り替え、これに伴って、判定結果表示領域７０及びメイン画面領域８０の表示を切り替えて表示する。

図１２は、「原稿比較」タブが選択されている確認用画面６０を示している。表示制御部２５は、メイン画面領域８０内に、原稿判定部２３により原稿データに含まれる文字列と一致すると判定された文字の領域を示す描画オブジェクト８２と、該原稿データに含まれる文字列と一致しないと判定された文字の領域を示す描画オブジェクト８３と、原稿判定部２３により比較不可と判定された文字の領域を示す描画オブジェクト８４とが描画された印刷用画像５０を表示する。描画オブジェクト８２、８３、及び８４は、一文字単位で判定結果を確認できるように、各文字に対して描画される。描画オブジェクト８２、８３、及び８４は、識別できるように、それぞれ異なる色、デザイン、又は形状を有する。例えば、描画オブジェクト８２は、文字の領域を緑色の枠で覆うオブジェクトであり、描画オブジェクト８３は、文字の領域を赤色の枠で覆うオブジェクトであり、描画オブジェクト８４は、文字の領域を紫色の枠で覆うオブジェクトである。１つの例では、表示制御部２５は、メイン画面領域８０内に、描画オブジェクト８２、８３、及び８４を重畳させた印刷用画像５０を表示する。

本例示では、原稿判定部２３は、画像認識部２２が認識した文字列が原稿データに含まれる文字列と一致しないと判定した場合において、比較対象の要素原稿データが無い場合、比較不可と判定された文字と判定する。ただし、比較不可と判定される文字は、原稿データに含まれる文字と一致しないと判定される文字でもあるとすることができるため、原稿判定部２３は、比較不可の判定を行わず、表示制御部２５は、描画オブジェクト８２及び８３のみを表示するように構成されてもよい。

表示制御部２５は、メイン画面領域８０内に、表示設定を変更するための設定用オブジェクト８１を表示する。１つの例では、設定用オブジェクト８１は、印刷用画像５０に対する判定結果に応じた画像加工の前後を切り替える第１のスイッチ、画像加工内容を切り替える第２のスイッチ、及びサブ画面領域９０の表示有無を切り替える第３のスイッチを含む。切り替え用のスイッチは、ボタンなどでもよい。

例えば、図１２に示す確認用画面６０において、ユーザ入力に応じて第１のスイッチの「ＡＩ指摘の表示」の「ＯＮ」が選択された場合、表示制御部２５は、メイン画面領域８０内に、図１０に示す印刷用画像５０を表示する。例えば、図１２に示す確認用画面６０において、ユーザ入力に応じて第２のスイッチの「ＡＩ指摘枠の塗潰し」の「ＯＮ」が選択された場合、表示制御部２５は、メイン画面領域８０内に、描画オブジェクト８２～８４内の枠内を枠の色に応じた色又は模様で塗りつぶした印刷用画像５０を表示する。例えば、図１２に示す確認用画面６０において、ユーザ入力に応じて第３のスイッチの「追加指摘の表示」の「ＯＦＦ」が選択された場合、表示制御部２５は、サブ画面領域９０を含まない確認用画面６０を表示する。

サブ画面領域９０は、ユーザにより入力された追加指摘事項を示す追記事項表示領域９１と、メイン画面領域８０における印刷用画像５０の表示箇所を示すミニ画面９２とを含む。

確認用オブジェクト７２の各々は、該確認用オブジェクト７２を確認したか否かを示すチェック入力オブジェクトを含み、例えばチェック入力オブジェクトはチェックボックスである。確認用オブジェクト７２の各々は、該確認用オブジェクト７２に関連付けてコメントを受け付けるコメント入力オブジェクトを含むこともでき、例えばコメント入力オブジェクトは、コメント入力ボタンである。情報処理装置１０は、確認用オブジェクト７２の各々に対して、チェック入力又はコメント入力を受け付けることができるように構成される。

図１３は、図１２に示す確認用画面６０において、１つの確認用オブジェクト７２が選択された場合に表示制御部２５が表示する確認用画面６０の一例を示す図である。表示制御部２５は、選択された確認用オブジェクト７２に対応する確認用フィールド７３を表示するとともに、メイン画面領域８０内に、該確認用オブジェクト７２に対応する要素領域８５にフォーカスした画面を表示する。図１３に示すように、要素領域８５は、原稿データに含まれる文字列と一致しないと判定された文字の領域を示す描画オブジェクト８３を含む。なお、図１３においては、要素領域８５は、原稿データに含まれる文字列と一致すると判定された文字の領域を示す描画オブジェクト８２も含んでいる。表示制御部２５は、確認用フィールド７３内に、原稿データに含まれる文字列と一致しないと判定された文字を表示し、当該判定の良否の入力を促すメッセージを表示する。表示制御部２５は、ユーザ入力に応じて、当該判定の良否の入力を受け付けることができるように構成される。また表示制御部２５は、ユーザ入力に応じて、当該判定に関連付けて、コメント入力を受け付けることができるように構成される。

図１４は、図１２に示す確認用画面６０において、ユーザ入力に応じて第２のスイッチの「ＡＩ指摘枠の塗潰し」の「ＯＮ」が選択された場合に表示制御部２５が表示する確認用画面６０を示す図である。表示制御部２５は、メイン画面領域８０内に、描画オブジェクト８２、８３及び８４内の枠内を枠の色に応じた色又は模様で塗りつぶした描画オブジェクト８２ａ、８３ａ、及び８４ａが描画された印刷用画像５０を表示する。１つの例では、表示制御部２５は、メイン画面領域８０内に、描画オブジェクト８２ａ、８３ａ、及び８４ａを重畳させた印刷用画像５０を表示する。

図１５は、「レギュレーション」タブが選択された確認用画面６０を示す。表示制御部２５は、メイン画面領域８０内に、規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域を明示する描画オブジェクト８６が描画された印刷用画像５０を表示する。１つの例では、表示制御部２５は、メイン画面領域８０内に、描画オブジェクト８６を重畳させた印刷用画像５０を表示する。表示制御部２５は、判定結果表示領域７０内に、規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域５１に対応付けられた確認用オブジェクト７２を表示する。

図１６は、図１５に示す確認用画面６０において、１つの確認用オブジェクト７２が含むコメント入力ボタンが選択された場合に表示制御部２５が表示する確認用画面６０の一例を示す図である。表示制御部２５は、選択された確認用オブジェクト７２に関連付けるコメントを入力させるためのコメント入力画面を表示する。

図１７は、図１５に示す確認用画面６０において、１つの確認用オブジェクト７２が選択された場合に表示制御部２５が表示する確認用画面６０の一例を示す図である。表示制御部２５は、判定結果表示領域７０内に、規則データにより所定条件を満たさないと判定した内容を示す確認用オブジェクト７２を表示し、該判定の良否の入力を促すメッセージオブジェクト７４（例えばメッセージボックス）を該確認用オブジェクト７２に紐付けるように表示する。このとき、表示制御部２５は、メイン画面領域８０内に、該確認用オブジェクト７２に対応する要素領域８７にフォーカスした画面を表示する。

図１８は、図１５に示す確認用画面６０において、追記指摘事項９１ａ、９１ｂが入力された場合に表示制御部２５が表示する確認用画面６０の一例を示す図である。表示制御部２５は、サブ画面領域９０内に、追記指摘事項９１ａ、９１ｂを表示するとともに、メイン画面領域８０内に、該追記指摘事項９１ａ、９１ｂの各々に関連付けられた追記事項表示オブジェクト８８ａ、８８ｂを表示する。図１９は、図１８に示す確認用画面６０において、１つの追記指摘事項９１ｂが選択された場合に表示制御部２５が表示する確認用画面６０の一例を示す図である。表示制御部２５は、メイン画面領域８０内に、追記指摘事項９１ｂに関連付けられた追記事項表示オブジェクト８８ｂにフォーカスした画面を表示する。

図２０は、ユーザ入力を介して、すべての確認用オブジェクト７２のチェック入力オブジェクトに対してチェックが入力された場合に、表示制御部２５が表示する確認用画面６０の一例を示す図である。例えば、すべての確認用オブジェクト７２とは、「原稿比較」タブ及び「レギュレーション」タブが選択されている場合に表示されるすべての確認用オブジェクト７２である。表示制御部２５は、判定結果表示領域７０内に、確認済みであることを示すメッセージオブジェクト（例えばメッセージボックス）７５を表示する。

このようにして、一のユーザは、印刷用画像５０の審査を行うことができる。情報処理装置１０は、一のユーザのチェックやコメントの入力内容を記憶装置１４に記憶し、一のユーザと同様のチェック入力やコメント入力を他のユーザからも受け付けることができるように構成される。この場合、表示制御部２５は、一のユーザの入力内容を確認用画面６０内の入力箇所に対応する位置に表示することができるように構成される。

なお、図１２～図２０が示す確認用画面６０は１つの例示であって、同様の機能を実現できれば、この構成に限定されない。例えば、判定結果表示領域７０ではなく、メイン画面領域８０又はサブ画面領域９０がタブ領域７１を含んでいてもよい。

図２１は、本発明の一実施形態の情報処理装置１０において実行される情報処理を説明するフローチャートである。ここで、情報処理装置１０は、審査対象の印刷用画像の入力を受け付け、記憶部２１は、該印刷用画像を記憶するものとする。

ステップ１０１で、画像認識部２２は、入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、複数の要素領域を決定する。

ステップ１０２で、原稿判定部２３は、要素領域の各々において、画像認識部２２が認識した文字列の各文字が記憶部２１に記憶される原稿データに含まれる文字列の各文字と一致するか否かを判定する。ステップ１０３で、規則判定部２４は、要素領域の各々において、画像認識部２２が認識した文字列が記憶部２１に記憶される規則データにより定められる所定条件を満たすか否かを判定する。なお、ステップ１０２と１０３は、同時に実行されてもよいし、順番が逆でもよい。

ステップ１０４で、表示制御部２５は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面６０を表示装置３３に表示する。

次に、本発明の実施形態の情報処理装置１０（情報処理システム１）の作用効果について説明する。

従来、広告、商品ラベルやパッケージなどを作成する際に用いられる印刷用画像に対する校正、校閲などの審査業務は、原稿比較審査やレギュレーション審査などの複数の審査に複数の人間、あるいは審査の内容に応じて複数の関連部門が関与するものであった。また、原稿比較審査とレギュレーション審査は、別々に行われることも多い。これらの事情により、印刷用画像の審査業務の省力化を実現するのが難しかった。

本実施形態では、画像認識部２２が、入力を受け付けた印刷用画像において複数の要素領域を決定し、原稿判定部２３及び規則判定部２４が、要素領域の各々において、記憶部２１が記憶する原稿データ及び規則データに基づいて判定処理を実行する。表示制御部２５は、ユーザ操作に応じて、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域が明示された印刷用画像又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像のいずれか一方を含む確認用画面６０を表示する。

このような構成とすることにより、原稿比較審査及びレギュレーション審査の２つの審査の一部自動化が可能となる。これにより、ユーザは情報処理装置１０により出力される判定結果が良好でない箇所のみをチェックすれば良いため、印刷用画像の審査業務の省力化を実現することが可能となる。また、複数のユーザが、ユーザ端末３０を介して、表示制御部２５により出力される判定結果を確認することが可能となるため、印刷用画像の審査業務の省力化を実現することが可能となる。

また本実施形態では、表示制御部２５は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した領域については、一文字単位で判定結果を確認できるように、各文字に対して描画オブジェクトを描画するように構成できる。このような構成とすることにより、原稿判定部２３による判定結果が良好でない文字をより明確に確認することが可能となる。これにより、印刷用画像の審査業務を省力化することが可能となる。

また本実施形態では、表示制御部２５は、確認用画面６０内に、要素領域の各々に対する原稿判定部２３又は規則判定部２４の判定結果を示す判定結果表示領域７０を表示する。判定結果表示領域７０は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域に対応付けられた確認用オブジェクト７２を含む。確認用オブジェクト７２の各々は、該確認オブジェクトを確認したか否かを示すチェック入力オブジェクトを含む。このとき表示制御部２５は、メイン画面領域８０内に、選択された確認用オブジェクト７２に対応する要素領域８５にフォーカスした画面を表示することができる。

このような構成とすることにより、ユーザは確認用画面６０において、確認用オブジェクト７２をチェックするだけで、情報処理装置１０により出力される判定結果が良好でない箇所をすべて確認することができるため、印刷用画像の審査業務を省力化することが可能となる。

また本実施形態では、表示制御部２５は、ユーザ操作に応じて、確認用画面６０内に、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域が明示された印刷用画像と規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像とを切り替えて表示する。

このような構成とすることにより、２つの審査の判定結果が良好でない箇所を分けて把握しつつ、１つの画面で確認することが可能となる。これにより、印刷用画像の審査業務を省力化することが可能となる。

また本実施形態では、原稿データは、各々が出力される内容に応じた文字列を含む複数の要素原稿データを含む。原稿判定部２３は、要素領域の各々において、画像認識部２２が認識した文字列が複数の要素原稿データのいずれか１つの要素原稿データに含まれる文字列と一致するか否かを判定する。表示制御部２５は、確認用画面６０内に、原稿判定部２３が一致すると判定した文字の領域及び原稿判定部２３が一致しないと判定した文字の領域に対して異なる色又は模様で塗りつぶした印刷用画像を表示する。

このような構成とすることにより、原稿判定部２３による判定結果が良好でない箇所をより明確に確認することが可能となる。これにより、印刷用画像の審査業務を省力化することが可能となる。

上記の作用効果は、特に言及が無い限り、他の実施形態や他の実施例においても同様である。

本発明の実施形態では、情報処理システム１は、情報処理装置１０をサーバとし、ユーザ端末３０をクライアントとしたサーバ‐クライアントシステムにより実現することができるが、これに限定されるものではない。

本発明の他の実施形態では、上記で説明した本発明の実施形態の機能やフローチャートに示す情報処理を実現するプログラムや該プログラムを格納したコンピュータ読み取り可能な記憶媒体とすることもできる。また他の実施形態では、上記で説明した本発明の実施形態の機能やフローチャートに示す情報処理を実現する方法とすることもできる。また他の実施形態では、上記で説明した本発明の実施形態の機能やフローチャートに示す情報処理を実現するプログラムをコンピュータに供給することができるサーバとすることもできる。また他の実施形態では、上記で説明した本発明の実施形態の機能やフローチャートに示す情報処理を実現する仮想マシンとすることもできる。

本発明の他の実施形態では、情報処理装置１０が備える記憶部２１、画像認識部２２、原稿判定部２３、規則判定部２４、及び表示制御部２５のうちの少なくとも一部をユーザ端末３０が備えることもできる。この場合、情報処理装置１０及びユーザ端末３０の少なくとも一方が、記憶部２１、画像認識部２２、原稿判定部２３、規則判定部２４、及び表示制御部２５を備える。例えば、情報処理装置１０が備える表示制御部２５が確認用画面６０を表示するためのデータを生成してユーザ端末３０に送信し、ユーザ端末３０の表示制御部２５が表示装置３３に確認用画面６０を表示装置３３に表示する。

また本発明の他の実施形態では、印刷用画像は、Ｗｅｂ画像等以外に、文書作成ソフトで作成された書面データや表計算ソフトで作成されたリスト形式等のデータとすることもできる。

以下に本発明の実施形態の応用例について説明する。例えば食品会社などの会社（Ａ社）は、本発明の実施形態の情報処理システム１を用いて、パッケージと広告物の両方の審査を行うことができる。

第１の応用例では、原稿データの事前チェックを行わない場合における商品のパッケージ画像を審査する場面において、情報処理装置１０（情報処理システム１）を用いる。Ａ社の担当者は、所定のフォーマットのパッケージ画像用の原稿データ及びパッケージ画像のデザインに関するデータをパッケージ画像制作会社（Ｂ社）に受け渡す（例えばメールで送信する）。Ｂ社は、Ａ社から受け取った原稿データに基づいてパッケージ画像を作成し、作成したパッケージ画像データをＡ社に受け渡す。

Ａ社の担当者は、ユーザ端末３０ａを介して、所定のフォーマットのパッケージ画像用の原稿データと、Ｂ社から受け取ったパッケージ画像データを情報処理装置１０に送信する。情報処理装置１０の原稿判定部２３は、要素領域の各々において、画像認識部２２が認識した文字列の各文字が記憶部２１に記憶される原稿データに含まれる文字列の各文字と一致するか否かを判定する。情報処理装置１０の規則判定部２４は、要素領域の各々において、画像認識部２２が認識した文字列が記憶部２１に記憶される規則データにより定められる所定条件を満たすか否かを判定する。情報処理装置１０の表示制御部２５は、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域又は規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面６０をユーザ端末３０ａに表示する。

Ａ社の担当者Ｐが確認用画面６０を確認し、確認用オブジェクト７２のチェック入力オブジェクトに対してチェック入力又はコメント入力を行い、必要に応じて追加指摘事項を入力することにより、審査を行う。情報処理装置１０は、ユーザ端末３０ａから入力を受け付けたデータを記憶する。

Ａ社の他部門の担当者Ｑは、ユーザ端末３０ｂを介して情報処理装置１０にアクセスし、担当者Ｐが入力した内容が反映された確認用画面６０を確認し、担当者Ｐと同様に、審査を行う。更にＡ社の他部門の１又は複数の担当者も、確認用画面６０を通して、審査を行うことができる。Ａ社の担当者Ｒは、ユーザ端末３０ｃを介して、情報処理装置１０から、Ａ社の全担当者が入力した内容が反映された確認用画面６０のデータを取得し、Ｂ社に当該データを受け渡し、修正依頼を行う。Ｂ社は、受け取ったデータに基づいてパッケージ画像を修正する。このような審査フローにより、パッケージ画像を審査し、修正することが可能となる。広告物においても同様である。

第２の応用例では、原稿データを事前チェックする場合における商品のパッケージ画像を審査する場面において、情報処理装置１０（情報処理システム１）を用いる。Ａ社の担当者は、ユーザ端末３０ａを介して、所定のフォーマットのパッケージ画像用の原稿データを情報処理装置１０に送信する。情報処理装置１０の規則判定部２４は、原稿データが含む文字列が規則データにより定められる所定条件を満たすか否かを判定する。この場合、情報処理装置１０は、規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域を明示した原稿データを出力可能に構成される。ユーザ端末３０ａは情報処理装置１０から当該原稿データを受け取る。Ａ社の担当者又はその上長は、当該原稿データを確認し、必要に応じて修正し、Ｂ社に当該原稿データを受け渡す。Ｂ社は、Ａ社から受け取った原稿データに基づいてパッケージ画像を作成し、作成したパッケージ画像データをＡ社に受け渡す。以後、第１の応用例と同様にして、Ａ社は審査を行い、Ｂ社に対して修正依頼を行う。このような審査フローにより、パッケージ画像を審査し、修正することが可能となる。広告物においても同様である。

以下に本発明の実施形態の変形例について説明する。以下、主に本発明の実施形態との相違点について説明する。以下で述べる変形例は、矛盾が生じない限りにおいて、適宜組み合わせて本発明の任意の実施形態又は変形例に適用することができる。

１つの変形例では、表示制御部２５は、確認用画面６０内に、原稿判定部２３が原稿データに含まれる文字列と一致しないと判定した文字の領域及び規則判定部２４が規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を表示する。例えばこの場合、表示制御部２５は、メイン画面領域８０内に、印刷用画像を表示する。表示制御部２５は、ユーザ操作に応じて、いずれかの領域のみが明示された印刷用画像を表示するように構成してもよい。

１つの変形例では、複数の印刷用画像を文字列及び非文字オブジェクトの配置情報とともに学習させることにより学習済みモデルを予め生成し、画像認識部２２は、該学習済みモデルを用いて、複数の要素領域を認識し、各要素領域の文字列を認識する。例えば学習データを変更することなどにより、画像認識部２２が決定する要素領域の定義を変更することができる。

以上に説明した処理又は動作において、あるステップにおいて、そのステップではまだ利用することができないはずのデータを利用しているなどの処理又は動作上の矛盾が生じない限りにおいて、処理又は動作を自由に変更することができる。また以上に説明してきた各実施例は、本発明を説明するための例示であり、本発明はこれらの実施例に限定されるものではない。本発明は、その要旨を逸脱しない限り、種々の形態で実施することができる。

１ 情報処理システム
２ ネットワーク
１０ 情報処理装置
１１ プロセッサ
１２ 入力装置
１３ 表示装置
１４ 記憶装置
１５ 通信装置
１６ バス
２１ 記憶部
２２ 画像認識部
２３ 原稿判定部
２４ 規則判定部
２５ 表示制御部
３０ ユーザ端末
３１ プロセッサ
３２ 入力装置
３３ 表示装置
３４ 記憶装置
３５ 通信装置
３６ バス
４０ 印刷用画像
４１、４２、４３、４４、４５、４６、４７、４８ 領域
５１、５２ 要素領域
６０ 確認用画面
７０ 判定結果表示領域
７１ タブ領域
７２ 確認用オブジェクト
７３ 確認用フィールド
７４、７５ メッセージオブジェクト
８０ メイン画面領域
８１ 設定用オブジェクト
８２、８３、８４、８６ 描画オブジェクト
８５、８７ 要素領域
８８ 追記事項表示オブジェクト
９０ サブ画面領域
９１ 追記事項表示領域
９２ ミニ画面

Claims (9)

1. 印刷用画像の審査を支援するための情報処理装置であって、
   印刷用画像を生成する基となる文字列を含む原稿データ及び印刷用画像に含まれる文字列をチェックするための所定条件を定める規則データを記憶する記憶部と、
   入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する画像認識部と、
   要素領域の各々において、前記画像認識部が認識した文字列の各文字が前記原稿データに含まれる文字列の各文字と一致するか否かを判定する原稿判定部と、
   要素領域の各々において、前記画像認識部が認識した文字列が前記規則データにより定められる所定条件を満たすか否かを判定する規則判定部と、
   前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字の領域又は前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面を表示装置に表示するように制御する表示制御部と、
   を備える、情報処理装置。
2. 前記表示制御部は、前記確認用画面内に、要素領域の各々に対する前記原稿判定部又は前記規則判定部の判定結果を示す判定結果表示領域を表示するように制御し、
   前記判定結果表示領域は、前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字を含む要素領域又は前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列を含む要素領域に対応付けられた確認用オブジェクトを含み、
   前記確認用オブジェクトの各々は、該確認用オブジェクトを確認したか否かを示すチェック入力オブジェクトを含む、
   請求項１に記載の情報処理装置。
3. 前記表示制御部は、ユーザ入力に応じて、前記確認用画面内に、前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字の領域が明示された印刷用画像と前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像とを切り替えて表示するように制御する、
   請求項１又は２に記載の情報処理装置。
4. 前記原稿データは、各々が出力される内容に応じた文字列を含む複数の要素原稿データを含み、
   前記原稿判定部は、要素領域の各々において、前記画像認識部が認識した文字列が前記複数の要素原稿データのいずれか１つの要素原稿データに含まれる文字列と一致するか否かを判定し、
   前記表示制御部は、前記確認用画面内に、前記原稿判定部が一致すると判定した文字の領域及び前記原稿判定部が一致しないと判定した文字の領域に対して異なる色又は模様で塗りつぶした印刷用画像を表示するように制御する、
   請求項１から３のいずれか１項に記載の情報処理装置。
5. 前記規則データが定める所定条件は、前記画像認識部が認識した文字列が所定の禁止文言を含まないこと、前記画像認識部が認識した文字列が所定の誤字を含まないこと、前記画像認識部が認識した文字列が所定の必須文言を含むこと、前記画像認識部が認識した画像が特定の画像を含むこと、及び前記画像認識部が認識した特定の文字又は特定の画像が所定の形式で表示されることの少なくとも１つを含む、
   請求項１から４のいずれか１項に記載の情報処理装置。
6. 前記情報処理装置はサーバであり、
   前記表示制御部は、前記確認用画面をクライアント端末の表示装置に表示するように制御する、
   請求項１から５のいずれか１項に記載の情報処理装置。
7. コンピュータにより実行される印刷用画像の審査を支援するための方法であって、
   入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する画像認識ステップと、
   要素領域の各々において、前記画像認識ステップにおいて認識した文字列の各文字が、印刷用画像を生成する基となる文字列を含む原稿データに含まれる文字列の各文字と一致するか否かを判定する原稿判定ステップと、
   要素領域の各々において、前記画像認識ステップにおいて認識した文字列が、印刷用画像に含まれる文字列をチェックするための所定条件を定める規則データにより定められる所定条件を満たすか否かを判定する規則判定ステップと、
   前記原稿判定ステップが前記原稿データに含まれる文字列と一致しないと判定した文字の領域又は前記規則判定ステップが前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面を表示装置に表示するように制御する表示制御ステップと、
   を含む、方法。
8. 請求項７に記載の方法の各ステップをコンピュータに実行させるプログラム。
9. 情報処理装置及びユーザ端末を含む、印刷用画像の審査を支援するための情報処理システムであって、
   印刷用画像を生成する基となる文字列を含む原稿データ及び印刷用画像に含まれる文字列をチェックするための所定条件を定める規則データを記憶する記憶部と、
   入力を受け付けた印刷用画像に含まれる文字列と非文字オブジェクトとを認識し、各々が認識された文字列を含む複数の要素領域を決定する画像認識部と、
   要素領域の各々において、前記画像認識部が認識した文字列の各文字が前記原稿データに含まれる文字列の各文字と一致するか否かを判定する原稿判定部と、
   要素領域の各々において、前記画像認識部が認識した文字列が前記規則データにより定められる所定条件を満たすか否かを判定する規則判定部と、
   前記原稿判定部が前記原稿データに含まれる文字列と一致しないと判定した文字の領域又は前記規則判定部が前記規則データにより定められる所定条件を満たさないと判定した文字列の領域が明示された印刷用画像を含む確認用画面をユーザ端末の表示装置に表示するように制御する表示制御部と、
   を備える、情報処理システム。

Images