JP7102248B2 - Image processing equipment, information processing methods and programs - Google Patents

Image processing equipment, information processing methods and programs Download PDF

Info

Publication number
JP7102248B2
JP7102248B2 JP2018117968A JP2018117968A JP7102248B2 JP 7102248 B2 JP7102248 B2 JP 7102248B2 JP 2018117968 A JP2018117968 A JP 2018117968A JP 2018117968 A JP2018117968 A JP 2018117968A JP 7102248 B2 JP7102248 B2 JP 7102248B2
Authority
JP
Japan
Prior art keywords
image processing
job
queue
flag
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018117968A
Other languages
Japanese (ja)
Other versions
JP2019154019A (en
Inventor
峻 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to US16/292,009 priority Critical patent/US10922039B2/en
Publication of JP2019154019A publication Critical patent/JP2019154019A/en
Application granted granted Critical
Publication of JP7102248B2 publication Critical patent/JP7102248B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Accessory Devices And Overall Control Thereof (AREA)
  • Record Information Processing For Printing (AREA)
  • Facsimiles In General (AREA)

Description

本発明は、画像処理装置、情報処理方法及びプログラムに関する。 The present invention relates to an image processing apparatus, an information processing method and a program.

画像形成装置で提供されていない画像処理を含む各種ジョブを実行したい場合、新規画像処理を実行するためのアプリケーションをプラグインとして作成し、画像形成装置にインストールすることによって実現する技術が知られている（特許文献１）。 If you want to execute various jobs including image processing that are not provided by the image forming device, the technology realized by creating an application for executing new image processing as a plug-in and installing it on the image forming device is known. (Patent Document 1).

特開２００７－２００３０号公報JP-A-2007-20030

上述のような構成において、使用する画像処理によっては、プラグインが直接画像処理を実行するのではなく、実行速度を優先するために画像形成装置内の組み込みソフトウェアとして配置された画像処理の実行モジュールを使用して画像処理を実現することが考えられる。しかしながら、一般に組み込みソフトウェアは、機能追加や安定性向上を企図したモジュールの変更がしづらいという性質がある。したがって、実行モジュールに何らかの実装上の制限が含まれていた場合、後からその制限を解消するための修正を実行モジュール自体に実施させるのは、開発効率の観点からは望ましくない。ここで言う実装上の制限の一例として、画像処理モジュールが、画像処理モジュールに対する複数の画像処理依頼が同時に実施された場合に、それらを並行処理することができない、というものが挙げられる。そのような制限を有する画像処理モジュールへの画像処理ジョブが輻輳した場合、後行の画像処理ジョブが受け付けられなくなってしまう。
先行技術に記載の構成では、プラグインの使用する組み込み画像処理モジュールが並行動作できず、１プロセスでしか動作できない場合であって、複数のアプリから呼び出された場合、後から呼び出したアプリへの応答はエラーになる。また、例えばアプリケーションが実施する処理がサーチャブルＰＤＦの生成処理の場合、全てのページを処理するのに時間がかかる。後のアプリケーションがユーザ操作の応答性に関わる機能である場合、ユーザを待たせることになり、応答性が低下してしまう。 In the above configuration, depending on the image processing used, the plug-in does not directly execute the image processing, but the image processing execution module arranged as embedded software in the image forming apparatus in order to prioritize the execution speed. It is conceivable to realize image processing by using. However, in general, embedded software has a property that it is difficult to change modules for the purpose of adding functions or improving stability. Therefore, if the execution module contains some implementation restrictions, it is not desirable from the viewpoint of development efficiency to have the execution module itself implement modifications to remove the restrictions later. As an example of the implementation limitation referred to here, when a plurality of image processing requests to the image processing module are executed at the same time, the image processing module cannot process them in parallel. If the image processing job to the image processing module having such a limitation is congested, the subsequent image processing job will not be accepted.
In the configuration described in the prior art, the embedded image processing module used by the plug-in cannot operate in parallel and can operate only in one process, and when it is called from multiple applications, it is transferred to the application called later. The response will be an error. Further, for example, when the process executed by the application is the searchable PDF generation process, it takes time to process all the pages. If the later application is a function related to the responsiveness of the user operation, the user will be kept waiting and the responsiveness will be lowered.

本発明は、複数のジョブを並行処理することができない画像処理モジュールを有する画像処理装置であって、ユーザの操作により前記画像処理モジュールを利用する画像処理が指示された場合に、前記画像処理モジュールによる処理がユーザの操作に対する応答性に関係するか否かを示すフラグが付与されたジョブをキューに登録する登録手段と、前記キューに含まれる各ジョブの前記フラグに基づき、前記キューの先頭以外に前記フラグがＯＮであるジョブが存在するか否かを判定する判定手段と、前記キューから取得されるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行する要求手段と、前記画像処理モジュールによる処理が完了した場合に、画像処理の結果を表示部に表示するよう制御する制御手段と、を有し、前記要求手段は、前記判定手段により前記キューの先頭以外に前記フラグがＯＮであるジョブが存在すると判定された場合に、前記キューから取得される前記フラグがＯＮであるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行し、前記判定手段により前記キューの先頭以外に前記フラグがＯＮであるジョブが存在しないと判定された場合に、前記キューの先頭から取得される前記フラグがＯＦＦであるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行し、前記画像処理モジュールによる処理が完了した場合に、前記判定手段による判定が再度、行われ、前記制御手段は、前記フラグがＯＮであるジョブに係る画像処理の結果については、前記表示部に表示して、前記フラグがＯＦＦであるジョブに係る画像処理の結果については、前記画像処理モジュールによる処理が完了しても、前記表示部に表示しない。 The present invention is an image processing apparatus having an image processing module that cannot process a plurality of jobs in parallel, and the image processing module is instructed by a user to perform image processing using the image processing module. Based on the registration means for registering a job with a flag indicating whether or not the processing by the process is related to the responsiveness to the user's operation in the queue and the flag of each job included in the queue, other than the head of the queue. A determination means for determining whether or not there is a job whose flag is ON, a request means for executing a processing request to the image processing module based on the job acquired from the queue, and the image processing module . The requesting means has a control means for controlling the display of the result of the image processing on the display unit when the processing according to the above is completed, and the requesting means has the flag ON in addition to the head of the queue by the determination means. When it is determined that a job exists, a processing request is executed to the image processing module based on the job for which the flag acquired from the queue is ON, and the determination means executes the processing request in addition to the head of the queue. When it is determined that there is no job for which is ON, a processing request is executed to the image processing module based on the job whose flag is OFF, which is acquired from the head of the queue, and the image processing module determines. When the processing is completed, the determination by the determination means is performed again, and the control means displays the result of the image processing related to the job for which the flag is ON on the display unit, and the flag is displayed. The result of the image processing related to the job that is OFF is not displayed on the display unit even if the processing by the image processing module is completed.

本発明によれば、ユーザへの応答性の劣化を抑えることができるようになる。 According to the present invention, deterioration of responsiveness to the user can be suppressed.

画像形成システムのシステム構成の一例を示す図である。It is a figure which shows an example of the system structure of an image formation system. 画像形成装置のハードウェア構成の一例を示す図である。It is a figure which shows an example of the hardware composition of the image forming apparatus. ソフトウェアの構造の一例を模式的に表す階層図である。It is a hierarchical diagram which shows an example of a software structure schematically. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. スキャン原稿のプレビュー画面の一例を示す図である。It is a figure which shows an example of the preview screen of a scanned document. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. ソフトウェアの構造の一例を模式的に表す階層図である。It is a hierarchical diagram which shows an example of a software structure schematically. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing. 情報処理の一例を示すフローチャートである。It is a flowchart which shows an example of information processing.

以下、本発明の実施形態について図面に基づいて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.

＜実施形態１＞
図１は、画像形成システムのシステム構成の一例を示す図である。画像形成システムには、画像形成装置１０１、１０２と、情報処理端末１０３、１０４と、サーバ１０５とが含まれる。画像形成装置１０１、１０２と、情報処理端末１０３、１０４と、サーバ１０５とは、ネットワーク１０６により相互に接続されて、通信可能である。
図１では、画像形成装置１０１、１０２が２つである場合を例に挙げて示すが、画像形成装置の数は任意（１つ又は２以上）である。また、それぞれの画像形成装置１０１、１０２は、同じもので実現することができる。したがって、以下では、画像形成装置１０１、１０２を代表して画像形成装置１０１について説明し、画像形成装置１０２についての詳細な説明を省略する。ネットワーク１０６は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、Ｉｎｔｅｒｎｅｔ等、画像形成システム内の装置が相互に通信できるものであればよい。
画像形成装置１０１は、情報処理端末１０３、１０４から画像データの印刷依頼（印刷データ）を受信して印刷することや、画像形成装置１０１に備わるスキャナで画像データを読み取ることや、スキャナで読み取られた画像データを印刷することができる。また、画像形成装置１０１は、情報処理端末１０３、１０４から受信した印刷データを保存したり、画像形成装置１０１のスキャナで読み取られた画像を情報処理端末１０３、１０４に送信したりすることができる。更に画像形成装置１０１は、サーバ１０５を用いて画像処理を行ったり、サーバ１０５に格納されている文書を印刷したりすることができる。画像形成装置１０１は、この他に、ＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）等の公知の画像形成装置が有する機能を実現することができる。 <Embodiment 1>
FIG. 1 is a diagram showing an example of a system configuration of an image forming system. The image forming system includes image forming devices 101 and 102, information processing terminals 103 and 104, and a server 105. The image forming devices 101 and 102, the information processing terminals 103 and 104, and the server 105 are connected to each other by the network 106 and can communicate with each other.
In FIG. 1, a case where the number of image forming devices 101 and 102 is two is shown as an example, but the number of image forming devices is arbitrary (one or two or more). Further, the respective image forming devices 101 and 102 can be realized by the same device. Therefore, in the following, the image forming apparatus 101 will be described on behalf of the image forming apparatus 101 and 102, and the detailed description of the image forming apparatus 102 will be omitted. The network 106 may be any device such as a LAN (Local Area Network), the Internet, or the like that allows devices in the image forming system to communicate with each other.
The image forming apparatus 101 receives and prints a print request (printing data) for image data from the information processing terminals 103 and 104, reads the image data with a scanner provided in the image forming apparatus 101, and is read by the scanner. Image data can be printed. Further, the image forming apparatus 101 can save the print data received from the information processing terminals 103 and 104, and can transmit the image read by the scanner of the image forming apparatus 101 to the information processing terminals 103 and 104. .. Further, the image forming apparatus 101 can perform image processing using the server 105 and print a document stored in the server 105. In addition to this, the image forming apparatus 101 can realize the functions of a known image forming apparatus such as an MFP (Multifunction Peripheral).

図２は、画像形成装置１０１のハードウェア構成の一例を示す図である。
画像形成装置１０１は、コントローラ２０１、プリンタ２０２、スキャナ２０３、及び操作部２０４を有する。コントローラ２０１は、ＣＰＵ２１１、ＲＡＭ２１２、ＨＤＤ２１３、ネットワークＩ／Ｆ２１４、プリンタＩ／Ｆ２１５、スキャナＩ／Ｆ２１６、操作部Ｉ／Ｆ２１７、及び拡張Ｉ／Ｆ２１８を含む。ＣＰＵ２１１は、ＲＡＭ２１２、ＨＤＤ２１３、ネットワークＩ／Ｆ２１４、プリンタＩ／Ｆ２１５、スキャナＩ／Ｆ２１６、操作部Ｉ／Ｆ２１７、及び拡張Ｉ／Ｆ２１８とデータを授受することができる。また、ＣＰＵ２１１は、ＨＤＤ２１３から読み出したプログラムをＲＡＭ２１２に展開し、ＲＡＭ２１２に展開したプログラムを実行する。ＣＰＵ２１１がプログラムに基づき処理を実行することにより、後述する図３、図１１のソフトウェア構成及び図４－図７、図９、図１０、図１２－図１４のフローチャートの処理が実現される。
ＨＤＤ２１３には、ＣＰＵ２１１で実行可能なプログラム、画像形成装置１０１で使用する設定値、及びユーザから依頼された処理に関するデータ等を記憶しておくことができる。ＲＡＭ２１２は、ＣＰＵ２１１がＨＤＤ２１３から読み出したプログラムを一時的に格納するための領域である。またＲＡＭ２１２は、プログラムの実行に必要な各種のデータを記憶しておくこともできる。例えば、画像処理では、入稿されたデータをＲＡＭ２１２に展開することで処理を行うことができる。 FIG. 2 is a diagram showing an example of the hardware configuration of the image forming apparatus 101.
The image forming apparatus 101 includes a controller 201, a printer 202, a scanner 203, and an operation unit 204. The controller 201 includes a CPU 211, a RAM 212, an HDD 213, a network I / F 214, a printer I / F 215, a scanner I / F 216, an operation unit I / F 217, and an extended I / F 218. The CPU 211 can exchange data with the RAM 212, HDD 213, network I / F 214, printer I / F 215, scanner I / F 216, operation unit I / F 217, and extended I / F 218. Further, the CPU 211 expands the program read from the HDD 213 into the RAM 212, and executes the program expanded in the RAM 212. When the CPU 211 executes the process based on the program, the software configuration of FIGS. 3 and 11 and the process of the flowcharts of FIGS. 4-FIG. 7, FIG. 9, FIG. 10, and FIGS. 12-14, which will be described later, are realized.
The HDD 213 can store a program that can be executed by the CPU 211, a set value used by the image forming apparatus 101, data related to processing requested by the user, and the like. The RAM 212 is an area for temporarily storing the program read from the HDD 213 by the CPU 211. The RAM 212 can also store various data necessary for executing the program. For example, in image processing, the submitted data can be expanded into the RAM 212 for processing.

ネットワークＩ／Ｆ２１４は、画像形成システム内の装置とネットワーク通信を行うためのインターフェイスである。ネットワークＩ／Ｆ２１４は、データ受信を行ったことをＣＰＵ２１１に伝達することや、ＲＡＭ２１２上のデータをネットワーク１０６に送信することができる。プリンタＩ／Ｆ２１５は、ＣＰＵ２１１から送信された印刷データをプリンタ２０２に送信することや、プリンタ２０２から受信したプリンタの状態をＣＰＵ２１１に伝達することができる。スキャナＩ／Ｆ２１６は、ＣＰＵ２１１から送信された画像読み取り指示をスキャナ２０３に送信し、スキャナ２０３から受信した画像データをＣＰＵ２１１に伝達することや、スキャナ２０３から受信した状態をＣＰＵ２１１に伝達することができる。操作部Ｉ／Ｆ２１７は、操作部２０４から入力されたユーザからの指示をＣＰＵ２１１に伝達することや、ユーザが操作するための画面情報を操作部２０４に伝達することができる。拡張Ｉ／Ｆ２１８は、画像形成装置１０１に外部機器を接続することを可能とするインターフェイスである。拡張Ｉ／Ｆ２１８は、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）形式のインターフェイスを具備する。画像形成装置１０１は、ＵＳＢメモリ等の外部記憶装置が拡張Ｉ／Ｆ２１８に接続されることにより、外部記憶装置に記憶されているデータの読み取り及び外部記憶装置に対するデータの書き込みを行うことができる。
プリンタ２０２は、プリンタＩ／Ｆ２１５から受信した画像データを用紙に印刷することや、プリンタ２０２の状態をプリンタＩ／Ｆ２１５に伝達することができる。スキャナ２０３は、スキャナＩ／Ｆ２１６から受信した画像読み取り指示に従って、自身に置かれた用紙に表示されている情報を読み取ってデジタル化してスキャナＩ／Ｆ２１６に伝達することができる。また、スキャナ２０３は、自身の状態をスキャナＩ／Ｆ２１６に伝達することができる。操作部２０４は、画像形成装置１０１に対して各種の指示を行うための操作をユーザに行わせるためのインターフェイスである。例えば、操作部２０４は、タッチパネルを有する液晶画面を具備し、ユーザに操作画面を提供すると共に、ユーザからの操作を受け付ける。 The network I / F 214 is an interface for performing network communication with a device in the image forming system. The network I / F 214 can transmit the data reception to the CPU 211 and can transmit the data on the RAM 212 to the network 106. The printer I / F 215 can transmit the print data transmitted from the CPU 211 to the printer 202, and can transmit the state of the printer received from the printer 202 to the CPU 211. The scanner I / F 216 can transmit the image reading instruction transmitted from the CPU 211 to the scanner 203, transmit the image data received from the scanner 203 to the CPU 211, and transmit the state received from the scanner 203 to the CPU 211. .. The operation unit I / F 217 can transmit an instruction from the user input from the operation unit 204 to the CPU 211, and can transmit screen information for the user to operate to the operation unit 204. The extended I / F 218 is an interface that enables an external device to be connected to the image forming apparatus 101. The extended I / F 218 includes, for example, a USB (Universal Serial Bus) type interface. The image forming apparatus 101 can read the data stored in the external storage device and write the data to the external storage device by connecting an external storage device such as a USB memory to the extended I / F 218.
The printer 202 can print the image data received from the printer I / F 215 on paper and transmit the state of the printer 202 to the printer I / F 215. The scanner 203 can read the information displayed on the paper placed on the scanner I / F 216, digitize the information, and transmit the information to the scanner I / F 216 according to the image reading instruction received from the scanner I / F 216. Further, the scanner 203 can transmit its own state to the scanner I / F 216. The operation unit 204 is an interface for causing the user to perform operations for giving various instructions to the image forming apparatus 101. For example, the operation unit 204 includes a liquid crystal screen having a touch panel, provides an operation screen to the user, and accepts an operation from the user.

図３は、実施形態１の画像形成装置１０１のソフトウェアの構造の一例を模式的に表す階層図である。図３において、一部の例外を除いて、下位の階層が提供するサービスを上位の階層が利用する関係になっている。
図３において、最下層は、オペレーティングシステム３１７を含み、プログラムの実行の管理やメモリ管理等を行う階層である。オペレーティングシステム３１７の中には、プリンタ制御ドライバ３１８、スキャナ制御ドライバ３１９、及びネットワークＩ／Ｆ制御ドライバ３２０が組み込まれる。プリンタ制御ドライバ３１８、スキャナ制御ドライバ３１９、及びネットワークＩ／Ｆ制御ドライバ３２０は、相互に連携することにより機能することができる。プリンタ制御ドライバ３１８は、プリンタＩ／Ｆ２１５を介してプリンタ２０２を制御するためのソフトウェアである。スキャナ制御ドライバ３１９は、スキャナＩ／Ｆ２１６を介してスキャナ２０３を制御するためのソフトウェアである。ネットワークＩ／Ｆ制御ドライバ３２０は、ネットワークＩ／Ｆ２１４を制御するためのソフトウェアである。
最下層から２段目の層には、デバイス制御ライブラリ３０９と画像処理制御部３４０とが含まれる。本実施形態においては、デバイス制御ライブラリ３０９と画像処理制御部３４０とはＣ言語やＣ＋＋言語等のコンパイル言語で記述され、組み込みソフトウェアとしてＣＰＵ２１１で直接実行できるオブジェクトファイルの形式でＨＤＤ２１３に格納されているものとする。本実施形態では、このような組み込みソフトウェア群を実行する環境をＮａｔｉｖｅ実行環境、又はＮａｔｉｖｅと呼称する。デバイス制御ライブラリ３０９は、後述の単独機能プラグイン３０２又はデバイス制御アプリケーション３０４と静的又は動的にリンクされる。更にデバイス制御ライブラリ３０９は、各アプリケーションプログラムによる指示に基づいて、オペレーティングシステム３１７を利用する。また、各デバイス制御ライブラリ３０９は、Ｎａｔｉｖｅ画像処理接続ライブラリ３１４に対して画像処理を依頼することもできる。 FIG. 3 is a hierarchical diagram schematically showing an example of the structure of the software of the image forming apparatus 101 of the first embodiment. In FIG. 3, with some exceptions, the service provided by the lower layer is used by the upper layer.
In FIG. 3, the lowest layer includes the operating system 317 and is a layer that manages program execution, memory management, and the like. A printer control driver 318, a scanner control driver 319, and a network I / F control driver 320 are incorporated in the operating system 317. The printer control driver 318, the scanner control driver 319, and the network I / F control driver 320 can function by coordinating with each other. The printer control driver 318 is software for controlling the printer 202 via the printer I / F 215. The scanner control driver 319 is software for controlling the scanner 203 via the scanner I / F 216. The network I / F control driver 320 is software for controlling the network I / F 214.
The second layer from the bottom layer includes a device control library 309 and an image processing control unit 340. In the present embodiment, the device control library 309 and the image processing control unit 340 are described in a compiled language such as C language or C ++ language, and are stored in the HDD 213 in the form of an object file that can be directly executed by the CPU 211 as embedded software. It shall be. In the present embodiment, the environment for executing such an embedded software group is referred to as a Native execution environment or Native. The device control library 309 is statically or dynamically linked with the stand-alone function plug-in 302 or the device control application 304 described later. Further, the device control library 309 uses the operating system 317 based on the instructions given by each application program. In addition, each device control library 309 can also request image processing from the Native image processing connection library 314.

次に、デバイス制御ライブラリ３０９の一例について説明する。
プリントライブラリ３１０は、プリンタ制御ドライバ３１８の機能を利用してプリントジョブの制御を行うためのＡＰＩ（Ａｐｐｌｉｃａｔｉｏｎ Ｐｒｏｇｒａｍｍｉｎｇ Ｉｎｔｅｒｆａｃｅ）を提供するライブラリである。プリントジョブは、画像形成装置１０１のＨＤＤ２１３に保存されている印刷データを印刷することや、ネットワークＩ／Ｆ２１４を通して外部装置から受信した印刷データを印刷するといった一連の処理を指す。外部装置は、例えば、情報処理端末１０３、１０４である。
コピーライブラリ３１１は、スキャナ制御ドライバ３１９及びプリンタ制御ドライバ３１８の機能を利用して、コピージョブの制御を行うためのＡＰＩを提供するライブラリである。コピージョブは、スキャナ２０３でスキャンされた画像データをプリンタ２０２で印刷する一連の処理を指す。
スキャン保存ライブラリ３１２は、スキャナ制御ドライバ３１９の機能を利用してスキャン保存ジョブの制御を行うためのＡＰＩを提供するライブラリである。スキャン保存ジョブは、スキャナ２０３でスキャンされた画像データを印刷データ又は汎用フォーマットに変換後、ＨＤＤ２１３又は拡張Ｉ／Ｆ２１８に接続されているＵＳＢ等の外部記憶装置に保存する一連の処理を指す。汎用フォーマットは、例えば、ＰＤＦ（ＰｏｒｔａｂｌｅＤｏｃｕｍｅｎｔ Ｆｏｒｍａｔ）やＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）といったデータフォーマットである。 Next, an example of the device control library 309 will be described.
The print library 310 is a library that provides an API (Application Programming Interface) for controlling a print job by utilizing the function of the printer control driver 318. The print job refers to a series of processes such as printing the print data stored in the HDD 213 of the image forming apparatus 101 and printing the print data received from the external device through the network I / F 214. The external device is, for example, information processing terminals 103 and 104.
The copy library 311 is a library that provides an API for controlling a copy job by utilizing the functions of the scanner control driver 319 and the printer control driver 318. The copy job refers to a series of processes for printing the image data scanned by the scanner 203 with the printer 202.
The scan save library 312 is a library that provides an API for controlling a scan save job by utilizing the function of the scanner control driver 319. The scan save job refers to a series of processes in which the image data scanned by the scanner 203 is converted into print data or a general-purpose format and then saved in an external storage device such as USB connected to the HDD 213 or the extended I / F 218. The general-purpose format is, for example, a data format such as PDF (Portable Photographic Format) or JPEG (Joint Photographic Experts Group).

スキャン送信ライブラリ３１３は、スキャナ制御ドライバ３１９及びネットワークＩ／Ｆ制御ドライバ３２０の機能を利用して、スキャン送信ジョブの制御を行うためのＡＰＩを提供するライブラリである。スキャン送信ジョブは、スキャナ２０３でスキャンされた画像データを汎用フォーマットに変換後、ネットワークＩ／Ｆ２１４を通してファイルサーバに送信したり、電子メールに添付して外部装置に送信したりする一連の処理を指す。ファイルサーバは、例えば、サーバ１０５である。外部装置は、例えば、情報処理端末１０３、１０４である。
画像処理制御部３４０にはＮａｔｉｖｅ画像処理接続ライブラリ３１４及びＮａｔｉｖｅ画像処理実行サーバ３１５、Ｎａｔｉｖｅ画像処理モジュール３１６が含まれる。Ｎａｔｉｖｅ画像処理接続ライブラリ３１４は、デバイス制御ライブラリ３０９から画像処理の実行依頼を受けると、画像処理接続ライブラリ３３２に依頼内容を転送する。Ｎａｔｉｖｅ画像処理実行サーバ３１５は、後述するＪａｖａ（登録商標）言語で記述されたソフトウェアから依頼を受けてＮａｔｉｖｅ画像処理モジュールを実行する機能を提供する。Ｎａｔｉｖｅ画像処理モジュール３１６は、様々な種類の画像処理を実行することの可能なソフトウェアである。Ｎａｔｉｖｅ画像処理実行サーバ３１５及びＮａｔｉｖｅ画像処理モジュール３１６は、図３に記載の他のソフトウェアとは分離された論理メモリ空間を有するプログラム実行単位である、Ｎａｔｉｖｅ画像処理制御プロセス３５０上で実行される。メモリ空間を分離する具体的な方法としては、一般的なオペレーティングシステムが備えるプロセス機構を用いることが考えられるが、他の方法でもよい。このように、画像処理を行う場合に論理メモリ空間を分離する構成とすることにより、複雑な演算やこれに伴うメモリ操作を行う場合でも、処理に何らかエラーが生じた場合でも処理の依頼側に及ぼす影響を抑制することができる。Ｎａｔｉｖｅ画像処理モジュール３１６は、並行処理することができない画像処理モジュールの一例である。 The scan transmission library 313 is a library that provides an API for controlling a scan transmission job by utilizing the functions of the scanner control driver 319 and the network I / F control driver 320. The scan transmission job refers to a series of processes in which the image data scanned by the scanner 203 is converted into a general-purpose format and then transmitted to a file server through the network I / F 214 or attached to an e-mail and transmitted to an external device. .. The file server is, for example, server 105. The external device is, for example, information processing terminals 103 and 104.
The image processing control unit 340 includes a Native image processing connection library 314, a Native image processing execution server 315, and a Native image processing module 316. When the Native image processing connection library 314 receives an image processing execution request from the device control library 309, the Native image processing connection library 314 transfers the request contents to the image processing connection library 332. The Native image processing execution server 315 provides a function of executing the Native image processing module in response to a request from software written in the Java (registered trademark) language described later. The Native image processing module 316 is software capable of performing various types of image processing. The Native image processing execution server 315 and the Native image processing module 316 are executed on the Native image processing control process 350, which is a program execution unit having a logical memory space separated from the other software shown in FIG. As a specific method for separating the memory space, it is conceivable to use the process mechanism provided in a general operating system, but other methods may be used. In this way, by configuring the logical memory space to be separated when performing image processing, the processing requester side can perform complicated operations and memory operations associated therewith, even if some error occurs in the processing. The effect on the image can be suppressed. The Native image processing module 316 is an example of an image processing module that cannot be processed in parallel.

最上位層であるＪａｖａ言語実行環境３３０は、プラグインアプリケーション（以下、プログインという）３０１及びデバイス制御アプリケーション３０４を含む、アプリケーション層である。本実施形態では、プラグイン３０１及びデバイス制御アプリケーション３０４はＪａｖａ言語で記述され、Ｊａｖａ仮想マシンが解釈するＪａｖａバイトコード形式でＨＤＤ２１３に格納される。そのため、ＣＰＵ２１１はＪａｖａ仮想マシンのプログラムを実行し、Ｊａｖａ仮想マシンがＪａｖａバイトコードを読み出して実行することによって処理を行う。このようなプログラミング言語を利用する理由の一つにプログラム記述の簡易さが挙げられる。Ｊａｖａにおいては、メモリ領域の管理は開発者で行う必要はなく、自動的に行われる。したがってプログラムを記述する際の手間が低減され、開発効率が向上することが見込まれる。各アプリケーションは、デバイス制御ライブラリ３０９や画像処理接続ライブラリ３３２の各ＡＰＩを利用しながら動作することで様々な機能を提供する。また、デバイス制御アプリケーション３０４は、ファームウェアの更新により、その機能を拡張することができる。デバイス制御アプリケーション３０４に含まれるプリントアプリケーション３０５、コピーアプリケーション３０６、スキャン保存アプリケーション３０７、スキャン送信アプリケーション３０８は、それぞれ画面情報３２１、３２２、３２３、３２４を有する。ＣＰＵ２１１は、操作部Ｉ／Ｆ２１７を通して操作部２０４にそれぞれの画面情報３２１、３２２、３２３、３２４を表示する。ＣＰＵ２１１は、ユーザが操作部２０４を操作することによりデバイス制御アプリケーション３０４の設定の変更を検知すると、その変更の内容をＨＤＤ２１３に書き込む。ＣＰＵ２１１（デバイス制御アプリケーション３０４）は、操作部２０４によりジョブ実行依頼を検知すると、デバイス制御ライブラリ３０９のＡＰＩをコールすることによりジョブを開始する。また、デバイス制御アプリケーション３０４は、画像処理接続ライブラリ３３２に対して、画像処理を依頼することもできる。 The Java language execution environment 330, which is the uppermost layer, is an application layer including a plug-in application (hereinafter referred to as login) 301 and a device control application 304. In this embodiment, the plug-in 301 and the device control application 304 are written in the Java language and stored in the HDD 213 in the Java bytecode format interpreted by the Java virtual machine. Therefore, the CPU 211 executes the program of the Java virtual machine, and the Java virtual machine reads and executes the Java byte code to perform the process. One of the reasons for using such a programming language is the simplicity of program description. In Java, the memory area management does not need to be performed by the developer, but is performed automatically. Therefore, it is expected that the time and effort required to write the program will be reduced and the development efficiency will be improved. Each application provides various functions by operating while using each API of the device control library 309 and the image processing connection library 332. Further, the device control application 304 can be expanded in its function by updating the firmware. The print application 305, the copy application 306, the scan storage application 307, and the scan transmission application 308 included in the device control application 304 have screen information 321, 322, 323, and 324, respectively. The CPU 211 displays the respective screen information 321, 322, 323, 324 on the operation unit 204 through the operation unit I / F 217. When the user detects a change in the setting of the device control application 304 by operating the operation unit 204, the CPU 211 writes the content of the change in the HDD 213. When the operation unit 204 detects the job execution request, the CPU 211 (device control application 304) starts the job by calling the API of the device control library 309. The device control application 304 can also request image processing from the image processing connection library 332.

次に、デバイス制御アプリケーション３０４の一例について説明する。プリントアプリケーション３０５は、プリントライブラリ３１０のＡＰＩをコールすることによりプリントジョブを実行する。コピーアプリケーション３０６は、コピーライブラリ３１１のＡＰＩをコールすることによりコピージョブを実行する。スキャン保存アプリケーション３０７は、スキャン保存ライブラリ３１２のＡＰＩをコールすることによりスキャン保存ジョブを実行する。スキャン送信アプリケーション３０８は、スキャン送信ライブラリ３１３のＡＰＩをコールすることでスキャン送信ジョブを実行する。
次に、プラグイン３０１の一例について説明する。プラグイン３０１は、常駐アプリケーションであるデバイス制御アプリケーション３０４とは別に、プラグインとして画像形成装置１０１にインストール及びアンインストールが可能なアプリケーションである。プラグイン３０１は、単独機能プラグインアプリケーション（以下、単独機能プラグインという）３０２と、画像処理プラグインアプリケーション（以下、画像処理プラグインという）３０３とを有する。プラグイン３０１には、それぞれ動作に必要なプログラムがパッケージングされている。プラグイン３０１は、リモートＵＩ（Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）等を用いることにより、画像形成装置１０１にインストールされる。リモートＵＩは、外部装置におけるＷｅｂブラウザからネットワークＩ／Ｆ２１４を経由して画像形成装置１０１にアクセスし、画像形成装置１０１の状況の確認、印刷ジョブの操作、及び各種設定等を行うことができる仕組みである。外部装置は、例えば、情報処理端末１０３、１０４である。また、プラグイン３０１（単独機能プラグイン３０２、及び画像処理プラグイン３０３）は、それぞれ個別に起動及び停止を行うことができる。 Next, an example of the device control application 304 will be described. The print application 305 executes a print job by calling the API of the print library 310. The copy application 306 executes the copy job by calling the API of the copy library 311. The scan save application 307 executes the scan save job by calling the API of the scan save library 312. The scan transmission application 308 executes the scan transmission job by calling the API of the scan transmission library 313.
Next, an example of the plug-in 301 will be described. The plug-in 301 is an application that can be installed and uninstalled as a plug-in in the image forming apparatus 101 separately from the device control application 304 which is a resident application. The plug-in 301 has a single-function plug-in application (hereinafter, referred to as a single-function plug-in) 302 and an image processing plug-in application (hereinafter, referred to as an image processing plug-in) 303. Each plug-in 301 is packaged with a program necessary for its operation. The plug-in 301 is installed in the image forming apparatus 101 by using a remote UI (User Interface) or the like. The remote UI is a mechanism capable of accessing the image forming apparatus 101 from a Web browser in an external device via the network I / F 214, checking the status of the image forming apparatus 101, operating a print job, and performing various settings. Is. The external device is, for example, information processing terminals 103 and 104. Further, the plug-in 301 (independent function plug-in 302 and the image processing plug-in 303) can be started and stopped individually.

以下に、プラグイン３０１のインストールから起動、停止、アンインストールまでの一連の流れの一例を示す。
ＣＰＵ２１１は、プラグイン３０１のインストールを検知すると、プラグイン３０１の情報をＨＤＤ２１３に保存する。続いてＣＰＵ２１１は、プラグイン３０１に対する開始指示を検知すると、プラグイン３０１に対する起動指示を行う。プラグイン３０１は、起動している間、各プログラムの内容を実行することができる。続いてＣＰＵ２１１は、プラグイン３０１に対する停止指示を検知すると、プラグイン３０１に対して停止指示を行う。更にＣＰＵ２１１は、プラグイン３０１に対するアンインストール指示を検知すると、プラグイン３０１の情報をＨＤＤ２１３から削除する。これらの指示は、例えば、リモートＵＩや操作部２０４から行うことができるが、これ以外でこれらの指示が行われてもよい。 The following is an example of a series of flow from installation of plug-in 301 to start, stop, and uninstallation.
When the CPU 211 detects the installation of the plug-in 301, the CPU 211 saves the information of the plug-in 301 in the HDD 213. Subsequently, when the CPU 211 detects the start instruction for the plug-in 301, the CPU 211 gives a start instruction for the plug-in 301. The plug-in 301 can execute the contents of each program while it is running. Subsequently, when the CPU 211 detects a stop instruction for the plug-in 301, the CPU 211 gives a stop instruction to the plug-in 301. Further, when the CPU 211 detects an uninstall instruction for the plug-in 301, the CPU 211 deletes the information of the plug-in 301 from the HDD 213. These instructions can be given from, for example, the remote UI or the operation unit 204, but other than this, these instructions may be given.

次に、単独機能プラグイン３０２の一例について説明する。単独機能プラグイン３０２は、画面情報３２５を有する。単独機能プラグイン３０２は、デバイス制御ライブラリ３０９のＡＰＩをコールすることで常駐のデバイス制御アプリケーション３０４とは別の機能や画面をユーザに提供することができる。例えば、単独機能プラグイン３０２は、ある画像データをコピーすると共にスキャンし、自身が保持する送信先データベース内の特定の宛先に文書を送信する機能等、複数の機能を組み合わせて提供することができる。単独機能プラグイン３０２は、画像処理を行う機能を有していなくてもよい。この場合、画像処理の設定は行われない。更に、デバイス制御ライブラリ３０９は、印刷データ又は汎用フォーマットに変換後の画像データを受信すると、適切なオペレーティングシステム３１７に対して処理制御を指示し、ジョブを実行させる。 Next, an example of the single function plug-in 302 will be described. The single function plug-in 302 has screen information 325. The single function plug-in 302 can provide the user with a function or screen different from that of the resident device control application 304 by calling the API of the device control library 309. For example, the stand-alone function plug-in 302 can provide a combination of a plurality of functions such as a function of copying and scanning a certain image data and sending a document to a specific destination in the destination database held by the plug-in 302. .. The stand-alone function plug-in 302 does not have to have a function of performing image processing. In this case, the image processing is not set. Further, when the device control library 309 receives the print data or the image data converted into the general-purpose format, the device control library 309 instructs an appropriate operating system 317 to perform processing control and executes the job.

次に、画像処理プラグイン３０３の一例について説明する。画像処理プラグイン３０３は、Ｎａｔｉｖｅ画像処理実行クライアント３３１を利用し、Ｎａｔｉｖｅ画像処理モジュール３１６の画像処理機能を利用することができる。画像処理プラグイン３０３がＮａｔｉｖｅ画像処理モジュール３１６を利用する理由の一例として、画像処理を行う際の処理速度の高速化が挙げられる。画像処理を行う際には大量、かつ、複雑な数値演算を行ったり、処理の過程で大量のメモリを必要となったりする場合がある。そのような場合にはＪａｖａのような仮想マシンを仲介して処理を行うプログラミング言語処理系を利用するよりも、直接ＣＰＵが実行な可能なオブジェクトファイルを生成できるコンパイル言語を利用するほうが処理速度を向上させることができる。但し、一方で、Ｎａｔｉｖｅ画像処理モジュール３１６は、先述したように画像形成装置１０１の組み込みソフトウェアとして実装されるため、機能追加や安定性向上を企図したモジュールの変更が容易ではないという性質がある。そのため、Ｎａｔｉｖｅ画像処理モジュール３１６には実装上、又は機能上何らかの制限を持つ場合が存在し得る。Ｎａｔｉｖｅ画像処理モジュール３１６が持ち得る制限の一例として、同一のＮａｔｉｖｅ画像処理モジュール３１６に対して複数の画像処理依頼が同時に実施された場合に、それらを並行して実施できないという制限が挙げられる。
いま、単独機能プラグイン３０２やデバイス制御アプリケーション３０４からの依頼に基づき、複数の画像処理が同一のＮａｔｉｖｅ画像処理モジュールに同時に依頼されることがある。Ｎａｔｉｖｅ画像処理モジュール３１６がそのような制限を持つ場合で、そのように同時に画像処理以来を受信した場合に、並行動作できないために後続の画像処理が遅延し、機能を使用するユーザへの応答性が劣化してしまう恐れがある。ここで、ユーザへの応答性が求められるジョブとは、ユーザが、操作部２０４、又は画像形成装置１０１が備えるウェブサーバーが提供する画面等で、Ｎａｔｉｖｅ画像処理モジュール３１６による画像処理の結果を確認する必要がある操作に係るジョブである。例えば、スキャンドキュメントの画像データを、Ｎａｔｉｖｅ画像処理モジュール３１６でＯＣＲ処理して、その結果を操作部２０４に表示して、表示画像から選択された一部に対応する認識結果を基に画像データのファイル名を設定する機能がある。この一連の操作において、ＯＣＲ処理の結果の応答が遅延してしまうと、次のユーザの選択操作ができないため、ユーザが画像形成装置１０１の操作部２０４等を長時間占有するといったことが起こり得る。
一方で、ユーザへの応答性が比較的、重要ではないジョブもある。ユーザのファイル送信の指示後に、Ｎａｔｉｖｅ画像処理モジュール３１６で画像データをＳｅａｒｃｈａｂｌｅＰＤＦとして送信するケースである。ユーザによっては、送信結果を後で、ログ等で確認できればよいケースもある。このような場合は、送信の指示後、即座にファイル送信の結果を操作部２０４に応答する必要が無い。他にも、ユーザの指示入力なしに、バックグラウンドでＮａｔｉｖｅ画像処理モジュール３１６を利用するようなケースにおいても、ユーザへの応答性が比較的、重要ではない。
本実施形態では、ユーザへの応答性が求められるジョブについては、ジョブがユーザへの応答性に直結するものとして応答性直結フラグを用いて管理する。
本実施形態では、そのような応答性の劣化を抑制するため、並行動作できないＮａｔｉｖｅ画像処理モジュール３１６に対応する画像処理プラグイン３０３は、画像処理接続ライブラリ３３２より受信する画像処理要求を逐次処理するためのキュー３２６を保持する。キュー３２６を保持することで、並行動作できないＮａｔｉｖｅ画像処理モジュール３１６が画像処理を実行している間に、対応する画像処理プラグイン３０３が新たな画像処理依頼を受け付けることができるようになる。また、Ｊａｖａ実行環境上に配置される画像処理プラグイン３０３にキュー３２６を設けることで、Ｎａｔｉｖｅ実行環境に配置される組み込みソフトウェアに変更を加えることなく、上述したユーザへの応答性を向上することができるようになる。 Next, an example of the image processing plug-in 303 will be described. The image processing plug-in 303 can use the Native image processing execution client 331 and can use the image processing function of the Native image processing module 316. One example of the reason why the image processing plug-in 303 uses the Native image processing module 316 is to increase the processing speed when performing image processing. When performing image processing, a large amount of complicated numerical operations may be performed, or a large amount of memory may be required in the process of processing. In such a case, it is faster to use a compiled language that can directly generate an object file that can be executed by the CPU than to use a programming language processing system that performs processing through a virtual machine such as Java. Can be improved. However, on the other hand, since the Native image processing module 316 is implemented as embedded software of the image forming apparatus 101 as described above, there is a property that it is not easy to change the module intended to add functions or improve stability. Therefore, there may be a case where the Native image processing module 316 has some restrictions in terms of mounting or function. As an example of the limitation that the Native image processing module 316 can have, there is a limitation that when a plurality of image processing requests are simultaneously executed for the same Native image processing module 316, they cannot be executed in parallel.
Now, a plurality of image processes may be simultaneously requested to the same Native image processing module based on a request from the single function plug-in 302 or the device control application 304. When the Native image processing module 316 has such a limitation, and if it receives since the image processing at the same time, the subsequent image processing is delayed due to the inability to operate in parallel, and the responsiveness to the user who uses the function. May deteriorate. Here, the job for which responsiveness to the user is required is that the user confirms the result of image processing by the Native image processing module 316 on a screen provided by the operation unit 204 or the web server provided in the image forming apparatus 101. This is a job related to an operation that needs to be performed. For example, the image data of the scan document is OCR-processed by the Native image processing module 316, the result is displayed on the operation unit 204, and the image data is based on the recognition result corresponding to a part selected from the displayed image. There is a function to set the file name. In this series of operations, if the response as a result of the OCR processing is delayed, the next user cannot be selected, so that the user may occupy the operation unit 204 of the image forming apparatus 101 for a long time. ..
On the other hand, there are some jobs where responsiveness to the user is relatively insignificant. This is a case where the image data is transmitted as a Searchable PDF by the Native image processing module 316 after the user is instructed to transmit the file. Depending on the user, there are cases where it is sufficient to check the transmission result later in a log or the like. In such a case, it is not necessary to immediately respond to the operation unit 204 with the result of file transmission after the transmission instruction. In addition, even in the case where the Native image processing module 316 is used in the background without inputting the user's instruction, the responsiveness to the user is relatively not important.
In the present embodiment, the job for which responsiveness to the user is required is managed by using the responsiveness direct connection flag as the job is directly linked to the responsiveness to the user.
In the present embodiment, in order to suppress such deterioration of responsiveness, the image processing plug-in 303 corresponding to the Native image processing module 316 that cannot operate in parallel sequentially processes the image processing requests received from the image processing connection library 332. Holds queue 326 for. By holding the queue 326, the corresponding image processing plug-in 303 can accept a new image processing request while the Native image processing module 316, which cannot operate in parallel, is executing the image processing. Further, by providing the queue 326 in the image processing plug-in 303 arranged in the Java execution environment, the responsiveness to the user described above can be improved without changing the embedded software arranged in the Java execution environment. Will be able to.

図４は、画像処理接続ライブラリ３３２が画像処理を受け付け、画像処理プラグイン３０３に処理依頼を行う情報処理の一例を示すフローチャートである。本フローチャートを用いて、画像処理プラグイン３０３を用いた画像処理の一例を示す。
Ｓ４０１において、画像処理接続ライブラリ３３２は、デバイス制御アプリケーション３０４又はＮａｔｉｖｅ画像処理接続ライブラリ３１４又は単独機能プラグイン３０２から画像処理実行要求を受信する。このとき、受信した画像処理要求には処理を依頼する画像処理プラグイン３０３を特定するために必要なパラメータが入力されているものとする。
Ｓ４０２において、画像処理接続ライブラリ３３２は、取得した画像処理実行依頼を実行可能な画像処理プラグイン３０３を探索する。
Ｓ４０３において、画像処理接続ライブラリ３３２は、Ｓ４０２の探索の結果に基づき、受信した画像処理依頼を実行できる画像処理プラグインが存在する場合（Ｓ４０３においてＹＥＳ）、Ｓ４０５に進む。一方、Ｓ４０３において、画像処理接続ライブラリ３３２は、Ｓ４０２の探索の結果に基づき、受信した画像処理依頼を実行できる画像処理プラグインが存在しない場合（Ｓ４０３においてＮＯ）、Ｓ４０４に進む。 FIG. 4 is a flowchart showing an example of information processing in which the image processing connection library 332 accepts image processing and requests processing to the image processing plug-in 303. Using this flowchart, an example of image processing using the image processing plug-in 303 will be shown.
In S401, the image processing connection library 332 receives the image processing execution request from the device control application 304, the Native image processing connection library 314, or the independent function plug-in 302. At this time, it is assumed that the parameters necessary for specifying the image processing plug-in 303 for which processing is requested are input to the received image processing request.
In S402, the image processing connection library 332 searches for the image processing plug-in 303 that can execute the acquired image processing execution request.
In S403, the image processing connection library 332 proceeds to S405 when there is an image processing plug-in capable of executing the received image processing request based on the search result of S402 (YES in S403). On the other hand, in S403, the image processing connection library 332 proceeds to S404 when there is no image processing plug-in capable of executing the received image processing request based on the search result of S402 (NO in S403).

Ｓ４０４において、画像処理接続ライブラリ３３２は、受信した画像処理を実行できるモジュールが存在しない旨のエラーを依頼元のモジュールに返却する。Ｎａｔｉｖｅ画像処理接続ライブラリ３１４が依頼元であった場合、デバイス制御ライブラリを通して、デバイス制御アプリケーション３０４又は単独機能プラグイン３０２に上述のエラー内容が伝播される。デバイス制御アプリケーション３０４又は単独機能プラグイン３０２は、受信した上述のエラー内容を各アプリケーションの操作画面に表示する。本エラーにより、処理に必要なモジュールが存在していないことをユーザが知ることができる。したがって、サービスマン又はＩＴ管理者が上述のインストール手段によって必要な画像処理プラグイン３０３をインストールすることにより、処理を継続することができる。
一方、Ｓ４０５において、画像処理接続ライブラリ３３２は、対象の画像処理プラグイン３０３に処理を依頼する。画像処理プラグイン３０３は、画像処理接続ライブラリ３３２から処理パラメータと共に、画像処理依頼を受信すると、処理パラメータに応じて画像処理を実行する。画像処理は画像処理プラグイン３０３内で行う手段と、Ｎａｔｉｖｅ画像処理モジュール３１６で実行する手段があるが、詳細については後述する。画像処理実行時に、画像処理プラグイン３０３又はＮａｔｉｖｅ画像処理モジュール３１６は、ＣＰＵ２１１が入力データをＲＡＭ２１２に展開する。
Ｓ４０６において、画像処理接続ライブラリ３３２は、画像処理プラグインから処理結果を受信する。
Ｓ４０７において、画像処理接続ライブラリ３３２は、受信した処理結果を依頼元の各モジュールに返却する。 In S404, the image processing connection library 332 returns an error indicating that there is no module capable of executing the received image processing to the requesting module. When the Native image processing connection library 314 is the request source, the above error content is propagated to the device control application 304 or the single function plug-in 302 through the device control library. The device control application 304 or the independent function plug-in 302 displays the received error content on the operation screen of each application. From this error, the user can know that the module required for processing does not exist. Therefore, the serviceman or the IT administrator can continue the processing by installing the necessary image processing plug-in 303 by the above-mentioned installation means.
On the other hand, in S405, the image processing connection library 332 requests the target image processing plug-in 303 to perform processing. When the image processing plug-in 303 receives an image processing request together with the processing parameters from the image processing connection library 332, the image processing plug-in 303 executes image processing according to the processing parameters. Image processing includes means performed in the image processing plug-in 303 and means executed by the Native image processing module 316, the details of which will be described later. When the image processing is executed, the CPU 211 expands the input data into the RAM 212 in the image processing plug-in 303 or the Native image processing module 316.
In S406, the image processing connection library 332 receives the processing result from the image processing plug-in.
In S407, the image processing connection library 332 returns the received processing result to each module of the requesting source.

以下、受信した処理結果としてエラー内容を含むエラーが返ってきた場合の処理について説明する。
Ｎａｔｉｖｅ画像処理接続ライブラリ３１４が依頼元であった場合、デバイス制御ライブラリ３０９を通して、エラー内容がデバイス制御アプリケーション３０４又は単独機能プラグイン３０２に伝播される。デバイス制御アプリケーション３０４又は単独機能プラグイン３０２は、受信したエラー内容を基に、例外処理を行う。
上述の例外処理の一例としてリトライ処理があげられる。各アプリケーションは上述のエラーの受信により、画像処理接続ライブラリ３３２上で複数の画像処理が同時に実行されていると判断できる。したがって各アプリケーションはいったん現在実行中の画像処理が終わるのをリトライにより待ち、実行中の画像処理が終わったタイミングで再び画像処理要求を送信することで、処理を中断することなく継続することができる。
またその他の例外処理として、各アプリケーションの操作画面において、複数の画像処理が同時実行中であるため、時間を置いて再度ジョブを投入するように促す旨のエラーを表示するようにしてもよい。ユーザは上述のエラーによって、時間を置けばジョブが実行可能であることを知ることができる。 Hereinafter, the processing when an error including the error content is returned as the received processing result will be described.
When the Native image processing connection library 314 is the request source, the error content is propagated to the device control application 304 or the single function plug-in 302 through the device control library 309. The device control application 304 or the independent function plug-in 302 performs exception handling based on the received error content.
Retry processing can be mentioned as an example of the above-mentioned exception handling. By receiving the above error, each application can determine that a plurality of image processes are being executed simultaneously on the image processing connection library 332. Therefore, each application waits for the image processing currently being executed to finish by retrying, and then sends the image processing request again at the timing when the image processing currently being executed is finished, so that the processing can be continued without interruption. ..
As another exception processing, since a plurality of image processings are being executed at the same time on the operation screen of each application, an error prompting the user to resubmit the job after a while may be displayed. The error mentioned above allows the user to know that the job can be executed after a while.

画像処理を依頼された画像処理プラグイン３０３は、依頼された処理内容に基づき、画像処理を実行する。画像処理プラグイン３０３は、画像処理を行う手段が２種類存在する。
１つ目は画像処理プラグイン３０３内で実行する手段である。この場合、画像処理プラグイン３０３は、画像処理接続ライブラリ３３２から受信した処理依頼及び処理パラメータを基に実行する。画像処理プラグイン３０３はＪａｖａ言語で記載されている必要がある。
２つ目はＮａｔｉｖｅ画像処理モジュール３１６に依頼する手段である。画像処理プラグイン３０３は、Ｎａｔｉｖｅ画像処理実行クライアント３３１に処理を依頼することにより、画像処理プラグイン３０３とは異なる画像処理専用プロセスにおいて画像処理を実行することができる。 The image processing plug-in 303 requested for image processing executes image processing based on the requested processing content. The image processing plug-in 303 has two types of means for performing image processing.
The first is a means to be executed in the image processing plug-in 303. In this case, the image processing plug-in 303 executes based on the processing request and the processing parameter received from the image processing connection library 332. The image processing plug-in 303 needs to be written in Java language.
The second is a means of requesting the Native image processing module 316. By requesting the native image processing execution client 331 to perform the image processing plug-in 303, the image processing plug-in 303 can execute the image processing in an image processing dedicated process different from the image processing plug-in 303.

図５は、画像処理プラグイン３０３がＳ４０５にて依頼された画像処理ジョブを実行する際の情報処理の一例を示すフローチャートである。
Ｓ５０１において、画像処理プラグイン３０３は、Ｓ４０５にて依頼された画像処理ジョブを受信し、これをキュー３２６に投入する。画像処理プラグイン３０３は、Ｎａｔｉｖｅ画像処理モジュール３１６の処理単位ごとに画像処理ジョブをキュー３２６に保持する。
Ｓ５０２において、画像処理プラグイン３０３は、キュー３２６に未処理の画像処理ジョブが存在するか否かを判定する。判定の結果、未処理の画像処理ジョブが存在しない場合（Ｓ５０２がＮＯの場合）、画像処理プラグイン３０３は、Ｓ５０２の処理を再び実施する。一方、未処理の画像処理ジョブが存在する場合（Ｓ５０２がＹＥＳの場合）、画像処理プラグイン３０３は、Ｓ５０３に進む。
Ｓ５０３において、画像処理プラグイン３０３は、キュー３２６に存在する未処理の画像処理ジョブのうち、先頭のジョブを取得し、Ｎａｔｉｖｅ画像処理実行クライアント３３１に取得した画像処理ジョブの処理を依頼する。画像処理プラグイン３０３は、キュー３２６に保持した順に画像処理ジョブ選択し、取得する。
Ｓ５０４において、まず、これを受けたＮａｔｉｖｅ画像処理実行クライアント３３１は、依頼された画像処理ジョブをＮａｔｉｖｅ画像処理実行サーバ３１５に依頼する。続いて、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、受信した画像処理ジョブに含まれる処理パラメータを基にＮａｔｉｖｅ画像処理モジュール３１６を探索する。 FIG. 5 is a flowchart showing an example of information processing when the image processing plug-in 303 executes the image processing job requested in S405.
In S501, the image processing plug-in 303 receives the image processing job requested in S405 and puts it in the queue 326. The image processing plug-in 303 holds an image processing job in the queue 326 for each processing unit of the Native image processing module 316.
In S502, the image processing plug-in 303 determines whether or not there is an unprocessed image processing job in the queue 326. As a result of the determination, when there is no unprocessed image processing job (when S502 is NO), the image processing plug-in 303 re-executes the processing of S502. On the other hand, when there is an unprocessed image processing job (when S502 is YES), the image processing plug-in 303 proceeds to S503.
In S503, the image processing plug-in 303 acquires the first job among the unprocessed image processing jobs existing in the queue 326, and requests the Native image processing execution client 331 to process the acquired image processing job. The image processing plug-in 303 selects and acquires image processing jobs in the order in which they are held in the queue 326.
In S504, first, the Native image processing execution client 331 that receives the request requests the requested image processing job to the Native image processing execution server 315. Subsequently, the Native image processing execution server 315 searches for the Native image processing module 316 based on the processing parameters included in the received image processing job.

Ｓ５０５において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、対象のＮａｔｉｖｅ画像処理モジュールが存在するか否かを判定する。判定の結果、対象のＮａｔｉｖｅ画像処理モジュール３１６が存在しない場合（Ｓ５０５がＮＯの場合）、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、Ｓ５０６に進む。一方、判定の結果対象のＮａｔｉｖｅ画像処理モジュール３１６が存在する場合（Ｓ５０５がＹＥＳの場合）、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、Ｓ５０７に進む。
Ｓ５０６において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、対象のＮａｔｉｖｅ画像処理モジュール３１６が存在しない旨のエラーをＮａｔｉｖｅ画像処理実行クライアント３３１に返却する。
Ｓ５０７において、対象のＮａｔｉｖｅ画像処理モジュール３１６は、受信した処理パラメータを基に画像処理を行う。
Ｓ５０８において、対象のＮａｔｉｖｅ画像処理モジュール３１６は、更に画像処理結果をＮａｔｉｖｅ画像処理実行クライアント３３１に返却する。
Ｓ５０６又はＳ５０４の処理を実施した後、Ｓ５０９において、画像処理プラグイン３０３は、Ｓ５０３で取得した画像処理ジョブをキュー３２６から削除する。そして、画像処理プラグイン３０３は、再びＳ５０２の処理に戻る。Ｎａｔｉｖｅ画像処理実行クライアント３３１は、画像処理結果、又はエラー内容を受信すると、その内容を画像処理プラグイン３０３に返却する。 In S505, the Native image processing execution server 315 determines whether or not the target Native image processing module exists. As a result of the determination, when the target Native image processing module 316 does not exist (when S505 is NO), the Native image processing execution server 315 proceeds to S506. On the other hand, when the target Native image processing module 316 exists as a result of the determination (when S505 is YES), the Native image processing execution server 315 proceeds to S507.
In S506, the Native image processing execution server 315 returns an error indicating that the target Native image processing module 316 does not exist to the Native image processing execution client 331.
In S507, the target Native image processing module 316 performs image processing based on the received processing parameters.
In S508, the target Native image processing module 316 further returns the image processing result to the Native image processing execution client 331.
After performing the processing of S506 or S504, in S509, the image processing plug-in 303 deletes the image processing job acquired in S503 from the queue 326. Then, the image processing plug-in 303 returns to the processing of S502 again. When the Native image processing execution client 331 receives the image processing result or the error content, the Native image processing execution client 331 returns the content to the image processing plug-in 303.

図６は、スキャン送信アプリケーション３０８が、スキャン画像をＳｅａｒｃｈａｂｌｅＰＤＦに変換して送信する情報処理の一例を示すフローチャートである。ＳｅａｒｃｈａｂｌｅＰＤＦとは、文字情報がテキストデータ化されたＰＤＦのことを指す。スキャン送信アプリケーション３０８は、Ｎａｔｉｖｅ画像処理接続ライブラリ３１４を通じてＮａｔｉｖｅ画像処理モジュール３１６の提供するＯＣＲ機能を利用することでＳｅａｒｃｈａｂｌｅＰＤＦを生成する。
Ｓ６０１において、スキャン送信アプリケーション３０８は、スキャナ２０３によりＨＤＤ２１３又はＲＡＭ２１２に保存されたスキャン画像データを、画像形成装置１０１のユーザにより設定された送信先に送信するための指示を受信する。
Ｓ６０２において、スキャン送信指示を受信したスキャン送信アプリケーション３０８は、１ページ又は複数ページからなるスキャン画像データの１ページ目をＨＤＤ２１３又はＲＡＭ２１２から取得する。
Ｓ６０３において、スキャン送信アプリケーション３０８は、画像処理接続ライブラリ３３２に対して、Ｓ６０２で取得した画像データに対するＯＣＲ処理の実行を依頼する。Ｓ６０３に係るＯＣＲ処理は、図４及び図５を用いて説明した処理手順に従い実行される。
Ｓ６０４において、スキャン送信アプリケーション３０８は、Ｓ４０７にて返却されるＯＣＲ処理実行結果を受信する。 FIG. 6 is a flowchart showing an example of information processing in which the scan transmission application 308 converts a scanned image into a Secureable PDF and transmits it. The Secure PDF refers to a PDF in which character information is converted into text data. The scan transmission application 308 generates a SecurePDF by utilizing the OCR function provided by the Native image processing module 316 through the Native image processing connection library 314.
In S601, the scan transmission application 308 receives an instruction to transmit the scan image data stored in the HDD 213 or the RAM 212 by the scanner 203 to the destination set by the user of the image forming apparatus 101.
In S602, the scan transmission application 308 that has received the scan transmission instruction acquires the first page of the scan image data including one page or a plurality of pages from the HDD 213 or the RAM 212.
In S603, the scan transmission application 308 requests the image processing connection library 332 to execute OCR processing on the image data acquired in S602. The OCR process according to S603 is executed according to the process procedure described with reference to FIGS. 4 and 5.
In S604, the scan transmission application 308 receives the OCR processing execution result returned in S407.

Ｓ６０５において、スキャン送信アプリケーション３０８は、ＯＣＲ処理実行結果を使用して、Ｓ６０２で取得した１ページ画像データをＳｅａｒｃｈａｂｌｅＰＤＦに変換する。
Ｓ６０６において、スキャン送信アプリケーション３０８は、スキャン画像データにＳｅａｒｃｈａｂｌｅＰＤＦに変換されていないページが存在するか否かを判定する。判定の結果、変換されていないページが存在する場合（Ｓ６０６がＹＥＳの場合）、スキャン送信アプリケーション３０８は、Ｓ６０２に進む。そして、スキャン送信アプリケーション３０８は、変換されていないページのうち１ページに対して、再びＳ６０２、Ｓ６０３、Ｓ６０４、Ｓ６０５の処理を実施する。一方、変換されていないページが存在しない場合（Ｓ６０６がＮＯの場合）、スキャン送信アプリケーション３０８は、Ｓ６０７に進む。
Ｓ６０７において、スキャン送信アプリケーション３０８は、ＳｅａｒｃｈａｂｌｅＰＤＦに変換されたスキャン画像データの全ページを１つのＳｅａｒｃｈａｂｌｅＰＤＦファイルとしてまとめて、画像形成装置１０１のユーザに指示された送信先に送信を実行する。 In S605, the scan transmission application 308 converts the one-page image data acquired in S602 into a SecurePDF using the OCR processing execution result.
In S606, the scan transmission application 308 determines whether or not there is a page in the scanned image data that has not been converted into the Safetable PDF. As a result of the determination, if there is an unconverted page (YES in S606), the scan transmission application 308 proceeds to S602. Then, the scan transmission application 308 performs the processing of S602, S603, S604, and S605 again on one of the pages that have not been converted. On the other hand, if there is no unconverted page (NO in S606), the scan transmission application 308 proceeds to S607.
In S607, the scan transmission application 308 collects all the pages of the scanned image data converted into the SearchablePDF as one SecurePDF file and executes the transmission to the destination instructed by the user of the image forming apparatus 101.

図７は、Ｎａｔｉｖｅ画像処理モジュール３１６の提供するＯＣＲ機能の、図６を用いて説明した利用方法とは異なる一例として、スキャン画像に含まれる文字列データを基に、画像データを汎用フォーマットに変換したファイルのファイル名を決定する情報処理の一例を示すフローチャートである。本フローチャートで説明する処理は、上述したファイル名決定処理を実施するための単独機能プラグイン３０２が画像形成装置１０１のユーザより指示を受けて開始される処理である。
Ｓ７０１において、単独機能プラグイン３０２は、スキャナ２０３によりＨＤＤ２１３又はＲＡＭ２１２に保存されたスキャン画像データをプレビュー表示する指示を画像形成装置１０１のユーザから受け、該当する画像データを操作部２０４にプレビュー表示する。
Ｓ７０２において、単独機能プラグイン３０２は、Ｓ７０２で表示されたプレビュー画面を通して、スキャン画像データのうち汎用フォーマットに変換後のファイル名として使用する箇所の指定を受信したか否かを判定する。図８に、Ｓ７０２で操作部２０４に表示されるスキャン原稿のプレビュー画面と、ファイル名として使用する箇所をユーザが指定する際のイメージとを表す図を示す。図８では、スキャン画像データのうち、領域８０１で示す領域が画像形成装置１０１のユーザによりタッチされることで、領域８０１をファイル名として使用する指定を受信することを示している。このような形態によりユーザから指定があった場合（Ｓ７０２がＹＥＳの場合）、単独機能プラグイン３０２は、Ｓ７０３に進む。一方、指定がなかった場合（Ｓ７０２がＮＯの場合）、単独機能プラグイン３０２は、指定を受信するまでＳ７０２の処理を続ける。 FIG. 7 shows, as an example different from the usage method described with reference to FIG. 6 of the OCR function provided by the Native image processing module 316, the image data is converted into a general-purpose format based on the character string data included in the scanned image. It is a flowchart which shows an example of the information processing which determines the file name of the file. The process described in this flowchart is a process in which the independent function plug-in 302 for carrying out the above-mentioned file name determination process is started in response to an instruction from the user of the image forming apparatus 101.
In S701, the independent function plug-in 302 receives an instruction from the user of the image forming apparatus 101 to preview the scanned image data stored in the HDD 213 or the RAM 212 by the scanner 203, and preview-displays the corresponding image data on the operation unit 204. ..
In S702, the independent function plug-in 302 determines whether or not the designation of the portion of the scanned image data to be used as the file name after conversion to the general-purpose format has been received through the preview screen displayed in S702. FIG. 8 shows a diagram showing a preview screen of a scanned document displayed on the operation unit 204 in S702 and an image when a user specifies a part to be used as a file name. FIG. 8 shows that when the area indicated by the area 801 of the scanned image data is touched by the user of the image forming apparatus 101, the designation to use the area 801 as the file name is received. When the user specifies in such a form (when S702 is YES), the single function plug-in 302 proceeds to S703. On the other hand, if there is no designation (when S702 is NO), the single function plug-in 302 continues the process of S702 until the designation is received.

Ｓ７０３において、単独機能プラグイン３０２は、ユーザより指定を受けた領域８０１をテキストデータに変換するため、画像処理接続ライブラリ３３２に対して、領域８０１に対するＯＣＲ処理の実行を依頼する。Ｓ７０３に係るＯＣＲ処理は、図４及び図５を用いて説明した処理手順に従い実行される。
Ｓ７０４において、単独機能プラグイン３０２は、Ｓ４０７にて返却されるＯＣＲ処理実行結果を受信する。
Ｓ７０５において、単独機能プラグイン３０２は、Ｓ７０４で受信したＯＣＲ処理実行結果を操作部２０４に表示し、決定するファイル名の候補としてユーザに提示する。
Ｓ７０６において、単独機能プラグイン３０２は、提示したファイル名の候補をファイル名として決定する指示がユーザからなされたか否かを判定する。単独機能プラグイン３０２は、判定の結果、指示がなされた場合には続くＳ７０７に進み、指示がなされていない場合はＳ７０６の処理を続ける。
Ｓ７０７において、単独機能プラグイン３０２は、Ｓ７０６にてファイル名として決定する指示を受けたＯＣＲ実行結果を、スキャン画像データを汎用データフォーマットに変換後のファイル名に決定し、汎用データフォーマットへの変換を実施する。 In S703, the single function plug-in 302 requests the image processing connection library 332 to execute OCR processing on the area 801 in order to convert the area 801 specified by the user into text data. The OCR process according to S703 is executed according to the process procedure described with reference to FIGS. 4 and 5.
In S704, the single function plug-in 302 receives the OCR processing execution result returned in S407.
In S705, the independent function plug-in 302 displays the OCR processing execution result received in S704 on the operation unit 204 and presents it to the user as a candidate for the file name to be determined.
In S706, the single function plug-in 302 determines whether or not the user has instructed to determine the presented file name candidate as the file name. As a result of the determination, the stand-alone function plug-in 302 proceeds to the following S707 when an instruction is given, and continues the process of S706 when the instruction is not given.
In S707, the independent function plug-in 302 determines the scan image data as the file name after conversion to the general-purpose data format, and converts the scan image data into the general-purpose data format, based on the OCR execution result instructed to be determined as the file name in S706. To carry out.

以上説明した構成により、並行動作ができない制限を持つＮａｔｉｖｅ画像処理モジュールに対する画像処理要求が輻輳した場合でも、ユーザへの応答性を向上させることができるようになる。特に、図６を用いて説明したような、画像形成装置１０１のユーザからの指示を受けてバックグラウンドで実施される画像処理を実行している間でも、図７及び図８を用いて説明したように画像処理結果を操作部２０４に表示するために利用する、ユーザへの応答性に直接関係する画像処理を受け付けることができるようになる。更に、そのような画像処理の受け付けを可能とするためのキュー３２６をＪａｖａ実行環境上の画像処理プラグイン３０３に配置することで、画像形成装置１０１の組み込みソフトウェアに変更を加えることなく上述した効果を実現することができるようになる。 With the configuration described above, it is possible to improve the responsiveness to the user even when the image processing request for the Native image processing module having a limitation that the parallel operation cannot be performed is congested. In particular, it has been described with reference to FIGS. 7 and 8 even while performing image processing performed in the background in response to an instruction from the user of the image forming apparatus 101 as described with reference to FIG. As described above, it becomes possible to accept image processing directly related to the responsiveness to the user, which is used to display the image processing result on the operation unit 204. Further, by arranging the queue 326 for accepting such image processing in the image processing plug-in 303 on the Java execution environment, the above-mentioned effect is obtained without changing the embedded software of the image forming apparatus 101. Will be able to be realized.

＜実施形態２＞
実施形態１では、組み込みソフトウェアとして画像形成装置１０１に配置されているＮａｔｉｖｅ画像処理モジュール３１６が並行動作できない制限を有する場合でも、そのような制限により生じ得るユーザへの応答性の劣化を、組み込みソフトウェアの実装を変更することなく抑制できるようになることを示した。
本実施形態では、画像処理プラグイン３０３がキュー３２６の制御を適切に行うことで、ユーザへの応答性の劣化を更に抑制することができることを、図面を用いて説明する。本実施形態の説明は、実施形態１で説明した構成と異なる部分についてのみ説明し、実施形態１と同一の構成や処理については、同一の付番を用いる。 <Embodiment 2>
In the first embodiment, even when the Native image processing module 316 arranged in the image forming apparatus 101 as the embedded software has a limitation that it cannot operate in parallel, the deterioration of the responsiveness to the user that may occur due to such the limitation is caused by the embedded software. It was shown that it can be suppressed without changing the implementation of.
In the present embodiment, it will be described with reference to the drawings that the image processing plug-in 303 can further suppress the deterioration of the responsiveness to the user by appropriately controlling the queue 326. In the description of the present embodiment, only the parts different from the configuration described in the first embodiment will be described, and the same numbering will be used for the same configuration and processing as in the first embodiment.

図９は、画像処理接続ライブラリ３３２が画像処理を受け付け、画像処理プラグイン３０３に処理依頼を行う情報処理の一例を示すフローチャートである。本フローチャートを用いて、画像処理プラグイン３０３を用いた画像処理の一例を示す。
まず、画像処理プラグイン３０３は、Ｓ５０１、Ｓ５０２、Ｓ５０３の処理を経て取得したキュー３２６の先頭に存在する画像処理ジョブを取得する。
Ｓ９０１において、画像処理プラグイン３０３は、Ｓ５０３で取得した画像処理ジョブに含まれる、応答性直結フラグがＯＮであるか否かを判定する。ここで、応答性直結フラグは先述の画像処理パラメータの１つとして画像処理ジョブに含ませることができるフラグ値であり、これがＯＮである場合、その画像処理ジョブが画像形成装置１０１のユーザへの応答性に直結するジョブであることを示すものである。Ｓ９０１の判定の結果、応答性直結フラグがＯＮである場合（Ｓ９０１がＹＥＳの場合）、画像処理プラグイン３０３は、先述したＳ５０４、Ｓ５０５、Ｓ５０７、Ｓ５０８、Ｓ５０９を経て画像処理を完了する。一方、応答性直結フラグがＯＦＦである場合（Ｓ９０１がＮＯの場合）、Ｓ９０２に進む。応答性直結フラグは、ジョブの属性の一例である。 FIG. 9 is a flowchart showing an example of information processing in which the image processing connection library 332 accepts image processing and requests processing to the image processing plug-in 303. Using this flowchart, an example of image processing using the image processing plug-in 303 will be shown.
First, the image processing plug-in 303 acquires the image processing job existing at the head of the queue 326 acquired through the processing of S501, S502, and S503.
In S901, the image processing plug-in 303 determines whether or not the responsiveness direct connection flag included in the image processing job acquired in S503 is ON. Here, the responsiveness direct connection flag is a flag value that can be included in the image processing job as one of the above-mentioned image processing parameters, and when this is ON, the image processing job is sent to the user of the image forming apparatus 101. This indicates that the job is directly linked to responsiveness. As a result of the determination of S901, when the responsiveness direct connection flag is ON (when S901 is YES), the image processing plug-in 303 completes the image processing via the above-mentioned S504, S505, S507, S508, and S509. On the other hand, when the responsiveness direct connection flag is OFF (when S901 is NO), the process proceeds to S902. The responsiveness direct connection flag is an example of job attributes.

Ｓ９０２において、画像処理プラグイン３０３は、その時点でキュー３２６に存在するジョブの中に、応答性直結フラグがＯＮであるジョブが存在するか否かを判定する。判定の結果、存在しなかった場合（Ｓ９０２がＮＯの場合）、画像処理プラグイン３０３は、Ｓ５０３で取得した画像処理ジョブについて、Ｓ５０４、Ｓ５０５、Ｓ５０７、Ｓ５０８を経て画像処理を完了する。一方、存在した場合（Ｓ９０２がＹＥＳの場合）、画像処理プラグイン３０３は、Ｓ９０３に進む。
Ｓ９０３において、画像処理プラグイン３０３は、応答性直結ジョブのうち、キュー３２６の最も前方にある画像処理ジョブを取得する。そして、画像処理プラグイン３０３は、その画像処理ジョブに対してＳ５０４、Ｓ５０５、Ｓ５０７、Ｓ５０８を経て画像処理を完了する。 In S902, the image processing plug-in 303 determines whether or not there is a job whose responsiveness direct connection flag is ON among the jobs existing in the queue 326 at that time. As a result of the determination, if it does not exist (when S902 is NO), the image processing plug-in 303 completes the image processing of the image processing job acquired in S503 via S504, S505, S507, and S508. On the other hand, if it exists (YES in S902), the image processing plug-in 303 proceeds to S903.
In S903, the image processing plug-in 303 acquires the image processing job at the front of the queue 326 among the responsive direct-coupled jobs. Then, the image processing plug-in 303 completes the image processing for the image processing job via S504, S505, S507, and S508.

図１０は、実施形態１において図７を用いて説明したスキャン画像データの汎用フォーマット変換後ファイルのファイル名を決定する処理において、先述した応答性直結フラグをＯＮにして画像処理ジョブを実行する情報処理の一例を示すフローチャートである。
単独機能プラグイン３０２は、Ｓ７０１、Ｓ７０２の処理を経て、ファイル名に指定する領域８０１の指定を画像形成装置１０１のユーザから受信したとする。これを受けて、Ｓ１００１において、単独機能プラグイン３０２は、画像処理接続ライブラリ３３２に対して、領域８０１に対するＯＣＲ処理の実行を依頼する画像処理ジョブの応答性直結フラグをＯＮにする。続いて、単独機能プラグイン３０２は、Ｓ７０３、Ｓ７０４、Ｓ７０５、Ｓ７０６、Ｓ７０７の処理を経て、処理を完了する。 FIG. 10 shows information for executing an image processing job with the above-mentioned responsiveness direct connection flag turned on in the process of determining the file name of the file after general-purpose format conversion of the scanned image data described with reference to FIG. 7 in the first embodiment. It is a flowchart which shows an example of processing.
It is assumed that the independent function plug-in 302 receives the designation of the area 801 specified in the file name from the user of the image forming apparatus 101 through the processes of S701 and S702. In response to this, in S1001, the single function plug-in 302 turns on the responsiveness direct connection flag of the image processing job that requests the image processing connection library 332 to execute the OCR processing for the area 801. Subsequently, the single function plug-in 302 completes the process through the processes of S703, S704, S705, S706, and S707.

以上図９及び図１０を用いて説明した処理を実行することで、実施形態１で説明した効果に加えて、例えば図６で説明したＳｅａｒｃｈａｂｌｅＰＤＦ生成処理を実施するページ数が多い場合等でも、図１０に係るファイル名決定処理のような、ユーザの応答性に直結する画像処理を優先して行うことができるようになり、ユーザへの応答性の劣化を更に抑制することができるようになる。 By executing the processes described with reference to FIGS. 9 and 10, in addition to the effects described in the first embodiment, for example, even when the number of pages for performing the SecurePDF generation process described in FIG. 6 is large, FIG. Image processing that is directly linked to user responsiveness, such as the file name determination process according to No. 10, can be performed with priority, and deterioration of responsiveness to the user can be further suppressed.

＜実施形態３＞
本実施形態では、図５、９で説明したものとは異なる方法により課題を解決する方法について図面を用いて説明する。本実施形態の説明は、実施形態１及び２で説明した構成と異なる部分について説明し、実施形態１と同一の構成や処理については、同一の付番を用いる。
図１１は、実施形態３の画像形成装置１０１のソフトウェアの構造の一例を模式的に表す階層図である。ここでは、図３を用いて説明した画像処理プラグイン３０３は更に、画像処理ジョブ受付モジュール１１０１と画像処理ジョブ実行モジュール１１０２とを持つ。画像処理ジョブ受付モジュール１１０１は、画像処理接続ライブラリ３３２から依頼された画像処理ジョブを受け付け、キュー３２６に登録する処理を行う。画像処理ジョブ実行モジュール１１０２は、画像処理ジョブ受付モジュール１１０１がキュー３２６に登録した画像処理ジョブを取得し、ジョブの実行をＮａｔｉｖｅ画像処理実行クライアント３３１に依頼する処理を行う。 <Embodiment 3>
In the present embodiment, a method of solving the problem by a method different from that described with reference to FIGS. 5 and 9 will be described with reference to the drawings. The description of the present embodiment describes parts different from the configurations described in the first and second embodiments, and the same numbering is used for the same configurations and processes as those of the first embodiment.
FIG. 11 is a hierarchical diagram schematically showing an example of the structure of the software of the image forming apparatus 101 of the third embodiment. Here, the image processing plug-in 303 described with reference to FIG. 3 further has an image processing job reception module 1101 and an image processing job execution module 1102. The image processing job reception module 1101 receives the image processing job requested from the image processing connection library 332 and performs a process of registering the image processing job in the queue 326. The image processing job execution module 1102 acquires the image processing job registered in the queue 326 by the image processing job reception module 1101 and requests the Native image processing execution client 331 to execute the job.

図１２は、画像処理ジョブ受付モジュール１１０１が実行する情報処理の一例を示すフローチャートである。本フローチャートは、Ｓ４０５において画像処理接続ライブラリ３３２が画像処理プラグイン３０３に対して画像処理を依頼することで処理が開始される。
Ｓ１２０１において、画像処理ジョブ受付モジュール１１０１は、画像処理接続ライブラリ３３２からの画像処理依頼を受信する。このとき受信する画像処理依頼には、画像処理を実施する対象となる画像データと共に、画像処理パラメータとして、実施する画像処理、応答性直結フラグ、画像処理結果保存場所が含まれている。ここで、応答性直結フラグとは、先述の画像処理パラメータの１つとして画像処理ジョブに含ませることができるフラグ値であり、これがＯＮである場合、その画像処理ジョブが画像形成装置１０１のユーザへの応答性に直結するジョブであることを示すものである。また、画像処理結果保存場所は、画像処理の実行結果を保存するための領域を指定するためのパラメータであり、例えばＨＤＤ２１３上の特定の領域を示すファイルパスを指定するのでもよいし、また他の値を指定するのでもよい。本実施形態の説明においては、画像処理結果保存場所として、ＨＤＤ２１３の特定の領域を示すファイルパスが記載されているものとして説明する。
続くＳ１２０２において、画像処理ジョブ受付モジュール１１０１は、Ｓ１２０１で受信した画像処理依頼を画像処理ジョブとしてキュー３２６に登録し、本フローチャートの処理を終了する。Ｓ１２０２の処理は、Ｓ１２０１で受信する１度の依頼に応じて、キューに１つのジョブを登録する処理の一例である。 FIG. 12 is a flowchart showing an example of information processing executed by the image processing job reception module 1101. The processing of this flowchart is started when the image processing connection library 332 requests the image processing plug-in 303 for image processing in S405.
In S1201, the image processing job reception module 1101 receives the image processing request from the image processing connection library 332. The image processing request received at this time includes the image processing to be executed, the responsiveness direct connection flag, and the image processing result storage location as image processing parameters together with the image data to be subjected to the image processing. Here, the responsiveness direct connection flag is a flag value that can be included in the image processing job as one of the above-mentioned image processing parameters, and when this is ON, the image processing job is the user of the image forming apparatus 101. It indicates that the job is directly related to the responsiveness to. Further, the image processing result storage location is a parameter for designating an area for saving the execution result of the image processing. For example, a file path indicating a specific area on the HDD 213 may be specified, or another method. You may specify the value of. In the description of the present embodiment, it is assumed that a file path indicating a specific area of the HDD 213 is described as the image processing result storage location.
In the following S1202, the image processing job reception module 1101 registers the image processing request received in S1201 in the queue 326 as an image processing job, and ends the processing of this flowchart. The process of S1202 is an example of a process of registering one job in the queue in response to one request received in S1201.

図１３は、画像処理ジョブ実行モジュール１１０２及びＮａｔｉｖｅ画像処理実行クライアント３３１が実行する、画像処理ジョブに対する情報処理の一例を示すフローチャートである。
Ｓ１３０１において、画像処理ジョブ実行モジュール１１０２は、キュー３２６に画像処理ジョブが存在するか否かを判定する。画像処理ジョブ実行モジュール１１０２は、前述したＳ１２０２が実行されたことに伴いキュー３２６に画像処理ジョブが存在する場合（Ｓ１３０１がＹＥＳの場合）、Ｓ１３０２に進み、画像処理ジョブが存在しない場合には、再びＳ１３０１を実行する。
Ｓ１３０２において、画像処理ジョブ実行モジュール１１０２は、キュー３２６に存在する画像処理ジョブのうち、キュー３２６の先頭に存在するものを取得する。
Ｓ１３０３において、画像処理ジョブ実行モジュール１１０２は、Ｓ１３０２で取得した画像処理ジョブに含まれる応答性直結フラグがＯＮであるか否かを判定する。画像処理ジョブ実行モジュール１１０２は、判定の結果、応答性直結フラグがＯＮである場合（Ｓ１３０３がＹＥＳの場合）、Ｓ１３０６に進み、一方ＯＦＦであった場合（Ｓ１３０３がＮＯの場合）、Ｓ１３０４に進む。
Ｓ１３０４において、画像処理ジョブ実行モジュール１１０２は、その時点でキュー３２６に存在するジョブの中に、応答性直結フラグがＯＮであるジョブが存在するか否かを判定する。画像処理ジョブ実行モジュール１１０２は、判定の結果、存在しなかった場合（Ｓ１３０４がＮＯの場合）、Ｓ１３０６に進み、存在した場合（Ｓ１３０４がＹＥＳの場合）、Ｓ１３０５に進む。Ｓ１３０４の処理は、キューに含まれる各ジョブの属性に基づき、キューの先頭以外に応答性直結フラグがＯＮであるジョブが存在するか否かを判定する処理の一例である。
Ｓ１３０５において、画像処理ジョブ実行モジュール１１０２は、応答性直結ジョブのうち、キュー３２６の最も前方にある画像処理ジョブを取得し、Ｓ１３０６に進む。 FIG. 13 is a flowchart showing an example of information processing for an image processing job executed by the image processing job execution module 1102 and the Native image processing execution client 331.
In S1301, the image processing job execution module 1102 determines whether or not an image processing job exists in the queue 326. The image processing job execution module 1102 proceeds to S1302 when the image processing job exists in the queue 326 due to the execution of the above-mentioned S1202 (when S1301 is YES), and when the image processing job does not exist, the image processing job execution module 1102 proceeds to S1302. Execute S1301 again.
In S1302, the image processing job execution module 1102 acquires, among the image processing jobs existing in the queue 326, the one existing at the head of the queue 326.
In S1303, the image processing job execution module 1102 determines whether or not the responsiveness direct connection flag included in the image processing job acquired in S1302 is ON. As a result of the determination, the image processing job execution module 1102 proceeds to S1306 when the responsiveness direct connection flag is ON (YES in S1303), and proceeds to S1304 when it is OFF (NO in S1303). ..
In S1304, the image processing job execution module 1102 determines whether or not there is a job whose responsiveness direct connection flag is ON among the jobs existing in the queue 326 at that time. As a result of the determination, the image processing job execution module 1102 proceeds to S1306 if it does not exist (when S1304 is NO), and proceeds to S1305 when it exists (when S1304 is YES). The process of S1304 is an example of a process of determining whether or not there is a job whose responsiveness direct connection flag is ON other than the head of the queue, based on the attributes of each job included in the queue.
In S1305, the image processing job execution module 1102 acquires the image processing job at the frontmost position of the queue 326 among the responsive direct-coupled jobs, and proceeds to S1306.

Ｓ１３０６において、画像処理ジョブ実行モジュール１１０２は、Ｓ１３０２、又はＳ１３０５で取得した画像処理ジョブをＮａｔｉｖｅ画像処理実行クライアント３３１に依頼する。続いて、Ｎａｔｉｖｅ画像処理実行クライアント３３１は、依頼を受けた画像処理ジョブに基づき、Ｎａｔｉｖｅ画像処理実行サーバ３１５への画像処理リクエストを作成し、Ｎａｔｉｖｅ画像処理実行サーバ３１５にリクエストを送信する。画像処理リクエストは、Ｓ１２０１における画像処理依頼と同等の情報、即ち、画像処理を実施する対象となる画像データと、実施する画像処理、応答性直結フラグ、画像処理結果保存場所等の処理パラメートとを共に含んでいる。画像処理リクエストを受けたＮａｔｉｖｅ画像処理実行サーバ３１５により事項される処理については、図１４を用いて後述する。
Ｓ１３０７において、Ｎａｔｉｖｅ画像処理実行クライアント３３１は、Ｓ１３０６で送信した画像処理リクエストの結果をＮａｔｉｖｅ画像処理実行サーバ３１５から受信したか否かを判定する。Ｎａｔｉｖｅ画像処理実行クライアント３３１は、判定の結果、受信していない場合（Ｓ１３０７がＮＯの場合）、再びＳ１３０７を実行し、受信した場合（Ｓ１３０７がＹＥＳの場合）、Ｓ１３０８に進む。
Ｓ１３０８において、Ｎａｔｉｖｅ画像処理実行クライアント３３１は、Ｓ１３０７で受信した画像処理結果を画像処理ジョブ実行モジュール１１０２に通知する。続いて、この通知を受けた画像処理ジョブ実行モジュール１１０２は、対応する画像処理ジョブの画像処理パラメータに記載された画像処理結果保存場所に画像処理結果の書き込み行い、その旨を画像処理接続ライブラリ３３２に通知する。
Ｓ１３０９において、画像処理ジョブ実行モジュール１１０２は、実行した画像処理ジョブをキュー３２６から削除し、Ｓ１３０１に戻り、再度、Ｓ１３０１からの処理を繰り返す。 In S1306, the image processing job execution module 1102 requests the Native image processing execution client 331 for the image processing job acquired in S1302 or S1305. Subsequently, the Native image processing execution client 331 creates an image processing request to the Native image processing execution server 315 based on the requested image processing job, and transmits the request to the Native image processing execution server 315. The image processing request contains the same information as the image processing request in S1201, that is, the image data to be image processed and the processing parameters such as the image processing to be performed, the responsiveness direct connection flag, and the image processing result storage location. Both are included. The processing to be performed by the Native image processing execution server 315 that has received the image processing request will be described later with reference to FIG.
In S1307, the Native image processing execution client 331 determines whether or not the result of the image processing request transmitted in S1306 has been received from the Native image processing execution server 315. As a result of the determination, the Native image processing execution client 331 executes S1307 again when it has not received (when S1307 is NO), and when it has received it (when S1307 is YES), proceeds to S1308.
In S1308, the Native image processing execution client 331 notifies the image processing job execution module 1102 of the image processing result received in S1307. Subsequently, the image processing job execution module 1102 that received this notification writes the image processing result to the image processing result storage location described in the image processing parameter of the corresponding image processing job, and notifies that effect to the image processing connection library 332. Notify to.
In S1309, the image processing job execution module 1102 deletes the executed image processing job from the queue 326, returns to S1301, and repeats the processing from S1301 again.

図１４は、Ｎａｔｉｖｅ画像処理実行サーバ３１５及びＮａｔｉｖｅ画像処理モジュール３１６が実行する情報処理の一例を示すフローチャートである。
Ｓ１４０１において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、Ｓ１３０６でＮａｔｉｖｅ画像処理実行クライアント３３１より送信される画像処理リクエストを受信したか否かを判定する。Ｎａｔｉｖｅ画像処理実行サーバ３１５は、判定の結果、受信していない場合（Ｓ１４０１がＮＯの場合）、再びＳ１４０１を実行し、受信した場合（Ｓ１４０１がＹＥＳの場合）、Ｓ１４０２に進む。
Ｓ１４０２において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、受信した画像処理リクエストに含まれる処理パラメータを基に、画像処理の実行を依頼する対象となるＮａｔｉｖｅ画像処理モジュール３１６を探索する。
Ｓ１４０３において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、Ｓ１４０２の探索の結果、対応するＮａｔｉｖｅ画像処理モジュール３１６が存在するか否かを判定する。Ｎａｔｉｖｅ画像処理実行サーバ３１５は、判定の結果、対象のＮａｔｉｖｅ画像処理モジュールが存在しない場合（Ｓ１４０３がＮＯの場合）、Ｓ１４０６に進み、存在した場合（Ｓ１４０３がＹＥＳの場合）、Ｓ１４０４に進む。
Ｓ１４０４において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、画像処理を実行するＮａｔｉｖｅ画像処理モジュール３１６に、画像処理の対象となる画像データと処理パラメータを送信し、画像処理の実行を依頼する。この依頼を受けたＮａｔｉｖｅ画像処理モジュール３１６は、受信した画像データ及び処理パラメータを基に画像処理を実行し、その処理結果をＮａｔｉｖｅ画像処理実行サーバ３１５に通知する。
Ｓ１４０５において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、Ｓ１４０１で受信した画像処理リクエストに対するレスポンスとして、画像処理結果をＮａｔｉｖｅ画像処理実行クライアント３３１に返却し、Ｓ１４０１に戻る。
Ｓ１４０６において、Ｎａｔｉｖｅ画像処理実行サーバ３１５は、Ｓ１４０１で受信した画像処理リクエストを実行可能なＮａｔｉｖｅ画像処理モジュール３１６が存在しないことを示すエラーメッセージをレスポンスとしてＮａｔｉｖｅ画像処理実行クライアント３３１に返却し、Ｓ１４０１に戻る。 FIG. 14 is a flowchart showing an example of information processing executed by the Native image processing execution server 315 and the Native image processing module 316.
In S1401, the Native image processing execution server 315 determines whether or not the image processing request transmitted from the Native image processing execution client 331 has been received in S1306. As a result of the determination, the Native image processing execution server 315 executes S1401 again when it has not received (when S1401 is NO), and when it has received it (when S1401 is YES), proceeds to S1402.
In S1402, the Native image processing execution server 315 searches for the Native image processing module 316 to be requested to execute the image processing based on the processing parameters included in the received image processing request.
In S1403, the Native image processing execution server 315 determines whether or not the corresponding Native image processing module 316 exists as a result of the search of S1402. As a result of the determination, the Native image processing execution server 315 proceeds to S1406 when the target Native image processing module does not exist (when S1403 is NO), and proceeds to S1404 when it exists (when S1403 is YES).
In S1404, the Native image processing execution server 315 transmits the image data to be image processed and the processing parameters to the Native image processing module 316 that executes the image processing, and requests the execution of the image processing. Upon receiving this request, the Native image processing module 316 executes image processing based on the received image data and processing parameters, and notifies the Native image processing execution server 315 of the processing result.
In S1405, the Native image processing execution server 315 returns the image processing result to the Native image processing execution client 331 as a response to the image processing request received in S1401, and returns to S1401.
In S1406, the Native image processing execution server 315 returns an error message indicating that the Native image processing module 316 capable of executing the image processing request received in S1401 does not exist as a response to the Native image processing execution client 331, and returns the error message to the Native image processing execution client 331 in S1401. return.

以上説明した構成や手順を実施することで、図６、図７、図１０を用いて示したような画像処理要求（Ｓ６０３、Ｓ７０３）が輻輳する場合でも、画像処理ジョブ受付モジュール１１０１と画像処理ジョブ実行モジュール１１０２とが非同期に処理を実行することができるようになる。そのため、図５、図９で説明したものとは異なる方法でユーザへの応答性の劣化を抑制することができるようになる。 By implementing the configuration and procedure described above, even when the image processing request (S603, S703) as shown with reference to FIGS. 6, 7, and 10 is congested, the image processing job reception module 1101 and the image processing are performed. The process can be executed asynchronously with the job execution module 1102. Therefore, the deterioration of the responsiveness to the user can be suppressed by a method different from that described with reference to FIGS. 5 and 9.

＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給する。そして、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読み出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。 <Other Embodiments>
The present invention supplies a system or device via a network or storage medium a program that realizes one or more functions of the above-described embodiment. It can also be realized by a process in which one or more processors in the computer of the system or apparatus reads and executes a program. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

以上、本発明の実施形態の一例について詳述したが、本発明は係る特定の実施形態に限定されるものではない。
実施形態１及び実施形態２では、ＯＣＲ処理を実施するＮａｔｉｖｅ画像処理モジュール３１６が並行動作を実施できない制限がある場合に、対応する画像処理プラグイン３０３がＯＣＲ画像処理ジョブに対するキュー３２６を保持する構成を説明した。しかし、これに限定されるものではない。例えば、実施形態１及び実施形態２で説明したＯＣＲ処理実施用のＮａｔｉｖｅ画像処理モジュール３１６とは別に、ＯＣＲ処理を実施可能な画像処理モジュールがＪａｖａ言語実行環境３３０やサーバ１０５に配置されているのでもよい。更にそれら画像処理モジュールに対応する画像処理プラグイン３０３はキュー３２６を有していない構成でもよい。そのような構成において、画像処理プラグイン３０３は適切な基準に従って、それら複数存在するＯＣＲ処理実施モジュールの何れを使用するかを選択するようにしてもよい。 Although an example of the embodiment of the present invention has been described in detail above, the present invention is not limited to the specific embodiment.
In the first and second embodiments, the corresponding image processing plug-in 303 holds the queue 326 for the OCR image processing job when there is a limitation that the Native image processing module 316 that performs the OCR processing cannot perform the parallel operation. Explained. However, it is not limited to this. For example, apart from the Native image processing module 316 for performing OCR processing described in the first and second embodiments, an image processing module capable of performing OCR processing is arranged in the Java language execution environment 330 or the server 105. It may be. Further, the image processing plug-in 303 corresponding to these image processing modules may be configured not to have a queue 326. In such a configuration, the image processing plug-in 303 may select which of the plurality of existing OCR processing execution modules is used according to an appropriate criterion.

以上、上述した各実施形態によれば、並行動作ができない制限を持つ組み込みソフトウェアとして実装された画像処理モジュールに対する画像処理要求が輻輳した場合でも、ユーザへの応答性の劣化を抑えることができるようなる。更に、そのような効果を、組み込みソフトウェアに変更を加えることなく実現することができるようになる。 As described above, according to each of the above-described embodiments, it is possible to suppress deterioration of responsiveness to the user even when the image processing request for the image processing module implemented as embedded software having a limitation that parallel operation is not possible is congested. Become. Furthermore, such an effect can be realized without making any changes to the embedded software.

１０１ 画像形成装置
２１１ ＣＰＵ
２１３ ＨＤＤ 101 Image forming apparatus 211 CPU
213 HDD

Claims (6)

複数のジョブを並行処理することができない画像処理モジュールを有する画像処理装置であって、
ユーザの操作により前記画像処理モジュールを利用する画像処理が指示された場合に、前記画像処理モジュールによる処理がユーザの操作に対する応答性に関係するか否かを示すフラグが付与されたジョブをキューに登録する登録手段と、
前記キューに含まれる各ジョブの前記フラグに基づき、前記キューの先頭以外に前記フラグがＯＮであるジョブが存在するか否かを判定する判定手段と、
前記キューから取得されるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行する要求手段と、
前記画像処理モジュールによる処理が完了した場合に、画像処理の結果を表示部に表示するよう制御する制御手段と、を有し、
前記要求手段は、前記判定手段により前記キューの先頭以外に前記フラグがＯＮであるジョブが存在すると判定された場合に、前記キューから取得される前記フラグがＯＮであるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行し、前記判定手段により前記キューの先頭以外に前記フラグがＯＮであるジョブが存在しないと判定された場合に、前記キューの先頭から取得される前記フラグがＯＦＦであるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行し、
前記画像処理モジュールによる処理が完了した場合に、前記判定手段による判定が再度、行われ、
前記制御手段は、前記フラグがＯＮであるジョブに係る画像処理の結果については、前記表示部に表示して、前記フラグがＯＦＦであるジョブに係る画像処理の結果については、前記画像処理モジュールによる処理が完了しても、前記表示部に表示しない画像処理装置。 An image processing device having an image processing module that cannot process multiple jobs in parallel.
When an image processing using the image processing module is instructed by a user's operation, a job with a flag indicating whether or not the processing by the image processing module is related to the responsiveness to the user's operation is queued. Registration method to register and
Based on the flag of each job included in the queue, a determination means for determining whether or not there is a job whose flag is ON other than the head of the queue, and a determination means.
A request means for executing a processing request to the image processing module based on the job acquired from the queue, and
It has a control means for controlling the display of the result of the image processing on the display unit when the processing by the image processing module is completed .
The requesting means performs the image processing based on the job obtained from the queue in which the flag is ON when the determination means determines that there is a job in which the flag is ON other than the head of the queue. When a processing request is executed for the module and it is determined by the determination means that there is no job whose flag is ON other than the head of the queue, the flag acquired from the head of the queue is OFF. Based on the job, execute a processing request to the image processing module, and
When the processing by the image processing module is completed, the determination by the determination means is performed again , and the determination is performed again.
The control means displays the result of image processing related to the job whose flag is ON on the display unit, and the image processing module determines the result of image processing related to the job whose flag is OFF. An image processing device that does not display on the display unit even after the processing is completed . 前記キューの先頭からジョブを取得する取得手段を更に有し、
前記判定手段は、前記取得手段により取得されたジョブの前記フラグに基づき、前記フラグがＯＮであるか否かを判定し、前記フラグがＯＦＦであると判定した場合、前記キューに含まれる各ジョブの前記フラグに基づき、前記キューの先頭以外に前記フラグがＯＮであるジョブが存在するか否かを判定する請求項１記載の画像処理装置。 Further having an acquisition means for acquiring a job from the beginning of the queue,
The determination means determines whether or not the flag is ON based on the flag of the job acquired by the acquisition means, and if it is determined that the flag is OFF, each job included in the queue. The image processing apparatus according to claim 1, wherein it is determined whether or not there is a job in which the flag is ON other than the head of the queue based on the flag . 前記判定手段により前記キューの先頭以外に前記フラグがＯＮであるジョブが複数存在すると判定された場合に、前記要求手段は、前記フラグがＯＮである複数のジョブのうち、前記キューの最も前方にあるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行する請求項１又は２記載の画像処理装置。 When it is determined by the determination means that there are a plurality of jobs for which the flag is ON other than the head of the queue, the request means is at the front of the queue among the plurality of jobs for which the flag is ON. The image processing apparatus according to claim 1 or 2, which executes a processing request to the image processing module based on a certain job. 前記画像処理モジュールによる処理が完了した場合に、実行したジョブを前記キューから削除する削除手段を更に有する請求項１乃至３何れか１項記載の画像処理装置。 The image processing apparatus according to any one of claims 1 to 3, further comprising a deleting means for deleting the executed job from the queue when the processing by the image processing module is completed. 複数のジョブを並行処理することができない画像処理モジュールを有する画像処理装置が実行する情報処理方法であって、
ユーザの操作により前記画像処理モジュールを利用する画像処理が指示された場合に、前記画像処理モジュールによる処理がユーザの操作に対する応答性に関係するか否かを示すフラグが付与されたジョブをキューに登録する登録工程と、
前記キューに含まれる各ジョブの前記フラグに基づき、前記キューの先頭以外に前記フラグがＯＮであるジョブが存在するか否かを判定する判定工程と、
前記キューから取得されるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行する要求工程と、
前記画像処理モジュールによる処理が完了した場合に、画像処理の結果を表示部に表示するよう制御する制御工程と、を含み、
前記要求工程では、前記判定工程により前記キューの先頭以外に前記フラグがＯＮであるジョブが存在すると判定された場合に、前記キューから取得される前記フラグがＯＮであるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行し、前記判定工程により前記キューの先頭以外に前記フラグがＯＮであるジョブが存在しないと判定された場合に、前記キューの先頭から取得される前記フラグがＯＦＦであるジョブに基づき、前記画像処理モジュールに処理のリクエストを実行し、
前記画像処理モジュールによる処理が完了した場合に、前記判定工程による判定が再度、行われ、
前記制御工程では、前記フラグがＯＮであるジョブに係る画像処理の結果については、前記表示部に表示して、前記フラグがＯＦＦであるジョブに係る画像処理の結果については、前記画像処理モジュールによる処理が完了しても、前記表示部に表示しない情報処理方法。 An information processing method executed by an image processing device having an image processing module that cannot process a plurality of jobs in parallel.
When an image processing using the image processing module is instructed by a user's operation, a job with a flag indicating whether or not the processing by the image processing module is related to the responsiveness to the user's operation is queued. Registration process to register and
Based on the flag of each job included in the queue, a determination step of determining whether or not there is a job whose flag is ON other than the head of the queue, and a determination step.
A request process for executing a processing request to the image processing module based on the job acquired from the queue, and
A control step for controlling the display of the result of image processing on the display unit when the processing by the image processing module is completed is included.
In the requesting process, when it is determined by the determination process that there is a job whose flag is ON other than the head of the queue, the image processing is performed based on the job whose flag is ON acquired from the queue. When a processing request is executed for the module and it is determined by the determination process that there is no job whose flag is ON other than the head of the queue, the flag acquired from the head of the queue is OFF. Based on the job, execute a processing request to the image processing module, and
When the processing by the image processing module is completed, the determination by the determination step is performed again , and the determination is performed again.
In the control step, the result of the image processing related to the job whose flag is ON is displayed on the display unit, and the result of the image processing related to the job whose flag is OFF is displayed by the image processing module. An information processing method that does not display on the display unit even after the processing is completed . コンピュータを、請求項１乃至４何れか１項記載の画像処理装置の各手段として機能させるためのプログラム。 A program for causing a computer to function as each means of the image processing apparatus according to any one of claims 1 to 4 .
JP2018117968A 2018-03-05 2018-06-21 Image processing equipment, information processing methods and programs Active JP7102248B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/292,009 US10922039B2 (en) 2018-03-05 2019-03-04 Image processing apparatus, information processing method, and storage medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018038819 2018-03-05
JP2018038819 2018-03-05

Publications (2)

Publication Number Publication Date
JP2019154019A JP2019154019A (en) 2019-09-12
JP7102248B2 true JP7102248B2 (en) 2022-07-19

Family

ID=67947242

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018117968A Active JP7102248B2 (en) 2018-03-05 2018-06-21 Image processing equipment, information processing methods and programs

Country Status (1)

Country Link
JP (1) JP7102248B2 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001238007A (en) 2000-02-18 2001-08-31 Toshiba Tec Corp Method for forming image
JP2009043247A (en) 2007-07-18 2009-02-26 Ricoh Co Ltd Image formation system and control method thereof, image forming apparatus, information processor, program and recording medium
JP2011061630A (en) 2009-09-11 2011-03-24 Ricoh Co Ltd Image processing system, image forming apparatus, image processing method, program, and recording medium
JP2014021137A (en) 2012-07-12 2014-02-03 Sharp Corp Image forming apparatus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001238007A (en) 2000-02-18 2001-08-31 Toshiba Tec Corp Method for forming image
JP2009043247A (en) 2007-07-18 2009-02-26 Ricoh Co Ltd Image formation system and control method thereof, image forming apparatus, information processor, program and recording medium
JP2011061630A (en) 2009-09-11 2011-03-24 Ricoh Co Ltd Image processing system, image forming apparatus, image processing method, program, and recording medium
JP2014021137A (en) 2012-07-12 2014-02-03 Sharp Corp Image forming apparatus

Also Published As

Publication number Publication date
JP2019154019A (en) 2019-09-12

Similar Documents

Publication Publication Date Title
JP5929210B2 (en) Information processing program, information processing apparatus, and information processing apparatus control method
JP7355147B2 (en) application program
JP2020004158A (en) Information processing apparatus, method of controlling information processing apparatus, and program
US11176633B2 (en) Image processing apparatus, method for controlling the same, and non-transitory computer-readable storage medium
JP2022164669A (en) Image formation device, method for controlling image formation device and program
JP2018015947A (en) Image formation apparatus, image formation method and program
JP2016083870A (en) Image formation device, and control method and system therefor
JP6975009B2 (en) Image processing device, its control method, and program
JP2024025809A (en) Image formation apparatus, control method of image formation apparatus and program
JP2012155401A (en) Printing system, printing device, control method of printing system, control method of printing device, and program
US10922039B2 (en) Image processing apparatus, information processing method, and storage medium
JP7102248B2 (en) Image processing equipment, information processing methods and programs
JP6961412B2 (en) Image forming device, control method of image forming device, and program
JP7479867B2 (en) Printing device, control method thereof, and program
JP7186541B2 (en) IMAGE PROCESSING DEVICE, CONTROL METHOD THEREOF, AND PROGRAM
JP7362384B2 (en) Information processing device, its control method, and program
JP7080061B2 (en) Image processing equipment
JP7328405B2 (en) Information processing apparatus, information processing apparatus control method, and print setting application
JP7324009B2 (en) Information processing device, printing device, control method thereof, and program
JP6673025B2 (en) Information processing device and program
US20190356804A1 (en) Image processing apparatus, method for controlling the same, and computer-readable storage medium
JP5025533B2 (en) Image forming apparatus, printing control method, printing control program
JP2003072164A (en) Apparatus, system and method for processing data, storage medium and program
JP2020004273A (en) Print control program, update method of printer description file of print control program, information processing device and storage medium
JP2018129611A (en) Image forming apparatus, method for controlling image forming apparatus, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210610

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220323

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220607

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220706

R151 Written notification of patent or utility model registration

Ref document number: 7102248

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151