JP6435890B2 - 操作表示システム、操作表示装置、プログラム - Google Patents

Description

本発明は、２台の操作表示装置で連携した表示を行う操作表示システム、モバイル端末と連携して表示を行う操作表示装置およびプログラムに関する。

複合機などの画像形成装置とユーザが所有するモバイル端末とを連携させ、画像形成装置の操作パネルとこれに並置されたモバイル端末に関連する画面を連携表示させる技術がある（特許文献１参照）。たとえば、一の画面の全体を操作パネルに表示しきれない場合に、該操作パネルに並置されたモバイル端末にその画面の続きの部分を連携表示させることで、実質的に操作パネルの表示領域が拡張される。

また、画像形成装置とモバイル端末とが連携して動作する画像形成システムにおいて、画像形成装置に対して行われたユーザによる操作及びモバイル端末に対して行われたユーザによる操作のうち少なくともいずれか一方を検出し、検出された内容に応じて、画像形成装置とモバイル端末のうち一方を主の装置、他方を従の装置とし、それぞれの装置の表示内容を、いずれが主の装置となるかに応じて切り替える技術がある（特許文献２参照）。

特開２０１３−８８５０６号公報 特開２０１４−４５４１８号公報

連携表示に使用されるモバイル端末は、通常、専用の装置ではなく、他の機能、たとえば、電話や外部と無線通信する機能を備える場合が多い。そのため、連携表示中に、モバイル端末側に電話の着呼やＩＭ（InstantMessage）・ＳＭＳ（ShortMessageService）等の受信のイベントが発生したり、あるいは、モバイル端末から電話の発呼やメッセージ送信、他のアプリケーションの起動等が必要になったりする。このような場合、モバイル端末は操作パネルから一時的に離されると共に、連携表示が解除され、イベントやアプリに対応した画面に自動あるいは手動で切り替えられる。このような切り替えの前の連携表示中に、ユーザがモバイル端末側の表示画面を使用して作業を行っていた場合、作業中の画面が消えてしまうので不便である。

本発明は、上記の問題を解決しようとするものであり、連携表示中の一方の操作表示装置に電話の着信等が発生して画面が切り替えられた場合でも、連携表示中の作業を他方の操作表示装置で継続することのできる操作表示システムおよび操作表示装置、プログラムを提供することを目的としている。

かかる目的を達成するための本発明の要旨とするところは、次の各項の発明に存する。

［１］操作部と表示部をそれぞれ備えた第１、第２の操作表示装置を含む操作表示システムであって、
前記第１の操作表示装置の表示部に第１画面を表示させ、前記第１の操作表示装置に並置された前記第２の操作表示装置に前記第１画面に関連する第２画面を表示させる連携表示を制御する連携表示制御部と、
前記連携表示中にユーザが前記第１画面と前記第２画面のいずれを主として作業を行っているかを判定する主従判定部と、
前記連携表示を解除する契機となる所定の事象の発生を検出する解除事象検出部と、
を有し、
前記連携制御部は、前記連携表示中に前記解除事象検出部によって前記所定の事象の発生が検出された場合に、前記連携表示を解除すると共に、該解除の前における前記主従判定部の判定結果が前記第２画面が主であることを示す場合は、前記解除後の前記第１の操作表示装置の表示部に少なくとも前記第２画面の一部を含む画面を表示させる
ことを特徴とする操作表示システム。

上記発明では、連携表示を解除する契機となる事象の発生が検出された場合に、連携表示を解除すると共に、該解除前にユーザが第２の操作表示装置を主に使用して作業を行っていた場合は第１の操作表示装置に少なくとも、解除前に第２の操作表示装置に表示されていた画面の一部を含む画面を表示させる。

［２］前記所定の事象は、
前記第１の操作表示装置の表示部と前記第２の操作表示装置の表示部との位置関係が、前記連携表示に不適な所定の位置関係に変化すること、
前記第１の操作表示装置と前記第２操作表示装置との通信の切断、
前記第２の操作表示装置に連携表示より優先されるイベントの発生、
前記第１の操作表示装置と前記第２の操作表示装置のいずれかで連携表示の解除操作を受けること
の中の少なくとも１つを含む
ことを特徴とする［１］に記載の操作表示システム。

［３］前記主従判定部は、
前記所定の事象が発生する前にユーザが最後に見た表示部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの表示部であるか、
前記所定の事象が発生する前にユーザが最後に操作した操作部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの操作部であるか、
連携表示中にユーザが見た時間の長い表示部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの表示部であるか、
連携表示中にユーザが操作した時間の長い操作部あるいは操作した回数の多い操作部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの操作部であるか、
前記第１の操作表示装置と前記第２の操作表示装置のどちらが連携表示中に設定された項目を多く表示しているか
の少なくとも１つに基づいて前記判定を行う
ことを特徴とする［１］または［２］に記載の操作表示システム。

［４］前記連携制御部は、前記解除後の前記第１の操作表示装置の表示部に、前記第１画面と前記第２画面の双方を、少なくとも一方を縮小して表示し、前記第１画面と前記第２画面のいずれか一方の選択操作をユーザから受け付け、選択された画面を前記第１の操作表示装置の表示部に表示しかつ選択されなかった画面を前記第１の操作表示装置の表示部から消去する
ことを特徴とする［１］に記載の操作表示システム。

上記発明では、連携表示の解除後に、第１画面と第２画面のどちらを第１の操作表示装置に表示するかの選択をユーザから受ける。

［５］前記連携制御部は、前記解除の前に、前記第２画面に表示されていた第１の操作釦が操作され、かつ前記第１の操作釦と同じグループに属する第２の操作釦が前記第１画面に表示されていた場合は、前記解除後の前記第１の操作表示装置の表示部に少なくとも前記第１の操作釦と前記第２の操作釦を表示させる
ことを特徴とする［１］に記載の操作表示システム。

上記発明では、連携表示中に第１の操作表示装置に表示されていた操作釦であっても、連携表示の解除前に操作された第１操作釦と同一グループに属する第２操作釦は、連携解除後に第１の操作表示装置に表示される。

［６］前記連携制御部は、前記第１の操作釦と同じグループに属する操作釦であって前記解除の前に前記第１画面と前記第２画面のいずれかに表示されていた操作釦はすべて前記解除後の前記第１の操作表示装置の表示部に表示し、解除の前に前記第１画面に表示されていた前記第１操作釦と同じグループに属さない操作釦は前記解除後の前記第１の操作表示装置の表示部に表示しない
ことを特徴とする［５］に記載の操作表示システム。

上記発明では、連携表示の解除前に第１画面または第２画面に表示されていた操作釦であって、連携解除前に操作された操作釦と同一グループに属する操作釦はすべて連携解除後の第１の操作表示装置に表示され、そのグループに属さない操作釦は連携解除後の第１の操作表示装置に表示されない。

［７］前記連携制御部は、前記解除後、所定時間の経過前に、前記連携表示を再開する場合は、
前記解除後に前記第１の操作表示装置においてユーザから設定操作を受けていた場合は、前記第１の操作表示装置の表示部に表示されている画面を前記第１の操作表示装置の表示部に表示しかつ該画面に関連する画面を前記第２の操作表示装置に表示して連携表示を再開し、
前記解除後に前記第１の操作表示装置においてユーザから設定操作を受けていない場合は、前記解除の前に前記第１の操作表示装置の表示部に表示されていた画面を前記第１の操作表示装置の表示部に表示しかつ前記解除の前に前記第２の操作表示装置の表示部に表示されていた画面を前記第２の操作表示装置の表示部に表示して連携表示を再開する
ことを特徴とする［１］乃至［６］のいずれか１つに記載の操作表示システム。

上記発明では、連携解除中に操作パネルが操作されない場合は、連携解除前の状態に戻して連携表示を再開し、連携解除中に操作パネルが操作された場合は、連携解除中にユーザは第１の操作表示装置を主として作業を行っているので、第１の操作表示装置の表示画面は維持し、この画面に関連する画面を第２の操作表示装置に表示して連携表示を再開する。

［８］前記第１の操作表示装置は、画像形成装置の操作パネルであり、前記第２の操作表示装置は、モバイル端末である
ことを特徴とする［１］乃至［７］のいずれか１つに記載の操作表示システム。

［９］操作部と、
表示部と、
前記表示部に第１画面を表示させ、自装置に並置された操作部と表示部を備えるモバイル端末に前記第１画面に関連する第２画面を表示させる連携表示を制御する連携表示制御部と、
前記連携表示中にユーザが前記第１画面と前記第２画面のいずれを主として作業を行っているかを判定する主従判定部と、
前記連携表示を解除する契機となる所定の事象の発生を検出する解除事象検出部と、
を有し、
前記連携制御部は、前記連携表示中に前記解除事象検出部によって前記所定の事象の発生が検出された場合に、前記連携表示を解除すると共に、該解除の前における前記主従判定部の判定結果が前記第２画面が主であることを示す場合は、前記解除後の前記表示部に少なくとも前記第２画面の一部を含む画面を表示させる
ことを特徴とする操作表示装置。

［１０］前記所定の事象は、
自装置の表示部と前記モバイル端末の表示部との位置関係が、前記連携表示に不適な所定の位置関係に変化すること、
自装置と前記モバイル端末との通信の切断、
前記モバイル端末に連携表示より優先されるイベントの発生、
自装置と前記モバイル端末のいずれかで連携表示の解除操作を受けること
の中の少なくとも１つを含む
ことを特徴とする［９］に記載の操作表示装置。

［１１］前記主従判定部は、
前記所定の事象が発生する前にユーザが最後に見た表示部が自装置と前記モバイル端末のいずれの表示部であるか、
前記所定の事象が発生する前にユーザが最後に操作した操作部が自装置と前記モバイル端末のいずれの操作部であるか、
連携表示中にユーザが見た時間の長い表示部が自装置と前記モバイル端末のいずれの表示部であるか、
連携表示中にユーザが操作した時間の長い操作部あるいは操作した回数の多い操作部が自装置と前記モバイル端末のいずれの操作部であるか、
自装置と前記モバイル端末のどちらが連携表示中に設定された項目数を多く表示しているか
の少なくとも１つに基づいて前記判定を行う
ことを特徴とする［９］または［１０］に記載の操作表示装置。

［１２］前記連携制御部は、前記解除後の自装置の表示部に、前記第１画面と前記第２画面の双方を、少なくとも一方を縮小して表示し、前記第１画面と前記第２画面のいずれか一方の選択操作をユーザから受け付け、選択された画面を自装置の表示部に表示しかつ選択されなかった画面を自装置の表示部から消去する
ことを特徴とする［９］に記載の操作表示装置。

［１３］前記連携制御部は、前記解除の前に、前記第２画面に表示されていた第１の操作釦が操作され、かつ前記第１の操作釦と同じグループに属する第２の操作釦が前記第１画面に表示されていた場合は、前記解除後の自装置の表示部に少なくとも前記第１の操作釦と前記第２の操作釦を表示させる
ことを特徴とする［９］に記載の操作表示装置。

［１４］前記連携制御部は、前記第１の操作釦と同じグループに属する操作釦であって前記解除の前に前記第１画面と前記第２画面のいずれかに表示されていた操作釦はすべて前記解除後の自装置の表示部に表示し、解除の前に前記第１画面に表示されていた前記第１操作釦と同じグループに属さない操作釦は前記解除後の自装置の表示部に表示しない
ことを特徴とする［１３］に記載の操作表示装置。

［１５］前記連携制御部は、前記解除後、所定時間の経過前に、前記連携表示を再開する場合は、
前記解除後に自装置においてユーザから設定操作を受けていた場合は、自装置の表示部に表示されている画面を自装置の表示部に表示しかつ該画面に関連する画面を前記モバイル端末に表示して連携表示を再開し
前記解除後に自装置においてユーザから設定操作を受けていない場合は、前記解除の前に自装置の表示部に表示されていた画面を自装置の表示部に表示しかつ前記解除の前に前記モバイル端末の表示部に表示されていた画面を前記モバイル端末の表示部に表示して連携表示を再開する
ことを特徴とする［９］乃至［１４］のいずれか１つに記載の操作表示装置。

［１６］情報処理装置を、
［９］乃至［１５］のいずれか１つに記載の操作表示装置として機能させるプログラム。

本発明に係る操作表示システムおよび操作表示装置、プログラによれば、連携表示中の一方の操作表示装置に電話の着信等が発生して画面が切り替えられた場合でも、連携表示中の作業を他方の操作表示装置で継続することができる。

本発明の実施の形態に係る操作表示システムの構成例を示す図である。 画像形成装置の電気的な概略構成を示すブロック図である。 モバイル端末の概略構成を示すブロック図である。 モバイル端末を画像形成装置の操作パネル３０の近傍に並置して連携表示を実行している状態の一例を示す図である。 第１の実施の形態の操作表示システムにおける連携解除時の表示状態の一例を示す図である。 第１の実施の形態に係る操作表示システムの画像形成装置およびモバイル端末の連携解除に係る動作を示す流れ図である。 主従監視処理（図６のＳ１０３およびＳ２０３）の詳細を示す流れ図である。 連携監視処理（図６のＳ１０４およびＳ２０４）の詳細を示す流れ図である。 第２の実施の形態おける連携解除時の表示動作の一例を示す図である。 図１０の続きを示す図である。 図１０の続きの他の例を示す図である。 第２の実施の形態に係る操作表示システムの画像形成装置およびモバイル端末の連携解除に係る動作を示す流れ図である。 第３の実施の形態おける連携解除時の表示動作の一例を示す図である。 第３の実施の形態おける連携解除時の表示動作の他の例を示す図である。 第３の実施の形態に係る操作表示システムの画像形成装置およびモバイル端末の連携解除に係る動作を示す流れ図である。 第４の実施の形態おける連携解除時の表示動作の一例を示す図である。 第４の実施の形態おける連携解除中および連携再開時の表示動作の一例を示す図である。 第４の実施の形態おける連携解除中および連携再開時の表示動作の他の例を示す図である。 第４の実施の形態に係る操作表示システムの画像形成装置およびモバイル端末の連携解除、連携再開に係る動作を示す流れ図である。

以下、図面に基づき本発明の各種の実施の形態を説明する。

＜第１の実施の形態＞
図１は、本発明の実施の形態に係る操作表示システム３の一例を示している。操作表示システム３は、第１の操作表示装置としての操作パネル３０を備えた画像形成装置１０と、第２の操作表示装置としてのモバイル端末４０とから構成される。モバイル端末４０は単独で使用されるほか、画像形成装置１０の操作パネル３０に並置されて後述する連携表示に使用される。

画像形成装置１０は、原稿を光学的に読み取ってその複製画像を記録紙に印刷するコピージョブ、読み取った原稿の画像データをファイルにして保存したり外部端末へネットワークを通じて送信したりするスキャンジョブ、端末装置からネットワークを通じて受信した印刷データに係る画像を記録紙上に形成して印刷出力するプリントジョブ、ファクシミリ手順に従って画像データを送受信するＦＡＸジョブなど、複数種類のジョブを実行する機能を備えた、所謂、複合機である。なお、本説明では、画像形成装置１０をＭＦＰとも記す。

モバイル端末４０は、汎用のタブレット端末、スマートフォンなどの携帯型情報処理装置に所定のアプリケーションプログラムをインストールしたものであり、アプリケーションプログラムの実行により連携表示等に関する機能が実現される。

画像形成装置１０は、自装置の操作パネル３０とモバイル端末４０が並置されて通信可能な状態にあるときモバイル端末４０と連携して動作することで連携表示を行うことができる。連携表示では、操作パネル３０とモバイル端末４０の双方の表示部を使用して操作画面やプレビュー画面などの画面を表示する。

たとえば、連携表示では、表示対象の画面全体を操作パネル３０の表示部に表示しきれない場合に、その表示しきれない部分が、操作パネル３０に並置されたモバイル端末４０に表示される。あるいは、操作パネル３０に表示中の画面に関連する画面がモバイル端末４０に表示される。

図２は、画像形成装置１０の電気的な概略構成を示すブロック図である。画像形成装置１０は、当該画像形成装置１０の動作を統括的に制御する制御部としてのＣＰＵ(Central Processing Unit)１１を有している。ＣＰＵ１１にはバスを通じてＲＯＭ(Read Only Memory)１２、ＲＡＭ(Random Access Memory)１３、不揮発メモリ１４、ハードディスク装置１５、自動原稿搬送部（ＡＤＦ：Auto Document Feeder）１６、ネットワーク通信部１７、画像読取部１８、画像処理部１９、プリンタ部２１、ファクシミリ通信部２２、認証部２３、操作パネル３０などが接続されている。

ＣＰＵ１１は、ＯＳ（Operating System）プログラムをベースとし、その上で、ミドルウェアやアプリケーションプログラムなどを実行する。ＲＯＭ１２には、各種のプログラムが格納されており、これらのプログラムに従ってＣＰＵ１１が各種処理を実行することで画像形成装置１０（操作パネル３０を含む）の各機能が実現される。

ここでは、操作パネル３０についてもＣＰＵ１１が制御するが、操作パネル３０の制御を操作パネル３０専用に設けた別途のＣＰＵで行うように構成されてもよい。

ＲＡＭ１３は、ＣＰＵ１１がプログラムに基づいて処理を実行する際に各種のデータを一時的に格納するワークメモリや画像データを格納する画像メモリなどとして使用される。

不揮発メモリ１４は、電源をオフにしても記憶内容が破壊されないメモリ（フラッシュメモリ）であり、各種設定情報の保存などに使用される。

ハードディスク装置１５は大容量不揮発の記憶装置であり、印刷データ、表示用の画面のデータのほか各種のプログラムやデータが記憶される。

ネットワーク通信部１７は、ＬＡＮ（Local Area Network）などのネットワークに接続された外部端末、サーバなどと通信する機能を果たす。

画像読取部１８は、原稿を光学的に読み取って画像データを取得する機能を果たす。画像読取部１８は、例えば、原稿に光を照射する光源と、その反射光を受けて原稿を幅方向に１ライン分読み取るラインイメージセンサと、ライン単位の読取位置を原稿の長さ方向に順次移動させる移動ユニットと、原稿からの反射光をラインイメージセンサに導いて結像させるレンズやミラーなどからなる光学経路と、ラインイメージセンサの出力するアナログ画像信号をデジタルの画像データに変換する変換部などを備えて構成される。

自動原稿搬送部１６は、原稿台にセットされた原稿をその最上のものから１枚ずつ順に繰り出して搬送し、画像読取部１８の読み取り位置を通過させて所定の排紙位置へ排紙する機能を果たす。画像読取部１８は、プラテンガラス上に載置された原稿を読み取る機能と、自動原稿搬送部１６によって搬送される原稿を順次読み取る機能を備えている。

画像処理部１９は、画像の拡大縮小、回転などの処理のほか、印刷データをイメージデータに変換するラスタライズ処理、画像データの圧縮、伸張処理などを行う。

プリンタ部２１は、画像データに応じた画像を記録紙上に画像形成する機能を果たす。ここでは、記録紙の搬送装置と、感光体ドラムと、帯電装置と、レーザーユニットと、現像装置と、転写分離装置と、クリーニング装置と、定着装置とを有し、電子写真プロセスによって画像形成を行う、所謂、レーザープリンタとして構成されている。画像形成は他の方式でもかまわない。

ファクシミリ通信部２２は、ファクシミリ機能を備えた外部装置と電話回線を通じて画像データを送受信する機能を果たす。

認証部２３は、画像形成装置１０を使用するユーザを認証する。認証方法は、パスワード、指紋、静脈など任意でよい。

操作パネル３０は、表示部３１と、操作部３２と、近接無線通信部３３と、接続検出部３４を備え、各種の操作画面、設定画面等を表示する機能、ユーザからジョブの投入など各種の操作を受け付ける機能を果たす。

表示部３１は液晶ディスプレイ（ＬＣＤ…Liquid Crystal Display）とそのドライバなどで構成される。操作部３２は、スタート釦やテンキーなどの各種ハードキーと、表示部３１の表示面上に設けられたタッチパネル３２ａを備えている。タッチパネル３２ａは、表示部３１の表示面がタッチペンや指などで接触操作された座標位置を検出する。操作部３２は、タッチパネル３２ａを通じて選択操作、フリック操作やドラッグ操作などを受け付ける。タッチパネル３２ａの検知方式は、静電容量、アナログ/デジタル抵抗膜、赤外線、超音波、電磁誘導等、任意でよい。

近接無線通信部３３は、操作パネル３０の近傍に配置されたモバイル端末４０と無線通信する機能を果たす。近接無線通信部３３の通信可能距離は５０ｃｍ程度で十分である。通信方式には各種の近距離無線通信方式を採用することができる。

位置検出部３４は、操作パネル３０に対してモバイル端末４０がどの方向に並置されているか等を検出する。

図３は、モバイル端末４０の概略構成を示すブロック図である。モバイル端末４０は、当該モバイル端末４０の動作を統括制御するＣＰＵ４１を有している。ＣＰＵ４１にはバスを通じてＲＯＭ４２、ＲＡＭ４３、不揮発メモリ４４、認証部４５、操作部４６、表示部４７、ネットワーク通信部４８、近接無線通信部４９が接続されている。

ＲＯＭ４２および不揮発メモリ４４には、各種プログラムやデータが格納され、これらのプログラムに従ってＣＰＵ４１が各種の処理を実行することでモバイル端末４０の各機能が実現される。ＲＡＭ４３はＣＰＵ４１がプログラムを実行する際に各種のデータを一時的に格納するワークメモリや表示データを一時記憶するメモリとして使用される。

不揮発メモリ４４は、電源がオフになっても記憶内容が保持されるメモリである。不揮発メモリ４４には、文書や画像ファイル、各種の設定内容、ユーザ情報、端末情報（ネットワークアドレスなど）、アプリケーションプログラム、操作パネル３０からの指示に基づいて連携表示のための画面を表示する等の機能を果たすプログラムなどが記憶される。

認証部４５は、当該モバイル端末４０を使用するユーザを認証する。

表示部４７は、液晶ディスプレイなどで構成される。

操作部４６は、表示部４７の表示面上の全面に設けられ、指やペンなどによってタッチされた位置を検出するタッチパネル４６ａと、少数のハードキー（操作スイッチ）を備える。

ネットワーク通信部４８は、無線通信によりネットワークと接続して各種の外部装置と通信する機能を果たす。近接無線通信部４９は、近傍の操作パネル３０の近接無線通信部３３と無線通信する機能を果たす。通信可能距離、通信方式等は操作パネル３０の近接無線通信部３３と同一である。

図４は、モバイル端末４０を画像形成装置１０の操作パネル３０の近傍に並置して連携表示を実行している状態の一例を示している。この例では、画像形成装置１０が有する機能中から使用する機能を選択するための機能選択画面が連携表示されている。操作パネル３０側の画面には、連携表示の開始を指示するための連携開始釦５２と、連携表示の解除を指示するための連携解除釦５３が表示されている。図４では、既に連携表示中なので、連携開始釦５２は押下できない状態（グレーアウト）で表示されている。

機能選択画面には、機能を選択するための操作釦５１を多数、横一列に配列されている。操作パネル３０には、該選択画面の一部が表示され、選択画面のうちの操作パネル３０に表示された部分の右側に続く部分がモバイル端末４０に表示されている。操作パネル３０に表示された画面をＭＦＰ側連携画面６１、モバイル端末４０に表示された画面をモバイル側連携画面６２と呼ぶものとする。ユーザは、機能選択画面のうち、操作パネル３０およびモバイル端末４０に現示時点で表示されていない部分を表示させたい場合は、その方向へのフリック操作を行えば画面がスクロールするようになっている。

なお、連携表示される画面は、このようなスライダー形式の画面に限定されるものではない。たとえば、操作パネル３０側である操作釦（たとえば、アドレス帳の選択釦）を押下すると、それに関連する画面（アドレス帳に登録されているアドレスの一覧等）がモバイル端末４０に表示されるような階層構造をもった画面であってもよく、任意でよい。

図４の例では、ユーザはモバイル端末４０に表示されている操作釦５１を操作しており、モバイル端末４０側の画面で作業を行っている。この状態で、たとえば、モバイル端末４０側に電話着呼があると、電話に応答するためにユーザはモバイル端末４０を操作パネル３０から遠ざけて自分の耳の近く等へ移動させる。

図５はその様子を示している。このとき、画像形成装置１０の操作パネル３０は、モバイル端末４０が連携表示に適した位置から遠く離れたことを検出し、連携表示を解除する。なお、以後、連携表示の解除を、連携解除と略称する。ここでは、連携解除の直前に、ユーザがモバイル端末４０で作業していたので、連携解除前にモバイル端末４０に表示されていた画面（モバイル側連携画面６２）が、連携解除後の操作パネル３０の表示部３１に表示されている。

一方、電話着呼の前にユーザがモバイル端末４０側のモバイル側連携画面６２を見て作業していなかった場合、たとえば、操作パネル３０に表示されたＭＦＰ側連携画面６１を見て作業を行っていた場合は、連携解除後も、連携解除前と同じＭＦＰ側連携画面６１が操作パネル３０の表示部３１に表示される。

このように、モバイル端末を連携表示以外の用途に使用する等ために連携表示を解除する際に、連携解除前にユーザがモバイル端末４０を主に使用して作業を行っていたか否かを判断し、連携解除前にユーザがモバイル端末４０を主に使用して作業を行っていた場合は、連携解除前にモバイル端末４０側に表示されていた画面を連携解除後の操作パネル３０に表示するので、ユーザは、操作パネル３０に表示された画面を使用して、連携解除前の作業を、連携解除後も継続して行うことができる。

なお、連携解除前にユーザが操作パネル３０を主に使用して作業を行っていた場合には、連携解除後も操作パネル３０の表示内容が維持されるので、ユーザは連携解除前の作業を、連携解除後も継続して行うことができる。

このように、操作表示システム３では、モバイル端末を連携表示以外の用途に使用する等ために連携表示が解除される場合に、連携解除前にユーザが操作パネル３０とモバイル端末４０のいずれを使用して設定操作等の作業を行っていても、連携解除後に操作パネル３０に表示される画面でその作業を継続することができる。

図４、図５の例は、電話着呼に応答するために、ユーザがモバイル端末４０を操作パネル３０から離したという事象の発生（操作パネル３０とモバイル端末４０との距離の変化）を契機に連携表示を解除したが、連携解除の要因となる事象はこれに限定されない。たとえば、以下のようなものがある。これらの中の少なくとも１つは採用される。

（１）モバイル端末４０が裏返しにされた。
（２）操作パネル３０とモバイル端末４０の相対的な位置が変化した。
（３）モバイル端末４０に連携表示より優先されるイベント（電話着呼やメール受信など）が発生して表示が変化した。
（４）操作パネル３０またはモバイル端末４０でユーザから連携表示の解除操作を受けた。
（５）操作パネル３０とモバイル端末４０との通信が切断された。
また、連携表示中にユーザが操作パネル３０に表示されたＭＦＰ側連携画面６１とモバイル端末４０に表示されたモバイル側連携画面６２のいずれを主として作業を行っているかの判定において、以下の判定基準うちの少なくとも１つは採用される。

（ａ）連携解除の要因となる事象が発生する前にユーザが最後に見た表示部（画面）が操作パネル３０とモバイル端末４０のいずれの表示部であるか。
（ｂ）連携解除の要因となる事象が発生する前にユーザが最後に操作した操作部が操作パネル３０モバイル端末４０のいずれの操作部であるか。
（ｃ）連携表示中にユーザが見た時間の長い表示部が操作パネル３０とモバイル端末４０のいずれの表示部であるか。
（ｄ）連携表示中にユーザが操作した時間の長い操作部あるいは操作した回数の多い操作部が操作パネル３０とモバイル端末４０のいずれの操作部であるか。
（ｅ）操作パネル３０とモバイル端末４０のどちらが連携表示中に設定された項目を多く表示しているか。

図６は、第１の実施の形態に係る操作表示システム３の画像形成装置１０（ＭＦＰ）およびモバイル端末４０の連携解除に係る動作を示す流れ図である。画像形成装置１０は、連携表示が開始されると（ステップＳ１０１；Ｙｅｓ）、該連携表示において画像形成装置１０の操作パネル３０が担当するＭＦＰ側連携画面６１を表示する（ステップＳ１０２）。同様に、モバイル端末４０は、連携表示が開始されると（ステップＳ２０１；Ｙｅｓ）、該連携表示においてモバイル端末４０が担当するモバイル側連携画面６２を表示する（ステップＳ２０２）。

ここでは、画像形成装置１０が、ＭＦＰ側連携画面６１およびモバイル側連携画面６２の双方を作成し、ＭＦＰ側連携画面６１は操作パネル３０に表示させ、モバイル側連携画面６２はモバイル端末４０へ送信してモバイル端末４０に表示させる。

連携表示が開始すると、画像形成装置１０、モバイル端末４０はそれぞれ、操作パネル３０とモバイル端末４０のどちらを主としてユーザが作業しているかを監視する主従監視処理（主従判定部の機能を果たす処理）、および、連携表示を解除する事象の発生を監視する連携監視処理（解除検出部としての機能を果たす処理）を繰り返し実行する（ステップＳ１０３、Ｓ１０４、Ｓ１０５；Ｎｏ、Ｓ２０３、Ｓ２０４、Ｓ２０５；Ｎｏ）。主従監視処理ではモバイル端末４０での監視状況が画像形成装置１０に通知される。また、連携監視処理では、画像形成装置１０、モバイル端末４０はそれぞれ、自装置側で連携表示を解除する事象が発生するとその旨を他方へ通知するようになっている。

画像形成装置１０は、連携表示を解除する事象の発生が検出されたら（ステップＳ１０５；Ｙｅｓ）、連携表示を解除すると共に、連携表示中にユーザがモバイル端末４０を主として作業を行っていたか否かを確認する（ステップＳ１０６）。そして、連携表示中にユーザがモバイル端末４０を主として作業を行っていた場合は（ステップＳ１０６；Ｙｅｓ）、連携解除する直前にモバイル端末４０に表示されていたモバイル側連携画面６２を操作パネル３０の表示部３１に表示して（ステップＳ１０７）、処理を終了する。

連携表示中にユーザがモバイル端末４０を主として作業を行っていなかった場合は（ステップＳ１０６；Ｎｏ）、連携解除する直前に操作パネル３０に表示されていたＭＦＰ側連携画面６１を操作パネル３０の表示部３１にそのまま継続表示して処理を終了する。

モバイル端末４０は、連携表示を解除する事象の発生が検出されたら（ステップＳ２０５；Ｙｅｓ）、連携解除すると共に、電話着呼の画面などのアプリケーション画面を表示して（ステップＳ２０６）、処理を終了する。

図７は、主従監視処理（図６のＳ１０３およびＳ２０３）の詳細を示している。モバイル端末４０は、自端末に対する操作が行われたか否かを監視し（ステップＳ２２１、Ｓ２２２；Ｎｏ）、操作を検出すると（ステップＳ２２２；Ｙｅｓ）、操作の検出を画像形成装置１０へ通知する（ステップＳ２２３）。

画像形成装置１０は、操作パネル３０に対する操作が行われた否か、およびモバイル端末４０からの通知を監視する（ステップＳ１２１）。該監視の結果から、ユーザが画像形成装置１０の操作パネル３０を主に使用して作業を行っているか、あるいはモバイル端末４０を主に使用して作業を行っているかを判断する（ステップＳ１２２）。ユーザが画像形成装置１０の操作パネル３０を主に使用して作業を行っている場合はＭＰＦが主である旨を返り値として（ステップＳ１２３）、本処理を終了する。ユーザがモバイル端末４０を主に使用して作業を行っている場合はモバイル端末が主である旨を返り値として（ステップＳ１２４）、本処理を終了する。なお、操作のほか、前述した主従関係の判定基準について監視を行うようにしてもよい。

図８は、連携監視処理（図６のＳ１０４およびＳ２０４）の詳細を示している。図８では、通信状態による連携解除の監視、距離・位置・向きによる連携解除の監視、解除操作またはイベント発生による連携解除の監視を行う場合を示している。画像形成装置１０、モバイル端末４０はそれぞれ、自装置側に連携表示を解除する事象が発生した場合にその旨を相手方に通知する。

画像形成装置１０は、モバイル端末４０と通信可能な状態が維持されているか否かを調べ（ステップＳ１４１）、通信できない場合は（ステップＳ１４１；Ｎｏ）、連携解除を返り値として（ステップＳ１４８）、処理を終了する。同様に、モバイル端末４０は操作パネル３０と通信可能な状態が維持されているか否かを調べ（ステップＳ２４１）、通信できない場合は（ステップＳ２４１；Ｎｏ）、連携解除を返り値として（ステップＳ２４６）、処理を終了する。

画像形成装置１０は、通信可能な場合は（ステップＳ１４１；Ｙｅｓ）、モバイル端末４０との距離・モバイル端末４０の位置・向きを調べる（ステップＳ１４２）。モバイル端末４０との距離・モバイル端末４０の位置・向きのいずれかが連携表示を継続できない状態の場合は（ステップＳ１４３；Ｎｏ）、連携解除をモバイル端末４０に通知した後（ステップＳ１４４）、連携解除を返り値として（ステップＳ１４８）、処理を終了する。

モバイル端末４０の位置としては、たとえば、操作パネル３０の上に重なる位置にモバイル端末４０があれば連携表示不可と判定する。向きは、たとえば、裏返しになっている等の場合に連携表示不可と判定する。距離は無線通信の電波強度を利用して判断できる。また、距離、位置、向きは、操作パネル３０等に設けたカメラの画像を解析して認識することができる。距離・位置・向きの認識方法は任意でよい。

モバイル端末４０は、画像形成装置１０から連携解除の通知を受けると（ステップＳ２４２；Ｙｅｓ）、連携解除を返り値として（ステップＳ２４６）、処理を終了する。

画像形成装置１０は、距離、位置、向きが連携表示を継続可能な状態であれば（ステップＳ１４３；Ｙｅｓ）、連携解除の操作（図４の連携開始釦５２の操作）をユーザから受けたか否かを調べる（ステップＳ１４５）。連携解除の操作を受けた場合は（ステップＳ１４５；Ｙｅｓ）、連携解除をモバイル端末４０に通知した後（ステップＳ１４６）、連携解除を返り値として（ステップＳ１４８）、処理を終了する。

モバイル端末４０は、画像形成装置１０から連携解除の通知を受けると（ステップＳ２４２；Ｙｅｓ）、連携解除を返り値として（ステップＳ２４６）、処理を終了する。

モバイル端末４０は、電話着呼等のイベントが生じた場合（ステップＳ２４３；Ｙｅｓ）、あるいはユーザから連携解除の操作を受けた場合、あるいは別のアプリケーションプログラムが起動された場合（ステップＳ２４４；Ｙｅｓ）には、連携解除を画像形成装置１０に通知した後（ステップＳ２４５）、連携解除を返り値として（ステップＳ２４６）、処理を終了する。

画像形成装置１０は、モバイル端末４０から連携解除の通知を受けると（ステップＳ１４７；Ｙｅｓ）、連携解除を返り値として（ステップＳ１４８）、処理を終了する。画像形成装置１０は、いずれの要因でも連携解除しない場合は（ステップＳ１４７；Ｎｏ）、連携解除なしを返り値として（ステップＳ１４９）、処理を終了する。モバイル端末４０も同様に、いずれの要因でも連携解除しない場合は（ステップＳ２４４；Ｎｏ）、連携解除なしを返り値として（ステップＳ２４７）、処理を終了する。

＜第２の実施の形態＞
第２の実施の形態に係る操作表示システム３は、連携解除の際に操作パネル３０の表示部３１にＭＦＰ側連携画面６１とモバイル側連携画面６２のいずれを表示するかをユーザに問い合わせて、選択を受けるようになっている。第１の実施の形態と同様の部分についての説明は適宜省略する。

図９は、第２の実施の形態おける連携解除時の表示動作の一例を示している。同図（ａ）は、画像形成装置１０の操作パネル３０とモバイル端末４０が連携表示を行っている状態を示す。ユーザは、モバイル端末４０に表示されたモバイル側連携画面６２を主に使用して作業中である。このとき連携解除になると、同図（ｂ）に示すように、操作パネル３０には、連携解除前に操作パネル３０に表示されていたＭＦＰ側連携画面６１とモバイル端末４０に表示されていたモバイル側連携画面６２が、少なくとも一方が縮小されて表示される。

ここでは、操作パネル３０の表示部３１の表示領域に収まるように、連携解除後は、画面の右側に、ＭＦＰ側連携画面６１の内容を縮小して表したＭＦＰ側連携解除前縮小画面６１ａが、画面の左側に、モバイル側連携画面６２の内容を縮小して表したモバイル側連携解除前縮小画面６２ａが表示されている。なお、操作パネル３０に表示領域に収まるならば、ＭＦＰ側連携画面６１のみを縮小し、モバイル側連携画面６２はモバイル端末４０に表示されていたときと同じサイズで表示してもよい。

次に、図１０（ａ）に示すように、操作パネル３０に表示されているＭＦＰ側連携解除前縮小画面６１ａがユーザによってタッチされると、同図（ｂ）に示すように、操作パネル３０には、ＭＦＰ側連携解除前縮小画面６１ａが拡大されて連携表示中と同じＭＦＰ側連携画面６１が表示される。モバイル側連携解除前縮小画面６２ａは消去される。

一方、図１１（ａ）に示すように、操作パネル３０に表示されているモバイル側連携解除前縮小画面６２ａがユーザによってタッチされると、同図（ｂ）に示すように、操作パネル３０には、モバイル側連携解除前縮小画面６２ａが拡大されて表示される。ＭＦＰ側連携解除前縮小画面６１ａは消去される。

図１２は、第２の実施の形態に係る操作表示システム３の画像形成装置１０（ＭＦＰ）およびモバイル端末４０の連携表示の解除に係る動作を示す流れ図である。図８と同一処理には同じステップ番号を付してある。なお、モバイル端末４０の動作は図８と同一である。

画像形成装置１０は、連携表示が開始されると（ステップＳ１０１；Ｙｅｓ）、ＭＦＰ側連携画面を表示する（ステップＳ１０２）。同様に、モバイル端末４０は、連携表示が開始されると（ステップＳ２０１；Ｙｅｓ）、モバイル側連携画面を表示する（ステップＳ２０２）。

連携表示中、画像形成装置１０、モバイル端末４０はそれぞれ、操作パネル３０とモバイル端末４０のどちらを主に使用してユーザが作業しているかを監視する主従監視処理、および、連携表示を解除する事象の発生を監視する連携監視処理を繰り返し実行する（ステップＳ１０３、Ｓ１０４、Ｓ１０５；Ｎｏ、Ｓ２０３、Ｓ２０４、Ｓ２０５；Ｎｏ）。

画像形成装置１０は、連携表示を解除する事象の発生が検出されたら（ステップＳ１０５；Ｙｅｓ）、連携表示を解除すると共に、連携表示中にユーザがモバイル端末４０を主として作業を行っていたか否かを判断する（ステップＳ１０６）。連携表示中にユーザがモバイル端末４０を主として作業を行っていた場合は（ステップＳ１０６；Ｙｅｓ）、連携解除前にモバイル端末４０に表示されていたモバイル側連携画面と操作パネル３０に表示されていたＭＦＰ側連携画面の双方または一方を縮小し、双方の画面を操作パネル３０の表示部３１に集約表示する（ステップＳ１６１）。

次に、ＭＦＰ側連携画面を縮小等して表示している領域とモバイル側連携画面を縮小等して表示している領域のいずれか一方の選択操作をユーザから受ける（ステップＳ１６２）。そして、選択された領域に対応する方の画面を拡大して表示し、他方は消去して（ステップＳ１６３）、本処理を終了する。

連携表示中にユーザがモバイル端末４０を主として作業を行っていなかった場合は（ステップＳ１０６；Ｎｏ）、連携解除する直前に操作パネル３０に表示されていたＭＦＰ側連携画面を操作パネル３０の表示部３１にそのまま継続表示して処理を終了する。

モバイル端末４０は、連携表示を解除する事象の発生が検出されたら（ステップＳ２０５；Ｙｅｓ）、連携解除すると共に、電話着呼の画面などのアプリケーション画面を表示して（ステップＳ２０６）、処理を終了する。

なお、連携表示中にユーザが操作パネル３０を主として作業を行った場合にも、連携解除時に、モバイル側連携画面とＭＦＰ側連携画面の双方を集約表示し、いずれか一方の選択操作を受け付け、その選択された方の画面を操作パネル３０に表示し、他方は消去するようにしてもよい。

＜第３の実施の形態＞
第３の実施の形態に係る操作表示システム３では、操作釦がグループ化されている。連携解除前に、モバイル側連携画面に表示されていた第１の操作釦が操作され、かつ第１の操作釦と同じグループに属する第２の操作釦がＭＦＰ側連携画面に表示されていた場合は、連携解除後の操作パネル３０の表示部３１に少なくとも第１の操作釦と第２の操作釦を表示するようになっている。第１の実施の形態と同様の部分についての説明は適宜省略する。

図１３は、第３の実施の形態おける連携解除時の表示動作の一例を示している。同図（ａ）は、画像形成装置１０の操作パネル３０とモバイル端末４０が連携表示を行っている状態を示す。ここで、モバイル端末４０に表示されている操作釦Ａ、Ｂと操作パネル３０に表示されている操作釦Ｃ、Ｄとは同じグループに属しており、操作釦Ｅはこのグループに属していない。

ユーザが操作釦Ｂを操作して作業している状態で、電話着呼等によって連携表示が解除されると、図１３（ｂ）に示すように、連携解除後の操作パネル３０の表示部３１に、操作釦Ｂが属していたグループに属する操作釦Ａ〜Ｄは表示し、操作釦Ｂと同じグループに属していない操作釦Ｅは表示しないように制御される。

図１４は、別の画面例を示している。同図（ａ）では、モバイル端末４０に表示された操作釦Ｂと、操作パネル３０に表示された操作釦Ｃ、Ｄは同じグループに属しており、モバイル端末４０に表示された操作釦Ａおよび操作パネル３０に表示された操作釦Ｅ、Ｆは、操作釦Ｂと同じグループに属していない。

ユーザが操作釦Ｂを操作して作業している状態で、電話着呼等によって連携表示が解除されると、図１４（ｂ）に示すように、連携解除後の操作パネル３０の表示部３１に、操作釦Ｂが属していたグループに属する操作釦Ｂ〜Ｄは表示し、操作釦Ｂと同じグループに属していない操作釦Ａ、Ｅ、Ｆは表示しないように制御される。

なお、図１４の場合、連携解除後の操作パネル３０にはモバイル端末４０に表示されていた操作釦についてはすべてを表示してもよい。すなわち、図１４の例では、操作釦Ａ〜Ｄを連携解除後の操作パネル３０に表示するようにしてもよい。また、操作パネル３０に表示されている。操作釦Ｂと同一グループに属する操作釦Ｃ、Ｄのうち、少なくとも１つが、連携解除後の画面に表示される構成でもかまわない。

図１５は、第３の実施の形態に係る操作表示システム３の画像形成装置１０（ＭＦＰ）およびモバイル端末４０の連携表示の解除に係る動作を示す流れ図である。図８と同一処理には同じステップ番号を付してある。なお、画像形成装置１０側のステップＳ１０１〜Ｓ１０６、およびモバイル端末４０の動作は図８と同一である。

ステップＳ１０６において、連携表示中にユーザがモバイル端末４０を主として作業を行っていた場合は（ステップＳ１０６；Ｙｅｓ）、連携解除前にモバイル端末４０にて操作された操作釦と同じグループに属する操作釦を操作パネル３０の表示部３１に表示し、該グループに属さない操作釦は表示しない（ステップＳ１７１）。

なお、連携表示中にユーザが操作パネル３０を主として作業を行った場合にも、連携解除時に、連携解除前に操作パネル３０にて操作された操作釦と同じグループに属する操作釦を操作パネル３０の表示部３１に表示し、該グループに属さない操作釦は表示しないようにしてもよい。たとえば、図１３（ａ）で操作釦Ｃが操作された場合にも、連携解除後に同図（ｂ）の表示を行う。

＜第４の実施の形態＞
第４の実施の形態では、連携表示が解除された後、所定時間の経過前に、連携表示が再開される場合の動作を示す。

図１６、図１７、図１８は、第４の実施の形態おける表示動作の一例を示している。図１６（ａ）は、画像形成装置１０の操作パネル３０とモバイル端末４０が連携表示を行っている状態を示す。ユーザは、モバイル端末４０に表示されたモバイル側連携画面６２を主に使用して作業中である。たとえば、操作釦Ａを操作していたものとする。このとき、モバイル端末４０に電話着呼が発生して、連携解除になると、同図（ｂ）に示すように、操作パネル３０には、連携解除前にモバイル端末４０に表示されていたモバイル側連携画面６２の内容が連携解除後の操作パネル３０に表示される。この動きは第１の実施の形態と同一である。

その後、所定時間の経過前にモバイル端末４０が再び操作パネル３０の横に並置されて連携表示が再開可能な状態になると、次のいずれかの処理が選択されて実行される。

（１）連携解除後、再開までの間に、ユーザが操作パネル３０で何も操作しなかった場合は、連携解除前と同じ表示状態に復帰して連携表示を再開する（図１７）。

（２）連携解除後、再開までの間に、ユーザが操作パネル３０を操作していた場合は、連携表示を再開する際に、操作パネル３０の表示内容をそのまま維持し、モバイル端末４０には、操作パネル３０に表示している画面に続く画面、あるいは操作パネル３０に表示している画面に関連する画面を表示して、連携表示を再開する（図１８）。

図１７は、上記（１）の例を示している。図１７（ａ）は連携解除中に何も操作を受けていない様子を示し、図１７（ｂ）は連携再開後の表示状態を示している。図１８は上記（２）の一例を示している。図１８（ａ）は、連携解除中に操作を受けた様子を示し、図１８（ｂ）は、連携再開後の表示状態を示している。図１８（ｂ）では、操作パネル３０の表示内容は連携解除中のまま維持され、操作パネル３０の左側に配置されたモバイル端末４０には、操作釦Ａの左側に続く操作釦Ｘ、Ｙが表示されている。

図１９は、第４の実施の形態における連携解除、再開の動作を示す流れ図である。図８と同一処理には同じステップ番号を付してある。なお、画像形成装置１０側のステップＳ１０１〜Ｓ１０７、およびモバイル端末４０の動作は図８と同一である。

ステップＳ１０６において、連携表示中にユーザがモバイル端末４０を主として作業を行っていた場合は（ステップＳ１０６；Ｙｅｓ）、連携解除前にモバイル端末４０に表示されていたモバイル側連携画面６２を操作パネル３０の表示部３１に表示してステップＳ１８１へ移行する。連携表示中にユーザがモバイル端末４０を主として作業を行っていなかった場合は（ステップＳ１０６；Ｎｏ）、連携解除前に操作パネル３０に表示されていたＭＦＰ側連携画面６１をそのまま操作パネル３０に継続表示してステップＳ１８１へ移行する。

ステップＳ１８１では、連携表示の再開を待機する（ステップＳ１８１；Ｎｏ）。なお、連携解除後、所定時間の経過前に、連携表示が再開されない場合は、この処理は終了する。連携解除後、所定時間の経過前に、連携表示が再開される場合は（ステップＳ１８１；Ｙｅｓ）、連携解除中に操作パネル３０にて操作を受けたか否かを判断する（ステップＳ１８２）。

連携解除中に操作パネル３０で操作を受けていた場合は（ステップＳ１８２；Ｙｅｓ）、操作パネル３０の表示はそのまま維持し、モバイル端末４０には、操作パネル３０に表示している画面の続きの画面、あるいは操作パネル３０に表示している画面に関連する画面を表示して（ステップＳ１８３）、処理を終了する。

連携解除中に操作パネル３０で操作を受けていない場合は（ステップＳ１８２；Ｎｏ）、操作パネル３０およびモバイル端末４０の表示内容を、連携解除前の状態に戻して（ステップＳ１８４）、処理を終了する。

このように第４の実施の形態では、連携解除中に操作パネル３０が操作されない場合は、連携解除前の状態に戻して連携表示を再開し、連携解除中に操作パネル３０が操作された場合は、連携解除中にユーザは操作パネル３０を使用して作業を行っているので、操作パネル３０の表示画面は維持し、この画面に関連する画面をモバイル端末４０に表示して連携表示を再開する。

以上、本発明の実施の形態を図面によって説明してきたが、具体的な構成は実施の形態に示したものに限られるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。

実施の形態では、画像形成装置１０に固定された操作パネル３０とモバイル端末４０が並置されて連携する場合を例に説明したが、操作パネル３０は画像形成装置１０から取り外し可能であってもよいし、個別のリモート操作パネルであってもよい。また２台のモバイル端末４０、あるいは画像形成装置１０から取り外した操作パネル３０とリモート操作パネルが並置され通信可能となって連携する場合にも本発明は適用される。

本発明は、操作パネル３０（操作表示装置）を画像形成装置１０と別体に構成し、操作パネル３０にＣＰＵ等の制御部を設け、実施の形態で画像形成装置１０のＣＰＵ１１が行っていた表示制御を操作パネル３０が行うようにしてもよい。

実施の形態では操作表示システム３を例示したが、本発明は、モバイル端末と連携表示可能な画像形成装置１０として構成されてもよいし、該画像形成装置１０の動作を制御するプログラムであってもよい。

３…操作表示システム
１０…画像形成装置
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
１４…不揮発メモリ
１５…ハードディスク装置
１６…自動原稿搬送部
１７…ネットワーク通信部
１８…画像読取部
１９…画像処理部
２１…プリンタ部
２２…ファクシミリ通信部
２３…認証部
３０…操作パネル
３１…表示部
３２…操作部
３２ａ…タッチパネル
３３…近接無線通信部
３４…接続検出部
４０…モバイル端末
４１…ＣＰＵ
４２…ＲＯＭ
４３…ＲＡＭ
４４…不揮発メモリ
４５…認証部
４６…操作部
４６ａ…タッチパネル
４６ｂ…ハードキー
４７…表示部
４８…ネットワーク通信部
４９…近接無線通信部
５１…操作釦
５２…連携開始釦
５３…連携解除釦
６１…ＭＦＰ側連携画面
６１ａ…ＭＦＰ側連携解除前縮小画面
６２…モバイル側連携画面
６２ａ…モバイル側連携解除前縮小画面

Claims (16)

1. 操作部と表示部をそれぞれ備えた第１、第２の操作表示装置を含む操作表示システムであって、
   前記第１の操作表示装置の表示部に第１画面を表示させ、前記第１の操作表示装置に並置された前記第２の操作表示装置に前記第１画面に関連する第２画面を表示させる連携表示を制御する連携表示制御部と、
   前記連携表示中にユーザが前記第１画面と前記第２画面のいずれを主として作業を行っているかを判定する主従判定部と、
   前記連携表示を解除する契機となる所定の事象の発生を検出する解除事象検出部と、
   を有し、
   前記連携制御部は、前記連携表示中に前記解除事象検出部によって前記所定の事象の発生が検出された場合に、前記連携表示を解除すると共に、該解除の前における前記主従判定部の判定結果が前記第２画面が主であることを示す場合は、前記解除後の前記第１の操作表示装置の表示部に少なくとも前記第２画面の一部を含む画面を表示させる
   ことを特徴とする操作表示システム。
2. 前記所定の事象は、
   前記第１の操作表示装置の表示部と前記第２の操作表示装置の表示部との位置関係が、前記連携表示に不適な所定の位置関係に変化すること、
   前記第１の操作表示装置と前記第２操作表示装置との通信の切断、
   前記第２の操作表示装置に連携表示より優先されるイベントの発生、
   前記第１の操作表示装置と前記第２の操作表示装置のいずれかで連携表示の解除操作を受けること
   の中の少なくとも１つを含む
   ことを特徴とする請求項１に記載の操作表示システム。
3. 前記主従判定部は、
   前記所定の事象が発生する前にユーザが最後に見た表示部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの表示部であるか、
   前記所定の事象が発生する前にユーザが最後に操作した操作部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの操作部であるか、
   連携表示中にユーザが見た時間の長い表示部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの表示部であるか、
   連携表示中にユーザが操作した時間の長い操作部あるいは操作した回数の多い操作部が前記第１の操作表示装置と前記第２の操作表示装置のいずれの操作部であるか、
   前記第１の操作表示装置と前記第２の操作表示装置のどちらが連携表示中に設定された項目を多く表示しているか
   の少なくとも１つに基づいて前記判定を行う
   ことを特徴とする請求項１または２に記載の操作表示システム。
4. 前記連携制御部は、前記解除後の前記第１の操作表示装置の表示部に、前記第１画面と前記第２画面の双方を、少なくとも一方を縮小して表示し、前記第１画面と前記第２画面のいずれか一方の選択操作をユーザから受け付け、選択された画面を前記第１の操作表示装置の表示部に表示しかつ選択されなかった画面を前記第１の操作表示装置の表示部から消去する
   ことを特徴とする請求項１に記載の操作表示システム。
5. 前記連携制御部は、前記解除の前に、前記第２画面に表示されていた第１の操作釦が操作され、かつ前記第１の操作釦と同じグループに属する第２の操作釦が前記第１画面に表示されていた場合は、前記解除後の前記第１の操作表示装置の表示部に少なくとも前記第１の操作釦と前記第２の操作釦を表示させる
   ことを特徴とする請求項１に記載の操作表示システム。
6. 前記連携制御部は、前記第１の操作釦と同じグループに属する操作釦であって前記解除の前に前記第１画面と前記第２画面のいずれかに表示されていた操作釦はすべて前記解除後の前記第１の操作表示装置の表示部に表示し、解除の前に前記第１画面に表示されていた前記第１操作釦と同じグループに属さない操作釦は前記解除後の前記第１の操作表示装置の表示部に表示しない
   ことを特徴とする請求項５に記載の操作表示システム。
7. 前記連携制御部は、前記解除後、所定時間の経過前に、前記連携表示を再開する場合は、
   前記解除後に前記第１の操作表示装置においてユーザから設定操作を受けていた場合は、前記第１の操作表示装置の表示部に表示されている画面を前記第１の操作表示装置の表示部に表示しかつ該画面に関連する画面を前記第２の操作表示装置に表示して連携表示を再開し
   前記解除後に前記第１の操作表示装置においてユーザから設定操作を受けていない場合は、前記解除の前に前記第１の操作表示装置の表示部に表示されていた画面を前記第１の操作表示装置の表示部に表示しかつ前記解除の前に前記第２の操作表示装置の表示部に表示されていた画面を前記第２の操作表示装置の表示部に表示して連携表示を再開する
   ことを特徴とする請求項１乃至６のいずれか１つに記載の操作表示システム。
8. 前記第１の操作表示装置は、画像形成装置の操作パネルであり、前記第２の操作表示装置は、モバイル端末である
   ことを特徴とする請求項１乃至７のいずれか１つに記載の操作表示システム。
9. 操作部と、
   表示部と、
   前記表示部に第１画面を表示させ、自装置に並置された操作部と表示部を備えるモバイル端末に前記第１画面に関連する第２画面を表示させる連携表示を制御する連携表示制御部と、
   前記連携表示中にユーザが前記第１画面と前記第２画面のいずれを主として作業を行っているかを判定する主従判定部と、
   前記連携表示を解除する契機となる所定の事象の発生を検出する解除事象検出部と、
   を有し、
   前記連携制御部は、前記連携表示中に前記解除事象検出部によって前記所定の事象の発生が検出された場合に、前記連携表示を解除すると共に、該解除の前における前記主従判定部の判定結果が前記第２画面が主であることを示す場合は、前記解除後の前記表示部に少なくとも前記第２画面の一部を含む画面を表示させる
   ことを特徴とする操作表示装置。
10. 前記所定の事象は、
    自装置の表示部と前記モバイル端末の表示部との位置関係が、前記連携表示に不適な所定の位置関係に変化すること、
    自装置と前記モバイル端末との通信の切断、
    前記モバイル端末に連携表示より優先されるイベントの発生、
    自装置と前記モバイル端末のいずれかで連携表示の解除操作を受けること
    の中の少なくとも１つを含む
    ことを特徴とする請求項９に記載の操作表示装置。
11. 前記主従判定部は、
    前記所定の事象が発生する前にユーザが最後に見た表示部が自装置と前記モバイル端末のいずれの表示部であるか、
    前記所定の事象が発生する前にユーザが最後に操作した操作部が自装置と前記モバイル端末のいずれの操作部であるか、
    連携表示中にユーザが見た時間の長い表示部が自装置と前記モバイル端末のいずれの表示部であるか、
    連携表示中にユーザが操作した時間の長い操作部あるいは操作した回数の多い操作部が自装置と前記モバイル端末のいずれの操作部であるか、
    自装置と前記モバイル端末のどちらが連携表示中に設定された項目数を多く表示しているか
    の少なくとも１つに基づいて前記判定を行う
    ことを特徴とする請求項９または１０に記載の操作表示装置。
12. 前記連携制御部は、前記解除後の自装置の表示部に、前記第１画面と前記第２画面の双方を、少なくとも一方を縮小して表示し、前記第１画面と前記第２画面のいずれか一方の選択操作をユーザから受け付け、選択された画面を自装置の表示部に表示しかつ選択されなかった画面を自装置の表示部から消去する
    ことを特徴とする請求項９に記載の操作表示装置。
13. 前記連携制御部は、前記解除の前に、前記第２画面に表示されていた第１の操作釦が操作され、かつ前記第１の操作釦と同じグループに属する第２の操作釦が前記第１画面に表示されていた場合は、前記解除後の自装置の表示部に少なくとも前記第１の操作釦と前記第２の操作釦を表示させる
    ことを特徴とする請求項９に記載の操作表示装置。
14. 前記連携制御部は、前記第１の操作釦と同じグループに属する操作釦であって前記解除の前に前記第１画面と前記第２画面のいずれかに表示されていた操作釦はすべて前記解除後の自装置の表示部に表示し、解除の前に前記第１画面に表示されていた前記第１操作釦と同じグループに属さない操作釦は前記解除後の自装置の表示部に表示しない
    ことを特徴とする請求項１３に記載の操作表示装置。
15. 前記連携制御部は、前記解除後、所定時間の経過前に、前記連携表示を再開する場合は、
    前記解除後に自装置においてユーザから設定操作を受けていた場合は、自装置の表示部に表示されている画面を自装置の表示部に表示しかつ該画面に関連する画面を前記モバイル端末に表示して連携表示を再開し
    前記解除後に自装置においてユーザから設定操作を受けていない場合は、前記解除の前に自装置の表示部に表示されていた画面を自装置の表示部に表示しかつ前記解除の前に前記モバイル端末の表示部に表示されていた画面を前記モバイル端末の表示部に表示して連携表示を再開する
    ことを特徴とする請求項９乃至１４のいずれか１つに記載の操作表示装置。
16. 情報処理装置を、
    請求項９乃至１５のいずれか１つに記載の操作表示装置として機能させるプログラム。