JP4882288B2 - 表示制御装置、システム及び表示制御方法 - Google Patents

Description

本発明は、表示制御装置、システム及び表示制御方法に関する。

従来、１台のコンピュータで複数の表示装置への表示を操作するマルチディスプレイ機能が知られている。この機能は複数の情報を同時に見ることによって、作業効率の改善や、意思決定の迅速化を図るものである。このマルチディスプレイ機能を実現する方法の一つとして、ＦＸＰＡＬ(Fuji Xerox Palo Alto Laboratory)で開発されたｅｐｉｃのようにネットワークで接続されたパーソナルコンピュータＰＣに対してコマンドを送信することで１台のコンピュータで複数の表示装置を制御するものがある。また、株式会社プロジェクト・アイが開発したリアルマルチでは複数の表示装置に接続されたサーバをネットワークを通して操作できる機能を備えている。

これらの技術は、ネットワークを通した制御を可能としていることから、遠隔地へのマルチディスプレイ機能を実現することができる。これにより、ＴＶ会議システムなどと併用することで、遠隔地とのコミュニケーションの際にも上記マルチディスプレイの利点を生かすことができる。

複数表示装置や遠隔提示装置に関する従来技術として以下のようなものが提案されている。特許文献１に記載の装置は、複数表示装置により表示された静止画を、動画・音声などと同期して記録し、上記の記録を元に、単画像上で各表示装置で表示されていたものを動画・音声と共に同期再生する技術が提案されている（特許文献１参照）。２拠点間のＴＶ会議において互いの表示状態を知ることで端末間でのカーソルの指示対象を互いに把握できる技術が提案されている（特許文献２参照）。
特開２００３−８７７５８号公報 特開平９−１５４１１６号公報

しかしながら、遠隔地間でのコミュニケーションを行う場合、拠点間で例えば表示装置の数が違うなど表示装置の構成が違う場合、話者側で表示されている文書と視聴者側表示装置を１対１に対応させることができない。このため、表示装置への文書の割り当てを適切に行うことができないという問題があった。特許文献１では、全ての表示装置で表示されていた資料を単画像に納めるようにしているため、視認性の低下を引き起こしてしまう。

また、拠点間で表示構成や表示装置の位置関係に違いがある場合、「右」や「左」といった発声による位置関係の指示は適当でないため、視聴者がどの表示装置を視ればよいのかが分からないという問題があった。特許文献２では、ＴＶ会議の端末間でカーソルを共有し、指示している箇所を互いに把握できるようにしているが、表示装置の数が揃っていない場合には、視聴者がどの表示装置を視ればよいのかが分からないという問題は解決されない。

そこで、本発明は、上記問題点に鑑みてなされたもので、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も、視聴者に対して見易い画像を提供できる表示制御装置、システム及び表示制御方法を提供することを目的とする。

上記課題を解決するために、本発明は、第１の拠点に設置されている複数の第１の表示装置のそれぞれに表示する複数の画像を第２の拠点に設置されている１又は複数の第２の表示装置で表示できるよう変換する機能を有する表示制御装置であって、前記第１の表示装置のそれぞれに表示された複数の画像のうち前記第２の表示装置で着目してもらいたい画像として選択された着目画像と前記第１及び第２の表示装置の装置数に関する第１及び第２の設備情報とを受け付ける受付部と、前記受付部が受け付けた第１及び第２の設備情報に基づいて、前記第１の表示装置の装置数と前記第２の表示装置の装置数との相違を判定する判定部と、前記判定部によって前記第２の表示装置の装置数が前記第１の表示装置の装置数よりも多いと判定された場合、前記第１の表示装置の装置数と同数の前記第２の表示装置に前記複数の画像のそれぞれを表示し、残りの第２の表示装置に前記着目画像を表示するよう前記複数の画像を変換する変換部と、を備える。本発明によれば、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も、着目画像を優先して表示することにより、欲しい情報を損なうことなく、視聴者に対して見易い画像を提供できる。また、本発明によれば、使用しない表示装置に着目画像を表示することにより、着目画像を強調表示できる。

前記変換部は、前記判定部によって前記第２の表示装置の設置数が前記第１の表示装置の設置数よりも少ないと判定された場合、前記着目画像を表示するよう前記複数の画像を変換する。本発明によれば、第２の拠点の表示装置の数が第１の拠点の表示装置の数よりも少ないときは、着目する画像を表示することにより、着目画像を強調表示することができる。前記変換部は、前記着目画像の数が前記第２の表示装置の装置数より多いときは、前記着目画像同士を合成して表示するよう前記複数の画像を変換する。本発明によれば、見て欲しい着目画像を優先して表示することができる。

前記変換部は、複数の前記着目画像が複数の同じ内容の画像と異なる内容の画像とであるときは、前記同じ内容の画像の表示面積を異なる内容の画像の表示面積より広げつつ、前記同じ内容の画像と異なる内容の画像とを合成して表示するよう前記複数の画像を変換する。本発明によれば、着目画像の表示面積により、着目画像の優先度が分かるため、視聴者はいずれの着目画像に優先的に着目すれば良いのかを簡単に把握できる。前記変換部は、ズームアップ及びアニメーションの少なくとも一方を用いて前記着目画像を表示するよう前記複数の画像を変換する。本発明によれば、利用者は画像の動きを頼りにして着目画像を一目で把握できる。

前記変換部は、前記着目画像及び前記複数の画像に含まれる着目画像以外の画像の少なくとも一方の色を変えるよう前記複数の画像を変換する。本発明によれば、利用者は背景色を頼りにして着目画像を一目で把握できる。前記変換部は、前記着目画像の枠を縁取りして表示するよう前記複数の画像を変換する。本発明によれば、視聴者は、縁取りを頼りにして着目画像を一目で把握できる。

前記変換部は、前記着目画像内の背景色及び画像のヒストグラムの少なくとも一方に基づき補色関係にある色を求め、該補色関係にある色を前記縁取りの色として用いる。

前記変換部は、画像の明るさ及び画像のコントラストのうち少なくとも一方を用いて前記着目画像を表示するよう前記複数の画像を変換する。本発明によれば、視聴者は画像の明るさ又はコントラストの違いにより着目画像を一目で把握できる。

本発明の表示制御装置は、前記着目画像を音によって知らせるための制御信号を生成する生成部をさらに備える。本発明によれば、視聴者は音により着目画像を一目で把握できる。本発明の表示制御装置は、前記着目画像を照明によって知らせるための制御信号を生成する生成部をさらに備える。本発明によれば、視聴者は照明により着目画像を一目で把握できる。本発明の表示制御装置は、前記第２の設備情報を記憶する記憶部をさらに備える。表示装置の設備情報を記憶する記憶部を表示制御装置内に設けることにより表示装置の設備情報を簡単に得ることができる。前記表示装置は、ディスプレイ装置及び投影装置のうち一方で構成される。これにより、着目画像をディスプレイ装置から表示し、又は着目画像を投影装置から投影することができる。

本発明のシステムは、上記表示制御装置と、前記着目画像を選択する選択部及び前記選択部で選択された着目画像を送信する送信部を具備する端末とを備える。本発明によれば、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も、着目画像を優先して表示することにより、視聴者に対して見易い画像を提供できるシステムを提供することができる。本発明のシステムは、上記表示制御装置と、前記着目画像を選択する選択部と及び前記表示制御装置で変換した複数の画像を送信する送信部とを具備する端末とを備える。本発明によれば、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も、着目画像を優先して表示することにより、視聴者に対して見易い画像を提供できるシステムを提供することができる。

本発明の表示制御方法は、第１の拠点に設置されている複数の第１の表示装置のそれぞれに表示する複数の画像を第２の拠点に設置されている１又は複数の第２の表示装置で表示できるよう変換する表示制御方法であって、前記第１の表示装置のそれぞれに表示された複数の画像のうち前記第２の表示装置で着目してもらいたい画像として選択された着目画像と前記第１及び第２の表示装置の装置数に関する第１及び第２の設備情報を受け付ける受付工程と、前記受付工程が受け付けた第１及び第２の設備情報に基づいて、前記第１の表示装置の装置数と前記第２の表示装置の装置数との相違を判定する判定工程と、前記判定工程によって前記第２の表示装置の装置数が前記第１の表示装置の装置数よりも多いと判定された場合、前記第１の表示装置の装置数と同数の前記第２の表示装置に前記複数の画像のそれぞれを表示し、残りの第２の表示装置に前記着目画像を表示するよう前記複数の画像を変換する変換工程とを有する。本発明によれば、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も、着目画像を優先的に表示することにより、見て欲しい情報を損なうことなく、視聴者に対して見易い画像を提供できる。また、本発明によれば、使用しない表示装置に着目画像を表示することにより、着目画像を強調表示できる。

前記変換工程は、前記判定工程によって前記第２の表示装置の設置数が前記第１の表示装置の設置数よりも少ないと判定された場合、前記着目画像を表示するよう前記複数の画像を変換する。本発明によれば、第２の拠点の表示装置の数が第１の拠点の表示装置の数よりも少ないときは、着目する画像を表示することにより、着目画像を強調表示することができる。

本発明によれば、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も、視聴者に対して見易い画像を提供できる表示制御装置、システム及び表示制御方法を提供することができる。

以下、本発明を実施するための最良の形態について説明する。

図１は、本発明の実施例に係るシステムの構成図である。以下では本発明の表示制御装置を遠隔会議に適用した例について説明する。システム１は複数の拠点システム２〜５を備える。拠点システム２〜５はネットワーク６を介して接続されている。例えば拠点システム２〜５間で遠隔会議が行われている場合、拠点システム３の表示装置で表示されている画像は、ネットワーク６を介して各拠点システム２、４及び５に送られ、各拠点システム２、４及び５の表示装置では、拠点システム３において表示されている画像が表示される。

第２の拠点システム２は、管理サーバ（表示制御装置）２１、機器情報サーバ２２及び表示装置２３を備える。同様に、第１の拠点システム３は、管理サーバ（端末）３１、機器情報サーバ３２及び表示装置３３を備える。拠点システム２の表示装置２３は、２台の表示装置２３１及び２３２を含み、拠点システム３の表示装置３３は、３台の表示装置３３１、３３２及び３３３を含む。このように各拠点システム２〜５では表示装置の構成が違うため着目してもらいたい画像を上手く表示する必要がある。このため、第２の拠点システム２は、拠点システム３の表示装置３３で複数の画像を表示装置２３で表示できるよう変換する機能を有する。なお、他の拠点システム４及び５も同様な構成であるため説明は省略する。また、各拠点の表示装置の数が違うことを前提に以下説明を行う。

管理サーバ２１は、拠点システム２の全体を制御するものである。また、管理サーバ２１は、拠点システム３の表示装置３３で表示される複数の画像を拠点システム２の表示装置で表示できるよう変換する機能を有する。機器情報サーバ２２は、各拠点に設置されている表示装置の設備情報を記憶する。具体的には、機器情報サーバ２２は、各拠点に設置してある表示装置の数、各表示装置の解像度、表示装置の設置位置の関係、縦置き・横置きなどの情報を記憶する。機器情報サーバ２２は、管理サーバ２１の要求に応じて、各拠点に設置されている表示装置の設備情報を管理サーバ２１へ提供する。なお、本実施例では、機器情報サーバ２２は拠点毎に設けられているが、ネットワーク６上に一つのサーバを設け、このサーバで各拠点システムに設置されている表示装置の設備情報を全て管理するようにしてもよい。

表示装置２３は複数の表示装置２３１及び２３２を含む。各表示装置２３１及び２３２は、管理サーバ２１から送られてくる画像の情報に基づき所定の画像を表示する。各表示装置２３１及び２３２は、例えばディスプレイ装置やプロジェクタによって構成される。管理サーバ２１は、送受信部２１１、着目画像指定部２１２及び表示変換部２１３を備える。送受信部２１１は、他の拠点システム３〜５との間でデータの送受信を制御する。また、送受信部２１１は、拠点システム３から複数の画像のうち着目する画像に関する情報を受け付け、機器情報サーバ２２から拠点システム２の表示装置２３の設備情報を受け付ける。

例えば、拠点システム３の着目画像指示部３１２において表示する複数の画像の中から着目する画像が選択された場合、拠点システム３の送受信部３１１は、拠点システム３で話者が表示させようとしている表示装置３３の数に関する情報と着目画像に関する情報を他の拠点システム２、４及び５に送信する。送受信部２１１は、拠点システム３から、拠点システム３で話者が表示させようとしている表示装置３３の数に関する情報と着目画像に関する情報を受け付けると、これらを表示変換部２１３へ送る。

着目画像指定部２１２は、表示する複数の画像のうち着目する画像を選択するためのものである。着目画像指定部２１２は、複数表示装置に対し、時系列にそって予めどのスライドを同期して表示させるかを指定する。さらに、着目画像指定部２１２は、どの時点でどのスライドについて話すか、どの時点でどのスライドが重要であるかを指示することができる。

送受信部２１１は、着目画像指定部２１２で選択された着目する画像の情報を他の拠点システム３〜５に送る。表示変換部２１３は、話者が拠点システム３で表示させようとしている表示装置に関する情報及び拠点システム２の表示装置の設備情報に基づいて、複数の画像を表示する拠点システム３の表示装置３３の数と拠点システム２の表示装置２３の数の相違を判定する。次に、表示変換部２１３は、判定結果及び着目する画像に関する情報に基づいて、着目する画像を優先的に表示するよう複数の画像の情報を変換する。このように、表示変換部２１３は、拠点システム３で話者が表示させようとしている表示装置３３の数と拠点システム２の表示装置２３の数の相違を判定するため、例えば資料を持ち込んでみたものの、拠点システム３で表示装置が故障して表示装置３３の数が少なくなった場合や表示装置が新たに導入されて増えた場合などの想定外の事象にも対応させることができる。また、表示変換部２１３は、拠点システム３の表示装置３３と拠点システム２の表示装置２３の違いを判定するようにてもよい。各表示装置２３１及び２３２は、表示変換部２１３が変換した複数の画像の情報に基づいて、画像を表示又は投影する。

なお、以下では、拠点システム３の着目画像指示部３１２により指定された着目画像を強調して表示する例について説明する。拠点システム３の着目画像指示部３１２が指定して着目画像に関する情報は、送受信部３１１を介して、各拠点システム２、４及び５に送信されることを前提に以下説明を行う。また、以下では表示装置としてディスプレイ装置を用いて説明するが、プロジェクタであってもよい。

図２は、着目画像指示部３１２による着目画像指示するユーザインターフェースを示す図である。図２に示す例では、最初のタイミングで、拠点システム３の表示装置３３１には「スライド１」が、表示装置３３２には「スライド２」が、表示装置３３３には「スライド３」がそれぞれ表示されるよう設定されている。次のタイミングで、表示装置３３１には「スライド４」が、表示装置３３２には「スライド５」が、表示装置３３３には「スライド６」がそれぞれ表示されるよう設定されている。また、発表者は、着目画像指示部３１２を操作して、「スライド２」「スライド４」を着目画像として指定している。

図３は着目画像の指示を説明するための図である。発表者Ｍの指示に従い、表示装置３３１〜３３３に指定された画像がそれぞれ表示される。表示装置３３１〜３３３に接続された管理サーバ３１で着目画像を指示する。管理サーバ３１上の着目画像指示部３１２は、グラフィカルユーザインターフェイスとして実現されている。発表者Ｍは、管理サーバ３１のディスプレイ上でマウスやタッピングにより着目画像指示部３１２に指示を入力して着目画像指示を行うことができる。また、発表者Ｍは、プレゼンテーションの最中にリアルタイムに着目画像の指示を行うこともできる。

また、着目画像指示部３１２は、３次元ポインタ、指先につけたデバイス、レーザーポインタ、指、指示棒などの方向を認識し、着目画像を特定してもよい。着目画像の指示の方法は、上記に限定されることなく、「右の画像」、「Ｂ社製品」などの画像特定のためのキーワードによる発声、スライドタイトルやスライド内容の発声を音声認識により認識し、着目画像を特定してもよい。発声されたものがスライド内容の場合、スライドの内容解析により着目画像が自動的に特定されるようにしてもよい。送受信部３１１は、着目画像指示部３１２により着目画像が指示されると、複数の画像の情報と共に、着目画像に関する情報を他の拠点システム２、４及び５に送る。

図４は表示変換部２１３の処理フローチャートである。ステップＳ１１で、表示変換部２１３は、機器情報サーバ２２から得た拠点に設置されている表示装置の設備情報を参照して、複数の画像を表示する発表者側の拠点システム３の表示装置３３の数より拠点システム２にある表示装置２３の数が多いかどうかを判断する。

ステップＳ１２で、表示変換部２１３は、拠点システム３の表示装置３３の数が拠点システム２の表示装置２３の数よりも多いときは、拠点システム２の表示装置２３のうち使用予定でない表示装置に着目画像を充填して表示するよう複数の画像の情報を変換する。これにより、使用しない表示装置に着目画像を表示することにより着目画像を優先的に表示することができ、着目画像の強調表示が可能となる。ステップＳ１３で、表示変換部２１３は、拠点システム３の表示装置３３の数が拠点システム２の表示装置２３の数よりも少ないときは、着目する画像を優先的に表示するよう複数の画像の情報を変換する。これにより着目して欲しい情報を落とさないようにできる。

図５は、表示変換部２１３による表示変換例を示す図であり、同図（ａ）は着目画像が１枚の場合の表示変換例、（ｂ）は着目画像が複数の場合の表示変換例を示す図である。図５の例では、拠点システム３には、３台の表示装置３３１、３３２及び３３３が設置されており、拠点システム２には、１台の表示装置２３１が設置されている。図５（ａ）に示すように、拠点システム３の表示装置３３１には、「スライド１」が表示され、表示装置３３２には、着目画像である「スライド２」が表示され、表示装置３３３には「スライド３」が表示される。拠点システム２の表示装置２３１には、着目画像である「スライド２」が表示される。図５（ｂ）に示すように、拠点システム３の表示装置３３１には、着目画像である「スライド１」が表示され、表示装置３３２には、「スライド２」が表示され、表示装置３３３には着目画像である「スライド３」が表示され、拠点システム２の表示装置２３１には着目画像「スライド１」及び着目画像「スライド３」を合成したスライドが表示される。

図６は、表示変換部２１３による表示装置数に応じた表示変換処理のフローチャートである。拠点システム３の着目画像指示部３１２で着目画像が指示されると、複数の画像の情報と着目画像に関する情報がネットワーク６を介して、拠点システム２に送られる。送受信部２１１は、着目画像に関する情報を受け付け、機器情報サーバ２２から拠点システム２の表示装置２３の設備情報を受け付ける。ステップＳ２１で、着目画像に関する情報に基づき、着目画像があるかどうかが判断され、ステップＳ２２で、表示変換部２３１は、同図（ｂ）に示すように、着目画像が複数存在する場合には、ステップＳ２３で、複数の着目画像である「スライド１」及び「スライド３」を合成する処理を行う。例えば表示変換部２１３は、着目画像の数が拠点システム２の表示装置２３の数より多いときは、着目画像を合成して表示するよう複数の画像の情報を変換する。

ステップＳ２２で、表示変換部２１３は、着目画像が複数存在しない場合、ステップＳ２４で、図５（ａ）に示すように、着目画像である「スライド２」のみを表示側の拠点システム３の表示装置２３で表示するよう複数の画像の情報を変換する。このように、着目指定がされている画像のみを表示するため、遠隔側でも話者が話している画像が分かり、かつ、全ての画像を合成するのに比べ視認性を落とさずに表示できる。

図７は着目画像が複数ある場合の表示変換例を示す図であり、同図（ａ）は拠点システム３の表示装置３３での表示例を示す図、同図（ｂ）は拠点システム２が一つの表示装置２３１を持つ場合の表示例を示す図である。図７（ａ）において点線で囲われた「スライド１」及び「スライド２」が着目画像である。図８は、ステップＳ２３の詳細な変換処理のフローチャートである。ステップＳ３１で、表示変換部２１３は、着目画像中に同じ内容の着目画像が複数存在するかどうかを判断し、図７（ａ）に示すように、同じ内容の着目画像が複数存在する場合、ステップＳ３２で、同じ内容の着目画像は１画像とみなして、ステップＳ３３に進む。ステップＳ３１で、着目画像中に同じ内容の着目画像が存在しない場合には、ステップＳ３３に進む。ステップＳ３３で、表示変換部２１３は複数の着目画像である「スライド１」及び「スライド２」を合成する。

図９は着目画像が複数ある場合の他の表示変換例を示す図であり、（ａ）は拠点システム３の表示装置３３での表示例を示す図、同図（ｂ）は拠点システム２が一つの表示装置２３１を持つ場合の表示例を示す図である。図９（ａ）において点線で囲われた「スライド１」及び「スライド２」が着目画像である。図１０は、ステップＳ２３の詳細な変換処理のフローチャートである。ステップＳ４１で、表示変換部２１３は着目画像内に同じ内容のスライドが複数あるかどうかを判断し、着目画像内に同じ内容のスライドが複数含まれているときは、同じスライドは１画像とみなすが枚数は計上して、ステップＳ４３に進む。ステップＳ４３で、表示変換部２１３は、１画像とみなした着目画像である「スライド１」の枚数により着目画像である「スライド１」を表示面積を考慮して合成する。たとえば、表示変換部２１３は、同じ内容の着目画像の枚数が多いほど面積が大きくなるよう複数の画像の情報を変換する。これにより、着目画像の表示面積により着目画像の優先度が分かるため、視聴者はいずれの着目画像に着目すれば良いのかを簡単に把握できる。

図１１は画像の密になっている部分を抽出し合成する表示変換処理を説明する図であり、同図（ａ）は、拠点システム３が６の表示装置３３１〜３３６を持つ場合の表示例、同図（ｂ）は拠点システム２が一つの表示装置２３１を持つ場合の表示例を示す図である。表示変換部２１３は、拠点システム３の表示装置３３１〜３３６に表示されている「スライド１〜△」の情報に基づいて、同図（ｂ）に示すように、これらの画像の密になっている部分を抽出し合成する表示変換処理を行う。表示変換部２１３は、以下で示される文献の「ステンドグラス*」のアルゴリズムを用いて画像の密になっている部分を抽出して合成する。
*“Stained-Glass Visualization for Highly Condensed Video Summaries”,Proceedings of 2004 IEEE International Conference on Multimedia and Expo (ICME 2004).,

図１２は着目画像を充填する場合の表示変換例を示す図であり、（ａ）は拠点システム３が２つの表示装置３３１、３３２を持つ場合の表示例を示す図、同図（ｂ）は拠点システム２が３つの表示装置２３１、２３２及び２３３を持つ場合の表示例を示す図である。図１２（ａ）において、「スライド２」が着目画像である。表示変換部２１３は、拠点システム２の表示装置２３の数が拠点システム３の表示装置３３の数よりも多いときは、拠点システム２の表示装置のうち使用予定でない表示装置に着目画像である「スライド２」を充填して表示するよう複数の画像の情報を変換する。これにより、空いている表示装置２３３に着目画像を表示が表示されるため、視聴者は「スライド２」が着目画像であることを簡単に把握できる。

図１３は、着目画像を充填する場合の他の表示変換例を示す図であり、同図（ａ）は拠点システム３が２つの表示装置３３１、３３２を持つ場合の表示例を示す図、同図（ｂ）は拠点システム２が３つの表示装置２３１、２３２及び２３３を持つ場合の表示例を示す図である。図１３に示すように、表示変換部２１３は、着目画像である「スライド２」を２つの表示装置２３２及び２３３に拡大して表示するよう変換を行う。

図１４は、着目画像を充填する場合の他の表示変換例を示す図であり、同図（ａ）は拠点システム３が２つの表示装置３３１、３３２を持つ場合の表示例を示す図、同図（ｂ）は拠点システム２が３つの表示装置２３１、２３２及び２３３を持つ場合の表示例を示す図である。図１５は、図１４の表示変換処理のフローチャートである。

図１４の（ａ）に示すように、拠点システム３側の表示装置３３１は、「スライト１」、「スライド２」、「スライド３」、「スライド５」の順でスライドを表示し、表示装置３３２は、「スライド２」、「スライド３」、「スライド４」、「スライド６」の順でスライドを表示する。同図（ｂ）に示すように、拠点システム２側の表示装置２３１は、「スライド１」、「スライド２」、「スライド３」の順でスライドを表示し、表示装置２３２は、「スライド２」、「スライド３」、「スライド４」の順でスライドを表示し、表示装置２３３は、「スライド３」、「スライド４」、「スライド５」の順でスライドを表示する。同図において「スライド３」が着目画像である。

ステップＳ５１で、表示変換部２１３は、後に表示されるスライドで空いている表示装置を充填するよう画像の変換を行う。具体的には、同図（ｂ）に示すように、表示変換部２１３は、拠点システム２の表示装置２３３に「スライド３」を表示するよう画像の変換を行う。これにより、空いている表示装置２３３を充填して有効に利用できる。ステップＳ５２で、表示変換部２１３は、発表者側の拠点システム３の表示装置３３１及び３３２で表示されている「スライド１」「スライド２」を縁取り４１で囲むように画像の変換を行う。これにより話者側で表示されているスライドを把握することができる。ステップＳ５３で、表示変換部２１３は、着目画像があると判断した場合、ステップＳ５４で、該当するスライドの強調表示を行う。これにより発表者が重要または話している画像を把握できる。図１４（ｂ）では、着目画像「スライド３」を縁取り４２で囲むよう画像の変換を行い、画像の強調処理が行われている。また、同様の処理で前に表示されたスライドで空いている表示装置を充填する画像の変換を行う。

図１６は、着目画像の強調処理を説明するための図である。表示変換部２１３は、着目する画像である「スライド２」４１内の背景色又は画像「スライド２」４１のヒストグラムに基づき補色関係にある色を求め、補色関係にある色をスライドの縁取り４２の色として採用する。より詳細には、表示変換部２１３は、色ヒストグラムを用い、例えば最も頻度が高い色を代表色とし、この代表色の補色を採用する。これにより、着目画像をさらに強調させることができる。

図１７は、着目画像の強調処理の他の例を説明するための図である。同図（ａ）に示すように、表示装置２３１〜２３３には、「スライド１〜３」がそれぞれ表示されている。表示変換部２１３は、ズームアップを用いて着目画像である「スライド２」を表示するよう複数の画像の情報を変換する。これにより、利用者は画像の動きを頼りにして着目画像を一目で把握できる。また、同図（ｂ）に示すように、表示変換部２１３は、アニメーションを用いて着目画像である「スライド２」を表示するよう複数の画像の情報を変換する。これにより、利用者は画像の動きを頼りにして着目画像を一目で把握できる。

図１８（ａ）は着目画像以外にシェードをかける強調表現の例、同図（ｂ）は着目画像の枠を縁取りする強調表現の例、同図（ｃ）は着目画像以外を無表示する強調表現の例をそれぞれ示す図である。表示装置２３１〜２３３には表示変換部２１３で変換された画像がそれぞれ表示されている。「スライド２」が着目画像である。表示変換部２１３は、同図（ａ）に示すように、着目する画像である「スライド２」以外の画像にシェードをかけたり、同図（ｃ）に示すように、着目画像である「スライド２」以外の画像を黒色で表示するよう画像の情報を変換する。また、表示変換部２１３は、同図（ｂ）に示すように、着目画像である「スライド２」の枠を縁取りして表示するよう画像の情報を変換する。このように、表示変換部２１３は、着目する画像又は着目する画像以外の画像の色を変えるよう複数の画像の情報を変換する。これにより利用者は着目画像を一目で把握できる。

図１９（ａ）は明るさの強調を用いた強調表現の例、同図（ｂ）はコントラストを用いた強調表現の例、同図（ｃ）は着目画像以外をセピアにする強調表現の例を示す図である。同図（ａ）に示すように、表示変換部２１３は、画像の明るさを用いて着目する画像を表示するよう複数の画像の情報を変換する。また、同図（ｂ）に示すように、表示変換部２１３は、画像のコントラストを用いて着目する画像を表示するよう複数の画像の情報を変換する。さらに、同図（ｃ）に示すように、表示変換部２１３は、着目画像以外をセピアに表示するように画像の情報を変換する。このような強調表示により着目画像を一目で把握できる。

図２０（ａ）は音によって着目画像を知らせる例、同図（ｂ）は照明によって着目画像を知らせる例、同図（ｃ）は表示装置のフレームを発光させることによって着目画像を知らせる例をそれぞれ示す図である。拠点システム２の表示装置２３１〜２３３には「スライド１〜３」がそれぞれ表示されており、「スライド２」が着目画像である。表示変換部２１３は、着目画像である「スライド２」を音によって知らせるための制御信号を生成し、生成した制御信号を表示装置２３に出力する。同図（ａ）に示すように、表示装置２３に内蔵されたスピーカから着目画像を知らせる音声が発声される。また、表示変換部２１３は、着目画像である「スライド２」を照明によって知らせるための制御信号を生成し、生成した制御信号を表示装置２３へ出力する。同図（ｂ）に示すように、表示装置２３は、内蔵された照明を利用して、照明によって着目画像を知らせることができる。これにより視聴者は着目画像を一目で把握できる。

図２１は、着目画像をアバター（オブジェクト）によって知らせる例である。図２１に示すように、拠点システム２の表示装置２３１〜２３３には、「スライド１〜３」がそれぞれ表示されている。表示変換部２１３は、アバターＡによって着目画像である「スライド２」が一目で分かるしょうに複数の画像の情報を生成する。利用者はアバターＡの存在により一目で着目画像を把握することができる。

図２２は色覚異常の人がいる場合の表示変換処理のフローチャートである。ステップＳ６１で、表示変換部２１３は、例えば利用者によって入力された情報に基づいて、色覚異常がある人が会議に参加しているかどうかを判断し、色覚異常がある人が会議に参加している場合、ステップＳ６２で、例えば図２０（ａ）で示した方法などのように色を用いた強調表現以外の方法によって、着目画像を強調する。

本実施例によれば、拠点間で情報を共有する際に、拠点間の表示装置数が異なる場合も見て欲しい情報を損なうことなく、視聴者に対して見易い画像を提供できる。また、着目してもらいたい画像を強調表示することで、視聴者は見なければならない画像を一目で把握することができる。また、複数表示装置を備えた複数拠点間の遠隔会議において、互いの表示装置構成を意識せず表示を行うことができ、かつ、話者が視て欲しい画像についても伝えることができる。

なお、本発明による表示制御方法は、管理サーバ２１によって実現される。管理サーバ２１は、例えば、ＣＰＵ（Central Processing Unit）、ＲＯＭ(Read Only Memory)、ＲＡＭ(Random Access Memory)等を用いて実現される。管理サーバ２１は、複数の画像のうち着目する画像に関する情報と第２の拠点の表示装置の設備情報を受け付け、第２の拠点の表示装置の設備情報に基づいて、複数の画像を表示する第１の拠点の表示装置の数と第２の拠点の表示装置の数の相違を判定し、この判定結果及び着目する画像に関する情報に基づいて、着目する画像を表示するよう複数の画像の情報を変換する。

以上本発明の好ましい実施例について詳述したが、本発明は係る特定の実施例に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形、変更が可能である。なお、上記実施例では、着目画像に関する情報を受け付けた管理サーバ２１内で画像情報の変換を行う例について説明したが、本発明はこれには限定されず、着目画像を指示する管理サーバ３１内で画像情報の変換を行ってもよいし、ネットワーク６上にある他のサーバで画像情報の変換を行ってもよい。また、上記実施例では着目画面指示部は管理サーバ内としていたが、管理サーバ外にあるクライアントにあってもよい。

本発明の実施例に係るシステムの構成図である。 着目画像指示部による着目画像指示するユーザインターフェースを示す図である。 着目画像の指示を説明するための図である。 表示変換部の処理フローチャートである。 同図（ａ）は着目画像が１枚の場合の表示変換例、（ｂ）は着目画像が複数の場合の表示変換例を示す図である。 表示変換部による表示装置数に応じた表示変換処理のフローチャートである。 着目画像が複数ある場合の表示変換例を示す図である。 ステップＳ２３の詳細な変換処理のフローチャートである。 着目画像が複数ある場合の他の表示変換例を示す図である。 ステップＳ２３の詳細な変換処理のフローチャートである。 画像の密になっている部分を抽出し合成する表示変換処理を説明する図である。 着目画像を充填する場合の表示変換例を示す図である。 着目画像を充填する場合の他の表示変換例を示す図である。 着目画像を充填する場合の他の表示変換例を示す図である。 図１４の表示変換処理のフローチャートである。 着目画像の強調処理を説明するための図である。 着目画像の強調処理の他の例を説明するための図である。 （ａ）は着目画像以外にシェードをかける強調表現の例、（ｂ）は着目画像の枠を縁取りする強調表現の例、（ｃ）は着目画像以外を無表示する強調表現の例をそれぞれ示す図である。 （ａ）は明るさの強調を用いた強調表現の例、（ｂ）はコントラストを用いた強調表現の例、（ｃ）は着目画像以外をセピアにする強調表現の例を示す図である。 （ａ）は音によって着目画像を知らせる例、（ｂ）は照明によって着目画像を知らせる例、（ｃ）は表示装置のフレームを発光させることによって着目画像を知らせる例をそれぞれ示す図である。 着目画像をオブジェクトによって知らせる例である。 色覚異常の人がいる場合の表示変換処理のフローチャートである。

符号の説明

１ システム
２、３ 拠点システム
２１、３１ 管理サーバ
２１１、３１１ 送受信部
２１２、３１２ 着目画像指示部
２１３、３１３ 表示変換部
２２、３２ 機器情報サーバ
２３、３３ 表示装置

Claims (17)

1. 第１の拠点に設置されている複数の第１の表示装置のそれぞれに表示する複数の画像を第２の拠点に設置されている１又は複数の第２の表示装置で表示できるよう変換する機能を有する表示制御装置であって、
   前記第１の表示装置のそれぞれに表示された複数の画像のうち前記第２の表示装置で着目してもらいたい画像として選択された着目画像と前記第１及び第２の表示装置の装置数に関する第１及び第２の設備情報とを受け付ける受付部と、
   前記受付部が受け付けた第１及び第２の設備情報に基づいて、前記第１の表示装置の装置数と前記第２の表示装置の装置数との相違を判定する判定部と、
   前記判定部によって前記第２の表示装置の装置数が前記第１の表示装置の装置数よりも多いと判定された場合、前記第１の表示装置の装置数と同数の前記第２の表示装置に前記複数の画像のそれぞれを表示し、残りの第２の表示装置に前記着目画像を表示するよう前記複数の画像を変換する変換部と、
   を備えることを特徴とする表示制御装置。
2. 前記変換部は、前記判定部によって前記第２の表示装置の設置数が前記第１の表示装置の設置数よりも少ないと判定された場合、前記着目画像を表示するよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
3. 前記変換部は、前記着目画像の数が前記第２の表示装置の装置数より多いときは、前記着目画像同士を合成して表示するよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
4. 前記変換部は、複数の前記着目画像が複数の同じ内容の画像と異なる内容の画像とであるときは、前記同じ内容の画像の表示面積を異なる内容の画像の表示面積より広げつつ、前記同じ内容の画像と異なる内容の画像とを合成して表示するよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
5. 前記変換部は、ズームアップ及びアニメーションの少なくとも一方を用いて前記着目画像を表示するよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
6. 前記変換部は、前記着目画像及び前記複数の画像に含まれる着目画像以外の画像の少なくとも一方の色を変えるよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
7. 前記変換部は、前記着目画像の枠を縁取りして表示するよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
8. 前記変換部は、前記着目画像内の背景色及び画像のヒストグラムの少なくとも一方に基づき補色関係にある色を求め、該補色関係にある色を前記縁取りの色として用いることを特徴とする請求項７に記載の表示制御装置。
9. 前記変換部は、画像の明るさ及び画像のコントラストのうち少なくとも一方を用いて前記着目画像を表示するよう前記複数の画像を変換することを特徴とする請求項１に記載の表示制御装置。
10. 前記着目画像を音によって知らせるための制御信号を生成する生成部をさらに備えることを特徴とする請求項１に記載の表示制御装置。
11. 前記着目画像を照明によって知らせるための制御信号を生成する生成部をさらに備えることを特徴とする請求項１に記載の表示制御装置。
12. 前記第２の設備情報を記憶する記憶部をさらに備えることを特徴とする請求項１に記載の表示制御装置。
13. 前記表示装置は、ディスプレイ装置及び投影装置のうち一方で構成されることを特徴とする請求項１に記載の表示制御装置。
14. 請求項１から請求項１３のいずれか一項に記載の表示制御装置と、
    前記着目画像を選択する選択部及び前記選択部で選択された着目画像を送信する送信部を具備する端末と
    を備えるシステム。
15. 請求項１から請求項１３のいずれか一項に記載の表示制御装置と、
    前記着目画像を選択する選択部と及び前記表示制御装置で変換した複数の画像を送信する送信部とを具備する端末と
    を備えるシステム。
16. 第１の拠点に設置されている複数の第１の表示装置のそれぞれに表示する複数の画像を第２の拠点に設置されている１又は複数の第２の表示装置で表示できるよう変換する表示制御方法であって、
    前記第１の表示装置のそれぞれに表示された複数の画像のうち前記第２の表示装置で着目してもらいたい画像として選択された着目画像と前記第１及び第２の表示装置の装置数に関する第１及び第２の設備情報を受け付ける受付工程と、
    前記受付工程が受け付けた第１及び第２の設備情報に基づいて、前記第１の表示装置の装置数と前記第２の表示装置の装置数との相違を判定する判定工程と、
    前記判定工程によって前記第２の表示装置の装置数が前記第１の表示装置の装置数よりも多いと判定された場合、前記第１の表示装置の装置数と同数の前記第２の表示装置に前記複数の画像のそれぞれを表示し、残りの第２の表示装置に前記着目画像を表示するよう前記複数の画像を変換する変換工程と
    を有することを特徴とする表示制御方法。
17. 前記変換工程は、前記判定工程によって前記第２の表示装置の設置数が前記第１の表示装置の設置数よりも少ないと判定された場合、前記着目画像を表示するよう前記複数の画像を変換することを特徴とする請求項１６に記載の表示制御方法。

Images