JP2018022044A - Image processing apparatus, multi-projection system, method for controlling image processing apparatus, and program - Google Patents

Abstract

PROBLEM TO BE SOLVED: To suppress a reduction in visibility of graphics due to the graphics being displayed in an overlapped area in multi-projection.SOLUTION: An image processing apparatus comprises: a specification unit that specifies an item of attention from items included in graphics to be combined with an image projected by a projection unit; a changing unit that changes a display form of the graphics on the basis of information on a non-overlapped area of the image projected from the projection unit and an image projected from another projection unit and information on the item of attention; and a projection control unit that causes the projection unit to project the graphics the display form of which has been changed by the changing unit.SELECTED DRAWING: Figure 1

Description

本発明は、画像処理装置、マルチプロジェクションシステム、画像処理装置の制御方法およびプログラムに関するものである。   The present invention relates to an image processing apparatus, a multi-projection system, an image processing apparatus control method, and a program.

近年、大きな会場等で大きなスクリーンを設営する需要があり、複数の投射型画像表示装置を用いて大きな一つのスクリーンを実現している場合がある。スクリーンには、複数の投射型画像表示装置のそれぞれの画像表示領域に重畳領域が設けられている。その重畳領域の映像の重なりが目立たないように画像処理するエッジブレンドの技術が一般的に用いられている。エッジブレンド技術では、重畳領域の画像信号に対して輝度補正を行うことで、つなぎ目を目立たなくしている。また、重畳領域を所定の幅とすることにより、投射型画像表示装置ごとに輝度や色味などの特性が若干異なっていても、視認されにくくなる。   In recent years, there is a demand for setting up a large screen in a large venue or the like, and there is a case where a single large screen is realized using a plurality of projection type image display devices. The screen is provided with an overlapping region in each image display region of the plurality of projection type image display devices. An edge blending technique is generally used in which image processing is performed so that overlapping of the images in the overlapping region is not noticeable. In the edge blend technique, the joint is made inconspicuous by performing luminance correction on the image signal in the superimposed region. In addition, by setting the overlapping region to a predetermined width, even if characteristics such as luminance and color are slightly different for each projection type image display device, it is difficult to be visually recognized.

しかし、複数の投射型画像表示装置間の個体差等による輝度や色補正等を、調整用テストパターン画像を表示させて、リモコン等を用いて合わせ込み調整する場面において、メニュー等のグラフィックスが重畳領域に跨って表示される場合がある。この調整時に使用される輝度、色補正等の調整用メニュー等のグラフィックスは、投射型画像表示装置に個別的なものであるため、マルチスクリーンを構成する他の投射型画像表示装置からグラフィックスが同じ投影位置に表示されるものではない。そのため、重畳領域に跨るグラフィックスはエッジブレンド処理により輝度が低下し、結果としてグラフィクスの視認性が低下する。そこで、グラフィックスが重畳領域にかからないようにグラフィックスの表示位置を変更することが考えられる。   However, when adjusting the brightness and color correction due to individual differences among a plurality of projection type image display devices by displaying a test pattern image for adjustment and adjusting it using a remote control etc., graphics such as menus are not available. It may be displayed across the overlapping area. Since graphics for adjustment menus such as brightness and color correction used for this adjustment are specific to the projection type image display device, graphics from other projection type image display devices constituting a multi-screen are used. Are not displayed at the same projection position. Therefore, the graphics straddling the superimposition area are reduced in luminance by the edge blending process, and as a result, the visibility of the graphics is reduced. Therefore, it is conceivable to change the display position of the graphics so that the graphics do not cover the overlapping area.

また、特許文献１では、表示装置の操作者のスクリーンに対する位置（角度）に応じてグラフィックスの形状を操作者が見やすい形状へ変形させる技術が開示されている。例えば、矩形のグラフィックスを構成する辺のうち操作者から遠い辺が台形の底辺となるように矩形から台形へと形状を変更している。   Japanese Patent Application Laid-Open No. 2004-228561 discloses a technique for changing the shape of graphics into a shape that is easy for the operator to see according to the position (angle) of the display device operator with respect to the screen. For example, the shape is changed from a rectangle to a trapezoid so that the side far from the operator among the sides constituting the rectangular graphics becomes the base of the trapezoid.

特開２０１３−８３７５５号公報JP2013-83755A

しかしながら、重畳領域のサイズによっては非重畳領域にグラフィックスが収まらないことがある。例えば、図３に示すように、２つの投射型画像表示装置が画像を投影する際の重畳領域が広い場合には、従来のようにグラフィックス３０１の表示位置を変更したり、あるいは、特許文献１のように形状を変更したりしても、グラフィックス３０１が重畳領域に跨ることになる。その場合、エッジブレンド処理により輝度が低下するため、重畳領域におけるグラフィックスの視認性が低下する。   However, depending on the size of the overlapping area, the graphics may not fit in the non-overlapping area. For example, as shown in FIG. 3, when the overlapping area when two projection-type image display devices project an image is wide, the display position of the graphics 301 is changed as in the past, or Patent Literature Even if the shape is changed as in 1, the graphics 301 straddles the overlapping region. In that case, since the brightness is reduced by the edge blending process, the visibility of graphics in the overlapped area is lowered.

本発明は、上記の課題に鑑みてなされたものであり、マルチプロジェクションにおける重畳領域にグラフィックスが表示されることによるグラフィックスの視認低下を抑制する技術を提供することを目的とする。   The present invention has been made in view of the above-described problems, and an object of the present invention is to provide a technique for suppressing a reduction in the visual recognition of graphics due to the display of graphics in a superimposed region in multi-projection.

上記の目的を達成する本発明に係る画像処理装置は、
投影手段により投影される画像に合成されるグラフィックスに含まれる、項目から注目項目を特定する特定手段と、
前記投影手段から投影される画像と他の投影手段から投影される画像との非重畳領域の情報と、前記注目項目の情報とに基づいて、前記グラフィックスの表示形態を変更する変更手段と、
前記変更手段により表示形態が変更されたグラフィックスを前記投影手段に投影させる投影制御手段と、
を備えることを特徴とする。 An image processing apparatus according to the present invention that achieves the above object is as follows.
A specifying unit for specifying an item of interest from an item included in graphics combined with an image projected by the projecting unit;
Changing means for changing a display form of the graphics based on information on a non-overlapping area between an image projected from the projection means and an image projected from another projection means, and information on the attention item;
Projection control means for causing the projection means to project graphics whose display form has been changed by the changing means;
It is characterized by providing.

本発明によれば、マルチプロジェクションにおける重畳領域にグラフィックスが表示されることによるグラフィックスの視認低下を抑制することができる。   ADVANTAGE OF THE INVENTION According to this invention, the visual recognition fall of graphics by displaying a graphics in the superimposition area | region in multiprojection can be suppressed.

マルチプロジェクションシステムが含む投射型画像表示装置の構成例を示す図。The figure which shows the structural example of the projection type image display apparatus which a multi-projection system contains. 画像処理装置の処理手順を示すフローチャート。5 is a flowchart showing a processing procedure of the image processing apparatus. グラフィックスの表示形態の変更例として、グラフィックスの位置を調整する例を示す図。The figure which shows the example which adjusts the position of graphics as an example of a change of the display form of graphics. グラフィックスの表示形態の変更例として、グラフィックスを縮小する例を示す図。The figure which shows the example which reduces graphics as an example of a change of the display form of graphics. グラフィックスの表示形態の変更例として、グラフィックスの項目の一部を削減する（非表示にする）例を示す図。The figure which shows the example which reduces a part of graphics item (it hides) as a modification example of the display form of graphics. グラフィックスの表示形態の変更例として、グラフィックスのスタイル（文字や数字等の表記方向）を変更する例を示す図。The figure which shows the example which changes the style (notation direction of a character, a number, etc.) of graphics as an example of a change of the display form of graphics.

以下、図面を参照しながら実施形態を説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。   Hereinafter, embodiments will be described with reference to the drawings. The configurations shown in the following embodiments are merely examples, and the present invention is not limited to the illustrated configurations.

＜概要＞
本実施形態では、２台の投射型画像表示装置から投影された画像表示領域に重複領域を設けて１つのスクリーンを構成するマルチプロジェクションシステムを想定する。各投射型画像表示装置は、１つのスクリーンを表示するために、画像データを分割してそれぞれ投影する。その際、分割された画像データは、指定された幅を有する重畳領域を設けて投影される。 <Overview>
In the present embodiment, a multi-projection system is assumed in which an overlapping area is provided in an image display area projected from two projection type image display apparatuses to constitute one screen. Each projection-type image display device divides and projects image data in order to display one screen. At this time, the divided image data is projected with a superposed area having a designated width.

本実施形態では、２台の投射型画像表示装置のうち１台のグラフィックスを表示させながら、投射型画像表示装置間のコントラストを、調整用テストパターン画像を表示させて、リモコンを用いて合わせ込み調整する場面を想定する。ここで、グラフィックスは、例えば、投影画像の色合い、色温度、色の濃さ、及び、コントラストのうち少なくとも何れか１つの設定を行うためのメニュー画像である。   In this embodiment, the contrast between the projection type image display devices is displayed using the remote control by displaying the adjustment test pattern image while displaying one of the two projection type image display devices. Suppose you want to adjust Here, the graphics is a menu image for setting at least one of the hue, color temperature, color density, and contrast of the projected image, for example.

本実施形態では、重畳領域（非重畳領域）の情報に基づいて、グラフィックスに含まれる操作者の注目項目（メニュー中の「明るさ」、「コントラスト」など）を当該操作者が視認できるように、グラフィックスの表示形態を変更する例を説明する。具体的には、グラフィックス全体を縮小したり、注目項目以外の項目を削減したり（非表示にしたり）、グラフィックスの文字の表記方向を例えば横書きから縦書きへと変更したりする。   In the present embodiment, the operator's attention items (such as “brightness” and “contrast” in the menu) included in the graphics can be visually recognized by the operator based on the information on the overlapping area (non-overlapping area). Next, an example of changing the graphics display mode will be described. More specifically, the entire graphics is reduced, items other than the item of interest are reduced (hidden), or the character writing direction of the graphics is changed from horizontal writing to vertical writing, for example.

＜装置構成＞
図１は、本実施形態に係るマルチプロジェクションシステムを構成する一台の投射型画像表示装置（プロジェクタ１０）の構成例を示す図である。プロジェクタ１０は、画像処理装置１０１と、投影部１０５とを含んで構成されている。 <Device configuration>
FIG. 1 is a diagram illustrating a configuration example of one projection type image display apparatus (projector 10) constituting the multi-projection system according to the present embodiment. The projector 10 includes an image processing apparatus 101 and a projection unit 105.

画像処理装置１０１は、外部から入力された画像信号を画像入力部１０２で受信し、画像信号を画像フレーム単位に分けて画像処理部１０３に送信する。画像処理部１０３は、各画像フレームをＩＰ変換や解像度変換等の画像処理をパイプラインで且つリアルタイムに行う。また、画像処理部１０３は、領域情報保持部１１２から重畳領域の座標情報を取得し、重畳領域に対してエッジブレンド処理を行う。領域情報保持部１１２は、重畳領域の幅の情報や、重畳領域の座標情報等を保持している。重畳領域の幅は予め操作者により指定されてもよいし、デフォルトの値を用いてもよい。   The image processing apparatus 101 receives an image signal input from the outside by the image input unit 102, divides the image signal into image frames, and transmits the image signal to the image processing unit 103. The image processing unit 103 performs image processing such as IP conversion and resolution conversion on each image frame in a pipeline and in real time. Further, the image processing unit 103 acquires the coordinate information of the superimposed region from the region information holding unit 112, and performs edge blend processing on the superimposed region. The area information holding unit 112 holds information on the width of the overlapping area, coordinate information on the overlapping area, and the like. The width of the overlapping area may be designated in advance by the operator, or a default value may be used.

合成部１０４は、画像処理部１０３で処理された画像と生成部１１１で生成されたグラフィックスとを合成し、投影部１０５に送信して投影制御を行う。投影部１０５は、プロジェクタ１０の光源のオン／オフ制御や光量の制御を行うとともに、画像の投影を行う。生成部１１１は、命令生成部１０９から命令を受信してグラフィックスを生成し、生成したグラフィックスを合成部１０４に送信する。命令生成部１０９は、グラフィックスの表示項目、その表示項目に関連する数値をグラフィックス情報保持部１１３から受信する。グラフィックス情報保持部１１３は、図３に示すようなグラフィックスの表示項目としてのメニュー内の各項目の情報、及び各項目に対応する数値データを保持している。   The synthesizing unit 104 synthesizes the image processed by the image processing unit 103 and the graphics generated by the generating unit 111, and transmits them to the projecting unit 105 to perform projection control. The projection unit 105 performs on / off control of the light source of the projector 10 and control of the light amount, and also projects an image. The generation unit 111 receives an instruction from the instruction generation unit 109, generates graphics, and transmits the generated graphics to the synthesis unit 104. The command generation unit 109 receives a graphics display item and a numerical value related to the display item from the graphics information holding unit 113. The graphics information holding unit 113 holds information on each item in the menu as a graphic display item as shown in FIG. 3 and numerical data corresponding to each item.

ＣＰＵ１０６は、各ブロックを制御するＣＰＵである。メモリ１０７は、制御プログラムや、画像データを記憶するメモリである。受信部１０８は、操作者が１台のプロジェクタ１０を設定する際に操作するリモコンからの指示信号を受信し、ＣＰＵ１０６に指示信号を送信する。   The CPU 106 is a CPU that controls each block. The memory 107 is a memory that stores a control program and image data. The receiving unit 108 receives an instruction signal from a remote controller that is operated when an operator sets one projector 10, and transmits the instruction signal to the CPU 106.

グラフィックス変更部１１０は、領域情報保持部１１２から取得した重畳領域の座標情報と、注目項目取得部１１４から取得した注目項目の情報と、視認サイズ決定部１１５から取得した認識可能な視認サイズ情報とに基づいて、グラフィックスの表示形態を変更する。   The graphics changing unit 110 includes the coordinate information of the superimposed region acquired from the region information holding unit 112, the information on the attention item acquired from the attention item acquisition unit 114, and the recognizable visual size information acquired from the visual size determination unit 115. Based on the above, the graphic display form is changed.

具体的には、非重畳領域にグラフィックスが収まらない場合には、グラフィックスの視認性を確保しながらグラフィックスのサイズを縮小する。また、グラフィックスのサイズを重畳領域に跨らないように縮小すると、グラフィックスの文字サイズが視認サイズよりも小さくなってしまう場合には、注目項目取得部１１４から取得した注目項目以外の項目を非表示にする。これにより、重畳領域に跨ることを避けつつ、グラフィックスの視認性を確保することができる。さらに、注目項目以外の項目を非表示にしてもグラフィックスが重畳領域に跨る場合には、グラフィックスの表記方向を横書きから縦書きに変更することにより、重畳領域に跨ることを避けてもよい。   Specifically, when the graphics do not fit in the non-overlapping area, the graphics size is reduced while ensuring the visibility of the graphics. In addition, if the graphics size is reduced to be smaller than the visual recognition size when the graphics size is reduced so as not to straddle the overlapping area, items other than the attention item acquired from the attention item acquisition unit 114 are displayed. You want to hide. As a result, it is possible to ensure the visibility of graphics while avoiding straddling the overlapping region. Furthermore, even if items other than the item of interest are not displayed, if the graphics straddles the superimposed region, it is possible to avoid straddling the superimposed region by changing the notation direction of the graphics from horizontal writing to vertical writing. .

注目項目取得部１１４は、操作者がリモコンで選択中の項目とその項目に関連する数値等をグラフィックス情報保持部１１３から取得する。そして、注目項目取得部１１４は、選択中の項目を注目項目の情報として受付け、グラフィックス変更部１１０に送信する。例えば、グラフィックスの"コントラスト"を操作者がリモコンで選択している場合には、"コントラスト"とその数値が注目項目の情報である。言い換えると、注目項目取得部１１４は、グラフィックスに含まれる複数の項目から注目項目を特定するユニットである。   The item-of-interest acquisition unit 114 acquires, from the graphics information holding unit 113, an item currently selected by the operator using the remote controller and a numerical value related to the item. Then, the attention item acquisition unit 114 accepts the selected item as attention item information, and transmits it to the graphics change unit 110. For example, when the operator selects “contrast” of graphics with a remote controller, “contrast” and its numerical value are information of the item of interest. In other words, the attention item acquisition unit 114 is a unit that identifies an attention item from a plurality of items included in graphics.

視認サイズ決定部１１５は、距離情報取得部１１６から取得した操作者と投影面との間の距離情報と、投影サイズ取得部１１７から取得した投影画像の大きさ情報とに基づいて、操作者が注目する注目項目に対する認識可能なサイズを決定する。視認サイズの種類の１つは文字サイズである。認識可能か否かは、操作者と投影面との距離情報に応じた認識可能な文字フォントサイズをテーブルデータとして予め用意しておき、当該テーブルを参照して判断する。当該テーブルは、平均的な人間の視力に基づいて作成すればよい。フォントサイズの定義として、例えば欧米の活字サイズに基づく単位ポイント（ｐｏｉｎｔ）を用いる。   Based on the distance information between the operator and the projection plane acquired from the distance information acquisition unit 116 and the size information of the projection image acquired from the projection size acquisition unit 117, the visual size determination unit 115 The recognizable size for the attention item of interest is determined. One type of viewing size is character size. Whether or not recognition is possible is determined by preparing a character font size that can be recognized according to distance information between the operator and the projection plane in advance as table data and referring to the table. The table may be created based on the average human eyesight. As the definition of the font size, for example, a unit point based on the Western type size is used.

距離情報取得部１１６は、操作者と投影面との距離情報を取得する。操作者と投影面との距離を取得する際には、操作者とプロジェクタ１０との距離及び角度、プロジェクタ１０と投影面との距離から三角法を用いて算出する。操作者とプロジェクタ１０との距離及び角度の情報は、赤外線リモコンの赤外光の強度と角度に基づいて取得する。   The distance information acquisition unit 116 acquires distance information between the operator and the projection plane. When acquiring the distance between the operator and the projection plane, the distance and the angle between the operator and the projector 10 and the distance between the projector 10 and the projection plane are calculated using a trigonometric method. Information on the distance and angle between the operator and the projector 10 is acquired based on the intensity and angle of infrared light from the infrared remote controller.

プロジェクタ１０と投影面との距離情報は、プロジェクタ１０に搭載した赤外線センサ（不図示）から取得する。赤外線センサは、センサ内部の光源（ＬＥＤやレーザダイオード）から光を照射する。照射された光は、測定対象物にあたると反射されて、センサの受光素子で受光される。当該光を評価・演算することで、プロジェクタ１０と投影面との距離を算出することができる。   The distance information between the projector 10 and the projection surface is acquired from an infrared sensor (not shown) mounted on the projector 10. The infrared sensor emits light from a light source (LED or laser diode) inside the sensor. The irradiated light is reflected when it hits the measurement object, and is received by the light receiving element of the sensor. By evaluating and calculating the light, the distance between the projector 10 and the projection surface can be calculated.

投影サイズ取得部１１７は、プロジェクタ１０に搭載した赤外線センサから取得したプロジェクタ１０と投影面との距離情報と、プロジェクタ１０の情報（ビーム角、ズーム比、台形補正係数等）とに基づいて投影サイズ（投影画像の大きさ）を算出する。   The projection size acquisition unit 117 calculates the projection size based on the distance information between the projector 10 and the projection plane acquired from the infrared sensor mounted on the projector 10 and information on the projector 10 (beam angle, zoom ratio, trapezoid correction coefficient, etc.). (Projection image size) is calculated.

投影サイズは、視聴距離とスクリーンサイズとの理想的な比率を示したＳＭＰＴＥ（米国映画テレビ技術者協会）が定める基準を参考に算出する。例えば、ビーム角３０°の場合には、「投影サイズ（例えばスクリーンの横幅）＝プロジェクタと投影面との距離×０．５３５」により算出する。   The projection size is calculated with reference to a standard defined by SMPTE (American Film and Television Engineers Association) that shows an ideal ratio between the viewing distance and the screen size. For example, when the beam angle is 30 °, “projection size (for example, horizontal width of screen) = distance between projector and projection plane × 0.535” is calculated.

＜処理＞
次に、図２のフローチャートを参照して、本実施形態に係る処理の手順を説明する。Ｓ２００において、命令生成部１０９は、領域情報保持部１１２に保持されている重複領域の情報と、グラフィックス情報保持部１１３に保持されているグラフィックスの情報とに基づいて、重畳領域にグラフィックスが含まれているか否かを判定する。グラフィックスが含まれている場合（Ｓ２０１；ＹＥＳ）、Ｓ２０１へ進む。一方、グラフィックスが含まれていない場合（Ｓ２０１；ＮＯ）、処理を終了する。 <Processing>
Next, a processing procedure according to the present embodiment will be described with reference to the flowchart of FIG. In S <b> 200, the instruction generation unit 109 executes graphics in the overlapping region based on the overlapping region information held in the region information holding unit 112 and the graphics information held in the graphics information holding unit 113. Whether or not is included is determined. If graphics are included (S201; YES), the process proceeds to S201. On the other hand, when the graphics is not included (S201; NO), the process ends.

Ｓ２０１において、注目項目取得部１１４は、グラフィックス情報保持部１１３から、操作者が操作している項目を注目項目情報として取得する。Ｓ２０２において、距離情報取得部１１６は、操作者と投影面との距離情報を取得する。Ｓ２０３において、投影サイズ取得部１１７は、投影画像の大きさの情報を取得する。Ｓ２０４において、視認サイズ決定部は、Ｓ２０２で取得された距離情報と、Ｓ２０３で取得された投影画像の大きさの情報とに基づいて、認識可能な文字サイズを決定する。例えば、距離情報及び投影画像の大きさの情報と、認識可能な文字サイズの情報とを予め対応付けたテーブルデータを参照して決定する。   In step S <b> 201, the attention item acquisition unit 114 acquires items operated by the operator as attention item information from the graphics information holding unit 113. In S202, the distance information acquisition unit 116 acquires distance information between the operator and the projection plane. In S203, the projection size acquisition unit 117 acquires information on the size of the projection image. In S204, the visual recognition size determination unit determines a recognizable character size based on the distance information acquired in S202 and the size information of the projection image acquired in S203. For example, the distance information and the size information of the projected image are determined with reference to table data in which recognizable character size information is associated in advance.

Ｓ２０５において、グラフィックス変更部１１０は、Ｓ２０４で決定された文字サイズと、重畳領域にグラフィックスが含まれることを回避するためにグラフィックスを縮小した場合の文字サイズとを比較する。具体的には、縮小後の文字サイズが認識可能な文字サイズより大きいか否かを判定する。縮小後の文字サイズが認識可能な文字サイズより大きい場合（Ｓ２０５；ＹＥＳ）、Ｓ２０６へ進む。一方、縮小後の文字サイズが認識可能な文字サイズより大きくない場合（Ｓ２０５；ＮＯ）、Ｓ２０７へ進む。   In S205, the graphics changing unit 110 compares the character size determined in S204 with the character size when the graphics is reduced in order to avoid including graphics in the superimposed region. Specifically, it is determined whether or not the reduced character size is larger than the recognizable character size. When the reduced character size is larger than the recognizable character size (S205; YES), the process proceeds to S206. On the other hand, if the reduced character size is not larger than the recognizable character size (S205; NO), the process proceeds to S207.

Ｓ２０６において、グラフィックス変更部は、グラフィックスを縮小する。ここで、図４はグラフィックスを縮小する例を示す。操作者が投射型画像表示装置４０２のグラフィックス４０１のコントラストに注目して操作を行っているものとする。２つの投射型画像表示装置から画像が投影されており、２つの画像の重畳領域が生じている。この時、グラフィックス４０１のサイズを縮小することにより、グラフィックス４０１が重畳領域に跨ることを回避することができ、且つ、縮小後の文字サイズが認識可能な文字サイズより大きいことから、グラフィックスの視認性も確保できる。   In S206, the graphics changing unit reduces the graphics. Here, FIG. 4 shows an example of reducing graphics. It is assumed that the operator performs an operation while paying attention to the contrast of the graphics 401 of the projection type image display device 402. Images are projected from the two projection type image display devices, and an overlapping region of the two images is generated. At this time, by reducing the size of the graphics 401, it is possible to avoid the graphics 401 from straddling the overlapping region, and the reduced character size is larger than the recognizable character size. Visibility can be secured.

Ｓ２０７において、グラフィックス変更部１１０は、グラフィックスの注目項目以外の項目を削減した場合、すなわち注目項目以外の項目を非表示にした場合に、グラフィックスが非重畳領域に収まるか否かを判定する。グラフィックスが非重畳領域に収まると判定された場合（Ｓ２０７；ＹＥＳ）、Ｓ２０８へ進む。一方、グラフィックスが非重畳領域に収まらないと判定された場合（Ｓ２０７；ＮＯ）、Ｓ２０９へ進む。   In S <b> 207, the graphics changing unit 110 determines whether the graphics can fit in the non-overlapping area when items other than the noticed item of graphics are reduced, that is, when items other than the noticed item are hidden. To do. When it is determined that the graphics can fit in the non-overlapping area (S207; YES), the process proceeds to S208. On the other hand, when it is determined that the graphics do not fit in the non-overlapping area (S207; NO), the process proceeds to S209.

Ｓ２０８において、グラフィックス変更部１１０は、グラフィックスの一部の項目を削減する（非表示にする）。ここで、図５はグラフィックスの項目を削減する（一部を非表示にする）例を示す。同様に、操作者が投射型画像表示装置５０２のグラフィックス５０１のコントラストに注目して操作を行っているものとする。グラフィックス５０１の注目項目以外を削減する（非表示にする）ことにより、グラフィックス５０１が重畳領域に跨ることを回避することができるため、グラフィックスの視認性を確保できる。なお、削減された（非表示にされた）項目は、リモコンを通じて操作者がカーソルを動かすことにより参照可能である。   In S208, the graphics changing unit 110 reduces (hides) some items of the graphics. Here, FIG. 5 shows an example in which graphics items are reduced (partially hidden). Similarly, it is assumed that the operator is performing an operation while paying attention to the contrast of the graphics 501 of the projection type image display device 502. By reducing (not displaying) items other than the attention item of the graphics 501, it is possible to avoid the graphics 501 from straddling the overlapping region, thereby ensuring the visibility of the graphics. The reduced (hidden) items can be referred to by moving the cursor by the operator through the remote controller.

Ｓ２０９において、グラフィックス変更部１１０は、グラフィックスの形状及び表記方向を変更する。ここで、図６はグラフィックスの形状や文字の表記方向を変更する例を示す。同様に、操作者が投射型画像表示装置６０２のグラフィックス６０１のコントラストに注目して操作を行っているものとする。グラフィックス６０１の注目項目以外を非表示にするとともに、例えば横表記から縦表記へ文字の表記方向を変更する。そして、グラフィックスの形状を横長から縦長へ変更する。すなわち、グラフィックスの表示項目の内容は変えずに文字の表記方向を変更する。これにより、グラフィックス６０１が重畳領域に跨ることを回避することができ、グラフィックスの視認性も確保できる。なお、削減された（非表示にされた）項目は、リモコンを通じて操作者がカーソルを動かすことにより参照可能である。   In S209, the graphics changing unit 110 changes the shape and the notation direction of the graphics. Here, FIG. 6 shows an example of changing the shape of graphics and the notation direction of characters. Similarly, it is assumed that the operator is performing an operation while paying attention to the contrast of the graphics 601 of the projection type image display device 602. Other than the attention item of the graphics 601 is not displayed, and the character writing direction is changed from horizontal notation to vertical notation, for example. Then, the graphics shape is changed from landscape to portrait. That is, the direction of the character is changed without changing the contents of the graphic display item. As a result, the graphics 601 can be prevented from straddling the overlapping region, and the visibility of the graphics can be ensured. The reduced (hidden) items can be referred to by moving the cursor by the operator through the remote controller.

以上説明したように、本発明によれば、重畳領域のサイズによらず（重畳領域が広い場合でも）、画面に表示するグラフィックスの視認性を保持することができる。   As described above, according to the present invention, the visibility of graphics displayed on the screen can be maintained regardless of the size of the overlapping area (even when the overlapping area is wide).

[変形例]
本実施形態に係るマルチプロジェクションシステムでは、投射型画像表示装置を用いて一つのスクリーンを２台で使用することに限定されるものではなく、また、左右の設置に限定されるものでもない。投射型画像表示装置が３台以上の複数であっても構わない。さらに、本実施形態は、設置時に限らずマルチプロジェクションシステムが動的な場合でも適用可能である。 [Modification]
The multi-projection system according to the present embodiment is not limited to the use of two projection screens using a projection type image display device, and is not limited to left and right installations. There may be three or more projection type image display devices. Furthermore, this embodiment is applicable not only at the time of installation but also when the multi-projection system is dynamic.

本実施形態では、図２のフローチャートに従ってグラフィックスの形状及び表記方向を変更する例を説明したが、操作者がリモコン等の指示によりグラフィックスの形状及び表記方向を変更してもよい。   In the present embodiment, the example in which the graphics shape and the notation direction are changed according to the flowchart of FIG. 2 has been described. However, the operator may change the graphics shape and the notation direction by an instruction from a remote controller or the like.

本実施形態では、操作者とプロジェクタとの距離やプロジェクタと投影面との距離を測定するためにリモコンの赤外線を利用しているが、カメラを用いて測定してもよい。また、本実施形態では、プロジェクタと投影面との距離と、プロジェクタのビーム角とを用いて投影サイズを算出しているが、カメラを用いて投影サイズを測定してもよい。   In this embodiment, the infrared rays of the remote controller are used to measure the distance between the operator and the projector and the distance between the projector and the projection surface, but the measurement may be performed using a camera. In the present embodiment, the projection size is calculated using the distance between the projector and the projection plane and the beam angle of the projector, but the projection size may be measured using a camera.

（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。 (Other embodiments)
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

１０：プロジェクタ、１０１：画像処理装置、１０２：画像入力部、１０３：画像処理部、１０４：合成部、１０５：投影部、１０６：ＣＰＵ、１０７：メモリ、１０８：受信部、１０９：命令生成部、１１０：グラフィックス変更部、１１１：生成部、１１２：領域情報保持部、１１３：グラフィックス情報保持部、１１４：注目項目取得部、１１５：視認サイズ決定部、１１６：距離情報取得部、１１７：投影サイズ取得部   10: projector, 101: image processing apparatus, 102: image input unit, 103: image processing unit, 104: composition unit, 105: projection unit, 106: CPU, 107: memory, 108: reception unit, 109: command generation unit 110: Graphics changing unit, 111: Generation unit, 112: Area information holding unit, 113: Graphics information holding unit, 114: Attention item acquisition unit, 115: Visualization size determination unit, 116: Distance information acquisition unit, 117 : Projection size acquisition unit

Claims (11)

投影手段により投影される画像に合成されるグラフィックスに含まれる項目から注目項目を特定する特定手段と、
前記投影手段から投影される画像と他の投影手段から投影される画像との非重畳領域の情報と、前記注目項目の情報とに基づいて、前記グラフィックスの表示形態を変更する変更手段と、
前記変更手段により表示形態が変更されたグラフィックスを前記投影手段に投影させる投影制御手段と、
を備えることを特徴とする画像処理装置。 Specifying means for specifying an item of interest from items included in graphics combined with an image projected by the projecting means;
Changing means for changing a display form of the graphics based on information on a non-overlapping area between an image projected from the projection means and an image projected from another projection means, and information on the attention item;
Projection control means for causing the projection means to project graphics whose display form has been changed by the changing means;
An image processing apparatus comprising: 前記特定手段は、前記グラフィックスに含まれる複数の項目のうち操作者により選択されている項目を、前記注目項目として特定することを特徴とする請求項１に記載の画像処理装置。   The image processing apparatus according to claim 1, wherein the specifying unit specifies an item selected by an operator from among a plurality of items included in the graphics as the attention item. 前記投影手段により画像が投影される投影面と、前記画像処理装置の操作者との距離情報を取得する情報取得手段と、
前記投影手段から投影面に投影される画像のサイズを取得するサイズ取得手段と、
を更に備え、
前記変更手段は、前記距離情報と、前記画像のサイズとに基づいて、前記注目項目の認識可能なサイズを決定することを特徴とする請求項１又は２に記載の画像処理装置。 Information acquisition means for acquiring distance information between a projection plane onto which an image is projected by the projection means and an operator of the image processing apparatus;
Size acquisition means for acquiring the size of an image projected on the projection plane from the projection means;
Further comprising
The image processing apparatus according to claim 1, wherein the changing unit determines a recognizable size of the item of interest based on the distance information and a size of the image. 前記変更手段は、前記グラフィックスを縮小した際の注目項目のサイズが前記認識可能なサイズより大きい場合、前記グラフィックスの注目項目を縮小することを特徴とする請求項３に記載の画像処理装置。   The image processing apparatus according to claim 3, wherein the change unit reduces the attention item of the graphics when the size of the attention item when the graphics is reduced is larger than the recognizable size. . 前記変更手段は、前記グラフィックスの項目の一部を削減した際に、前記削減されたグラフィックスが前記非重畳領域に収まる場合、前記グラフィックスの項目の一部を削減することを特徴とする請求項１乃至４の何れか１項に記載の画像処理装置。   The changing unit is configured to reduce a part of the graphics item when the reduced graphic fits in the non-overlapping area when the part of the graphics item is reduced. The image processing apparatus according to claim 1. 前記変更手段は、前記グラフィックスの前記注目項目以外の項目を非表示にすることにより、前記グラフィックスの項目の一部を削減することを特徴とする請求項５に記載の画像処理装置。   The image processing apparatus according to claim 5, wherein the changing unit reduces a part of the graphics items by hiding items other than the attention item of the graphics. 前記変更手段は、前記グラフィックスの項目の一部を削減した際に、前記削減されたグラフィックスが前記非重畳領域に収まらない場合、前記グラフィックスの形状及び表記方向を変更することを特徴とする請求項１乃至６の何れか１項に記載の画像処理装置。   The changing unit is configured to change a shape and a notation direction of the graphics when the reduced graphics does not fit in the non-overlapping area when a part of the graphics items is reduced. The image processing apparatus according to any one of claims 1 to 6. 前記グラフィックスは、投影画像の色合い、色温度、色の濃さ、及び、コントラストのうち少なくとも何れか１つの設定を行うためのメニュー画像であることを特徴とする請求項１乃至７の何れか１項に記載の画像処理装置。   8. The menu image according to claim 1, wherein the graphics is a menu image for setting at least one of hue, color temperature, color density, and contrast of a projected image. The image processing apparatus according to item 1. 複数の投射型画像表示装置を備えるマルチプロジェクションシステムであって、
前記投射型画像表示装置の各々は、
投影面に画像を投影する投影手段と、
前記画像に合成されるグラフィックスに含まれる項目から、注目項目を特定する特定手段と、
前記投影手段から投影される画像と他の投射型画像表示装置の投影手段から投影される画像との非重畳領域の情報と、前記注目項目の情報とに基づいて、前記グラフィックスの表示形態を変更する変更手段と、
前記変更手段により表示形態が変更されたグラフィックスを投影する投影手段と、
を備えることを特徴とするマルチプロジェクションシステム。 A multi-projection system comprising a plurality of projection type image display devices,
Each of the projection type image display devices,
Projection means for projecting an image onto a projection surface;
A specifying means for specifying an item of interest from items included in the graphics combined with the image;
Based on the information of the non-overlapping area between the image projected from the projection means and the image projected from the projection means of another projection type image display device, and the information of the attention item, the display form of the graphics is changed. Change means to change;
Projection means for projecting graphics whose display form has been changed by the changing means;
A multi-projection system comprising: 画像処理装置の制御方法であって、
投影手段により投影される画像に合成されるグラフィックスに含まれる項目から注目項目を特定するための情報の入力を受け付ける受付工程と、
前記投影手段から投影される画像と他の投影手段から投影される画像との非重畳領域の情報と、前記注目項目の情報とに基づいて、前記グラフィックスの表示形態を変更する変更工程と、
前記表示形態が変更されたグラフィックスを前記投影手段に投影させる投影制御工程と、
を有することを特徴とする画像処理装置の制御方法。 A control method for an image processing apparatus, comprising:
An accepting step of accepting input of information for identifying an item of interest from items included in graphics combined with an image projected by a projection unit;
A change step of changing a display form of the graphics based on information on a non-overlapping region between an image projected from the projection unit and an image projected from another projection unit, and information on the attention item;
A projection control step of causing the projection means to project the graphics whose display form has been changed;
A control method for an image processing apparatus, comprising: コンピュータを、請求項１乃至８の何れか１項に記載の画像処理装置の各手段として機能させるためのプログラム。   A program for causing a computer to function as each unit of the image processing apparatus according to any one of claims 1 to 8.

Images