JP2021036401A

JP2021036401A - 表示装置、表示方法、プログラム

Info

Publication number: JP2021036401A
Application number: JP2019158186A
Authority: JP
Inventors: 崇寛亀倉; Takahiro Kamekura
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2019-08-30
Filing date: 2019-08-30
Publication date: 2021-03-04
Anticipated expiration: 2039-08-30
Also published as: JP7338330B2

Abstract

【課題】画像処理システムにおいて新たに表示する画像の表示位置を固定せずに表示できる表示装置を提供する。【解決手段】取得した画像１１を表示する表示装置２は、メニュー画面生成部と、表示処理部と、を有する。メニュー画面生成部は、画像の縦横比と画像が表示される表示領域の縦横比が異なる場合、表示領域のどの位置に画像を表示するかの指定を受け付ける表示位置指定画面１００を表示する。表示処理部は、表示位置指定画面で指定された表示位置に画像を表示する。【選択図】図３

Description

本発明は、表示装置、表示方法、及び、プログラムに関する。

液晶や有機ＥＬなどのディスプレイに情報を表示する表示装置が知られている。例えばタッチパネルにユーザがペンや指で手書きしたデータを表示する表示装置や、通行人などに広告などを表示する表示装置などがある。

これらの表示装置が有するディスプレイの縦横比（アスペクト比）は表示装置によって様々であり、ディスプレイの縦横比に応じて画像を表示する技術が考案されている（例えば、特許文献１参照。）。特許文献１には、他の表示装置から受信した表示範囲を示す情報と表示装置における対象データの表示領域の情報とに基づいて、表示範囲の画像が表示領域に含まれるように、表示範囲及びその周囲の画像を拡大又は縮小して表示する表示装置が開示されている。

しかしながら、従来の技術は、新たに表示する画像の表示位置が固定されてしまうという問題があった。記憶媒体から画像を読み込んでディスプレイに表示する場合、ディスプレイにおける画像の表示領域の縦横比が画像の縦横比と異なっている場合がある。このような場合、表示領域の全面に画像を表示することは困難なため、表示装置は画像の長い辺が表示領域に入るように変倍して（長辺フィット）、表示領域の中央など決まった表示位置に画像を表示する。

本発明は、上記課題に鑑み、新たに表示する画像の表示位置を固定せずに表示できる表示装置を提供することを目的とする。

上記課題に鑑み、本発明は、取得した画像を表示する表示装置であって、前記画像の縦横比と前記画像が表示される表示領域の縦横比が異なる場合、前記表示領域のどの位置に前記画像を表示するかの指定を受け付ける表示位置指定画面を表示するメニュー画面生成部と、前記表示位置指定画面で指定された表示位置に前記画像を表示する表示処理部と、を有することを特徴とする。

新たに表示する画像の表示位置を固定せずに表示できる表示装置を提供することができる。

表示装置が画像を表示する場合の比較技術を説明する図である。縦長の表示装置が画像を表示する場合の比較技術を説明する図である。画像を読み込む場合に表示装置が表示する表示位置指定画面の一例を示す図である。画像処理システムの全体構成図の一例である。表示装置のハードウェア構成図の一例である。表示装置の機能をブロック状に分けて説明する機能ブロック図の一例である。各画像レイヤの構成図の一例である。読み込む画像とディスプレイのアスペクト比に応じた画像の表示位置の決定に関する表示装置の機能を示す機能ブロック図の一例である。ディスプレイ方向を説明する図である。ディスプレイ方向に応じた表示位置指定画面の一例を示す図である。メニュー画面生成部が表示する設定画面の一例を示す図である。表示装置が読み込む画像とディスプレイのアスペクト比に応じて画像の表示位置を決定する手順を示すフローチャート図の一例である。画像の変倍を説明する図である。画像の上、下、又は両方に余白を形成する設定を受け付ける表示位置指定画面の一例を示す図である。表示位置への画像の表示例について説明する図である。表示位置指定画面の一例を示す図である（実施例２）。表示装置の他の構成例を示す図である。表示装置の他の構成例を示す図である。表示装置の他の構成例を示す図である。表示装置の他の構成例を示す図である。

以下、本発明を実施するための形態の一例として、表示装置及び表示装置が行う表示方法について図面を参照しながら説明する。

＜比較技術について＞
本実施形態の表示装置を説明するにあたり、好適な比較技術について説明する。
図１は、表示装置２が画像１１を表示する場合の比較技術を説明する図である。まず、表示装置２には、縦長のディスプレイ３を搭載したもの（以下、縦型の表示装置２という）と、横長のディスプレイ３を搭載したもの（以下、横型の表示装置２という）がある。図１（ａ）では縦型の表示装置２がディスプレイ３に表示していた画像１１を取り込んだ。なお、取り込むことを「保存する」「キャプチャする」ともいう。ディスプレイ３が縦長のため、保存された画像１１も縦長となる（図１（ｂ））。

この画像１１を図１（ｃ）に示す横型の表示装置２が表示する場合、画像１１のアスペクト比と横型の表示装置２のディスプレイ３のアスペクト比が合わない。このため、横型の表示装置２は画像１１の長い方の辺がディスプレイ３の縦方向の長さに一致するように画像１１を変倍して表示する（図１（ｄ））。この場合、画像１１の表示位置は左右方向の例えば中央に固定されていた。画像１１の左右の領域は余白となる。

図２は、縦長の表示装置２が画像１１を表示する場合の比較技術を説明する図である。図２（ａ）では横型の表示装置２がディスプレイ３に表示していた画像１１を取り込んだ。ディスプレイ３が横長のため、保存された画像１１も横長となる（図２（ｂ））。

この画像１１を図２（ｃ）に示す縦型の表示装置２が表示する場合、画像１１のアスペクト比と縦型の表示装置２のディスプレイ３のアスペクト比が合わない。このため、縦型の表示装置２は画像１１の長い方の辺がディスプレイ３の横方向の長さに一致するように画像１１を変倍して表示する（図２（ｄ））。この場合、画像１１の表示位置は上下方向の例えば中央に固定されていた。画像１１の上下の領域は余白となる。

しかしながら、ユーザとしては画像１１をディスプレイ３の端に表示して中央に余白を作り、余白に手書きしたり、余白に資料を表示したりしたい場合がある。一方、画像１１をディスプレイ３の中央に表示して画像１１について説明したい場合もある。いったん表示された画像１１は、後からユーザが移動させることができるが、表示後に移動させることは手間となっていた。

＜本実施例の表示装置の動作の概略＞
そこで、本実施形態の表示装置２は、読み込む画像１１とディスプレイ３のアスペクト比が異なる場合、画像１１をディスプレイ３のどの表示位置に表示するかをユーザが指定する表示画面（以下、表示位置指定画面と記載する）を表示する。

図３は、画像１１を読み込む場合に表示装置２が表示する表示位置指定画面１００の一例である。図３（ａ）の表示位置指定画面１００には、中央１０１、右寄せ１０２、左寄せ１０３というボタンがあり、ユーザはいずれかを選択できる。

ユーザが左寄せ１０３を選択した場合、図３（ｂ）に示すように、表示装置２はディスプレイ３の左端に画像１１を表示する。ユーザが中央１０１を選択した場合、図３（ｃ）に示すように、表示装置２はディスプレイ３の中央１０１に画像１１を表示する。ユーザが右寄せ１０２を選択した場合、図３（ｄ）に示すように、表示装置２はディスプレイ３の右端に画像１１を表示する。

このように、本実施例の表示装置２は、ユーザが画像１１の表示位置を選択できるため、これから表示する画像の表示位置が固定されず、どこに余白が生じるように画像１１を表示するかをユーザが決定できる。

＜用語について＞
縦横比とは、画面や画像の縦と横の長さ（ピクセル数）の比である。本実施形態ではアスペクト比という用語で説明する。アスペクト比が異なる場合、相似でないともいえる。

ディスプレイ方向が横向きとはアスペクト比が１より大きい場合を言い、ディスプレイ方向が縦向きとはアスペクト比が１より小さい場合を言う（アスペクト比が１の場合はどちらでもよい）。ただし、本実施形態では以下のように定義する。縦Ｈ、横Ｗとした場合、Ｗ：Ｈと表記し、
アスペクト比＝Ｗ/Ｈとする。

画像が表示される表示領域とは、ディスプレイのうち画像が表示される領域である。最大の表示領域はディスプレイ全体である。

表示領域のどの位置に画像を表示するかとは、画像が表示領域に入るように変倍した場合に、表示位置に任意性があり、一意に決まらない場合にどの位置に表示するかである。

＜システムの概要＞
図４は、本実施形態の画像処理システム１の全体構成図である。なお、図４では、説明を簡略化するために、２台の表示装置２ａ，２ｂ及びこれに付随する電子ペン４ａ，４ｂ等を示しているだけであって、３台以上の表示装置２や電子ペン等を利用してもよい。

図４に示されているように、画像処理システム１は、複数の表示装置２ａ，２ｂ、複数の電子ペン４ａ，４ｂ、ＵＳＢメモリ５ａ，５ｂ、外部装置６ａ，６ｂ、テレビ（ビデオ）会議端末７ａ，７ｂ、及びＰＣ（Personal Computer）８を有する。また、表示装置２ａ，２ｂ、及びＰＣ８は、通信ネットワークＮを介して通信可能に接続されている。更に、複数の表示装置２ａ，２ｂには、それぞれディスプレイ３ａ，３ｂが設けられている。

また、表示装置２ａには、電子ペン４ａによって生じたイベント（ディスプレイ３ａに電子ペン４ａのペン先、又は、電子ペン４ａのペン尻のタッチ）による描画された画像１１を、ディスプレイ３ａに表示させることができる。なお、電子ペン４ａだけでなく、ユーザの指を含む手Ｈａ等によって生じたイベント（拡大、縮小、ページめくり等のジェスチャ）に基づいて、ディスプレイ３ａ上に表示されている画像１１を変更させることもできる。

また、表示装置２ａには、ＵＳＢメモリ５ａが接続可能であり、表示装置２ａはＵＳＢメモリ５ａからＰＤＦ等の電子ファイルを読み出したり、表示装置２ａはＵＳＢメモリ５ａに電子ファイルを記録したりすることができる。また、表示装置２ａには、DisplayPort（登録商標）、DVI(Digital Visual Interface)、HDMI(登録商標。High−Definition Multimedia Interface)及びVGA(Video Graphics Array)等の規格による通信が可能なケーブル１０ａ１を介して、外部装置６ａが接続されている。ケーブル１０ａ１はネットワークでもよい。

そして、表示装置２ａは、ディスプレイ３ａに対する接触によってイベントを発生させ、このイベントを示すイベント情報を、マウスやキーボード等の入力装置からのイベントと同様に、外部装置６ａに送信する。同じく、表示装置２ａには、上記規格による通信が可能なケーブル１０ａ２を介して、テレビ（ビデオ）会議端末７ａが接続されている。なお、外部装置６ａ、及びテレビ会議端末７ａは、Bluetooth（登録商標）等の各種無線通信プロトコルに準拠した無線通信により、表示装置２ａと通信してもよい。

一方、表示装置２ｂが設置されている他の拠点では、上記と同様に、ディスプレイ３ｂを備えた表示装置２ｂ、電子ペン４ｂ、ＵＳＢメモリ５ｂ、外部装置６ｂ、テレビ会議端末７ｂ、ケーブル１０ｂ１、ケーブル１０ｂ２が利用される。更に、ユーザの手Ｈｂ等によって生じたイベントに基づいて、ディスプレイ３ｂ上に表示されている画像１１を変更させることもできる。

これにより、一の拠点で表示装置２ａのディスプレイ３ａ上に描画された画像１１は、他の拠点で表示装置２ｂのディスプレイ３ｂ上にも表示され、逆に他の拠点で表示装置２ｂのディスプレイ３ｂ上に描画された画像１１は、一の拠点で表示装置２ａのディスプレイ３ａ上に表示される。このように、画像処理システム１では、遠隔地において同じ画像１１を共有する遠隔共有処理を行うことができるため、遠隔地での会議等に用いると、非常に便利である。

なお、以下では、複数の表示装置２のうち任意の表示装置２を示す場合には「表示装置２」と示す。複数のディスプレイ３のうち任意のディスプレイ３を示す場合には「ディスプレイ３」と示す。複数の電子ペンのうち任意の電子ペンを示す場合には「電子ペン４」と示す。複数のＵＳＢメモリのうち任意のＵＳＢメモリを示す場合には「ＵＳＢメモリ５」と示す。複数の外部装置のうち任意の外部装置を示す場合には「外部装置６」と示す。複数のテレビ会議端末のうち任意のテレビ会議端末を示す場合には「テレビ会議端末７」と示す。また、複数のユーザの手のうち任意の手を示す場合には「手Ｈ」と示す。複数のケーブルのうち任意のケーブルを示す場合には「ケーブル１０」と示す。

また、本実施形態では、情報処理装置の一例として、表示装置２を説明するが、これに限るものではなく、情報処理装置の他の例として、電子看板（デジタルサイネージ）、スポーツや天気予報等で利用されるテレストレータ、又は、遠隔画像（映像）診断装置等であってもよい。また、外部装置６の一例としてノートＰＣが挙げられるが、外部装置６としては、デスクトップ型ＰＣやタブレット型ＰＣ、スマートフォン、ＰＤＡ（Personal Digital Assistant）、デジタルビデオカメラ、デジタルカメラ、ゲーム機等の画像フレームを供給可能な端末であってもよい。なお、これら情報処理装置では表示装置２用の所定のアプリケーション（プログラム）が動作しており、アプリケーションがタッチパネルに対する接触位置に基づいて手書きデータを表示する。

更に、通信ネットワークＮには、インターネット、ＬＡＮ(Local Area Network)、携帯電話通信網等が含まれる。また、本実施形態では、記録媒体の一例として、ＵＳＢメモリを説明するが、これに限るものではなく、記録媒体の他の例として、ＳＤカード（登録商標）等の各種記録メディアであってもよい。

＜表示装置のハードウェア構成＞
図５は、表示装置のハードウェア構成図の一例である。図５では表示装置２として電子黒板を想定して説明する。図５に示されているように、表示装置２は、ＣＰＵ(Central Processing Unit)２０１、ＲＯＭ(Read Only Memory)２０２、ＲＡＭ(Random Access Memory)２０３、ＳＳＤ(Solid State Drive)２０４、ネットワークＩ/Ｆ２０５、及び、外部機器接続Ｉ/Ｆ(Interface)２０６を備えている。

これらのうち、ＣＰＵ２０１は、表示装置２全体の動作を制御する。ＲＯＭ２０２は、ＣＰＵ２０１やＩＰＬ(Initial Program Loader)等のＣＰＵ２０１の駆動に用いられるプログラムを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。ＳＳＤ２０４は、電子黒板用のプログラム等の各種データを記憶する。ネットワークＩ/Ｆ２０５は、通信ネットワークＮとの通信を制御する。外部機器接続Ｉ/Ｆ２０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリ２３０、外付け機器（マイク２４０、スピーカ２５０、カメラ２６０）である。

また、表示装置２は、キャプチャデバイス２１１、ＧＰＵ２１２、ディスプレイ３コントローラ２１３、接触センサ２１４、センサコントローラ２１５、電子ペンコントローラ２１６、近距離通信回路２１９、及び近距離通信回路２１９のアンテナ２１９ａ、電源スイッチ２２２、選択スイッチ類２２３、カメラ２２４、及び、方向検知センサ２２５を備えている。

これらのうち、キャプチャデバイス２１１は、外付けのＰＣ(Personal Computer))２７０のディスプレイ３に対して映像情報を静止画又は動画として表示させる。ＧＰＵ(Graphics Processing Unit)２１２は、グラフィクスを専門に扱う半導体チップである。ディスプレイ３コントローラ２１３は、ＧＰＵ２１２からの出力画像をディスプレイ３等へ出力するために画面表示の制御及び管理を行う。接触センサ２１４は、ディスプレイ３上に電子ペン２９０やユーザの手Ｈ等が接触したことを検知する。センサコントローラ２１５は、接触センサ２１４の処理を制御する。接触センサ２１４は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ３の上側両端部に設置された２つ受発光装置が、ディスプレイ３に平行して複数の赤外線を放射し、ディスプレイ３の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ２１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ２１５に出力し、センサコントローラ２１５が、物体の接触位置である座標位置を特定する。電子ペンコントローラ２１６は、電子ペン２９０と通信することで、ディスプレイ３へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路２１９は、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。電源スイッチ２２２は、表示装置２の電源のＯＮ/ＯＦＦを切り換えるためのスイッチである。選択スイッチ類２２３は、例えば、ディスプレイ３の表示の明暗や色合い等を調整するためのスイッチ群である。

カメラ２２４はディスプレイ３の例えばベゼルに内蔵されている撮像装置であり、表示装置２の前方を撮像する。カメラ２２４があればカメラ２６０のように外付け型のカメラはなくてもよい。

方向検知センサ２２５は、ディスプレイ３の方向を検知するセンサである。ディスプレイ３の方向には縦向きと横向きがある。本実施例の表示装置２は、ディスプレイ３をユーザが縦向き又は横向きに切り替えることができる。このよう機能をピボット機能という。回転自体はディスプレイ３を支えるスタンドの機構によるが、方向検知センサ２２５はディスプレイ３の回転角度を検知する。例えば、加速度センサにより重力方向を検出して、縦向きか横向きかを検出する。あるいは、スタンド部分の回転を検出してもよい。表示装置２はディスプレイ３が横向きでも縦向きでも、画像１１の上下を天地方向に合わせて回転させる。

更に、表示装置２は、バスライン２１０を備えている。バスライン２１０は、図５に示されているＣＰＵ２０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

なお、接触センサ２１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルなどの種々の検出手段を用いてもよい。また、電子ペンコントローラ２１６が、電子ペン２９０のペン先及びペン尻だけでなく、電子ペン２９０のユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

＜表示装置の機能構成＞
続いて、図６、図７を用いて、表示装置２の機能構成について説明する。なお、先ずは、図６を用いて、表示装置２の全体的な機能構成について説明する。図６は、表示装置２の機能をブロック状に分けて説明する機能ブロック図である。

表示装置２は、図５に示されているハードウェア構成及びプログラムによって、図６に示されている各機能構成を有する。表示装置２は、最初に遠隔共有処理を開始する「主催装置」となり得ると共に、既に開始されている遠隔共有処理に後から参加する「参加装置」にもなり得る。また、表示装置２は、大きく分けて、クライアント部２０及びサーバ部９０の両方によって構成されている。

クライアント部２０及びサーバ部９０は、表示装置２の１台の筐体内で実現される機能である。そして、表示装置２が主催装置となる場合には、この表示装置２では、クライアント部２０とサーバ部９０が実現される。また、表示装置２が参加装置となる場合には、この表示装置２では、クライアント部２０は実現されるが、サーバ部９０は実現されない。即ち、図４において、表示装置２ａが主催装置で、表示装置２ｂが参加装置となる場合、表示装置２ａのクライアント部２０は、同じ表示装置２ａ内に実現されたサーバ部９０を介して、他の表示装置２ｂのクライアント部２０と通信を行う。一方、表示装置２ｂのクライアント部２０は、他の表示装置２ａ内に実現されたサーバ部９０を介して、他の表示装置２ａのクライアント部と通信を行う。

〔クライアント部の機能構成〕
続いて、主に図６、図７を用いて、クライアント部２０の機能構成について説明する。クライアント部２０は、映像取得部２１、座標検知部２２、自動調整部２３、接触検知部２４、イベント振分部２５、操作処理部２６、ジェスチャ処理部２７、映像重畳部２８、画像処理部３０、及び通信制御部６０を有する。

このうち、映像取得部２１は、ケーブル１０に接続された外部装置６の出力画像を取得する。映像取得部２１は、外部装置６から映像を受信すると、この映像を解析して、この映像によって形成される外部装置６の表示画像である画像フレームの解像度や、この画像フレームの更新頻度などの画像情報を導出し、画像取得部３１に出力する。

座標検知部２２は、ディスプレイ３上でユーザが入力手段を接触させた座標位置を検出する。ユーザがディスプレイ３上で入力手段を連続的に移動させた軌跡が手書きデータである。また、この手書きデータをストロークという場合がある。なお、入力手段は電子ペン４又はユーザの手Ｈのどちらでもよい。また、座標検知部２２は、タッチされた面積も検出する。

自動調整部２３は、表示装置２の起動時（再起動時と表現してもよい）に起動され、座標検知部２２が適切な値を出力できるように、光センサ方式により座標を検知する座標検知部２２がセンサーカメラの画像を処理する際のパラメータを調整する。

接触検知部２４は、ユーザによって生じたイベント（ディスプレイ３上に電子ペン４のペン先又は電子ペン４のペン尻が押下（タッチ）された動作等）を検出する。

イベント振分部２５は、座標検知部２２によって検知されたイベントの座標位置と接触検知部２４によって検出された検出結果を、ストローク描画、ＵＩ操作、及びジェスチャ操作の各イベントに振り分ける。ここで、「ストローク描画」は、ディスプレイ３上に図７に示されている後述のストローク画像（Ｂ）が表示されている場合に、ユーザがディスプレイ３上で電子ペン４を押下し、この押下した状態で電子ペン４を移動させ、最終的にディスプレイ３上から電子ペン４を離すまでのイベントである。このストローク描画により、例えば、アルファベット「Ｓ」や「Ｔ」等がディスプレイ３上に描画される。なお、この「ストローク描画」には、画像を描画するだけでなく、既に描画された画像を削除したり、描画された画像を編集したりするイベントも含まれる。

「ＵＩ操作」は、ディスプレイ３上に図７に示されている後述のＵＩ画像（Ａ）が表示されている場合に、ユーザが電子ペン４又は手Ｈによって所定の位置を押下したイベントである。このＵＩ操作により、例えば、電子ペン４により描画される線の色や幅等が設定される。

「ジェスチャ操作」は、ディスプレイ３上に図７に示されている後述のストローク画像（Ｂ）が表示されている場合に、ユーザが手Ｈでディスプレイ３上をタッチしたり移動させたりするイベントである。このジェスチャ操作により、例えば、ユーザがディスプレイ３に手Ｈをタッチさせた状態で手Ｈを移動させることで、画像の拡大（若しくは縮小）、表示領域の変更、又は、ページ切り換え等を行うことができる。

操作処理部２６は、イベント振分部２５によってＵＩ操作と判断されたものから、イベントが発生されたＵＩの要素にしたがって、各種操作を実行する。このＵＩの要素としては、例えば、ボタン、リスト、チェックボックス、テキストボックスが挙げられる。ジェスチャ処理部２７は、イベント振分部２５によってジェスチャ操作と判断されたものに対応した操作を実行する。

映像重畳部２８は、後述の表示処理部３６で重畳された画像を映像として表示部２９に対して表示する。表示部２９はディスプレイ３により実現される表示機能を示す。また、映像重畳部２８は、外部装置６等からの映像に対して、テレビ会議端末７等から送られて来た映像をピクチャーインピクチャーする。更に、映像重畳部２８は、ピクチャーインピクチャーされて表示部２９の一部に表示された映像を、表示部２９の全体に表示させるための切り替えを行う。

画像処理部３０は、図７に示されているような各画像レイヤの重畳処理等を行う。この画像処理部３０は、画像取得部３１、ストローク処理部３２、メニュー画面生成部３３、画像生成部３４、レイアウト管理部３５、表示処理部３６、ページ処理部３７、ファイル処理部４０、ページデータ記憶部３００、及び遠隔ライセンス管理テーブル３１０を有している。

このうち、画像取得部３１は、映像取得部２１で取得された映像から、各フレームを画像として取得する。画像取得部３１は、この画像のデータを、ページ処理部３７に出力する。この画像は、図７に示されている外部装置６等からの出力画像（Ｃ）に相当する。本実施形態では出力画像（Ｃ）を映像と称している。

ストローク処理部３２は、イベント振分部２５によって割り振られたストローク描画に係るイベントに基づいて、画像（手書きデータ）を描画したり、描画された画像を削除したり、描画された画像を編集する。このストローク描画による画像は、図７に示されているストローク画像（Ｂ）に相当する。また、このストローク描画に基づいた画像の描画、削除、編集の各結果は、後述の操作データとして、データ管理部８０に記憶される。

メニュー画面生成部３３は、表示装置２に予め設定されているＵＩ（ユーザインターフェース）画像を生成する。このＵＩ画像は、図７に示されているＵＩ画像（Ａ）に相当する。

画像生成部３４は、ページ処理部３７がページデータ記憶部３００から読み出したページデータのうちのメディアデータを、ページ処理部３７から受信する。画像生成部３４は、この受信したメディアデータを表示処理部３６に出力する。また、このメディアデータによる画像は、図７に示されている背景画像（Ｄ）に相当する。背景画像（Ｄ）のパターンは、無地、グリッド表示等である。

レイアウト管理部３５は、表示処理部３６に対して、画像取得部３１、ストローク処理部３２、及びメニュー画面生成部３３（又は画像生成部３４）から出力された各画像のレイアウトを示すレイアウト情報を管理している。これにより、レイアウト管理部３５は、表示処理部３６に対して、出力画像（Ｃ）及びストローク画像（Ｂ）を、ＵＩ画像（Ａ）及び背景画像（Ｄ）中のどの位置に表示させるか又は非表示にさせるかを指示することができる。

表示処理部３６は、レイアウト管理部３５から出力されたレイアウト情報に基づき、画像取得部３１、ストローク処理部３２、及びメニュー画面生成部３３（画像生成部３４）から出力された各画像のレイアウトを行う。

ページ処理部３７は、ストローク画像（Ｂ）のデータと出力画像（Ｃ）のデータを、１つのページデータにまとめてページデータ記憶部３００に記憶する。ストローク画像（Ｂ）のデータは、ストローク配列データ（各ストロークデータ）としてページデータの一部を成す。出力画像（Ｃ）のデータは、メディアデータとしてページデータの一部を成す。そして、このメディアデータは、ページデータ記憶部３００から読み出されると、背景画像（Ｄ）のデータとして取り扱われる。

また、ページ処理部３７は、一旦記憶されたページデータのうちのメディアデータを、画像生成部３４を介して表示処理部３６に送信することで、映像重畳部２８が背景画像（Ｄ）をディスプレイ３に再表示させることができる。また、ページ処理部３７は、ページデータのうちのストローク配列データ（各ストロークデータ）を、ストローク処理部３２に戻すことで、ストロークの再編集ができる状態にすることができる。更に、ページ処理部３７は、ページデータを削除したり複製したりすることもできる。

即ち、ページ処理部３７がページデータ記憶部３００にページデータを記憶する時点でディスプレイ３上に表示されている出力画像（Ｃ）のデータは、一旦、ページデータ記憶部３００に記憶され、その後にページデータ記憶部３００から読み出される際には、背景画像（Ｄ）を示すメディアデータとして読みされる。そして、ページ処理部３７は、ページデータ記憶部３００から読み出したページデータのうち、ストローク画像（Ｂ）を示すストローク配列データを、ストローク処理部３２に出力する。また、ページ処理部３７は、ページデータ記憶部３００から読み出したページデータのうち、背景画像（Ｄ）を示すメディアデータを、画像生成部３４に出力する。

表示処理部３６は、画像取得部３１からの出力画像（Ｃ）、ストローク処理部３２からのストローク画像（Ｂ）、メニュー画面生成部３３からのＵＩ画像（Ａ）、及び、画像生成部３４からの背景画像（Ｄ）を、レイアウト管理部３５によって指定されたレイアウトにしたがって重畳する。これにより、図７に示されているように、各画像が重なってもユーザが見える順に、ＵＩ画像（Ａ）、ストローク画像（Ｂ）、出力画像（Ｃ）、及び背景画像（Ｄ）の各レイアの構成となっている。

また、表示処理部３６は、図７に示されている画像（Ｃ）と画像（Ｄ）を切り替えて、画像（Ａ）及び画像（Ｂ）に対して排他的に重畳することも可能である。例えば、当初、画像（Ａ）、画像（Ｂ）及び画像（Ｃ）が表示されている状態で、表示装置２と外部装置６等との間のケーブル１０が抜かれた場合には、レイアウト管理部３５の指定によって、画像（Ｃ）を重畳対象から外し、画像（Ｄ）を表示させることができる。この場合に、また、表示処理部３６は、表示の拡大、表示の縮小、表示領域の移動処理も行う。

ファイル処理部４０は、ファイルの入力と出力に関する処理を行う。ファイル処理部４０は、ＵＳＢメモリ５等の記憶装置から画像データを読み込み、各ページをページデータとしてページデータ記憶部３００に記憶する。また、ファイル処理部４０は、ページデータ記憶部３００に記憶されているページデータを、ＰＤＦ形式のファイルに変換して、ＵＳＢメモリ５等の記憶装置に記憶させる。この他、ＰＤＦファイルを電子メールに添付して送信する。

〔サーバ部の機能構成〕
サーバ部９０は、各表示装置２に設けられており、いずれの表示装置２であっても、サーバ部としての役割を果たすことができる。そのため、サーバ部９０は、通信制御部７０、及びデータ管理部８０を有している。

通信制御部７０は、同じ表示装置２内のクライアント部２０における通信制御部７０、及び通信ネットワークＮを介して他の表示装置２内のクライアント部２０における通信制御部７０との通信を制御する。データ管理部８０は、操作データや画像データ等を管理する。

＜読み込む画像とディスプレイのアスペクト比に応じた画像の表示位置の決定に関する表示装置の機能＞
続いて、図８を参照して、画像１１の表示位置の決定に関する表示装置の機能について説明する。図８は、読み込む画像１１とディスプレイ３のアスペクト比に応じた画像１１の表示位置の決定に関する表示装置２の機能を示す機能ブロック図の一例である。図８の表示装置は、図６に示した機能から一部が抽出された機能と、新たにディスプレイ方向検出部４２とアスペクト比比較部４１とを有している。また、画像記憶部４３とアスペクト比記憶部４４を有している。

画像記憶部４３には表示装置２が表示する画像１１の画像データが記憶されている。画像記憶部４３は、上記ＵＳＢメモリ５だけでなく、クラウド上のサーバ、及び、ＮＡＳ（Network Attached Storage）なども含む。表示装置２のＲＡＭ２０３又はＳＳＤ２０４が対応する場合もある。また、スマートフォンなどの携帯端末が記憶している画像データを近距離通信回路２１９（Bluetooth（登録商標）、Wi−Fi、ＮＦＣ）などで受信してもよい。また、他の拠点の表示装置２が画像データを記憶している場合、画像記憶部４３に他の拠点の表示装置２も含まれる。

なお、表示装置２は、同じ表示装置２が保存した画像１１を表示する場合もあるし、異なる表示装置２が保存した画像１１を保存する場合もある。また、同じ表示装置２又は異なる表示装置２が保存した画像１１を表示する場合、保存時と表示時とでディスプレイ方向が異なる場合と同じ場合がある。

また、画像記憶部４３に記憶されている画像１１は、表示装置２が取り込んだ画像１１だけでなく、任意の画像１１が含まれる。例えば、カメラで撮像した画像、電子メールで送信された画像、ネットワークからダウンロードした画像などでもよい。

操作処理部２６はユーザがＵＩ画像に対し行った画像１１（ファイル）の読み込み操作を受け付けて、ファイル処理部４０に選択された画像１１を通知する。ファイル処理部４０は画像記憶部４３からユーザが選択した画像１１を読み込んで、アスペクト比をアスペクト比比較部４１に通知する。

アスペクト比は、画像１１のメタデータに記載の縦と横の解像度又はサイズから算出できる。画像データのフォーマットには、JPEG、TIFF、BMP、PNG、GIFなどがあるが、JPEGとTIFFにはEXIF（Exchangeable image file format）という規格のメタデータが付随していており、メタデータの中に縦と横の解像度又はサイズが格納されている。その他のフォーマットの画像にも縦と横の解像度又はサイズがメタデータに含まれている。

したがって、ファイル処理部４０は画像データの本体まで読み込まなくてもアスペクト比を検出できる。なお、画像１１のメタデータにアスペクト比がそのまま記載されていてもよい。

また、ディスプレイ方向検出部４２は、現在のディスプレイ方向を検出する。図９は、ディスプレイ方向を説明する図である。図９（ａ）は横向きのディスプレイ方向を示し、図９（ｂ）は縦向きのディスプレイ方向を示す。図９に示すように、ディスプレイ３は少なくとも９０度回転できる。回転はユーザが行っても、モーターが行ってもよい。

ディスプレイ方向検出部４２は方向検知センサ２２５の検知結果に基づいて、ユーザが回転させたディスプレイ方向が横向きか又は縦向きかを検出する。ディスプレイ方向検出部４２は検出したディスプレイ方向をアスペクト比比較部４１に通知する。なお、表示装置２のディスプレイは方向が固定されていてもよく（ユーザが回転させる機構がない）、この場合、ディスプレイ方向は横向き又は縦向きに固定となる。

図８に戻って説明する。アスペクト比比較部４１は、ファイル処理部４０が通知したアスペクト比と、アスペクト比記憶部４４に記憶されているアスペクト比を比較する。表１に示すように、アスペクト比記憶部４４にはディスプレイ方向に対応づけて、アスペクト比が記憶されている。

表１は、アスペクト比記憶部４４に記憶されているアスペクト情報の一例である。アスペクト情報は、ディスプレイ方向に対応づけられたディスプレイ３のアスペクト比を有している。例えば、縦向きの場合のアスペクト比は９：１６であり、横向きの場合のアスペクト比は１６：９である。

ディスプレイ３のアスペクト比はディスプレイ３の物理的な形状（縦横の解像度）で決まるため、ディスプレイ３の全体が画像の表示領域となる場合、アスペクト情報には表１に示すように２つのアスペクト比が登録されていればよい。しかし、例えば、ディスプレイ３の一部（表示領域）にのみ表示装置２が画像１１を表示する場合であって、その表示領域のアスペクト比がディスプレイ３のアスペクト比と異なる場合、アスペクト情報には表示領域用のアスペクト比が記憶されている。この場合、表示領域ごとに横方向と縦方向の２つのアスペクト比が登録されている。

また、表示装置２においてユーザが任意の表示領域を指定できる場合、アスペクト比比較部４１はＯＳ（Operating System）から表示領域のアスペクト比を取得できる。

アスペクト比比較部４１は、ディスプレイ方向に対応づけられているアスペクト比をアスペクト比記憶部４４から読み出して、ファイル処理部４０が通知したアスペクト比と比較する。アスペクト比比較部４１は比較結果（異）とディスプレイ方向をメニュー画面生成部３３に通知する。アスペクト比比較部４１は比較結果（同）に表示を画像生成部３４に通知する。

なお、表示装置２のディスプレイ方向が横向き又は縦向きに固定の場合、アスペクト比記憶部４４にはアスペクト比が１つのみ記憶されているので、アスペクト比比較部４１はアスペクト比記憶部４４のアスペクト比と、画像１１のアスペクト比を比較する。

メニュー画面生成部３３は、比較結果が異なる場合、図３に示したような、表示位置指定画面１００をディスプレイ３に表示する。

操作処理部２６は、表示位置指定画面１００に対するユーザの操作（画像１１の表示位置）を受け付け、表示位置情報を画像生成部３４に通知する。ファイル処理部４０は読み取った画像１１を画像生成部３４に通知するので、画像生成部３４はこの画像１１を表示位置情報に基づいて背景画像に配置する。

また、比較結果（同）を通知された画像生成部３４は、背景画像の全面にファイル処理部４０が読み取った画像１１を配置する。

＜表示位置指定画面の例＞
以下、図１０を参照して、ディスプレイ方向に応じた表示位置指定画面１００について説明する。

・ディスプレイ方向が横向きの場合
図１０（ａ）は、ディスプレイ方向が横向きの場合にディスプレイ３に表示される表示位置指定画面１００の一例である。メニュー画面生成部３３は、ディスプレイ方向が横向きなので、水平方向における画像１１の表示位置を受け付ける表示位置指定画面１００を表示する。このため、表示位置指定画面１００は、中央１０１、右寄せ１０２、左寄せ１０３という表示位置の候補、ラジオボタン１１０、ＯＫボタン１０４、及び、キャンセルボタン１０５を有している。ユーザは中央１０１、右寄せ１０２又は左寄せ１０３に対応するラジオボタン１１０を選択して、ＯＫボタン１０４を押下する。

・ディスプレイ方向が縦向きの場合
図１０（ｂ）は、ディスプレイ方向が縦向きの場合にディスプレイ３に表示される表示位置指定画面１００の一例である。メニュー画面生成部３３は、ディスプレイ方向が縦向きなので、垂直方向における画像１１の表示位置を受け付ける表示位置指定画面１００を表示する。このため、表示位置指定画面１００は、上寄せ１０６、中央１０７、下寄せ１０８という表示位置の候補、ラジオボタン１１０、ＯＫボタン１０４、及び、キャンセルボタン１０５を有している。ユーザは上寄せ１０６、中央１０７又は下寄せ１０８に対応するラジオボタン１１０を選択して、ＯＫボタン１０４を押下する。

なお、図１０（ａ）（ｂ）の表示位置指定画面１００は一例であり、例えば、４つ以上の表示位置を選択可能に表示してもよい。

また、図１０（ｃ）に示すようにユーザは数値で表示位置を指定してもよい。図１０（ｃ）の表示位置指定画面１００は数値入力欄１１１を有し、数値入力欄１１１には左端からの乖離量をユーザが入力する。数値入力欄１１１には「Ａ％（図では３０％）」というように、ユーザが０〜１００までの数値を指定できる。なお、図１０（ｃ）の表示位置指定画面１００はディスプレイ方向が横向きの場合の例であるが、ディスプレイ方向が縦向きの場合の表示位置指定画面１００でも同様に数値で表示位置を指定できる。

また、表示装置２は表示位置指定画面１００の代わりに、表示位置の候補となる点線の枠（画像１１と同じアスペクト比の枠）をディスプレイ３に表示して、ユーザからの選択を受け付けてもよい。これにより、ユーザは画像１１が表示される位置をイメージしやすくなる。

＜方向検知センサを有さない場合＞
本実施例では表示装置２が方向検知センサ２２５を有する場合を前提に説明しているが、方向検知センサ２２５はなくてもよい。この場合、ディスプレイ３が縦向きか横向きかはユーザが設定する。

図１１はメニュー画面生成部３３が表示する設定画面１２０の一例である。設定画面１２０は、初期設定時や起動時にユーザが表示させてもよいし、画像１１の読み込み時に自動的に表示してもよい。設定画面１２０は、横向き１２１と縦向き１２２に対応するラジオボタン１２５、ＯＫボタン１２３、及び、キャンセルボタン１２４を有している。ユーザは、自分の目で確認したディスプレイ３の方向を設定画面１２０で設定する。操作処理部２６はこの設定を受け付けるので、アスペクト比比較部４１はアスペクト比記憶部４４からディスプレイ方向に対応しているアスペクト比を読み込むことができる。

＜動作手順＞
図１２は、表示装置２が読み込む画像１１とディスプレイ３のアスペクト比に応じて画像１１の表示位置を決定する手順を示すフローチャート図の一例である。

まず、ユーザが画像１１を読み込む操作を行うため、操作処理部２６が画像１１（ファイル）の読み取り操作を受け付ける（Ｓ１）。ファイル処理部４０が指定された画像１１を読み込む（Ｓ２）。これにより、画像１１のアスペクト比が検出される。

一方、ディスプレイ方向検出部４２が現在のディスプレイ方向を検出する（Ｓ３）。ディスプレイ方向は、リアルタイムに検出してもよいし、最後に検出したディスプレイ方向を保持していてもよい。ユーザが設定したディスプレイ方向を使用してもよい。

次に、アスペクト比比較部４１が画像１１のアスペクト比と、ディスプレイ方向に応じてアスペクト比記憶部４４から読み取ったアスペクト比を比較する（Ｓ４）。例えば、画像１１のアスペクト比がW1：H1で、アスペクト比記憶部４４から読み取ったアスペクト比がW2：H2の場合、
W2/H2−α ＜ W1/H1 ＜ W2/H2＋α
を満たす場合はアスペクト比が同じであり、満たさない場合は異なると判断する。

αは許容誤差であり、アスペクト比が完全に一致しなくても、アスペクト比が同じであると見なすことができる範囲を示す。許容誤差を設けることで全画面表示する機会を多くすることができる。なお、αはH2/W2の数％とすればよいが、例えばユーザが任意に設定してもよい。例えば、W1：H1が9:16、W2：H2が4:3、αを５％とすると、
4/3−0.067 ＜ 16/9は成り立つが、 16/9 ＞ 4/3＋0.067 なので、アスペクト比が異なると判断される。

アスペクト比が異なる場合（Ｓ５のＮｏ）、メニュー画面生成部３３がディスプレイ方向に応じた表示位置指定画面１００をディスプレイ３に表示する（Ｓ６）。すなわち、ディスプレイ方向が横向きの場合、図１０（ａ）に示した表示位置指定画面１００を表示し、ディスプレイ方向が縦向きの場合、図１０（ｂ）に示した表示位置指定画面１００を表示する。

ユーザは表示位置指定画面１００に対し表示位置を指定するので、操作処理部２６が表示位置を受け付ける（Ｓ７）。

画像生成部３４は表示位置にファイル処理部４０が読み取った画像１１を配置する（Ｓ８）。具体的には画像１１の長い方の辺が、ディスプレイ３側の対応する辺の長さに一致するように、画像１１を変倍する（拡大又は縮小する）。詳細は、図１３にて説明する。

アスペクト比が同じ場合（Ｓ５のＹｅｓ）、画像生成部３４がディスプレイの全面にファイル処理部４０が読み取った画像１１を配置する（Ｓ９）。この場合も、画像１１を変倍する場合が多い。

表示処理部３６は背景画像をストローク画像などと重畳して、ディスプレイ３に表示する（Ｓ１０）。

＜画像の変倍＞
図１３は、画像１１の変倍を説明する図である。なお、図１３ではディスプレイ３が横向きの場合を説明する。図１３（ａ）に示す画像１１の縦のサイズをH1、横のサイズをW1とする。また、図１３（ｂ）に示すディスプレイ３の縦のサイズをH2、横のサイズをW2とする。画像１１をディスプレイ３内に収めるには、画像１１の長い方の辺（図ではH1）をディスプレイ３内に収める必要がある。このためH2/H1を比率として、画像生成部３４は、画像１１を変倍する。
変倍後の画像１１の縦のサイズ＝H1×H2/H1
変倍後の画像１１の横のサイズ＝W1×H2/H1
こうすることで、画像１１を最大限大きくしてディスプレイ３内に表示することができる。なお、画像１１とディスプレイ３のアスペクト比が同じ場合も計算方法は同じになる。

また、図１３の計算例では、変倍により画像１１の縦の長さがディスプレイ３の縦の長さと一致するが、必ずしも両者は一致しなくてよい。例えば、実際よりも小さいH2（例えば８０〜９０％など）を使用すれば、ディスプレイ３に表示された画像１１の上又は下、又は両方に余白を形成できる。

図１４（ａ）は画像１１の上、下、又は両方に余白を形成する設定を受け付ける表示位置指定画面１００の一例である。図１４（ａ）の表示位置指定画面１００では、ユーザが表示位置を選択するとサブメニューが開く。サブメニューには、「やや小さめ」に対応したラジオボタン１３１、余白位置を指定するためのラジオボタン１３２がある。「やや小さめ」が選択された場合、画像１１の短い方の辺と表示領域の端までの間に余白が設けられる。

ユーザが「上」に対応するラジオボタン１３２を選択した場合、図１４（ｂ）に示すように、画像１１の上側に余白が設けられる。ユーザが「下」に対応するラジオボタン１３２を選択した場合、図１４（ｃ）に示すように、画像１１の下側に余白が設けられる。ユーザが「両方」に対応するラジオボタン１３２を選択した場合、図１４（ｄ）に示すように、画像１１の上下に余白が設けられる。

このように、ユーザは表示位置指定画面１００により、画像１１の上、下、又は両方のどこに余白を形成するかを指定できる。

なお、どの程度小さくするかをユーザが手動で入力できてもよいし、いくつかの候補から選択できてもよい。

＜各表示位置への画像１１の表示例＞
図１５を用いて各表示位置への画像１１の表示例について説明する。なお、ディスプレイ３が横向きの場合は図３で説明したので、図１５ではディスプレイ３が縦向きの場合を説明する。

図１５は、画像１１を読み込む場合に表示装置２が表示する表示位置指定画面１００の一例である。図１５（ａ）の画面には、上寄せ１０６、中央１０７、下寄せ１０８というボタンがあり、ユーザはいずれかに対応したラジオボタン１１０を選択できる。

ユーザが上寄せ１０６を選択した場合、図１５（ｂ）に示すように、表示装置２はディスプレイ３の上端に画像１１を表示する。ユーザが中央１０７を選択した場合、図１５（ｃ）に示すように、表示装置２はディスプレイ３の中央に画像１１を表示する。ユーザが下寄せ１０８を選択した場合、図１５（ｄ）に示すように、表示装置２はディスプレイ３の右端に画像１１を表示する。

＜まとめ＞
以上説明したように、本実施例の表示装置２は、ユーザが画像１１の表示位置を選択できるため、これから表示する画像データの表示位置が固定されず、どこに余白が生じるように画像１１を表示するかをユーザが決定できる。

本実施例では、ユーザが画像１１を移動して表示位置を指定することができる表示装置２について説明する。

なお、本実施例においては、上記の実施例１にて説明した図５のハードウェア構成図、及び、図８に示した機能ブロック図を援用できるものとして説明する。

＜本実施例の表示位置指定画面の例＞
図１６は、本実施例の表示位置指定画面１００の一例を示す。

・ディスプレイ３が横向きの場合
図１６（ａ）に示すように、メニュー画面生成部３３は、水平方向に移動できる態様で画像１１を表示すると共に、操作処理部２６は画像１１の水平方向の移動を受け付ける。ユーザは画像１１を手や電子ペンでタッチして、画面に接したまま手又は電子ペンを左又は右に移動させる。表示位置指定画面１００は確定ボタン１４０を有しており、ユーザが確定ボタン１４０を押下すると、表示位置が決定される。画像生成部３４は背景画像のユーザが決定した表示位置に画像１１を表示する。

・ディスプレイ３が縦向きの場合
図１６（ｂ）に示すように、メニュー画面生成部３３は、上下方向に移動できる態様で画像１１を表示すると共に、操作処理部２６は画像１１の上下方向の移動を受け付ける。ユーザは画像１１を手や電子ペンでタッチして、画面に接したまま手又は電子ペンを上又は下に移動させる。表示位置指定画面１００は確定ボタン１４０を有しており、ユーザが確定ボタン１４０を押下すると、表示位置が決定される。画像生成部３４は背景画像のユーザが決定した表示位置に画像１１を表示する。

なお、図１６では実際の画像１１が表示されているが、表示装置２は点線の枠（画像１１と同じアスペクト比の枠）などを画像１１の代わりに表示して、枠に対する移動を受け付けてもよい。

＜動作手順＞
表示装置２の動作手順は実施例１の図１２と同様でよい。ただし、ステップＳ７では、操作処理部２６が画像１１の移動（ドラッグ）により表示位置を受け付ける。

＜まとめ＞
本実施例によれば、実施例１の効果に加え、ユーザが実際に画像１１を表示させて確認した表示位置に画像１１を表示できる。また、無段階に表示位置を決定できる。

本実施例では画像を投影することで表示する表示装置について説明する。

＜＜表示装置の構成の別の例１＞＞
本実施形態の表示装置は大型のタッチパネルを有するものとして説明されているが、表示装置はタッチパネルを有するものに限られない。

図１７は、表示装置の他の構成例を示す図である。図１７では、通常のホワイトボード４１３の上辺にプロジェクター４１１が設置されている。このプロジェクター４１１が表示装置に相当する。通常のホワイトボード４１３とは、タッチパネルと一体のフラットパネルディスプレイではなく、ユーザがマーカーで直接、手書きするホワイトボードである。なお、ホワイトボードは黒板でもよく、映像を投影するだけの広さの平面であればよい。

プロジェクター４１１は超短焦点の光学系を有しており、１０ｃｍ程度から歪みの少ない映像をホワイトボード４１３に投影できる。この映像は、無線又は有線で接続されたＰＣ４００ー１から送信されてもよいし、プロジェクター４１１が記憶していてもよい。

ユーザは専用の電子ペン２５０１を使ってホワイトボード４１３に手書きする。電子ペン２５０１は、ユーザが手書きのためにホワイトボード４１３に押しつけるとスイッチがＯＮになり発光する発光部を例えば先端部に有している。光の波長は近赤外や赤外なのでユーザの目には見えない。プロジェクター４１１はカメラを有しており、発光部を撮像して画像を解析し電子ペン２５０１の方向を特定する。また、電子ペン２５０１は発光と共に音波を発信しており、プロジェクター４１１は音波の到達時間により距離を算出する。方向と距離により電子ペン２５０１の位置を特定できる。電子ペン２５０１の位置にはストロークが描画（投影）される。

プロジェクター４１１はメニュー４３０を投影するので、ユーザが電子ペン２５０１でボタンを押下すると、プロジェクター４１１が電子ペン２５０１の位置とスイッチのＯＮ信号により押下されたボタンを特定する。例えば、保存ボタン４３１が押下されると、ユーザが手書きしたストローク（座標の集合）がプロジェクター４１１で保存される。プロジェクター４１１は、予め定められたサーバ４１２又はＵＳＢメモリ２６００等に手書き情報を保存する。手書き情報はページごとに保存されている。画像データではなく座標のまま保存されるので、ユーザが再編集することができる。ただし、本実施形態では操作コマンドを手書きで呼び出せるのでメニュー４３０は表示されなくてもよい。

＜＜表示装置の構成の別の例２＞＞
図１８は、表示装置の他の構成例を示す図である。図１８の例では、表示装置として、端末装置６００、画像投影装置７００Ａ、及び、ペン動作検出装置８１０を有する。

端末装置６００は、画像投影装置７００Ａ及びペン動作検出装置８１０と有線で接続されている。画像投影装置７００Ａは、端末装置６００により入力された画像データをスクリーン８００に投影させる。

ペン動作検出装置８１０は、電子ペン８２０と通信を行っており、スクリーン８００の近傍における電子ペン８２０の動作を検出する。具体的には、電子ペン８２０は、スクリーン８００上において、電子ペン８２０が示している点を示す座標情報を検出し、端末装置６００へ送信する。

端末装置６００は、ペン動作検出装置８１０から受信した座標情報に基づき、電子ペン８２０によって入力されるストローク画像の画像データを生成し、画像投影装置７００Ａによってストローク画像をスクリーン８００に描画させる。

また、端末装置６００は、画像投影装置７００Ａに投影させている背景画像と、電子ペン８２０によって入力されたストローク画像とを合成した重畳画像を示す重畳画像データを生成する。

＜＜表示装置の構成の別の例３＞＞
図１９は、表示装置の構成例を示す図である。図１９の例では、表示装置として、端末装置６００とディスプレイ８００Ａと、ペン動作検出装置８１０とを有する。

ペン動作検出装置８１０は、ディスプレイ８００Ａの近傍に配置され、ディスプレイ８００Ａ上に、電子ペン８２０Ａが示している点を示す座標情報を検出し、端末装置６００へ送信する。なお、図１９の例では、電子ペン８２０Ａは、端末装置６００によってＵＳＢコネクタを介して充電されても良い。

端末装置６００は、ペン動作検出装置８１０から受信した座標情報に基づき、電子ペン８２０Ａによって入力されるストローク画像の画像データを生成し、ディスプレイ８００Ａに表示させる。

＜＜表示装置の構成の別の例４＞＞
図２０は、表示装置の構成例を示す図である。図２０の例では、表示装置として、端末装置６００と、画像投影装置７００Ａとを有する。

端末装置６００は、電子ペン８２０Ｂと無線通信（Ｂｌｕｅｔｏｏｔｈ（登録商標）等）を行って、スクリーン８００上において電子ペン８２０Ｂが示す点の座標情報を受信する。そして、端末装置６００は、受信した座標情報に基づき、電子ペン８２０Ｂにより入力されるストローク画像の画像データを生成し、画像投影装置７００Ａにストローク画像を投影させる。

以上のように、上記した各実施形態は、様々なシステム構成において適用することができる。

＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

例えば、本実施形態では、電子黒板として使用できる表示装置を説明したが、表示装置は画像を表示できればよく、例えばデジタルサイネージなどでもよい。

また、表示する画像１１は動画でも静止画でもよい。

また、本実施形態では電子黒板を一例として説明したが、タッチパネルを有する情報処理装置であれば好適に適用できる。タッチパネルを搭載した情報処理装置としては、例えば、ＰＪ（Projector：プロジェクター）、デジタルサイネージ等の出力装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、ノートＰＣ（Personal Computer）、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、デジタルカメラ、ウェアラブルＰＣ又はデスクトップＰＣ等であってもよい。

また、本実施形態ではペン先の座標をタッチパネルで検知する方法でペンの座標を検出したが、ペン先の座標を超音波により検出してもよい。ペンは発光と共に超音波を発信しており、表示装置２は超音波の到達時間により距離を算出する。方向と距離によりペンの位置を特定できる。ペンの軌跡をストロークとしてプロジェクターが描画（投影）する。

また、図６，図８などの構成例は、表示装置２による処理の理解を容易にするために、主な機能に応じて分割したものである。処理単位の分割の仕方や名称によって本願発明が制限されることはない。表示装置２の処理は、処理内容に応じて更に多くの処理単位に分割することもできる。また、１つの処理単位が更に多くの処理を含むように分割することもできる。

また、上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

１画像処理システム
２表示装置
３ディスプレイ
５ＵＳＢメモリ
１１画像
１００表示位置指定画面

特開２０１５−１０６２２２号公報

Claims

取得した画像を表示する表示装置であって、
前記画像の縦横比と前記画像が表示される表示領域の縦横比が異なる場合、
前記表示領域のどの位置に前記画像を表示するかの指定を受け付ける表示位置指定画面を表示するメニュー画面生成部と、
前記表示位置指定画面で指定された表示位置に前記画像を表示する表示処理部と、
を有することを特徴とする表示装置。
前記表示位置指定画面は、複数の表示位置の候補を表示し、前記候補から前記画像を表示する表示位置を受け付ける画面であることを特徴とする請求項１に記載の表示装置。
前記表示位置指定画面は、前記表示領域に表示した前記画像に対するユーザによる移動を受け付ける画面であることを特徴とする請求項１に記載の表示装置。
前記表示領域が表示されるディスプレイが横向きか縦向きかを検出するディスプレイ方向検出部を有し、
前記メニュー画面生成部は、前記ディスプレイが横向きの場合、前記表示領域における画像の水平方向の表示位置を受け付ける前記表示位置指定画面を表示し、
前記ディスプレイが縦向きの場合、前記表示領域における画像の垂直方向の表示位置を受け付ける前記表示位置指定画面を表示することを特徴とする請求項１〜３のいずれか１項に記載の表示装置。
前記メニュー画面生成部は、前記表示領域が表示されるディスプレイが横向きか縦向きかの設定を受け付ける設定画面を表示し、
前記メニュー画面生成部は、前記ディスプレイが横向きであると設定されている場合、前記表示領域における前記画像の水平方向の表示位置を受け付ける前記表示位置指定画面を表示し、
前記ディスプレイが縦向きであると設定されている場合、前記表示領域における前記画像の垂直方向の表示位置を受け付ける前記表示位置指定画面を表示することを特徴とする請求項１〜３のいずれか１項に記載の表示装置。
前記画像の縦横比と前記画像が表示される表示領域の縦横比が同じ場合、
前記表示処理部は、前記表示領域の全面に前記画像を表示することを特徴とする請求項１〜５のいずれか１項に記載の表示装置。
前記表示領域の前記表示位置に配置される前記画像を生成する画像生成部を有し、
取得した前記画像の縦横比と前記画像が表示される前記表示領域の縦横比が異なる場合、
前記画像生成部は、前記画像の長い方の辺が、前記表示領域の対応する辺の長さに一致するように前記画像を変倍して、前記表示位置に前記画像を配置することを特徴とする請求項１〜６のいずれか１項に記載の表示装置。
前記表示位置指定画面は、前記画像の長い方の辺を、前記表示領域の対応する辺の長さよりも小さく変倍する設定を有し、
該設定を受け付けた場合、前記画像生成部は、前記画像の短い方の辺と前記表示領域の端までの間に余白を設けることを特徴とする請求項７に記載の表示装置。
画像を表示するディスプレイは少なくとも９０度回転でき、
前記表示装置は前記画像を保存した時とは異なるディスプレイ方向に回転した状態で、前記画像を取得し、
前記ディスプレイ方向が異なるために、前記画像の縦横比と前記画像が表示される表示領域の縦横比が異なる場合、
前記メニュー画面生成部は、前記表示位置指定画面を表示することを特徴とする請求項１〜８のいずれか１項に記載の表示装置。
前記表示装置は、前記画像を表示する表示装置とは異なる表示装置が保存した前記画像を表示することを特徴とする請求項１〜８のいずれか１項に記載の表示装置。
取得した画像を表示装置が表示する表示方法であって、
前記画像の縦横比と前記画像が表示される表示領域の縦横比が異なる場合、
メニュー画面生成部が、前記表示領域のどの位置に前記画像を表示するかの指定を受け付ける表示位置指定画面を表示するステップと、
表示処理部が、前記表示位置指定画面で指定された表示位置に前記画像を表示するステップと、を有することを特徴とする表示方法。
取得した画像を表示する表示装置を、
前記画像の縦横比と前記画像が表示される表示領域の縦横比が異なる場合、
前記表示領域のどの位置に前記画像を表示するかの指定を受け付ける表示位置指定画面を表示するメニュー画面生成部と、
前記表示位置指定画面で指定された表示位置に前記画像を表示する表示処理部、
として機能させるためのプログラム。