JP7292144B2 - Display control device, transmissive display device - Google Patents
Display control device, transmissive display device Download PDFInfo
- Publication number
- JP7292144B2 JP7292144B2 JP2019144541A JP2019144541A JP7292144B2 JP 7292144 B2 JP7292144 B2 JP 7292144B2 JP 2019144541 A JP2019144541 A JP 2019144541A JP 2019144541 A JP2019144541 A JP 2019144541A JP 7292144 B2 JP7292144 B2 JP 7292144B2
- Authority
- JP
- Japan
- Prior art keywords
- distance
- threshold
- luminance
- superimposed image
- color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
Description
本発明は、透過型表示装置に関するものである。 The present invention relates to a transmissive display device.
近年、透過型ヘッドマウントディスプレイ(Head Mounted Display、以下HMD)が製品化され、工場現場などにおける作業支援のために利用されている。一般的に、透過型HMDを装着したユーザが作業対象を見ながら、透過型HMDの画面上に作業支援に関する情報を投影表示することにより、ユーザにとって作業手順の確認や操作が可能となる。 In recent years, a transmissive head-mounted display (hereinafter referred to as HMD) has been commercialized and used for work support at factory sites and the like. In general, by projecting and displaying information related to work support on the screen of the transmissive HMD while the user wearing the transmissive HMD looks at the work target, the user can confirm and operate the work procedure.
作業において重要となるのは、透過型HMDに表示した映像の視認性である。視認性を向上する手段として、下記特許文献1は、環境照度やコンテンツの背景色により輝度を向上させる技術を記載している。また下記特許文献2は、作業対象までの距離(以下、作業対象距離)と、作業者がHMD上において見る映像までの距離(以下、虚像距離)とを合わせるようにレンズを制御する技術を記載している。
What is important in the work is the visibility of the image displayed on the transmissive HMD. As means for improving visibility,
作業者のHMDを介した視野上には、HMDの映像と作業対象が重畳される。環境の明るさではなく、作業対象の輝度が作業者の視認性に影響するので、作業対象の視認性を向上するうえでは作業対象自体の輝度を考慮しなければならない。ここでいう作業対象の輝度とは、作業者がHMDを介し視認する作業対象の輝度のことであり、作業環境の照度とは異なるものである。 The image of the HMD and the work target are superimposed on the visual field through the HMD of the worker. Since the visibility of the work target, not the brightness of the environment, affects the visibility of the worker, the brightness of the work target itself must be considered in order to improve the visibility of the work target. Here, the brightness of the work target is the brightness of the work target visually recognized by the worker through the HMD, and is different from the illuminance of the work environment.
HMD上の文字表示を例に挙げる。作業者が視認する画像は、作業対象を背景とし、その上にHMD上の文字が重なるよう表示される。その場合、作業対象の輝度とHMD上の文字の輝度との間の差が視認性に大きく影響する。特に作業対象の輝度が高い場合、HMD上の輝度との差が小さくなりコントラストが低下するので、作業者のHMD上の文字の視認性が低下する。特許文献1においては、環境照度については考慮されているものの、作業対象の輝度については必ずしも明確に考慮されていない。
A character display on an HMD is taken as an example. The image visually recognized by the worker is displayed with the work target as the background and the characters on the HMD overlaid thereon. In that case, the difference between the brightness of the work target and the brightness of the characters on the HMD greatly affects visibility. In particular, when the brightness of the work target is high, the difference from the brightness on the HMD becomes small and the contrast decreases, so the visibility of the characters on the HMD for the operator decreases. In
作業対象の輝度だけではなく、作業者と作業対象との間の距離も視認性に大きく影響する。一般的に、虚像距離と作業対象距離が一致しないよう焦点をずらす方が、HMD上の視認性向上に効果がある。虚像距離と作業対象距離が近づく場合(例えば虚像距離が作業対象距離より短く、作業者が作業対象に近づく場合)、作業者の焦点が虚像位置と作業対象の両方に合うことになる。特に虚像距離が作業対象距離と一致した場合、虚像上の文字と作業対象の文字が同じ焦点となるので、重要な作業情報を表示した虚像上の文字の視認性が著しく悪化する。 Not only the brightness of the work target, but also the distance between the worker and the work target greatly affects the visibility. In general, shifting the focus so that the virtual image distance and the work target distance do not match is effective in improving the visibility on the HMD. When the virtual image distance and the work target distance become closer (for example, when the virtual image distance is shorter than the work target distance and the worker approaches the work target), the worker's focus is on both the virtual image position and the work target. In particular, when the virtual image distance coincides with the work target distance, the characters on the virtual image and the work target characters have the same focus, so the visibility of the characters on the virtual image displaying important work information is significantly deteriorated.
特許文献2においては、虚像距離と作業対象との間の距離を合わせるので、上記理由により視認性が悪化する可能性がある。虚像距離と作業対象との間の距離を異ならせるようにすれば視認性は向上するが、レンズを制御する機構を設ける必要があり、HMDが大型化する。
In
本発明は、上記のような課題に鑑みてなされたものであり、小型であり、かつ、作業対象の輝度や作業者と作業対象との間の距離に関わらず視認性がよいHMDを提供することを目的とする。 SUMMARY OF THE INVENTION The present invention has been made in view of the above problems, and provides an HMD that is small and has good visibility regardless of the brightness of the work target and the distance between the worker and the work target. for the purpose.
本発明に係る透過型表示装置は、対象物の輝度または対象物までの距離を検出し、前記輝度が高ければ前記対象物に重畳して表示する重畳画像のコントラストまたは色差の少なくとも何れかが大きくなるように表示を切り替え、前記距離が距離範囲内に含まれる場合は前記重畳画像のコントラストまたは色差の少なくとも何れかが大きくなるよう表示を切り替える。 The transmissive display device according to the present invention detects the brightness of an object or the distance to the object, and if the brightness is high, at least one of the contrast and the color difference of the superimposed image superimposed on the object and displayed is large. When the distance is included in the distance range, the display is switched so that at least one of contrast and color difference of the superimposed image is increased.
本発明に係る透過型表示装置によれば、小型であり、かつ、作業対象の輝度や作業者と作業対象との間の距離に関わらず視認性のよいHMDを提供することができる。 According to the transmissive display device of the present invention, it is possible to provide an HMD that is small and has good visibility regardless of the brightness of the work target and the distance between the worker and the work target.
<実施の形態1>
図1は、本発明の実施形態1に係る透過型表示装置1の外観図である。透過型表示装置1はHMDとして構成されている。HMDを用いた作業支援においては、作業者400はヘルメット300を被ることが多いので、ヘルメット300にHMDを接続した例を用いて説明する。
<
FIG. 1 is an external view of a
透過型表示装置1は、表示部12、カメラ11、状態センサ13を備える。表示部12は作業者400の目40の正面に配置され、これにより作業者400の視線方向に映像が見えるようにする。カメラ11は外部から認識できる構造となっており、目40の視線方向と同一方向を撮像するように設置する。状態センサ13の検出方向は視線方向としてもよいし、HMD上の表示に合わせて適切な向きに方向を決めてもよい。状態センサ13は、対象物41の輝度および/または対象物41までの距離を計測する。
The
コントローラ2は、ヘルメット300に組み付けられている。ヘルメット300に固定された固定治具310からアーム320を延伸して透過型表示装置1とアーム320を接続することにより、透過型表示装置1をヘルメット300に固定する。表示部12が目40の最適な位置に配置されるように、アーム320は自由に曲げ伸ばしが可能である。図1のように2箇所で透過型表示装置1を固定してもよい。1か所のみ固定すると、その箇所を支点として透過型表示装置1が回転しやすくなるので、目40と表示部12の位置がずれやすくなる。位置がずれると映像の欠けやぼやけが発生するので、視認性の低下につながってしまう。2箇所で固定すれば回転しにくくなるので、視認性低下を抑制できる。固定位置は、透過型表示装置1の表示部12の反対側端部、および透過型表示装置1がL字に折れ曲がる箇所とするのが有効である。これらの位置で固定することにより、カメラ11を遮らず、かつ目40の視界にも影響しない構造になる。
図2は、透過型表示装置1とその周辺機器の構成を示すブロック図である。透過型表示装置1はコントローラ2と接続され、コントローラ2はさらに周辺機器3と接続されている。
FIG. 2 is a block diagram showing the configuration of the
コントローラ2は、比較部21、閾値格納部22、制御部23、入力インターフェース24、無線通信部25、記憶部26、加速度センサ27を備える。比較部21と閾値格納部22については後述する。制御部23は、表示部12を制御することにより、表示部12が表示する画像を制御する。入力インターフェース24は、コントローラ2と周辺機器3を接続するインターフェースである。記憶部26は、制御部23が用いるデータを格納する。加速度センサ27は、作業者400の頭部の動きを検出する。
The
周辺機器3は、マイク30、リモコン31、スピーカ32を含む。マイク30は、作業者400の声をコントローラ2に対して入力する。リモコン31は、映像切替や表示モード設定などを指示するデバイスである。スピーカ32は、音声によって作業者400の作業を支援する。
Peripheral device 3 includes
コントローラ2が外部と通信する場合(例えば中央監視室と作業者400が作業状況を共有する場合)、無線通信部100とクラウドサーバ200を設けてもよい。無線通信部25は無線通信部100と無線通信する。通信手段は例えばWiFiやBluetoothを用いる。無線通信部100は無線通信部25から受信したデータをクラウドサーバ200に送信する。ここで言うクラウドサーバ200は遠隔管理者側であり、遠隔管理者側から作業者400のHMDに対して映像や音声の共有、設定値の変更、データ取得などを実施することを想定する。無線通信部100が受信するデータは、カメラ11の映像データでもよいし、マイク30から入力された音声データでもよい。無線通信部100はクラウドサーバ200から受信したデータを無線通信部25に送信する。無線通信部25の受信したデータが閾値である場合、制御部23は閾値格納部22にその閾値を格納する。
When the
制御部23は、カメラ11の映像だけでなく、例えば作業情報データ、ユーザへの周知情報を表示部12に表示させてもよい。作業情報データは例えば作業工程、図面、過去の作業記録等である。周知情報としては、閾値格納部22が格納している閾値が変更された旨の通知など、HMDのパラメータの変更時にこれをユーザに知らせるなどの目的で用いることができる。その際はユーザに対しパラメータを変更してもよいか確認する画面を表示し、ユーザが変更を承認もしくは拒否できるようにしてもよい。
The
次に状態センサ13が対象物41の状態を検出してから表示部12上の映像を切り替えるまでの動作を説明する。状態センサ13は対象物41の輝度または対象物41までの距離のうち少なくともいずれかを検出する。比較部21は、閾値格納部22に格納されている閾値と状態センサ13による検出結果を比較し、比較結果に応じた制御信号を制御部23に出力する。制御部23は、比較部21が出力した制御信号にしたがって、表示部12が表示する映像を切り替える。映像切替の詳細については後述する。
Next, the operation from detection of the state of the
図3Aは、表示部12が表示する映像の例を示す図である。本発明の映像表示の1例として、作業者400の頭部の動きにより、仮想画面120内のコンテンツを切り替えるユーザインターフェースを挙げた。仮想画面120はコンテンツを置ける領域を有し、この例ではコンテンツ122-1とコンテンツ122-2を含む。作業時は作業手順と作業対象図面が必要となるので、例としてコンテンツ122-1は作業手順を示し、コンテンツ122-2は図面を示すものとする。表示領域121は表示部12上に表示する画像を示す。加速度センサ27が作業者400の頭部の動きを検出すると、制御部23は仮想画面120内の表示領域121をその動きに対応して動かし、表示領域121をいずれかのコンテンツ領域と位置合わせする。これによりコンテンツ122-1やコンテンツ122-2を表示部12上に表示する。図3Aではコンテンツ122-1とコンテンツ122-2いずれも表示領域121に含まれていないので、表示部12上には何も映像が表示されていない。
FIG. 3A is a diagram showing an example of an image displayed by the
図3Bは、表示部12がコンテンツを表示している例である。表示領域121内にコンテンツ122-1が含まれているので、表示部12上にコンテンツ122-1の内容が表示される。
FIG. 3B is an example in which the
作業者400の正面には作業対象(対象物41)が位置しているのが通常であるので、正面には映像を表示しない方が好ましい。図3A~図3Bに例示するような仮想画面120を用いることにより、作業者400が頭部を動かしてその時々に必要なコンテンツを選択的に表示することができる。
Since the work target (target object 41) is usually positioned in front of the
図4Aは、コンテンツとして作業手順書を表示する例である。手順書はNo、項目、処置の内容を記載している。作業者は各作業内容を確認し、処置欄が記載している操作を順次実施する。例として現在の作業に下線を付した。現在の作業を明確に示すために、下線以外にも枠で囲む、文字色を変更する、背景色を変更するなどであってもよい。文字色が白色、背景色が黒色の場合、文字色を緑色、黄色等に変更することも効果的である。また反対に背景色に色をつけても効果的である。作業手順は必要最小限の行数のみを表示するために、タイトル、前の作業、現在の作業、次の作業の4行表示としている。作業表示を4行のみとしている理由は、情報量を絞り、現在の作業を明確にすることにより、作業の抜け漏れによるヒューマンエラーを抑止するためである。さらにこのような表示によって作業者400は実施すべき作業を即時確認できるので、作業内容を探す時間を短縮でき効率向上につながる。
FIG. 4A is an example of displaying a work procedure manual as content. The procedure manual describes No., items, and contents of measures. The worker confirms the contents of each work and sequentially performs the operations described in the action columns. Current work is underlined as an example. In order to clearly show the current work, other than underlining, enclosing with a frame, changing the character color, changing the background color, etc. may be used. If the character color is white and the background color is black, it is also effective to change the character color to green, yellow, or the like. Conversely, it is also effective to color the background color. In order to display only the minimum required number of lines, the work procedure is displayed in four lines: title, previous work, current work, and next work. The reason why the work display is limited to four lines is to reduce the amount of information and clarify the current work, thereby preventing human error due to omission of work. Furthermore, since the
図4Bは、図4Aに続く作業を表示する例である。図4Aにおける作業No.2が終了すると、図4Bのように作業No.3を中心としてその前後の作業を表示する。 FIG. 4B is an example of displaying work following FIG. 4A. Work No. in FIG. 4A. 2 is completed, as shown in FIG. 4B, work No. 2 is completed. Centering on 3, the work before and after it is displayed.
図4Cは、作業手順全体を表示する例である。作業者400が作業手順書の全体を俯瞰したい場合、図4Cのように手順全体を表示してもよい。この場合、次の作業に遷移する際や手順全体を表示する際のトリガは、マイク30の音声入力でもよいし、リモコン31による操作指示でもよい。その他適当な手段でもよい。
FIG. 4C is an example of displaying the entire work procedure. If the
図5は、制御部23の内部構成を示すブロック図である。制御部23は、信号変換部23-1、音声処理部23-2、画像処理部23-3、画像生成部23-4、信号処理部23-5、音声データ生成部23-6、データ書換部23-7を備える。
FIG. 5 is a block diagram showing the internal configuration of the
マイク30から制御部23に出力された音声信号30-1は、音声処理部23-2に入力される。音声処理部23-2は音声信号30-1をその内容に対応した映像切替コマンドに変換し、映像切替コマンドを画像処理部23-3に出力する。リモコン31の操作信号31-1は信号変換部23-1に出力され、信号変換部23-1はこれを適切な映像切替コマンドに変換した後、映像切替コマンドを画像処理部23-3に出力する。
An audio signal 30-1 output from the
画像処理部23-3は、信号変換部23-1、音声処理部23-2、カメラ11、比較部21からの信号を入力とし、コンテンツの切替が必要であれば、記憶部26に格納した作業情報や図面などを読み込み、仮想画面120上に切替後のコンテンツ122を配置する。その後、画像処理部23-3は切替後のコンテンツ122を含む仮想画面120を画像生成部23-4に出力する。画像処理部23-3は処理後の画像を無線通信部25から送信することにより、遠隔者と共有できるようにしてもよい。
The image processing unit 23-3 receives signals from the signal conversion unit 23-1, the audio processing unit 23-2, the
遠隔者から送られた映像その他データ(テキスト、数値データ等)を共有できるように画像処理を実施してもよい。遠隔者から音声データが送信された場合は、音声データ生成部23-6を介しスピーカ32へ音声データ32-1を送信し、音声により作業者400に対して指示してもよい。
Image processing may be performed so that video and other data (text, numerical data, etc.) sent from a remote party can be shared. When voice data is transmitted from a remote person, the voice data 32-1 may be transmitted to the
画像生成部23-4は、画像処理部23-3の生成した仮想画面120と信号処理部23-5を介し入力した加速度センサ27の信号に応じ、仮想画面120内における表示領域121を決定し、表示部12に表示する画像を生成する。信号処理部23-5は、加速度センサ27が出力する信号の前処理を実施する。例えば平均化、フィルタ処理、データの取得周期などを決め、適切な信号として画像生成部23-4に出力する。データ書換部23-7は、無線通信部25から送信されたデータに基づき、記憶部26が格納している作業手順、図面、表示切替方法などを書き換え、あるいは閾値格納部22が格納している閾値を書き換える。例えば作業手順の順番を変更したい場合、遠隔者が無線通信部25を介し変更後のデータを送信し、データ書換部23-7は記憶部26の適切な領域に変更後のデータを格納する。
The image generation unit 23-4 determines the
図6は、画像処理部23-3の動作を説明するフローチャートである。画像処理部23-3は、音声処理部23-2と信号変換部23-1からの信号入力を確認する(S601)。信号入力があれば(S601:YES)対応する手順書や図面を記憶部26から読み込む(S602)。入力がなければ(S601:NO)次の判定に進む。 FIG. 6 is a flowchart for explaining the operation of the image processing section 23-3. The image processing unit 23-3 confirms signal inputs from the audio processing unit 23-2 and the signal conversion unit 23-1 (S601). If there is a signal input (S601: YES), the corresponding procedure manual and drawings are read from the storage unit 26 (S602). If there is no input (S601: NO), the process proceeds to the next determination.
画像処理部23-3は、比較部21から表示方法を切り替えるよう指示する制御信号が出力されているか否かを確認する(S603)。表示切替信号があれば(S603:YES)、記憶部26が格納している表示方法を読み込む(S604)。表示切替信号がなければ(S603:NO)次の判定に進む。
The image processing unit 23-3 checks whether or not a control signal instructing to switch the display method is output from the comparison unit 21 (S603). If there is a display switching signal (S603: YES), the display method stored in the
画像処理部23-3は、カメラ11から画像信号が出力されているか否かを確認する(S605)。画像信号がある場合(S605:YES)、画像処理部23-3は対象物41の情報を抽出する(S606)。例えば、対象物41上に表記されている文字サイズやフォント、対象物41の輝度、などを抽出する。画像処理部23-3はさらに、S606において抽出した情報に応じた表示方法を記憶部26から読み込む(S607)。画像信号がない場合は次の判定に進む(S605:NO)。
The image processing unit 23-3 checks whether an image signal is being output from the camera 11 (S605). If there is an image signal (S605: YES), the image processing unit 23-3 extracts information on the object 41 (S606). For example, the character size and font written on the
画像処理部23-3は、無線通信部25から入力があるか否かを確認する(S608)。入力がある場合(S608:YES)、無線通信部25が受信したデータにしたがって、コンテンツの表示サイズや表示位置などの表示レイアウトを決定する(S609)ことにより、表示部12が表示するコンテンツを生成する。入力がなければS610へ進む(S608:NO)。
The image processing unit 23-3 checks whether there is an input from the wireless communication unit 25 (S608). If there is an input (S608: YES), the content to be displayed by the
画像処理部23-3は、以上の手順によって決定したコンテンツなどにしたがって、仮想画面120を生成する(S610)。
The image processing unit 23-3 generates the
図7は、表示部12がコンテンツの虚像と対象物41を表示している状態を示す模式図である。虚像位置におけるコンテンツはコンテンツ文字121aとコンテンツ背景121bである。対象物41は対象文字41aと対象背景41bを有する。
FIG. 7 is a schematic diagram showing a state in which the
対象物41の輝度が閾値未満である場合、コンテンツ文字121aの色は白、コンテンツ背景121bの色は黒が好ましい。このような組み合わせとする理由は、作業者400の目の疲労度と視認性のためである。視認性を考えるとコントラストが高い色の組み合わせが好ましいので、白と黒を選定している。また表示領域121内において、概ねコンテンツ背景121bの方が表示領域121内の面積を占める割合が高いので、コンテンツ背景121bを白とすると、目に照射される光量が多くなる。照射光量が多くなると目が疲労する。そこでコンテンツ文字121aを白とし、コンテンツ背景121bを黒とした。
When the brightness of the
本実施形態1において、表示部12が黒色を表示するとき、その部分の画素に対して色を割り当てないことによって黒色を表すこととする。したがってその部分は透過して対象物41が表示されることとなることを付言しておく。
In the first embodiment, when the
対象物41の輝度が閾値以上となった場合、人間の目の特性に応じコンテンツ文字121aとコンテンツ背景121bを変更することにより、視認性が向上する。具体例については後述する。
When the luminance of the
図8は、網膜内の視細胞を示す模式図である。人間の視細胞には桿体細胞と錐体細胞がある。桿体細胞は暗所での薄明視を担い、錐体細胞は明所での明所視を担っている。特に錐体細胞は複数の波長感受性の異なる視物質を有しており、色覚を可能としている。つまり、暗所ではコンテンツ文字121aとコンテンツ背景121bのコントラストが最も視認性向上に有効であるが、明所では色に対する感度が高くなるので、コントラストだけではなく、色差を利用することが有効である。このような視細胞の特徴を活かし、対象物41の輝度に応じたコンテンツ文字121aとコンテンツ背景121bの色の組み合わせを切り替えることにより、視認性を向上させることができる。
FIG. 8 is a schematic diagram showing photoreceptor cells in the retina. Human visual cells include rod cells and cone cells. Rod cells are responsible for mesopic vision in the dark, while cone cells are responsible for photopic vision in bright light. In particular, cone cells have a plurality of different wavelength-sensitive visual substances, enabling color vision. In other words, the contrast between the
図9は、色度座標図である。図9に示す色度座標上の色は、X座標が大きいほど赤成分が強く、X座標が小さいほど青成分が強い。またY座標が大きいほど緑成分が強く、Y座標が小さいほど青成分が強い。図9において、コンテンツ文字121aに適した色とコンテンツ背景121bに適した色をそれぞれ色度座標上にプロットした。これらの色が適している理由について図9を参照しながら説明する。
FIG. 9 is a chromaticity coordinate diagram. In the colors on the chromaticity coordinates shown in FIG. 9, the larger the X coordinate, the stronger the red component, and the smaller the X coordinate, the stronger the blue component. Also, the larger the Y coordinate, the stronger the green component, and the smaller the Y coordinate, the stronger the blue component. In FIG. 9, the color suitable for the
青色と黄色は色差が大きい。特に輝度の高い黄色をコンテンツ文字121aの色として用いるとともに、輝度の低い青色をコンテンツ背景121bの色として用いることが、視認性向上に有効である。他方で輝度の高い黄色をコンテンツ背景121bの色として用いると、コンテンツ文字121aを人間の網膜に結像した際に、網膜上のコンテンツ文字121aには必ず周囲からの漏れこみが発生する。コンテンツ背景121bの輝度が高ければ高いほど漏れこみが多くなり、結果的にコントラストが低下し、さらに文字と背景の色差が小さくなり視認性向上までの効果が得られない。したがってコンテンツ文字121aの輝度を高くした方が視認性にとって好ましい。コンテンツ文字121aを黄色としコンテンツ背景121bを青色とする以外であっても、コントラストと色差が得られるのであればそれ以外の組み合わせでもよい。
There is a large color difference between blue and yellow. In particular, it is effective to improve visibility by using yellow with high brightness as the color of the
図10は、コンテンツ文字の色とコンテンツ背景の色の望ましい組み合わせを例示した図である。黄色と青色の組み合わせの他に、例えば緑色と青色、赤色と青色などの組み合わせもコンテンツ文字とコンテンツ背景として適している。前者は黄色と青色の組み合わせと比較してX方向の彩度差が小さくなるが、コントラストが高くなる。後者は黄色と青色の組み合わせと比較してX方向の彩度差が大きくなるが、Y方向彩度差とコントラストが低くなる。コントラストと色差を考慮し、ユーザ自身が色の組み合わせを決定してもよい。 FIG. 10 is a diagram illustrating desirable combinations of content character colors and content background colors. Besides the combination of yellow and blue, for example, combinations of green and blue, red and blue are also suitable as content characters and content backgrounds. The former has a smaller chroma difference in the X direction than the combination of yellow and blue, but has a higher contrast. The latter has a larger X-direction saturation difference than the combination of yellow and blue, but a lower Y-direction saturation difference and contrast. The user may decide the color combination by himself considering the contrast and the color difference.
対象物41が明るいとき(すなわち対象物41の輝度が閾値以上であるとき)、図8で説明したように色に対する視覚感度が高いので、コントラストと色差を併用することが望ましい。図10前段の組み合わせはその観点から構成している。これに対して対象物41が暗いときは、図8で説明したように輝度差(コントラスト)によって視認性を高めることが望ましい。図10後段の組み合わせはその観点から構成している。
When the
対象物41の輝度の閾値は作業環境によって決めてよい。例えば対象物41の輝度が200~300lx以上あれば色覚が働くので、表示方法を切替える閾値としてもよい。また照明の少ない作業現場等では100lx以下(対象の反射率が100%と仮定すると、対象に対し正対した状態で100cd/m2に相当)の環境が多いので、その場合は暗い環境での表示方法、例えばコンテンツ文字121aは白色、コンテンツ背景121bは黒色に切替える。
The brightness threshold of the
図11は、表示領域121内の対象物41が輝度の分布を持つ場合を例示する図である。例えば対象物41の左半分が明るい領域41cだとすると、表示領域121内の左側半分はコントラストが低下するので視認性が悪化する。
FIG. 11 is a diagram illustrating a case where the
図12Aは、表示領域121内の対象物41が輝度の分布を持つ場合におけるコンテンツ表示方法を例示する図である。対象物41の輝度を検出するセンサとしてカメラ11を用いた場合、対象物41の輝度分布を検出できる。制御部23は、領域41cに重ならないように表示領域121を仮想画面120内で移動する。必ずしも表示領域121全体を領域41cから除外する必要はなく、表示領域121のうち少なくとも一部を領域41cから除外すれば、その限りにおいて視認性低下を回避することができる。
FIG. 12A is a diagram illustrating a content display method when the
図12Bは、表示領域121内の対象物41が輝度の分布を持つ場合におけるコンテンツ表示方法の別例である。領域41cとそれ以外でコンテンツ文字121aとコンテンツ背景121bを変更してもよい。図12Bにおいては、コンテンツ文字121aを121a1と121a2に分けるとともに、コンテンツ背景121bを121b1と121b2に分けた。121a1と121b1は領域41cに重なっている部分であり、121a2と121b2はそれ以外の部分である。
FIG. 12B is another example of the content display method when the
領域41cと重なっている部分(121a1と121b1)については図10に示した対象物41が明るい場合のコンテンツ文字とコンテンツ背景の組み合わせを使用し、それ以外(121a2と121b2)については対象物41が暗い場合のコンテンツ文字とコンテンツ背景の組み合わせを使用する。
For the portions (121a1 and 121b1) overlapping the
コンテンツ文字121aが領域41cの境界と重なっている場合、1つの文字が領域41cに完全に入った場合に文字色と背景色を切り替えてもよいし、文字列の一部でも41c領域にかかった場合に切り替えてもよい。また境界を視線が行き来する場合に短周期で切り替えが起こらないように、数秒間かけて徐々に映像を切り替えてもよい。また暗い領域から領域41c(または領域41cから暗い領域)にコンテンツ文字121aが入った場合、段階的に切り替えてもよい。例えばコンテンツ背景121b1として青色を用いるとともにコンテンツ文字121a1として黄色を用い、コンテンツ背景121b2として黒色を用いるとともにコンテンツ文字121a2として白色を使用する場合、境界をまたいだ瞬間はコンテンツ文字121aとして黄色と白色の輝度色度それぞれの平均を用い、コンテンツ背景は青色と黒色の輝度色度それぞれの平均を用いる。数秒後、コンテンツ文字を黄色に変更するとともにコンテンツ背景を青色に変更する。
When the
コンテンツ文字色と背景色だけでなく、文字の大きさやフォントを変更してもよい。例えば18ptを22ptに変更し、フォントを視認性向上のためにデザインされた遊ゴシックやメイリオに変更してもよい。文字の大きさやフォントもコンテンツ文字色やコンテンツ背景色と同様に、境界付近の処理は段階的に実施してもよい。 Not only the content character color and background color, but also the character size and font may be changed. For example, 18pt may be changed to 22pt, and the font may be changed to Yu Gothic or Meiryo designed to improve visibility. As with the content character color and content background color, the character size and font may be processed stepwise in the vicinity of the boundary.
対象物41の文字サイズや文字フォントは、カメラ11が撮像した画像によって検出してもよいし、対象物41があらかじめ分かっている場合はその既知のサイズやフォントを前提としてもよい。制御部23は、検出したまたは既知の文字サイズや文字フォントを前提として、コンテンツ文字121aの視認性が高まるように文字サイズや文字フォントを選択すればよい。
The character size and font of the
人間の目の中心と周辺の解像度が異なる点を用い、表示領域121の中心と周辺で文字サイズを変更してもよい。作業者400の頭部の動きにより周辺にあった文字が中心に移動した際には文字サイズを小さくし、適切なサイズに調整してもよい。移動時には文字サイズが滑らかに変化するように、周辺から中心に向かうにつれ連続的にサイズを変更してもよい。状態センサ13の検出範囲は適切に設定できるようにしてもよい。例えば輝度を計測するセンサが1画素である場合、表示領域121の中心部にフォーカスするように検出範囲を設定してもよい。カメラのような複数画素をもつセンサである場合、表示領域121全体をセンサの検出範囲によってカバーしてもよいし、カバー範囲が狭い場合はなるべく表示領域121の中心付近をカバーできるように検出範囲を設定してもよい。
The character size may be changed between the center and the periphery of the
作業者400は、作業中において表示領域121をコンテンツ122-1または122-2に移動させると考えられる。このとき作業者400の視線はそのコンテンツへ向かうので、表示領域121上に重畳されるのもその方向に存在する対象物41となる。そこでコンテンツ122-1または122-2が表示領域121外にある時点において、あらかじめその方向に存在する対象物41の状態を状態センサ13によって検出し、その検出結果にしたがってコンテンツの表示をあらかじめ切り替えておいてもよい。例えばコンテンツ122-1の延長上にある対象物41が明るいのであれば、図10前段の組み合わせによってコンテンツ122-1をあらかじめ仮想画面内で形成しておく。これにより、作業者400の視線がコンテンツ122-1を向いたとき速やかにその表示形式によってコンテンツ122-1を表示することができる。
<実施の形態2>
本発明の実施形態2では、状態センサ13として、対象物41までの距離を検出するセンサを用いる例を説明する。透過型表示装置1、コントローラ2、周辺機器3など各機器の構成は実施形態1と同様である。
<
図13は、作業者400、虚像位置、対象物41それぞれの位置関係を例示する図である。虚像位置においては、コンテンツ文字121aとコンテンツ背景121bが位置している。対象物41は、対象文字41aと対象背景41bを有する。作業者400(あるいは状態センサ13)から対象物41までの距離(対象物距離)をd1、虚像距離をd2としたとき、d1>d2となっている。この理由については後述する。
FIG. 13 is a diagram illustrating positional relationships among the
図14Aは、対象物距離d1と虚像距離d2との間に差がある場合における表示方法を示す図である。対象文字41aはコンテンツ文字121aと比較して小さいので、視認性への影響は小さい。また対象物41までの距離(d1)とコンテンツ文字121aまでの距離(d2)が異なるので、コンテンツ文字121aに焦点を合わせた状態においては、対象文字41aがぼけた状態となる。したがって、視認性への影響はより小さくなる。
FIG. 14A is a diagram showing a display method when there is a difference between the object distance d1 and the virtual image distance d2. Since the
図14Bは、対象物距離d1と虚像距離d2が一致した場合における表示方法を示す図である。対象物距離d1と虚像距離d2が一致するので、対象文字41aとコンテンツ文字121aが同じ焦点面となる。また図14Aと比較して作業者400が対象物41に近づくので、対象文字41aがより大きく見えることとなり、コンテンツ文字121aの視認性に影響を及ぼす。そこで制御部23は、コンテンツ背景121bに色をつけることによって対象物41をマスクする。マスクすることにより、対象文字41aがコンテンツ背景121bの背面に位置するようになるので、コンテンツ文字121aの視認性が向上する。さらに視認性をよくするために、コンテンツ背景121bの色だけではなく、コンテンツ文字121aの色を変更してもよい。
FIG. 14B is a diagram showing a display method when the object distance d1 and the virtual image distance d2 match. Since the object distance d1 and the virtual image distance d2 match, the
図15は、コンテンツ文字の色とコンテンツ背景の色の望ましい組み合わせを例示した図である。ここでは虚像距離d2(または対象物距離d1)と対象物41の輝度に応じてこれらの色の望ましい組み合わせを定義した。
FIG. 15 is a diagram illustrating desirable combinations of content character colors and content background colors. Here, a desirable combination of these colors is defined according to the virtual image distance d2 (or the object distance d1) and the brightness of the
虚像距離d2=対象物距離d1の場合、対象文字41aをマスクすることによって視認性を向上させるために、背景は全て色を付している。d2=d1かつ対象物41が暗い場合、コントラストの高い白色と黒色を使用することが好ましいので、背景色を白色、文字色を黒色とした。目の疲労軽減よりも、ヒューマンエラーの抑制を優先し視認性を重視した。その他は実施形態1に記載した色の組み合わせと同様とした。
In the case of virtual image distance d2=object distance d1, the background is all colored in order to improve the visibility by masking the
d1=d2かつ対象物41が暗いとき、図10後段とは異なりコンテンツ背景121bを白または緑としているのは、透過型表示装置1の黒色表示の特性による。コンテンツ背景121bを黒色(すなわち画素に対して色を付与しない)としたとき、対象物41が透過して見えることになるので、d1=d2となっているとき対象物41を黒色によってマスクするとコンテンツの視認性が却って低下してしまう。そこで対象物41を確実にマスクすることを優先しつつ、コントラスト効果の高い配色によってコンテンツ背景121bを塗り潰すこととした。コンテンツ背景121bを白または緑とするのはこのことが理由である。これに対してd1≠d2であれば対象物41とコンテンツそれぞれの焦点が重なることはないので、図10と同様に処理することができる。
When d1=d2 and the
実施形態1と同様に、d1=d2となった場合、文字サイズやフォントを変更してもよい。対象物41の文字はカメラ11で認識してもよいし、定常作業であればあらかじめ作業対象の文字サイズや文字の種類等の情報を記憶部26に格納しておき、d1=d2となったとき切り替えてもよい。
As in the first embodiment, when d1=d2, the character size and font may be changed. The characters on the
図15においては説明の便宜上、d1=d2となったとき表示を切り替えることとしているが、現実的には距離閾値にある程度の範囲幅を持たせてもよい。例えばd2がd1-α≦d2≦d1+α(αは例えば数cm)の範囲内にあるときは図15前段の配色パターンを用い、その範囲外であるときは図15後段の配色パターンを用いればよい。 In FIG. 15, for convenience of explanation, the display is switched when d1=d2, but in reality, the distance threshold may have a certain range width. For example, when d2 is within the range of d1-α≤d2≤d1+α (α is, for example, several cm), the coloration pattern in the first half of FIG. 15 is used, and when it is out of that range, the coloration pattern in the second half of FIG. 15 can be used. .
図16は、カメラ11としてステレオカメラを用いた構成例である。ステレオカメラを用いることにより、対象物41までの距離を算出することができるので、状態センサ13に代えて(またはこれと併用して)ステレオカメラを用いることができる。この場合、カメラ11は対象物41の視差画像を取得し、その視差画像を用いて対象物41までの距離を算出する。比較部21はその算出した距離を取得する。その他構成は以上の説明と同様である。
FIG. 16 shows a configuration example using a stereo camera as the
対象物距離d1>虚像距離d2とする理由について説明する。d1<d2となった場合、対象物41の奥に虚像(コンテンツ)が配置されることになる。人間の習性として、対象物41が手前にあると、手前のものに目の焦点を合わせるので、対象物41の奥の虚像に焦点を合わせることが容易ではなくなる。そのためd1>d2とするほうが望ましいといえる。
The reason why the object distance d1>the virtual image distance d2 will be described. When d1<d2, the virtual image (content) is arranged behind the
d1は作業者400の手が届く範囲である必要がある。下記URLの資料によれば、人間の腕の長さは平均67cmと報告されている(URL:https://www.hql.jp/hql/wp/wp-content/uploads/2017/08/size_jpn2005.pdf、P.46、2019年7月26日取得)。また一般的に人間の焦点が合う最小距離はおよそ10cmである。これらを考慮すると、虚像距離d2は10cm以上60cm未満であることが好ましい。このように手で届く距離より虚像距離を短くすることにより、作業者400の視認性を向上できる。
d1 must be within the reach of the
透過型表示装置1が片眼用と両眼用いずれなのかによって虚像距離d2を変更してもよい。片目と両目を比較すると、両目の方が焦点を合わせやすく、対象物41の面に虚像位置を近づけたときであっても、対象物41と虚像を視覚的に分離しやすい。そこで制御部23は、両眼用の透過型表示装置1においては片眼用の透過型表示装置1よりも対象物41に近い位置に虚像を配置してもよい。
The virtual image distance d2 may be changed depending on whether the
作業者400が対象物41に向かって近づいている場面を考える。このとき初めはd1>d2であり、配色パターンは図15後段のいずれかである。作業者400が対象物41に近づくとd1=d2となり、その時点で配色パターンは図15前段のいずれかとなる。この時点で作業者400がd1=d2の近傍において細かく前後移動したと仮定すると、d1とd2の関係は、(a)d1>d2、(b)d1=d2、(c)d1<d2、の間で頻繁に遷移することとなる。そのたびに配色パターンを図15前段と後段との間で切り替えると、作業者400にとって却って煩わしくなってしまう。そこでd1>d2の状態からd1=d2の状態へ切り替わった場合、なるべく図15前段の配色パターンを維持することとする。例えば作業者400が対象物41から完全に離れ切ってしまうまでは図15前段の配色パターンを維持する。具体的には、d1>d2の状態からd1=d2の状態へ切り替わった後、対象物41と作業者400との間の距離がd1よりも十分大きくなるまで(すなわち対象物距離>>d1+αとなるまで)は、図15前段の配色パターンを維持する。これにより、境界距離前後で表示が頻繁に切り替わることがなくなるで、作業者400の作業を妨げないようにできる。内部処理としては例えばd1=d2となった時点で図15の距離閾値を一時的にd1よりも大きい値に置き換え、表示を元に戻した時点で距離閾値も元に戻せばよい。
Consider a scene where a
作業者400の動作によって表示が意図せず切り替わることがないようにしてもよい。状態センサ13は透過型表示装置1に搭載されているので、例えば状態センサ13の前を覆うように作業者400が腕をあげる動作をした場合、対象物41に作業者400が近づいたのか、それとも状態センサ13の前が障害物(この場合は腕)によって覆われているのか区別がつかない。そこで腕を上げる時間は短時間であると仮定し、比較部21から表示切替信号がある程度以上の時間連続して入力された場合のみ、表示を切り替えることとしてもよい。例えば比較部21が表示切替信号を5秒以上連続して出力し続けた場合に限り表示部12の表示を切り替えてもよい。この連続時間は作業中において発生する可能性がある動作内容に鑑みて適宜設定する。
The display may be prevented from being unintentionally switched by the action of the
<実施の形態3>
図17は、本発明の実施形態3に係る透過型表示装置1とその周辺機器の構成を示すブロック図である。本実施形態3において、表示部12の表示を切り替えるか否かを制御する機能ブロックを、独立したデバイス(センサモジュール5)として構成した。その他構成は実施形態1~2と同様であるので、以下ではセンサモジュール5について主に説明する。
<Embodiment 3>
FIG. 17 is a block diagram showing the configuration of a
センサモジュール5(表示制御装置)は、状態センサ13、比較部21、閾値格納部22を備える。これら機能部は実施形態1~2で説明したものである。センサモジュール5はさらに、信号制御部54を備える。信号制御部54は、比較部21による比較結果にしたがって、表示部12の表示を切り替えるように指示する制御信号を制御部23に対して出力する。すなわち信号制御部54は、実施形態1~2における比較部21が出力する表示切替信号と同じ役割を果たす信号を、コントローラ2とセンサモジュール5との間で送受信する。
The sensor module 5 (display control device) includes a
信号制御部54と制御部23との間はI2C(Inter-Integrated Circuit)、SPI(Serial Peripheral Interface)、UART(Universal Asynchronous Receiver Transmitter)などのプロトコルでデータを送受信してもよいし、信号制御部54が出力する信号を制御部23が定期的に観測してもよい。
Data may be transmitted and received between the
本実施形態3によれば、実施形態1~2で説明したような表示切替機能を備えていない既存の透過型表示装置1に対してセンサモジュール5を取り付けることにより、実施形態1~2と同様の機能を実現することができる。
According to the third embodiment, by attaching the
<実施の形態4>
図18は、本発明の実施形態4に係る透過型表示装置1とその周辺機器の構成を示すブロック図である。本実施形態4において、表示部12の表示を切り替えるか否かを制御する機能ブロックを、透過型表示装置1に組み込んだ。その他構成は実施形態1~2と同様である。
<Embodiment 4>
FIG. 18 is a block diagram showing the configuration of a
透過型表示装置1は、実施形態1~2で説明した構成に加えて、比較部21、閾値格納部22を備える。これら機能部は実施形態1~2で説明したものである。透過型表示装置1はさらに、信号制御部16を備える。信号制御部16の役割は信号制御部54と同様である。
The
本実施形態4によれば、例えばコントローラ2をスマートフォンやタブレットなど画像処理能力と無線機能を有する端末に置き換えることができる。ユーザにとっては、アプリ開発などソフトウェア面での自由度が高まるメリットがある。
According to the fourth embodiment, for example, the
<本発明の変形例について>
本発明は、前述した実施形態に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施形態の構成の一部を他の実施形態の構成に置き換えることが可能であり、また、ある実施形態の構成に他の実施形態の構成を加えることも可能である。また、各実施形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
<Regarding Modifications of the Present Invention>
The present invention is not limited to the embodiments described above, and includes various modifications. For example, the above-described embodiments have been described in detail in order to explain the present invention in an easy-to-understand manner, and are not necessarily limited to those having all the configurations described. Also, part of the configuration of one embodiment can be replaced with the configuration of another embodiment, and the configuration of another embodiment can be added to the configuration of one embodiment. Moreover, it is possible to add, delete, or replace a part of the configuration of each embodiment with another configuration.
図10と図15において、文字色と背景色の組み合わせを例示したが、これらの色は必ずしも純色でなくともよく、各組み合わせが示す色成分が最も多くなるように配色すれば一定程度の効果を発揮できる。例えば図10の1行目が記載している組み合わせは、コンテンツ文字121aの色として黄色成分を最も多く有するように配色するとともに、コンテンツ背景121bの色として青色成分を最も多く有するように配色すれば、一定程度のコントラスト強調効果を得ることができる。 10 and 15 illustrate combinations of character colors and background colors, but these colors do not necessarily have to be pure colors, and a certain degree of effect can be obtained by arranging colors so that the color components indicated by each combination are maximized. I can do it. For example, in the combination described in the first line of FIG. , a certain degree of contrast enhancement effect can be obtained.
以上の実施形態において、制御部23、比較部21、その他演算を実施する機能部は、これらの機能を実装した回路デバイスなどのハードウェアを用いて構成することもできるし、これらの機能を実装したソフトウェアを演算装置(例えばCentral Processing Unit)が実行することによって構成することもできる。記憶部26と閾値格納部22は、ハードディスクやメモリなどの記憶装置によって構成することができる。
In the above embodiments, the
以上の実施形態においては、作業者400が頭部に装着するHMDとして透過型表示装置1が構成されている例を説明したが、本発明は虚像を用いる透過型表示装置全般に対して適用することができる。例えば車載ヘッドアップディスプレイなどにも同様に適用可能である。
In the above embodiment, an example in which the
1:透過型表示装置
2:コントローラ
3:周辺機器
41:対象物
5:センサモジュール
11:カメラ
12:表示部
120:仮想画面
121:表示領域
121a:コンテンツ文字
121b:コンテンツ背景
122:コンテンツ
13:状態センサ
15:閾値格納部
16:信号制御部
21:比較部
23:制御部
24:入力インターフェース
25:無線通信部
26:記憶部
27:加速度センサ
30:マイク
31:リモコン
100:無線通信部
200:クラウドサーバ
300:ヘルメット
310:固定治具
320:アーム
400:作業者
1: Transmissive display device 2: Controller 3: Peripheral device 41: Object 5: Sensor module 11: Camera 12: Display unit 120: Virtual screen 121:
Claims (19)
前記対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって前記表示部が表示する前記重畳画像を切り替える制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記表示部は、前記重畳画像として文字と背景を表示し、
前記制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記制御部は、前記輝度が前記輝度閾値以上である場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記表示部を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記表示部を制御し、
前記制御部は、前記輝度が前記輝度閾値未満である場合は、前記文字色を白色とするかまたは前記文字色の色成分のうち緑色成分が最も多くなるように前記表示部を制御するとともに、前記背景色を黒色とするように前記表示部を制御する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of the object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a control unit for switching the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the control unit compares the contrast or controlling the display unit so that at least one of the color differences increases;
When the state detection unit detects the distance and the distance is included in the distance range, the control unit compares the distance in the superimposed image with a case where the distance is not included in the distance range. Control the display unit so that at least one of the contrast or color difference of
The distance range represents a virtual image distance of the superimposed image,
The display unit displays characters and a background as the superimposed image,
The control unit controls the display unit so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
When the luminance is equal to or higher than the luminance threshold, the control unit controls the display unit such that a yellow component, a green component, or a red component among the color components of the character color is maximized, and controls the background color. controlling the display unit so that the blue component is the largest among the color components of
When the luminance is less than the luminance threshold, the control unit controls the display unit such that the character color is white or the green component is the largest among the color components of the character color, and A transmissive display device, wherein the display unit is controlled so that the background color is black.
前記対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって前記表示部が表示する前記重畳画像を切り替える制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記表示部は、前記重畳画像として文字と背景を表示し、
前記制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記制御部は、前記輝度が前記輝度閾値以上でありかつ前記距離が前記距離範囲内に含まれる場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記表示部を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記表示部を制御し、
前記制御部は、前記輝度が前記輝度閾値未満でありかつ前記距離が前記距離範囲内に含まれる場合は、前記文字色を黒色とするように前記表示部を制御するとともに、前記背景色を白色とするかまたは前記背景色の色成分のうち緑色成分が最も多くなるように前記表示部を制御する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of the object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a control unit for switching the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the control unit compares the contrast or controlling the display unit so that at least one of the color differences increases;
When the state detection unit detects the distance and the distance is included in the distance range, the control unit compares the distance in the superimposed image with a case where the distance is not included in the distance range. Control the display unit so that at least one of the contrast or color difference of
The display unit displays characters and a background as the superimposed image,
The control unit controls the display unit so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
The distance range represents a virtual image distance of the superimposed image,
When the brightness is equal to or greater than the brightness threshold value and the distance is within the distance range, the control unit adjusts the yellow component, the green component, or the red component among the color components of the character color to be the largest. controlling the display unit and controlling the display unit so that a blue component is the largest among the color components of the background color;
When the luminance is less than the luminance threshold value and the distance is within the distance range, the control unit controls the display unit to set the character color to black and the background color to white. or controlling the display unit such that the green component of the color components of the background color is maximized.
前記対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって前記表示部が表示する前記重畳画像を切り替える制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記表示部は、前記重畳画像として文字と背景を表示し、
前記制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記表示部を制御し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記制御部は、前記輝度が前記輝度閾値以上でありかつ前記距離が前記距離範囲内に含まれない場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記表示部を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記表示部を制御し、
前記制御部は、前記輝度が前記輝度閾値未満でありかつ前記距離が前記距離範囲内に含まれない場合は、前記文字色を白色とするかまたは前記文字色の色成分のうち緑色成分が最も多くなるように前記表示部を制御するとともに、前記背景色を黒色とするように前記表示部を制御する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of the object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a control unit for switching the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the control unit compares the contrast or controlling the display unit so that at least one of the color differences increases;
When the state detection unit detects the distance and the distance is included in the distance range, the control unit compares the distance in the superimposed image with a case where the distance is not included in the distance range. Control the display unit so that at least one of the contrast or color difference of
The display unit displays characters and a background as the superimposed image,
The control unit controls the display unit so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
The distance range represents a virtual image distance of the superimposed image,
When the luminance is equal to or greater than the luminance threshold value and the distance is not within the distance range, the control unit is configured to maximize the yellow component, the green component, or the red component among the color components of the character color. controlling the display unit and controlling the display unit so that the blue component among the color components of the background color is the largest,
When the luminance is less than the luminance threshold value and the distance is not within the distance range, the control unit sets the character color to white or sets the character color to have the most green component among the color components of the character color. A transmissive display device, wherein the display unit is controlled to increase the number of pixels, and the display unit is controlled to set the background color to black.
前記対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって前記表示部が表示する前記重畳画像を切り替える制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストおよび色差が大きくなるように、前記表示部を制御し、
前記制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストおよび色差が大きくなるように、前記表示部を制御し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記表示部は、前記重畳画像として文字を表示し、
前記制御部は、前記文字のサイズまたは前記文字のフォントのうち少なくともいずれかを変更することにより、前記重畳画像の視認性を高めるように、前記表示部を制御する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of the object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a control unit for switching the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the control unit compares contrast and controlling the display unit so that the color difference increases;
When the state detection unit detects the distance and the distance is included in the distance range, the control unit compares the distance in the superimposed image with a case where the distance is not included in the distance range. Control the display unit so that the contrast and color difference of
The distance range represents a virtual image distance of the superimposed image,
The display unit displays characters as the superimposed image,
The transmission type display, wherein the control unit controls the display unit so as to improve the visibility of the superimposed image by changing at least one of the size of the characters and the font of the characters. Device.
ことを特徴とする請求項1から4のいずれか1項記載の透過型表示装置。 The control unit controls the display unit to exclude at least part of the partial area from the display range when the brightness of the partial area of the object is equal to or higher than the brightness threshold. 5. The transmissive display device according to claim 1.
ことを特徴とする請求項1から3のいずれか1項記載の透過型表示装置。 When the brightness of the partial region of the object is equal to or higher than the brightness threshold, the control unit causes the character color of a portion of the superimposed image that overlaps with the partial region to overlap with the partial region of the superimposed image. 4. The display unit is controlled so as to increase at least one of contrast and color difference in the superimposed image by changing the background color of the part. 10. A transmissive display device according to claim 1.
ことを特徴とする請求項1から4のいずれか1項記載の透過型表示装置。 When the distance transitions from outside the distance range to within the distance range, the control unit controls the distance until the distance again reaches a second distance larger than the upper limit value of the distance range. 5. The transmissive display device according to any one of claims 1 to 4, wherein the superimposed image is maintained when within the range.
前記制御部は、前記表示範囲外における前記重畳画像を表示するように前記表示部に対して指示する指示信号を受け取ると、前記あらかじめ生成した重畳画像を表示するように前記表示部を制御し、
前記状態検出部は、前記あらかじめ生成した重畳画像を前記表示部が表示するとき前記表示部が表示すべき前記対象物の状態を、前記指示信号を受け取る前の時点においてあらかじめ検出しておき、
前記制御部は、前記あらかじめ検出した前記対象物の状態にしたがって、前記表示範囲外における前記重畳画像を生成する
ことを特徴とする請求項1から4のいずれか1項記載の透過型表示装置。 The control unit generates the superimposed image in advance outside the display range of the display unit at a time before the display unit displays the superimposed image,
When the control unit receives an instruction signal instructing the display unit to display the superimposed image outside the display range, the control unit controls the display unit to display the pre-generated superimposed image,
The state detection unit detects in advance the state of the object to be displayed by the display unit when the display unit displays the superimposed image generated in advance at a time point before receiving the instruction signal,
The transmissive display device according to any one of claims 1 to 4, wherein the control section generates the superimposed image outside the display range according to the state of the object detected in advance.
ことを特徴とする請求項1から4のいずれか1項記載の透過型表示装置。 5. The display unit assigns black to pixels of the superimposed image displayed on the display unit by allowing the object to pass through without imparting a display color. 1. The transmissive display device according to claim 1.
前記距離範囲は、10cm~60cmの範囲の値である
ことを特徴とする請求項1から4のいずれか1項記載の透過型表示装置。 The brightness threshold is a value corresponding to the brightness of the object viewed simultaneously with the superimposed image on the display unit when the illuminance of light incident on the object is 100 lx,
The transmissive display device according to any one of claims 1 to 4, wherein the distance range is a value in the range of 10 cm to 60 cm.
対象物の状態を検出する状態検出部、
前記透過型表示装置が前記対象物に重畳して表示する重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記透過型表示装置が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記透過型表示装置は、前記重畳画像として文字と背景を表示し、
前記信号制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値以上である場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記透過型表示装置を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値未満である場合は、前記文字色を白色とするかまたは前記文字色の色成分のうち緑色成分が最も多くなるように前記透過型表示装置を制御するとともに、前記背景色を黒色とするように前記制御信号を構成する
ことを特徴とする表示制御装置。 A display control device for instructing switching of images displayed by a transmissive display device,
a state detection unit that detects the state of an object;
a threshold storage unit for storing a threshold for whether or not to switch a superimposed image superimposed and displayed on the object by the transmissive display device;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the transmissive display device according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. or configuring the control signal such that at least one of the color differences is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal such that at least one of contrast or color difference in
The distance range represents a virtual image distance of the superimposed image,
The transmissive display device displays characters and a background as the superimposed image,
The signal control unit configures the control signal so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
When the luminance is equal to or higher than the luminance threshold, the signal control unit controls the transmissive display device such that a yellow component, a green component, or a red component among the color components of the character color is maximized, configuring the control signal so that the blue component is the largest among the color components of the background color;
When the luminance is less than the luminance threshold, the signal control unit controls the transmissive display device such that the character color is set to white or the green component among the color components of the character color is maximized. and configuring the control signal so as to set the background color to black.
対象物の状態を検出する状態検出部、
前記透過型表示装置が前記対象物に重畳して表示する重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記透過型表示装置が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記透過型表示装置は、前記重畳画像として文字と背景を表示し、
前記信号制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記信号制御部は、前記輝度が前記輝度閾値以上でありかつ前記距離が前記距離範囲内に含まれる場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記透過型表示装置を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値未満でありかつ前記距離が前記距離範囲内に含まれる場合は、前記文字色を黒色とするように前記透過型表示装置を制御するとともに、前記背景色を白色とするかまたは前記背景色の色成分のうち緑色成分が最も多くなるように前記制御信号を構成する
ことを特徴とする表示制御装置。 A display control device for instructing switching of images displayed by a transmissive display device,
a state detection unit that detects the state of an object;
a threshold storage unit for storing a threshold for whether or not to switch a superimposed image superimposed and displayed on the object by the transmissive display device;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the transmissive display device according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. or configuring the control signal such that at least one of the color differences is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal such that at least one of contrast or color difference in
The transmissive display device displays characters and a background as the superimposed image,
The signal control unit configures the control signal so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
The distance range represents a virtual image distance of the superimposed image,
When the luminance is equal to or greater than the luminance threshold value and the distance is within the distance range, the signal control unit is configured to maximize the yellow component, the green component, or the red component among the color components of the character color. and controlling the transmissive display device, and configuring the control signal so that the blue component is the largest among the color components of the background color,
The signal control unit controls the transmissive display device to set the character color to black when the luminance is less than the luminance threshold and the distance is included in the distance range, and controls the transmissive display device to set the character color to black. A display control device, wherein the control signal is configured such that the color is white or the green component is the largest among the color components of the background color.
対象物の状態を検出する状態検出部、
前記透過型表示装置が前記対象物に重畳して表示する重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記透過型表示装置が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記透過型表示装置は、前記重畳画像として文字と背景を表示し、
前記信号制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記信号制御部は、前記輝度が前記輝度閾値以上でありかつ前記距離が前記距離範囲内に含まれない場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記透過型表示装置を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値未満でありかつ前記距離が前記距離範囲内に含まれない場合は、前記文字色を白色とするかまたは前記文字色の色成分のうち緑色成分が最も多くなるように前記透過型表示装置を制御するとともに、前記背景色を黒色とするように前記制御信号を構成する
ことを特徴とする表示制御装置。 A display control device for instructing switching of images displayed by a transmissive display device,
a state detection unit that detects the state of an object;
a threshold storage unit for storing a threshold for whether or not to switch a superimposed image superimposed and displayed on the object by the transmissive display device;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the transmissive display device according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. or configuring the control signal such that at least one of the color differences is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal such that at least one of contrast or color difference in
The transmissive display device displays characters and a background as the superimposed image,
The signal control unit configures the control signal so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
The distance range represents a virtual image distance of the superimposed image,
When the luminance is equal to or greater than the luminance threshold value and the distance is not within the distance range, the signal control unit maximizes a yellow component, a green component, or a red component among the color components of the character color. and controlling the transmissive display device in such a manner that the control signal is configured such that the blue component is the largest among the color components of the background color,
When the luminance is less than the luminance threshold value and the distance is not within the distance range, the signal control unit sets the character color to white or sets the character color to green. A display control device, wherein the control signal is configured to control the transmissive display device so as to maximize the background color and to set the background color to black.
対象物の状態を検出する状態検出部、
前記透過型表示装置が前記対象物に重畳して表示する重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記透過型表示装置が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、または前記透過型表示装置と前記対象物との間の距離のうち少なくともいずれかを、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストおよび色差が大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストおよび色差が大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記透過型表示装置は、前記重畳画像として文字を表示し、
前記信号制御部は、前記文字のサイズまたは前記文字のフォントのうち少なくともいずれかを変更することにより、前記重畳画像の視認性を高めるように、前記制御信号を構成する
ことを特徴とする表示制御装置。 A display control device for instructing switching of images displayed by a transmissive display device,
a state detection unit that detects the state of an object;
a threshold storage unit for storing a threshold for whether or not to switch a superimposed image superimposed and displayed on the object by the transmissive display device;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the transmissive display device according to the result of the comparison;
with
the state detection unit detects at least one of the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. and configuring the control signal such that the color difference is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal to increase the contrast and color difference in
The distance range represents a virtual image distance of the superimposed image,
The transmissive display device displays characters as the superimposed image,
The display control, wherein the signal control unit configures the control signal so as to improve the visibility of the superimposed image by changing at least one of the size of the character and the font of the character. Device.
前記信号制御部は、前記表示制御装置を前記透過型表示装置に対して取り付けたとき、前記透過型表示装置に対して前記制御信号を出力することができるように構成されている
ことを特徴とする請求項11から14のいずれか1項記載の表示制御装置。 The display control device is detachable from the transmissive display device,
The signal control unit is configured to output the control signal to the transmissive display device when the display control device is attached to the transmissive display device. 15. The display control device according to any one of claims 11 to 14.
対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記表示部が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記表示部は、前記重畳画像として文字と背景を表示し、
前記信号制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値以上である場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記表示部を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値未満である場合は、前記文字色を白色とするかまたは前記文字色の色成分のうち緑色成分が最も多くなるように前記表示部を制御するとともに、前記背景色を黒色とするように前記制御信号を構成する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of an object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. or configuring the control signal such that at least one of the color differences is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal such that at least one of contrast or color difference in
The distance range represents a virtual image distance of the superimposed image,
The display unit displays characters and a background as the superimposed image,
The signal control unit configures the control signal so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
When the luminance is equal to or higher than the luminance threshold, the signal control unit controls the display unit such that a yellow component, a green component, or a red component among color components of the character color is maximized, and the background Configuring the control signal so that the blue component is the largest among the color components of the color,
When the luminance is less than the luminance threshold, the signal control unit controls the display unit such that the character color is set to white or the green component among the color components of the character color is maximized. , wherein the control signal is configured to set the background color to black.
対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記表示部が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記表示部は、前記重畳画像として文字と背景を表示し、
前記信号制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記信号制御部は、前記輝度が前記輝度閾値以上でありかつ前記距離が前記距離範囲内に含まれる場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記表示部を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値未満でありかつ前記距離が前記距離範囲内に含まれる場合は、前記文字色を黒色とするように前記表示部を制御するとともに、前記背景色を白色とするかまたは前記背景色の色成分のうち緑色成分が最も多くなるように前記制御信号を構成する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of an object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. or configuring the control signal such that at least one of the color differences is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal such that at least one of contrast or color difference in
The display unit displays characters and a background as the superimposed image,
The signal control unit configures the control signal so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
The distance range represents a virtual image distance of the superimposed image,
When the luminance is equal to or greater than the luminance threshold value and the distance is within the distance range, the signal control unit is configured to maximize the yellow component, the green component, or the red component among the color components of the character color. and controlling the display unit, and configuring the control signal so that the blue component is the largest among the color components of the background color,
When the luminance is less than the luminance threshold value and the distance is within the distance range, the signal control unit controls the display unit to set the character color to black and changes the background color. A transmissive display device, wherein the control signal is configured such that the color is white or the green component is the largest among the color components of the background color.
対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記表示部が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、および、前記透過型表示装置と前記対象物との間の距離を、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記表示部は、前記重畳画像として文字と背景を表示し、
前記信号制御部は、前記重畳画像の文字色と前記重畳画像の背景色を変更することにより、前記重畳画像内のコントラストまたは色差の少なくとも何れかが大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記信号制御部は、前記輝度が前記輝度閾値以上でありかつ前記距離が前記距離範囲内に含まれない場合は、前記文字色の色成分のうち黄色成分または緑色成分または赤色成分が最も多くなるように前記表示部を制御するとともに、前記背景色の色成分のうち青色成分が最も多くなるように前記制御信号を構成し、
前記信号制御部は、前記輝度が前記輝度閾値未満でありかつ前記距離が前記距離範囲内に含まれない場合は、前記文字色を白色とするかまたは前記文字色の色成分のうち緑色成分が最も多くなるように前記表示部を制御するとともに、前記背景色を黒色とするように前記制御信号を構成する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of an object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. or configuring the control signal such that at least one of the color differences is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal such that at least one of contrast or color difference in
The display unit displays characters and a background as the superimposed image,
The signal control unit configures the control signal so that at least one of contrast and color difference in the superimposed image increases by changing the character color of the superimposed image and the background color of the superimposed image,
The distance range represents a virtual image distance of the superimposed image,
When the luminance is equal to or greater than the luminance threshold value and the distance is not within the distance range, the signal control unit maximizes a yellow component, a green component, or a red component among the color components of the character color. and configuring the control signal so that the blue component is the largest among the color components of the background color,
When the luminance is less than the luminance threshold value and the distance is not within the distance range, the signal control unit sets the character color to white or sets the character color to green. A transmissive display device, wherein the control signal is configured so as to control the display unit so as to maximize the number and to set the background color to black.
対象物の像が透過するとともに前記対象物に重畳して重畳画像を表示する表示部、
前記対象物の状態を検出する状態検出部、
前記表示部が前記重畳画像を切り替えるか否かの閾値を格納する閾値格納部、
前記状態検出部が検出した前記対象物の状態と前記閾値を比較する比較部、
前記比較の結果にしたがって、前記表示部が表示する前記重畳画像を切り替えるように指示する制御信号を出力する信号制御部、
を備え、
前記状態検出部は、前記対象物の輝度、または前記透過型表示装置と前記対象物との間の距離のうち少なくともいずれかを、前記対象物の状態として検出し、
前記状態検出部が前記輝度を検出する場合、前記閾値格納部は前記閾値として少なくとも輝度閾値を格納しており、
前記状態検出部が前記距離を検出する場合、前記閾値格納部は前記閾値として少なくとも距離範囲を格納しており、
前記信号制御部は、前記状態検出部が前記輝度を検出しかつ前記輝度が前記輝度閾値以上である場合は、前記輝度が前記輝度閾値未満である場合と比較して、前記重畳画像内のコントラストおよび色差が大きくなるように、前記制御信号を構成し、
前記信号制御部は、前記状態検出部が前記距離を検出しかつ前記距離が前記距離範囲内に含まれる場合は、前記距離が前記距離範囲内に含まれない場合と比較して、前記重畳画像内のコントラストおよび色差が大きくなるように、前記制御信号を構成し、
前記距離範囲は、前記重畳画像の虚像距離を表しており、
前記表示部は、前記重畳画像として文字を表示し、
前記信号制御部は、前記文字のサイズまたは前記文字のフォントのうち少なくともいずれかを変更することにより、前記重畳画像の視認性を高めるように、前記制御信号を構成する
ことを特徴とする透過型表示装置。 A transmissive display device that transmits an image of an object,
a display unit that transmits an image of an object and displays a superimposed image superimposed on the object;
a state detection unit that detects the state of the object;
a threshold storage unit for storing a threshold value for determining whether the display unit switches the superimposed image;
a comparison unit that compares the state of the object detected by the state detection unit with the threshold;
a signal control unit that outputs a control signal for instructing switching of the superimposed image displayed by the display unit according to the result of the comparison;
with
the state detection unit detects at least one of the brightness of the object and the distance between the transmissive display device and the object as the state of the object;
when the state detection unit detects the luminance, the threshold storage unit stores at least a luminance threshold as the threshold;
when the state detection unit detects the distance, the threshold storage unit stores at least a distance range as the threshold;
When the state detection unit detects the luminance and the luminance is equal to or greater than the luminance threshold, the signal control unit compares contrast in the superimposed image when the luminance is less than the luminance threshold. and configuring the control signal such that the color difference is increased;
When the state detection unit detects the distance and the distance is included in the distance range, the signal control unit compares the superimposed image when the distance is not included in the distance range. configuring the control signal to increase the contrast and color difference in
The distance range represents a virtual image distance of the superimposed image,
The display unit displays characters as the superimposed image,
wherein the signal control unit configures the control signal so as to increase the visibility of the superimposed image by changing at least one of the size of the characters and the font of the characters. display device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019144541A JP7292144B2 (en) | 2019-08-06 | 2019-08-06 | Display control device, transmissive display device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019144541A JP7292144B2 (en) | 2019-08-06 | 2019-08-06 | Display control device, transmissive display device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021026125A JP2021026125A (en) | 2021-02-22 |
JP7292144B2 true JP7292144B2 (en) | 2023-06-16 |
Family
ID=74663885
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019144541A Active JP7292144B2 (en) | 2019-08-06 | 2019-08-06 | Display control device, transmissive display device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7292144B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7476128B2 (en) | 2021-03-11 | 2024-04-30 | 株式会社日立製作所 | Display system and display device |
WO2024053330A1 (en) * | 2022-09-05 | 2024-03-14 | 富士フイルム株式会社 | Image processing device, image processing method, image processing program, and system |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007535695A (en) | 2004-03-25 | 2007-12-06 | ソニー エリクソン モバイル コミュニケーションズ, エービー | Dynamic display control of portable electronic device display |
US20110254855A1 (en) | 2008-12-19 | 2011-10-20 | Bae Systems Plc | Display system |
JP2016504615A (en) | 2012-11-13 | 2016-02-12 | クアルコム,インコーポレイテッド | Changing virtual object display characteristics to enhance power performance of augmented reality devices |
WO2019044536A1 (en) | 2017-08-31 | 2019-03-07 | ソニー株式会社 | Information processing device, information processing method, program, and mobile object |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019015893A (en) * | 2017-07-07 | 2019-01-31 | 株式会社リコー | Image processing apparatus, display system, image processing method, and program |
-
2019
- 2019-08-06 JP JP2019144541A patent/JP7292144B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007535695A (en) | 2004-03-25 | 2007-12-06 | ソニー エリクソン モバイル コミュニケーションズ, エービー | Dynamic display control of portable electronic device display |
US20110254855A1 (en) | 2008-12-19 | 2011-10-20 | Bae Systems Plc | Display system |
JP2016504615A (en) | 2012-11-13 | 2016-02-12 | クアルコム,インコーポレイテッド | Changing virtual object display characteristics to enhance power performance of augmented reality devices |
WO2019044536A1 (en) | 2017-08-31 | 2019-03-07 | ソニー株式会社 | Information processing device, information processing method, program, and mobile object |
Also Published As
Publication number | Publication date |
---|---|
JP2021026125A (en) | 2021-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5201015B2 (en) | Head mounted display | |
US10451874B2 (en) | Image display device, method of controlling image display device, computer program, and image display system | |
JP6387825B2 (en) | Display system and information display method | |
JP6563043B2 (en) | Video display system | |
US9870048B2 (en) | Head-mounted display device, method of controlling the same, and computer program | |
TW201604586A (en) | Display device, control method for display device, and program | |
JP2012108479A (en) | Projection type display device and control method thereof | |
US10579109B2 (en) | Control device and control method | |
JP7292144B2 (en) | Display control device, transmissive display device | |
JP2015176186A (en) | Information processing apparatus, information processing method and information processing system | |
JP2018137505A (en) | Display device and control method thereof | |
JP2018174003A (en) | Display device, display system, control method of display device, and program | |
JP6575117B2 (en) | Display device, display device control method, and program | |
WO2019171802A1 (en) | Information processing device, information processing method, and program | |
JP6561606B2 (en) | Display device and control method of display device | |
JP6591667B2 (en) | Image processing system, image processing apparatus, and program | |
JP2017120488A (en) | Display device, display system, control method of display device, and program | |
JP6740613B2 (en) | Display device, display device control method, and program | |
JP2018042004A (en) | Display device, head-mounted type display device, and method for controlling display device | |
CN111818326A (en) | Image processing method, device, system, terminal device and storage medium | |
US11475866B2 (en) | Head-mounted display apparatus, input method switching method, and input method switching program | |
WO2022004130A1 (en) | Information processing device, information processing method, and storage medium | |
US11086441B2 (en) | Information processing apparatus, method for controlling information processing apparatus, and control program for information processing apparatus | |
WO2020071144A1 (en) | Information processing device, information processing method, and program | |
JP6304415B2 (en) | Head-mounted display device and method for controlling head-mounted display device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211126 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220824 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221007 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230308 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230512 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230530 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230606 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7292144 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |