JP6958018B2 - Information display system - Google Patents
Information display system Download PDFInfo
- Publication number
- JP6958018B2 JP6958018B2 JP2017122222A JP2017122222A JP6958018B2 JP 6958018 B2 JP6958018 B2 JP 6958018B2 JP 2017122222 A JP2017122222 A JP 2017122222A JP 2017122222 A JP2017122222 A JP 2017122222A JP 6958018 B2 JP6958018 B2 JP 6958018B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- monitoring target
- display
- target information
- displayed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、ユーザの頭部に装着するタイプのディスプレイにより、ユーザの視界内に監視対象に関する情報を表示する情報表示システムに関する。 The present invention relates to an information display system that displays information about a monitoring target in the user's field of view by using a type of display worn on the user's head.
近年、ユーザの頭部に装着可能な頭部装着型ディスプレイいわゆるヘッドマウントディスプレイ(以下、HMDと称する)を用いて、例えば仮想現実の画像や様々な情報を表示する技術が提案されている。この技術の適用として、例えばロボット等の作業領域内やその近傍で作業するユーザに対して、そのロボット等の安全に関する情報を提示するために、その安全に関する情報を、ユーザが装着したHMDに表示することが想定される。これによれば、ユーザは、ティーチィングペンダントやタブレット端末等を覗き込むことなく視線を上げたまま、ロボット等の安全に関する情報を取得することができるようになるため、安全性の向上が図られる。 In recent years, a technique for displaying, for example, a virtual reality image or various information has been proposed using a head-mounted display (hereinafter referred to as HMD) that can be worn on the user's head. As an application of this technology, for example, in order to present information on the safety of the robot or the like to a user who works in or near the work area of the robot or the like, the information on the safety is displayed on the HMD worn by the user. It is expected to be done. According to this, the user can acquire information on the safety of the robot or the like without looking into the teaching pendant or the tablet terminal while raising the line of sight, so that the safety can be improved. ..
しかしながら、一般的なHMDの多くは、ユーザの視界と重なる場所に透過型の表示部を配置し、その表示部に各種情報を表示させる構成である。この場合、表示部に表示される情報と、ユーザが表示部を通して見ている実景とが重なることになる。このため、例えば表示部に表示すべき情報が多い場合、情報を表示する領域を拡大することでより多くの情報を表示することができるが、表示部に表示された各種情報によってユーザの視界が遮られてしまう。一方で、情報を表示する領域を小さくすることで、視界の邪魔になることを抑制できるが、この場合、文字が小さくなって見難くなったり必要な情報を適切に表示出来なくなったりする。このように、情報の表示態様によっては、かえって安全性の低下が懸念される。 However, most of the general HMDs have a configuration in which a transparent display unit is arranged in a place overlapping the user's field of view, and various information is displayed on the display unit. In this case, the information displayed on the display unit and the actual scene seen by the user through the display unit overlap. Therefore, for example, when there is a lot of information to be displayed on the display unit, more information can be displayed by expanding the area for displaying the information, but the user's field of view is improved by the various information displayed on the display unit. It will be blocked. On the other hand, by reducing the area for displaying information, it is possible to suppress obstruction of the field of view, but in this case, the characters become small and difficult to see, or necessary information cannot be displayed properly. As described above, depending on the display mode of the information, there is a concern that the safety may be lowered.
本発明は上記事情に鑑みてなされたものであり、その目的は、装着型ディスプレイを用いてユーザに情報を提示するものにおいて、安全な情報提示が可能な情報表示システムを提供することにある。 The present invention has been made in view of the above circumstances, and an object of the present invention is to provide an information display system capable of safely presenting information in presenting information to a user using a wearable display.
実施形態の情報表示システムは、ユーザが装着可能であってユーザの視界内に情報を表示可能な装着型ディスプレイと、監視対象に関する情報である監視対象情報を取得可能な監視対象情報取得部と、ユーザの視界内に前記監視対象情報を表示するための表示領域を設定する表示領域設定部と、前記監視対象情報の情報量が前記表示領域内に収まる場合は前記監視対象情報を前記表示領域内においてスクロールせずに表示し、前記監視対象情報の情報量が前記表示領域内に収まらない場合は前記監視対象情報を前記表示領域内においてスクロールして表示する表示制御部と、を備える。 The information display system of the embodiment includes a wearable display that can be worn by the user and can display information within the user's field of view, a monitoring target information acquisition unit that can acquire monitoring target information that is information about the monitoring target, and the like. A display area setting unit that sets a display area for displaying the monitoring target information in the user's field of view, and a monitoring target information in the display area when the amount of the monitoring target information is within the display area. The display control unit includes a display control unit that displays the information to be monitored without scrolling and displays the information to be monitored by scrolling in the display area when the amount of the information to be monitored does not fit in the display area.
これによれば、視界内に表示する監視対象情報の情報量が多い場合であっても、視界内の表示領域を拡大して全ての監視対象情報を同時に表示する必要がない。そのため、監視対象情報の情報量が多い場合であっても、視界内が監視対象情報に埋められてしまって視界が遮られてしまうという事態を抑制することができる。すなわち、情報量の多い監視対象情報をスクロールして表示することにより、表示領域を極力小さくしつつ全ての監視対象情報を効率良く表示することができる。その結果、ユーザの視界を妨げ難く安全な情報提示が可能になる。 According to this, even when the amount of monitoring target information to be displayed in the field of view is large, it is not necessary to expand the display area in the field of view to display all the monitoring target information at the same time. Therefore, even when the amount of information to be monitored is large, it is possible to suppress a situation in which the field of view is filled with the information to be monitored and the field of view is obstructed. That is, by scrolling and displaying the monitoring target information having a large amount of information, it is possible to efficiently display all the monitoring target information while making the display area as small as possible. As a result, it is possible to present safe information without obstructing the user's field of view.
実施形態の情報表示システムにおいて、前記表示領域設定部は、前記監視対象情報の情報量が予め設定された最大領域内に収まる場合は前記監視対象情報をスクロールせずに表示できるように前記監視対象情報の情報量に合わせて前記表示領域を設定し、前記監視対象情報の情報量が前記最大領域内に収まらない場合は前記表示領域を前記最大領域に設定する。 In the information display system of the embodiment, when the amount of information of the monitoring target information falls within the preset maximum area, the display area setting unit can display the monitoring target information without scrolling. The display area is set according to the amount of information, and when the amount of information of the monitored information does not fit within the maximum area, the display area is set to the maximum area.
これによれば、監視対象情報の情報量が少ない場合には、その監視対象情報に合わせて表示領域を小さくすることができるため、ユーザの視界をより妨げ難くなる。更にこれによれば、表示領域は最大領域よりも大きくはならないため、ユーザに対して、視界が、最大領域以上は遮られないという安心感を与えることができる。これらの結果、更にユーザの視界を妨げ難くより安全な情報提示が可能になる。 According to this, when the amount of information of the monitoring target information is small, the display area can be reduced according to the monitoring target information, so that the user's field of view is less likely to be obstructed. Further, according to this, since the display area does not become larger than the maximum area, it is possible to give the user a sense of security that the field of view is not blocked beyond the maximum area. As a result, it becomes possible to present more secure information without obstructing the user's field of view.
実施形態の情報表示システムにおいて、前記監視対象情報は、危険の大小に応じて少なくとも危険度の大きい第1ランク情報と前記第1ランク情報よりも危険度の小さい第2ランク情報とに分類されている。前記表示制御部は、前記第1ランク情報を常に表示すると共に、前記第2ランク情報の情報量が前記表示領域内に収まらない場合は前記第2ランク情報をスクロールして表示する。 In the information display system of the embodiment, the monitored information is classified into at least first rank information having a higher risk and second rank information having a lower risk than the first rank information according to the magnitude of the danger. There is. The display control unit always displays the first rank information, and scrolls and displays the second rank information when the amount of information of the second rank information does not fit within the display area.
これによれば、危険度の高い第1ランク情報は常に視界内に表示されているため、ユーザは、危険度の高い第1ランク情報について常に注意を払うことができる。また、危険度の低い第2ランク情報は、スクロールして表示されるため、監視対象情報の情報量が多い場合であっても表示領域を小さくすることができる。したがって、より危険度の高い情報を確認し易くしつつ全体として表示領域を小さくすることができ、その結果、ユーザの視界を妨げ難く、更に安全な情報提示が可能になる。 According to this, since the high-risk first rank information is always displayed in the field of view, the user can always pay attention to the high-risk first rank information. Further, since the second rank information having a low degree of risk is scrolled and displayed, the display area can be reduced even when the amount of information to be monitored is large. Therefore, the display area can be reduced as a whole while making it easier to check the information having a higher degree of risk, and as a result, the user's field of view is not obstructed and more secure information can be presented.
実施形態の情報表示システムにおいて、前記表示制御部は、スクロールによる前記第2ランク情報の表示を一定周期で繰り返して行うと共に、前記第2ランク情報の情報量が多くなるほど前記スクロールの周期を早くする。これによれば、第2ランク情報の情報量が多くなった場合であっても、スクロールの1周期の期間を極力短くすることができる。したがって、ユーザは、スクロールされている第2ランク情報のうちある特定の情報を見たい場合に、目当ての情報を極力早く目にすることができる。 In the information display system of the embodiment, the display control unit repeatedly displays the second rank information by scrolling at a fixed cycle, and accelerates the scroll cycle as the amount of information of the second rank information increases. .. According to this, even when the amount of information of the second rank information becomes large, the period of one cycle of scrolling can be shortened as much as possible. Therefore, when the user wants to see a specific information among the scrolled second rank information, he / she can see the desired information as soon as possible.
また、ユーザは、一定周期で繰り返し行われている第2ランク情報のスクロールの速度、つまり同一情報が再度表示されるまでの時間の長短によって、第2ランク情報の情報量の多さを推定できる。したがって、ユーザは、第2ランク情報の情報量を視覚により直感的に認識することができるため、便利である。 Further, the user can estimate the amount of information of the second rank information by the speed of scrolling the second rank information that is repeatedly performed at a fixed cycle, that is, the length of time until the same information is displayed again. .. Therefore, the user can visually and intuitively recognize the amount of information of the second rank information, which is convenient.
実施形態の情報表示システムにおいて、前記表示制御部は、前記監視対象情報取得部が新規に取得した監視対象情報のうち少なくとも最新の監視対象情報をスクロールせずに所定期間表示する。これによれば、ユーザは、新規に追加された最新の監視対象情報については、他の監視対象情報とは区別して注意を払う期間を確保することができる。そのため、ユーザは、新規に追加された最新の監視対象情報についてより確実に注意を払うことができるため、更に安全な情報提示が可能になる。 In the information display system of the embodiment, the display control unit displays at least the latest monitoring target information among the monitoring target information newly acquired by the monitoring target information acquisition unit for a predetermined period without scrolling. According to this, the user can secure a period for paying attention to the newly added latest monitoring target information separately from other monitoring target information. Therefore, the user can pay more attention to the newly added latest monitored information, and more secure information can be presented.
ここで、上記構成において、前記表示領域内に同時に表示できる監視対象情報の個数には制限があるため、前記監視対象情報取得部が、複数の新規の監視対象情報を短期間のうちに連続して取得すると、新規に取得した全ての監視対象情報を表示領域内に表示できなくなるおそれがある。 In here continuous, in the above arrangement, since the number of monitoring target information that can be displayed simultaneously on the display area is limited, the target-of-monitoring information acquisition unit, the monitoring target information of a plurality of new in a short period of time If it is acquired in this way, all newly acquired monitoring target information may not be displayed in the display area.
そこで、実施形態の情報表示システムにおいて、前記表示制御部は、前記監視対象情報取得部が取得した先の監視対象情報をスクロールせずに表示している最中に次の監視対象情報を取得した場合、前記次の監視対象情報を最新の監視対象情報としてスクロールせずに表示すると共に、前記先の監視対象情報を既にスクロールさせて表示している他の監視対象情報に割り込ませてスクロールして表示する。 Therefore, the information display system according to the embodiment, the display control unit has acquired the following monitored information while displaying the monitored information to which the said target-of-monitoring information acquisition unit has acquired without scrolling In this case, the next monitoring target information is displayed as the latest monitoring target information without scrolling, and the previous monitoring target information is scrolled to interrupt and scroll to other displayed monitoring target information. indicate.
これによれば、前記監視対象情報取得部が、複数の新規の監視対象情報を短期間のうちに連続して取得した場合であっても、少なくとも最新の監視対象情報を、スクロールせずに表示領域内に表示することができる。これにより、ユーザは、少なくとも最新の監視対象情報については、他の監視対象情報と区別して注意を払うことができる。そして、最新の監視対象情報を取得する以前に取得された先の監視対象情報も、他の監視対象情報のスクロール表示に割り込ませて表示される。そのため、ユーザは、先の監視対象情報つまり直前まで最新の監視対象情報であった監視対象情報についても、スクロールしている表示を見ることで確認することができる。このように、本構成によれば、複数の新規の監視対象情報が期間のうちに連続して発生した場合であっても、ユーザは、これら新規の監視対象情報を確認することができ、その結果、更に安全な情報提示が可能になる。 According to this, even when the monitoring target information acquisition unit continuously acquires a plurality of new monitoring target information in a short period of time, at least the latest monitoring target information is displayed without scrolling. It can be displayed in the area. As a result, the user can pay attention to at least the latest monitoring target information separately from other monitoring target information. Then, the monitoring target information acquired before the latest monitoring target information is acquired is also displayed by interrupting the scroll display of other monitoring target information. Therefore, the user can confirm the previous monitoring target information, that is, the monitoring target information which was the latest monitoring target information until immediately before, by looking at the scrolling display. As described above, according to this configuration, the user can confirm these new monitoring target information even when a plurality of new monitoring target information are continuously generated within the period. As a result, more secure information can be presented.
実施形態の情報表示システムにおいて、前記表示制御部は、前記先の監視対象情報を既にスクロールさせて表示している他の前記監視対象情報に割り込ませて表示する際に、前記先の監視対象情報を前記他の監視対象情報の表示態様とは異なる態様で表示する。これによれば、ユーザは、他の監視対象情報のスクロール表示に割り込んだ先の監視対象情報と、以前からスクロール表示されていた他の監視対象情報とを、一見して区別し易くなる。したがって、ユーザは、スクロールによって表示されている監視対象情報の中からどれが新たに割り込んだ監視対象情報であるかを容易に把握することができ、その結果、より安全な情報提示が可能になる。 In the information display system of the embodiment, when the display control unit interrupts and displays the other monitoring target information that has already been scrolled and displayed, the monitoring target information of the destination is displayed. Is displayed in a mode different from the display mode of the other monitoring target information. According to this, the user can easily distinguish between the monitoring target information that interrupts the scroll display of other monitoring target information and the other monitoring target information that has been scrolled and displayed from before. Therefore, the user can easily grasp which of the monitored information displayed by scrolling is the newly interrupted monitored information, and as a result, more secure information can be presented. ..
実施形態の情報表示システムにおいて、前記表示制御部は、前記最新の監視対象情報の表示位置から離れる方向へ前記他の監視対象情報をスクロールさせると共に前記表示領域内に表示されている前記他の監視対象情報の最後尾に前記先の監視対象情報を割り込ませて、前記他の監視対象情報と共に前記先の監視対象情報をスクロールさせて表示する。 In the information display system of the embodiment, the display control unit scrolls the other monitoring target information in a direction away from the display position of the latest monitoring target information, and the other monitoring displayed in the display area. The monitoring target information of the destination is interrupted at the end of the target information, and the monitoring target information of the destination is scrolled and displayed together with the other monitoring target information.
これによれば、前記先の監視対象情報を既にスクロールさせて表示している他の前記監視対象情報に割り込ませて表示する際に、先の監視対象情報について、スクロールしない表示からスクロールされる表示へと連続的な見た目でスムーズに切り替えを行うことができる。このため、ユーザは、スクロールされている他の監視対象情報に割り込んだ先の監視対象情報が、直前までスクロールされずに表示されていた最新の監視対象情報であったことを認識し易くなる。これにより、ユーザは、スクロールにより表示されている先の監視対象情報、つまり割り込みがなければスクロールされずに表示される先の監視対象情報について注意を払い易くなり、その結果、より安全な情報提示が可能になる。 According to this, when the previous monitoring target information is interrupted and displayed by the other monitoring target information that has already been scrolled and displayed, the previous monitoring target information is scrolled from the non-scrolling display. It is possible to switch smoothly with a continuous appearance. Therefore, the user can easily recognize that the monitoring target information that is interrupted by the other scrolled monitoring target information is the latest monitoring target information that was displayed without scrolling until immediately before. This makes it easier for the user to pay attention to the monitored information displayed by scrolling, that is, the monitored information displayed without scrolling without interruption, and as a result, more secure information presentation. Becomes possible.
これに対し、実施形態の情報表示システムにおいて、前記表示制御部は、前記最新の監視対象情報の表示位置に近づく方向へ前記他の監視対象情報をスクロールさせると共に前記表示領域内に表示されている前記他の監視対象情報の最後尾に前記先の監視対象情報を割り込ませて、前記他の監視対象情報と共に前記先の監視対象情報をスクロールさせて表示する。 In contrast, in the information display system according to the embodiment, the display control unit is displayed with scrolling the other monitoring target information direction toward the display position of the latest monitoring target information in the display region The destination monitoring target information is interrupted at the end of the other monitoring target information, and the destination monitoring target information is scrolled and displayed together with the other monitoring target information.
これによれば、前記先の監視対象情報を既にスクロールさせて表示している他の前記監視対象情報に割り込ませて表示する際に、先の監視対象情報について、スクロールしない表示からスクロールされる表示へと非連続的な見た目で切り替えを行うことができる。このため、ユーザは、スクロールさせずに表示されている最新の監視対象情報が、先の監視対象情報から現在の最新の監視対象情報に切り替わったことを認識し易くなる。これにより、ユーザは、最新の監視対象情報により注意を払い易くなり、その結果、より安全な情報提示が可能になる。 According to this, when the previous monitoring target information is interrupted and displayed by the other monitoring target information that has already been scrolled and displayed, the previous monitoring target information is scrolled from the non-scrolling display. It is possible to switch to with a discontinuous appearance. Therefore, the user can easily recognize that the latest monitoring target information displayed without scrolling has been switched from the previous monitoring target information to the current latest monitoring target information. This makes it easier for the user to pay more attention to the latest monitored information, and as a result, enables safer information presentation.
実施形態の情報表示システムにおいて、前記表示制御部は、前記表示領域内を不透明に表示する。これによれば、表示領域内に表示された監視対象情報が、表示領域の後ろの実景に紛れ込む事を防ぐことができ、その結果、監視対象情報をより見易くすることができる。 In the information display system of the embodiment, the display control unit displays the inside of the display area opaquely. According to this, it is possible to prevent the monitored target information displayed in the display area from being mixed into the actual scene behind the display area, and as a result, the monitored target information can be made easier to see.
以下、本発明の複数の実施形態について説明する。なお、各実施形態において実質的に同一の構成には同一の符号を付して説明を省略する。 Hereinafter, a plurality of embodiments of the present invention will be described. In each embodiment, substantially the same configuration is designated by the same reference numerals and the description thereof will be omitted.
(第1実施形態)
以下、第1実施形態について図1〜図18を参照しながら説明する。
図1及び図2に示すように、情報表示システム10は、監視対象である少なくとも1台この場合2台のロボット11と、各ロボット11に対応して設けられたロボットコントローラ12と、安全装置13と、いわゆるヘッドマウントディスプレイと称される頭部装着型ディスプレイ20(以下、HMD20と称する)と、ディスプレイ制御装置30と、を含んで構成されている。
(First Embodiment)
Hereinafter, the first embodiment will be described with reference to FIGS. 1 to 18.
As shown in FIGS. 1 and 2, the
以下の説明において、これら2台のロボット11を区別する際には、第1ロボット111及び第2ロボット112と称する。また、第1ロボット111及び第2ロボット112に対応するロボットコントローラ12を、それぞれ第1ロボットコントローラ121及び第2ロボットコントローラ122と称する。
In the following description, when these two
ロボット11は、例えば6軸の垂直多関節型ロボットで構成されている。一般的な構成につき詳しい説明は省略するが、ロボット11は、サーボモータにより駆動される6軸のアームを有し、第6軸アームの先端部に、例えばパレット内に収容されているワークを把持するためのハンド等を備えている。ロボット11は、ロボットコントローラ12に図示しない接続ケーブルを介して接続される。各軸のサーボモータは、このロボットコントローラ12により制御される。
The
ロボットコントローラ12は、図示しない制御回路やサーボ制御部、電源装置等を備えている。制御回路はマイコンを主体として構成されている。ロボットコントローラ12は、予め記憶された動作プログラムや、図示しないティーチングペンダント等により設定された教示データ、各種パラメータ等に従って、サーボ制御部を介してロボット11の各軸サーボモータを制御する。これにより、ロボットコントローラ12は、ワークの組付け作業等を各ロボット11に自動で実行させる。
The
各ロボットコントローラ12は、それぞれ安全装置13に通信可能に接続されている。安全装置13は、ロボットコントローラ12側から各ロボット11の動作状態及び各ロボットコントローラ12による制御状態を特定可能な各種の情報を取得可能に構成されている。そのため、安全装置13は、ロボット11のアームの回転角度やモータの通電状態等、ロボット11の動作状態を示す動作情報及びコントローラ12の制御状態を示す制御情報をリアルタイムで取得することができる。
Each
また、安全装置13は、各ロボットコントローラ12から取得した各ロボット11の情報に基づいて、ロボット11の現在の形態つまり姿勢を3次元的にモデリングした3Dモデル画像データを生成することができる。また、安全装置13は、各ロボット11が設置されている領域、例えば工場内における基準位置を原点とした2次元座標系における各ロボット11の座標つまりはロボット11の設置位置も記憶している。
Further, the
HMD20は、ユーザの頭部に装着可能な形態に構成されており、ユーザの視界内に各種情報を表示させることができる。HMD20は、両目を覆う両眼型、又は一方の目のみを覆う単眼型のいずれでも良いが、本実施形態は、ユーザの視界を奪い易い両眼型により適している。また、HMD20の形状は、眼鏡のように装着する眼鏡型や帽子のように装着する帽子型などが想定されるが、いずれも形状であっても良い。本実施形態のHMD20は、眼鏡型を想定している。
The
HMD20は、図2にも示すように、表示部21及びカメラ22を有している。表示部21は、ユーザがHMD20を装着した状態において、そのユーザの視界と重なる位置に設けられている。本実施形態の場合、表示部21は、眼鏡のレンズ部分に相当する部分であり、画像などの情報を表示することができるいわゆる透過型のディスプレイで構成されている。このため、HMD20に表示される画像は、ユーザの視界に重なって表示されることになる。換言すると、ユーザは、自身の目で見た現実の風景と、HMD20によって表示された仮想的な画像とを併せて見ることになる。
As shown in FIG. 2, the
カメラ22は、小型のCCDカメラやCMOSカメラで構成されており、HMD20に一体的に取り付けられている。このカメラ22は、ユーザの顔の向きと一致するように、HMD20のフレームの一側部に設けられている。カメラ22は、図1に示すように、ユーザ90がHMD20を頭部に装着した状態で、ユーザ90の頭部正面が向いている方向の画像を撮像する。そのため、カメラ22によって撮像される画像は、ユーザ90の視界とほぼ同一の画角となっている。換言すると、カメラ22は、ユーザ90が見ている風景とほぼ同一の風景を撮像する。
The
なお、表示部21は、透過型のディスプレイに限られず、非透過型のディスプレイで構成しても良い。この場合、HMD20は、カメラ22で撮影した画像をリアルタイムで表示部21に表示させることで、カメラ22が撮影した風景をユーザに対し仮想的に提示、すなわちユーザの視界を表示部21に再現すれば良い。また、HMD20は、表示部21を有するものに限られず、仮想的な画像をユーザの網膜に直接投影する網膜投影型であっても良い。
The
HMD20は、ディスプレイ制御装置30に無線又は有線で接続されている。なお、ディスプレイ制御装置30は、HMD20と一体に構成されていても良い。図2に示すように、ディスプレイ制御装置30は、マイクロコンピュータ等で構成された制御部31を内蔵しており、HMD20の表示部21に表示する画像データを送信したり、カメラ22により撮影された画像データを受信したりする。また、ディスプレイ制御装置30は、安全装置13と有線又は無線通信が可能となっている。
The
図2に示すように、ディスプレイ制御装置30は、制御部31の他、監視対象情報取得部32、視界情報取得部33、監視対象識別部34、表示領域設定部35、及び表示制御部36を有している。制御部31は、例えばCPU311や、ROM、RAM、及び書き換え可能なフラッシュメモリなどの記憶領域312を有するマイクロコンピュータを主体に構成されており、HDM20の全体の制御を司っている。
As shown in FIG. 2, in addition to the
記憶領域312は、情報表示プログラムを記憶している。制御部31は、CPU311において情報表示プログラムを実行することにより、監視対象情報取得部32、視界情報取得部33、監視対象識別部34、表示領域設定部35、及び表示制御部36等を、ソフトウェア的に実現する。なお、これら監視対象情報取得部32、視界情報取得部33、監視対象識別部34、表示領域設定部35、及び表示制御部36は、例えば制御部31と一体の集積回路としてハードウェア的に実現してもよい。
The
監視対象情報取得部32は、安全装置13から、監視対象である各ロボット11に関する情報として、監視対象情報をリアルタイムで取得することがでる。監視対象情報は、各ロボット11の動作によって随時変化する情報等によって構成されている。例えば監視対象情報は、上述した3Dモデル画像データを含む各ロボット11の動作状態を示す動作情報や、コントローラ12の制御状態を示す制御情報を含んでいる。また、監視対象情報は、例えばユーザに対してロボット11に関する警告や注意を提示するための警告注意情報等を含んでいる。
The monitoring target
図3〜図10では、監視対象情報取得部32によって取得されて記憶領域312に記憶された監視対象情報40の一例を概念的に示している。本実施形態の場合、例えば図3等に示すように、監視対象情報40は、ユーザに与える危険の程度つまり危険の大小に応じて、第1ランク情報41と第2ランク情報42との少なくとも2つのランクに分類されている。第1ランク情報41は、ユーザに与える危険度が高いものを示している。第2ランク情報42は、第1ランク情報41よりもユーザに与える危険度が小さいものを示している。
3 to 10 conceptually show an example of the
また、監視対象情報取得部32は、安全装置13から新規に取得した情報を、その分類が第1ランク情報41又は第2ランク情報42のいずれであるかに係わらず、取得してからの所定期間は新規情報43に分類する。なお、本実施形態において、第1ランク情報41は、「DANGER」の文字を付して表している。第2ランク情報42は、「WARNING」の文字を付して表している。そして、新規情報43は、「NEW」の文字を付して表している。これら「DANGER」、「WARNING」、「NEW」の文字は、各情報の種類を識別するための識別子である。
Further, the monitoring target
これら第1ランク情報41、第2ランク情報42、及び新規情報43は、個別情報によって構成されている。監視対象情報取得部32は、第1ランク情報41、第2ランク情報42、及び新規情報43の各個別情報を、それぞれ取得順に記憶領域312に記憶する。例えば本実施形態において、第1ランク情報41の各個別情報には、図3及び図10等に示すように、D1、D2・・・の符号が付されている。この場合、D1が付された情報は、D2が付された情報よりも前に取得されたことを意味する。また、第2ランク情報42の各個別情報には、図3及び図4等に示すように、W1、W2・・・の符号が付されている。この場合、W1が付された情報は、W2が付された情報よりも前に取得されたことを意味する。
The
本実施形態において、記憶領域312に記憶されている各個別情報が、HMD20の表示領域211内に表示される情報となる。例えば図3の例において、記憶領域312は、HMD20に表示される情報としてD1が付された第1ランク情報41の個別情報と、W1、W2が付された第2ランク情報42の個別情報とを記憶しているが、新規情報43の個別情報は記憶していない。
In the present embodiment, each individual information stored in the
図2に示す視界情報取得部33は、HMD20を装着したユーザ90の視界を特定するための視界情報を取得する処理を行うことができる。ユーザ90の視界とは、ユーザ90がHMD20を装着した状態においてユーザ90の目に映る風景を意味する。本実施形態の場合、ユーザ90の視界とは、眼鏡のレンズ部分である表示部21を通してユーザ90の目に映る風景を意味する。視界情報取得部33は、例えばカメラ22で撮像した画像から、ユーザ90の視界情報を取得する。本実施形態では、例えば図3等に示すように、カメラ22の撮像範囲221及び表示部21の領域を、ユーザ90の視界91と擬制している。
The field of view
図2に示す監視対象識別部34は、視界情報取得部33で取得した視界情報に基づいてユーザ90の視界91内に存在する監視対象であるロボット11を識別する処理を行うことができる。すなわち、監視対象識別部34は、ユーザの視界91内に存在する監視対象つまりロボット11が、ロボット111、112のいずれであるかを識別つまり特定することができる。監視対象識別部34は、例えば次のようにして各ロボット11を識別することができる。すなわち、例えば各ロボット11に、それぞれ個体を特定するためのマーカーを付しておく。そして、監視対象識別部34は、カメラ22で撮像された画像を基にロボット11に付されたマーカーを認識することで、各ロボット11を識別することができる。
The monitoring
また、他の方法としては、監視対象識別部34は、例えば次のようにして各ロボット11を識別することができる。すなわち、監視対象識別部34は、安全装置13から各ロボット11の現在の3Dモデル画像データを取得する。そして、監視対象識別部34は、各ロボット11の3Dモデル画像データと、カメラ22で撮像されたロボット11の形態とを照合することで、各ロボット11を識別することができる。この場合、監視対象情報取得部32は、視界情報取得部33及び監視対象識別部34の処理により、ユーザの視界91内に入ったロボット11についての監視対象情報40を選択的に取得するようにしても良い。
As another method, the monitoring
表示領域設定部35は、例えば図3等に示すように、ユーザの視界91内に監視対象情報40を表示するための表示領域211を設定する処理を行うことができる。表示領域設定部35は、監視対象情報取得部32から取得した監視対象情報40の情報量つまり記憶領域312に記憶されている現在の監視対象情報40の情報量の大小に応じて、表示領域211をその情報量に適したサイズに設定する。
As shown in FIG. 3, for example, the display
すなわち、まず、表示領域設定部35は、図3に示すように、表示領域211を拡大することができる最大範囲つまり表示領域211の最大サイズとして、予め最大領域212を仮想的に設定する。最大領域212は、ユーザによって任意に設定されても良いし、メーカー等によって予め設定しておいても良い。また、視界91内における最大領域212の位置は、固定であっても良いし、視界91内の監視対象11の位置に応じて変更するように構成しても良い。
That is, first, as shown in FIG. 3, the display
次に、表示領域設定部35は、監視対象情報取得部32から取得した監視対象情報40の情報量つまり記憶領域312に記憶されている現在の監視対象情報40の情報量に応じて、表示領域211のサイズを設定する。この場合、現在の監視対象情報40の情報量が最大領域212内に収まるものであれば、表示領域設定部35は、図3に示すように、現在の監視対象情報40の情報量に合わせて、全ての監視対象情報40が表示領域211内に表示されるようなサイズに表示領域211を設定する。したがって、この場合、表示領域211のサイズは、最大領域212のサイズ以下となる。現在の監視対象情報40の情報量が最大領域212内に収まるものでなければ、表示領域設定部35は、図4等に示すように、表示領域211のサイズを最大領域212のサイズに設定する。
Next, the display
なお、本実施形態において、監視対象情報40の情報量が最大領域212内に収まるか否かとは、記憶領域312に記憶されている監視対象情報40を所定のフォントサイズで全て同時に表示させた場合に、最大領域212内に収まるか否かということ、すなわち最大領域212からはみ出す部分が生じていないか否かということを意味している。
In this embodiment, whether or not the amount of information of the
表示制御部36は、図3〜図10に示すように、表示領域設定部35で設定された表示領域211内に、監視対象情報40を構成する文字情報や数字、図形、記号情報等を表示する。本実施形態の場合、表示制御部36は、表示領域211内を、例えば表示領域211内に表示される監視対象情報40とは反対色で不透明に表示することで、表示領域211の後ろの実景を覆い隠している。これにより、表示領域211内に表示された監視対象情報40が、表示領域211の後ろの実景に紛れ込む事を防ぐことができるため、表示領域211内に表示された監視対象情報40が見易くなる。なお、表示領域211は、監視対象情報40を表示させるための領域であるため、表示制御部36は、表示領域211を示す枠及び表示領域211内の色を、必ずしも表示する必要はない。
As shown in FIGS. 3 to 10, the
ここで、図3〜図10において示された実線枠線44、45、46は、記憶領域312に記憶されている監視対象情報40のうち、表示制御部36によってHMD20の表示領域211に表示される情報を示している。この場合、記憶領域312に記憶されている監視対象情報40のうち枠線44、45、46で囲まれた情報が、表示領域211に表示される。
Here, the solid line borders 44, 45, and 46 shown in FIGS. 3 to 10 are displayed in the
表示制御部36は、図3に示すように、監視対象情報40の情報量が表示領域211内に収まる場合、監視対象情報40の全ての情報をスクロールさせることなく表示領域211内に同時に表示する。一方、図4に示すように、監視対象情報40の情報量が表示領域211内に収まらない場合、つまり監視対象情報40の一部が表示領域211から溢れてしまう場合、表示制御部36は、図4〜図6等で示すように、記憶領域312に記憶されている監視対象情報40の全部又は一部を表示領域211内において一定周期でスクロールして表示する。
As shown in FIG. 3, when the amount of information of the
ここで、本実施形態において「スクロールして表示」という用語と「スクロール表示」という用語とは同義である。そして、「スクロールして表示」及び「スクロール表示」は、表示領域211内に収まりきらない監視対象情報40を、水平又は垂直にスライドさせて表示する表示態様を意味する。また、本実施形態において、「スクロールの周期」という用語と「スクロールの速度」という用語とは同義である。
Here, in the present embodiment, the terms "scroll display" and "scroll display" are synonymous. The "scroll display" and "scroll display" mean a display mode in which the
本実施形態の場合、表示制御部36は、監視対象情報40の全部又は一部が視界91の上方向へ流れるようにして、監視対象情報40の全部又は一部をスクロールさせて表示する。すなわち、図4〜図6に示す例では、表示領域211内に表示される第2ランク情報42の個別情報の数は5個で一定となっており、その5個の個別情報が順次切り替わるようにして表示される。そして全ての第2ランク情報42の個別情報がスクロール表示されると、再び最初に戻って繰り返される。すなわち、本実施形態において、表示制御部36は、第2ランク情報42の個別情報を、一定周期で繰り返しスクロールさせて表示する。
In the case of the present embodiment, the
この場合、スクロール表示の速度つまり上方向へ流れる監視対象情報40の速度は、監視対象情報40の情報量に係わらず一定にすることができる。なお、本実施形態では、スクロール表示に対し、スクロールしない表示態様つまり一定箇所に固定するようにして表示する表示態様を、非スクロール表示と称する。
In this case, the speed of the scroll display, that is, the speed of the monitored
表示制御部36は、監視対象情報取得部32で取得した監視対象情報40の情報量が減少し、その監視対象情報40の表示が表示領域211内に収まるようになるまで、監視対象情報40のスクロール表示を継続する。すなわち、監視対象情報取得部32で取得した監視対象情報40の情報量が減少し、その監視対象情報40の表示が表示領域211内に収まるようになると、表示制御部36は、監視対象情報40のスクロール表示から非スクロール表示に切り替える。
The
本実施形態の場合、表示制御部36は、監視対象情報40のうち第1ランク情報41及び新規情報43を、図4〜図10に示すように常に非スクロール表示で表示する。また、表示制御部36は、監視対象情報40のうち第2ランク情報42を、必要に応じてつまり監視対象情報40の情報量に応じてスクロール表示と非スクロール表示とを切り替えながら表示する。
In the case of the present embodiment, the
すなわち、監視対象情報40に第1ランク情報41が含まれていれば、表示制御部36は、監視対象情報40の情報量に係わらず、第1ランク情報41を表示領域211内にスクロールさせずに常に表示する。また、監視対象情報40に第2ランク情報42が含まれており、かつ、監視対象情報40が最大領域212内に収まる場合、表示制御部36は、第1ランク情報41と共に第2ランク情報42もスクロールさせずに表示領域211内に常に表示する。一方、監視対象情報40に第2ランク情報42が含まれているが、監視対象情報40が最大領域212内に収まりきらない場合、表示制御部36は、第2ランク情報42をスクロールさせて表示領域211内に表示する。
That is, if the
また、監視対象情報取得部32は、表示制御部36の制御内容に係わらず、安全装置13から随時、監視対象情報40の取得を行っている。この場合、図6と図7とを対比して示すように、ユーザの視界91が変わったりロボット11の状態が変わったりすると、監視対象情報取得部32は、記憶領域312に記憶されていない新規情報43を取得する。すると、表示制御部36は、図7に示すように、新規に取得された新規情報43をスクロールさせずにつまり非スクロール表示で所定期間、表示領域211内に表示する。この場合、表示制御部36は、新規に取得された新規情報43が複数存在する場合は、少なくとも最新の新規情報43つまり最後に取得された新規情報43を、非スクロール表示で表示領域211内に表示する。
Further, the monitoring target
また、この場合、所定期間は、予めユーザの任意に設定しても良いし、メーカー等によって予め例えば10秒〜1分程度の時間に設定しておいても良い。また、所定期間は、第2ランク情報42のスクロール表示の周期に合わせて可変するように設定することもできる。例えば所定期間を第2ランク情報42のスクロール表示の1周期に設定した場合、表示制御部36は、第2ランク情報42のスクロール表示が1周する期間、つまり第2ランク情報42の各個別情報が1周して再び同一の位置に来るまでの期間、新規情報43を非スクロール表示で常に表示する。
Further, in this case, the predetermined period may be arbitrarily set by the user in advance, or may be set in advance by the manufacturer or the like, for example, in a time of about 10 seconds to 1 minute. Further, the predetermined period can be set to be variable according to the scroll display cycle of the
そして、表示制御部36は、新規情報43を所定期間、非スクロール表示で表示すると、その新規情報43が第2ランク情報42に属するものであれば、図8の白抜き矢印で示すように、新規情報43を第2ランク情報42の最後尾、この場合、個別情報W9として第2ランク情報42に追加する。そして、表示制御部36は、図9に示すように、追加された個別情報W9を含めて、第2ランク情報42をスクロール表示する。つまり、新規情報43が第2ランク情報42に属するものである場合、表示制御部36は、新規情報43を所定期間非スクロール表示で表示した後、その新規情報43を第2ランク情報42のスクロール表示に組み込む。
Then, when the
一方、新規情報43が第1ランク情報41に属するものであれば、図10の白抜き矢印で示すように、新規情報43を第1ランク情報41の最後尾、この場合、個別情報D2として第1ランク情報41に追加する。そして、表示制御部36は、図10に示すように、追加された個別情報D2を含めて、第1ランク情報41を非スクロール表示で表示する。
On the other hand, if the
ここで、第2ランク情報42のスクロール表示は、第2ランク情報42の情報量に係わらず一定速度に設定することができる。この場合、第2ランク情報42の情報量が少ないと、スクロール表示により第2ランク情報42が1周する期間が短いため、新規情報43が非スクロール表示されている時間も短い。しかし、第2ランク情報42が1周する期間も短いため、ユーザは、新規情報43が第2ランク情報42に追加された後も、第2ランク情報42に組み込まれた新規情報43を、比較的頻繁に目にすることができる。
Here, the scroll display of the
また、第2ランク情報42のスクロール表示を一定速度にした場合、第2ランク情報42の情報量が多いと、スクロール表示により第2ランク情報42が1周する期間も長い。このため、ユーザは、新規情報43が第2ランク情報42に追加された後は、第2ランク情報42に組み込まれた新規情報43を目にする頻度が少なくなる。しかし、この場合、新規情報43は、第2ランク情報42に追加される前において、非スクロール表示されている時間が長い。したがって、この構成によれば、第2ランク情報42の情報量の大小に係わらず、ユーザが新規情報43を確認する時間を十分に確保することができる。
Further, when the scroll display of the
また、表示制御部36は、スクロールによる第2ランク情報42の表示を一定周期で繰り返して行っており、この場合、例えばスクロール表示する監視対象情報40の情報量が多くなるほど、スクロールの速度を早くして1周期の期間を短くすることもできる。換言すれば、表示制御部36は、スクロール表示する監視対象情報40の情報量が少なくなるほど、スクロールの速度を遅くして1周期の期間を長くしても良い。これによれば、監視対象情報40の情報量が多くなった場合であっても、スクロールの1周期の期間を極力短くすることができる。したがって、ユーザは、スクロールされている第2ランク情報42のうちある特定の情報を見たい場合に、目当ての情報を極力早く目にすることができる。
Further, the
また、ユーザは、繰り返し行われている第2ランク情報42のスクロールの速度、つまり第2ランク情報42について同一の個別情報が再度表示されるまでの時間の長短によって、第2ランク情報42の情報量の多さを推定できる。したがって、ユーザは、第2ランク情報42の情報量の大小つまり危険に関する情報の数の多さを視覚により直感的に認識することができるため、便利である。
Further, the user determines the information of the
次に、ディスプレイ制御装置30の制御部31において行われる制御フローについて、図11も参照して説明する。制御部31は、情報表示プログラムを実行すると、図11の制御フローを実行する。制御部31は、まず、ステップS11において、監視対象情報取得部32により監視対象情報40の取得があったか否かを判断する。監視対象情報40の取得が無い場合(ステップS11でNO)、制御部31は、視界91内に表示すべき監視対象情報40が存在していないと判断し、ステップS11へ処理を戻して繰り返す。
Next, the control flow performed by the
一方、監視対象情報40の取得があった場合(ステップS11でYES)、制御部31は、視界91内に表示すべき監視対象情報40が存在すると判断し、ステップS12へ処理を移行させる。制御部31は、ステップS12において、取得した監視対象情報40の情報量が最大領域212内に収まるか否かを判断する。取得した監視対象情報40の情報量が最大領域212内に収まる場合(ステップS12でYES)、制御部31は、表示領域設定部35の処理により、表示領域211のサイズを、最大領域212のサイズ以下に設定する。
On the other hand, when the
そして、制御部31は、ステップS14へ処理を移行させ、表示制御部36の処理により、監視対象情報40のうち第1ランク情報41と第2ランク情報42と新規情報43とを、すなわち全ての監視対象情報40を、非スクロール表示で表示領域211内に表示する。その後、ステップS11へ処理を移行させ、ステップS11以降を繰り返す。
Then, the
一方、取得した監視対象情報40の情報量が最大領域212内に収まりきらない場合(ステップS12でNO)、制御部31は、表示領域設定部35の処理により、表示領域211のサイズを、最大領域212のサイズと同一サイズに設定する。そして、制御部31は、ステップS15へ処理を移行させ、表示制御部36の処理により、監視対象情報40のうち第1ランク情報41及び新規情報43を非スクロール表示で表示領域211内に表示すると共に、第2ランク情報42スクロール表示で表示領域211内に表示する。その後、ステップS11へ処理を移行させ、ステップS11以降を繰り返す。
On the other hand, when the acquired information amount of the
以上説明した実施形態によれば、情報表示システム10において、表示制御部36は、監視対象情報40の情報量が表示領域211内に収まる場合は、監視対象情報40を表示領域211内においてスクロールせずに表示する。一方、表示制御部36は、監視対象情報40の情報量が表示領域211内に収まらない場合は、監視対象情報40のうち第2ランク情報42を表示領域211内においてスクロールして表示する。
According to the embodiment described above, in the
これによれば、視界91内に表示する監視対象情報40の情報量が多い場合であっても、視界91内の表示領域211を拡大して全ての監視対象情報40を同時に表示する必要がない。そのため、監視対象情報40の情報量が多い場合であっても、視界91内が監視対象情報40に埋められてしまって視界91が遮られてしまうという事態を抑制することができる。すなわち、情報量の多い監視対象情報40をスクロールして表示することにより、表示領域211を極力小さくしつつ全ての監視対象情報40を効率良く表示することができる。その結果、ユーザ90の視界91を妨げ難く安全な情報提示が可能になる。
According to this, even when the amount of information of the
また、本実施形態において、表示領域設定部35は、監視対象情報40の情報量が予め設定された最大領域212内に収まる場合は監視対象情報40をスクロールせずに表示できるように監視対象情報40の情報量に合わせて表示領域211を設定する。そして、表示領域設定部35は、監視対象情報40の情報量が最大領域212内に収まらない場合は、表示領域211を最大領域212と同じサイズに設定する。
Further, in the present embodiment, when the amount of information of the
これによれば、監視対象情報40の情報量が少ない場合には、その監視対象情報40に合わせて表示領域211を小さくすることができるため、ユーザ90の視界91をより妨げ難くなる。更にこれによれば、表示領域211は最大領域212よりも大きくはならないため、ユーザ90に対して、視界91が最大領域212以上は遮られないという安心感を与えることができる。これらの結果、更にユーザ90の視界91を妨げ難くより安全な情報提示が可能になる。
According to this, when the amount of information of the
また、本実施形態において、監視対象情報40は、危険の大小に応じて少なくとも危険度の大きい第1ランク情報41と、第1ランク情報41よりも危険度の小さい第2ランク情報42とに分類されている。表示制御部36は、監視対象情報40のうち危険度の高い第1ランク情報41を常に表示する。そして、表示制御部36は、第2ランク情報42の情報量が表示領域211内に収まらない場合は、監視対象情報40のうち危険度の比較的低い第2ランク情報42をスクロールして表示する。
Further, in the present embodiment, the
これによれば、危険度の高い第1ランク情報41は常に視界91内に表示されているため、ユーザ90は、危険度の高い第1ランク情報41について常に注意を払うことができる。また、危険度の低い第2ランク情報42は、スクロールして表示されるため、監視対象情報40の情報量が多い場合であっても表示領域211を小さくすることができる。したがって、より危険度の高い情報を確認し易くしつつ全体として表示領域211を小さくすることができ、その結果、ユーザ90の視界91を妨げ難く、更に安全な情報提示が可能になる。
According to this, since the high-risk
ここで、表示制御部36は、第2ランク情報42の情報量が多くなるほどスクロールの速度を早くしても良い。これによれば、第2ランク情報42の情報量が多くなった場合であっても、スクロールの1周期の期間を極力短くすることができる。したがって、ユーザ90は、スクロールされている第2ランク情報42のうちある特定の個別情報を見たい場合に、目当ての個別情報を極力早く目にすることができる。また、ユーザ90は、スクロールの速度によって、第2ランク情報42の情報量を視覚により直感的に認識することができるため、便利である。
Here, the
また、本実施形態において、表示制御部36は、監視対象情報取得部32が新規に取得した監視対象情報40すなわち新規情報43をスクロールせずに所定期間表示する。これによれば、ユーザ90は、新規に追加された監視対象情報40つまり新規情報43については、他の監視対象情報40とは区別して注意を払う期間を確保することができる。そのため、ユーザ90は、新規情報43についてより確実に注意を払うことができるため、更に安全な情報提示が可能になる。
Further, in the present embodiment, the
また、本実施形態において、表示制御部36は、表示領域211内を不透明に表示する。これによれば、表示領域211内に表示された監視対象情報40が、表示領域211の後ろの実景に紛れ込む事を防ぐことができ、その結果、監視対象情報40をより見易くすることができる。
Further, in the present embodiment, the
(第2実施形態)
次に、第2実施形態について、図12〜図16を参照して説明する。
本実施形態では、監視対象情報40の情報量が、最大領域212に設定された表示領域211内に収まっていないため、表示制御部36が、記憶領域312に記憶されている監視対象情報40のうち各第2ランク情報42を一定周期でスクロール表示している状態を前提とする。
(Second Embodiment)
Next, the second embodiment will be described with reference to FIGS. 12 to 16.
In the present embodiment, since the amount of information of the
この場合、各第2ランク情報42は、図12の矢印Aで示すように、視界91の下方向へ流れるようにしてスクロール表示される。そして、表示領域211内において、「NEW」の文字が付された最新の新規情報43は、「WARNING」の文字が付された第2ランク情報42の上側に表示されている。このため、各第2ランク情報42は、最新の新規情報43の表示位置から離れる方向へスクロールして表示されている。
In this case, each
なお、本実施形態の説明において、新規情報43には、その取得順にN1、N2・・・の番号を付している。この場合、N1が付された新規情報43は、N2が付された新規情報43よりも前に取得されたことを意味する。そして、各新規情報43のうち番号の最も大きいものが、最新の新規情報43となる。以下の説明において、各新規情報43の取得順を区別して示す場合には、新規情報43(N1)、新規情報43(N2)のように、括弧内に番号を付して表す。
In the description of the present embodiment, the
また、本実施形態では、新規に取得された新規情報43のうち、少なくとも最新の新規情報43を、スクロールせずに所定期間表示する。この所定期間は、第1実施形態の所定期間と同様であり、例えば予めユーザの任意に設定しても良いし、メーカー等によって予め例えば10秒〜1分程度の時間に設定しておいても良い。また、所定期間は、第2ランク情報42のスクロール表示の周期に合わせて可変するように設定しても良い。
Further, in the present embodiment, at least the latest
更に、本実施形態は、監視対象情報取得部32が複数の新規情報43を連続して取得した場合を想定している。本実施形態において、複数の新規情報43が連続して取得されるとは、先の新規情報43の取得から次の新規情報43の取得までの期間が、最新の新規情報43をスクロールさせずに表示するための上記所定期間が経過していないことを意味する。
Further, the present embodiment assumes a case where the monitored
ここで、上記第1実施形態において、表示領域211の最大サイズつまり最大領域212は予め設定されていることから、表示領域211内に同時に表示できる監視対象情報41、42、43の個数には制限がある。このため、監視対象情報取得部32が、複数の新規情報43を短期間のうちに連続して取得すると、新規に取得した各新規情報43の一部を表示領域211内に表示できなくなるおそれがある。
Here, in the first embodiment, since the maximum size of the
そこで、本実施形態において、表示制御部36は、監視対象情報取得部32が取得した先の監視対象情報43をスクロールせずに表示している最中つまり所定期間が経過する前に次の監視対象情報43を取得した場合、次の監視対象情報43を最新の監視対象情報としてスクロールせずに表示すると共に、先の監視対象情報43を既にスクロールさせて表示している他の監視対象情報42に割り込ませてスクロールして表示する。
Therefore, in the present embodiment, the
すなわち、表示制御部36は、監視対象情報取得部32が複数の新規情報43を連続して取得した場合、現時点で最新となる新規情報43を表示領域211内にスクロールさせずに表示し、最新の新規情報43以外の新規情報43を、第2ランク情報42と共にスクロールさせて表示領域211内に表示する。なお、本実施形態では、図12等に示すように、各第2ランク情報42は、第2ランク情報42であることを示す「WARNING」の文字の下側に、スクロール表示によって表示される。また、最新の新規情報43は、最新の新規情報43であることを示す「NEW」の文字の下側に、非スクロール表示によって表示される。
That is, when the monitoring target
具体的には、図12に示すように、例えばまず、監視対象情報取得部32が新規情報43(N1)を取得すると、その新規情報43(N1)は、記憶領域312に記憶される。このとき、記憶領域312には、新規情報43(N1)以外の新規情報は記憶されていないため、この新規情報43(N1)が現時点での最新の新規情報となる。すると、表示制御部36は、図12から図13にかけて示すように、最新の新規情報43(N1)を、非スクロール表示で表示領域211内に表示すると共に、各第2ランク情報42をスクロール表示で表示領域211内に順次表示する。
Specifically, as shown in FIG. 12, for example, when the monitoring target
次に、図14に示すように、監視対象情報取得部32が次の新規情報43(N2)を取得すると、その新規情報43(N2)は、記憶領域312に記憶されて、現時点での最新の新規情報となる。すると、表示制御部36は、先の新規情報43(N1)と最新の新規情報43(N2)とを置き換えて、最新の新規情報43(N2)を非スクロール表示によって表示する。すなわち、この場合、最新の新規情報43(N2)は、最新の新規情報43であることを示す「NEW」の文字の下側に、非スクロール表示によって表示される。そして、表示制御部36は、図14から図16にかけて示すように、先の新規情報43(N1)を、既にスクロール表示されている第2ランク情報42に割り込ませて、第2ランク情報42と共にスクロール表示させる。
Next, as shown in FIG. 14, when the monitored
この場合、先の新規情報43(N1)は、図14の白抜き矢印で示すように、現時点で実際に表示領域211に表示されている各第2ランク情報42つまり図13の枠線45内にある第2ランク情報42(W2、W3、W4)の最後尾に組み込まれる。ちなみに、この場合、新規情報43(N1)は、記憶領域312に記憶されている第2ランク情報42のうち、最後に取得された第2ランク情報42(W6)の更に後に取得されているため、第2ランク情報42(W7)とみなすこともできる。これにより、表示制御部36は、図14に示すように、表示領域211内において各第2ランク情報42が表示されている領域のうち最新の新規情報43(N2)の表示位置に最も近い位置に、先の新規情報43(N1)を割り込ませる。
In this case, the new information 43 (N1) is within the
例えば図13から図14にかけて示す例では、表示制御部36は、図13において第2ランク情報42を示す「WARNING」の直下に表示されている第2ランク情報42(W4)の表示位置に、先の新規情報43(N1)を割り込ませる。そして、表示制御部36は、図14から図16にかけて示すように、各第2ランク情報42と共に先の新規情報43(N1)を最新の新規情報43(N2)から離れる方向この場合下方へスクロールさせて表示する。
For example, in the example shown from FIG. 13 to FIG. 14, the
表示制御部36は、先の新規情報43(N1)を、既にスクロールさせて表示している他の監視対象情報つまり第2ランク情報42に割り込ませて表示する際に、先の新規情報43(N1)を、既にスクロール表示されている他の第2ランク情報42の表示態様とは異なる態様で表示する。本実施形態において、異なる態様で表示するとは、例えば、先の新規情報43(N1)の文字のサイズやフォントの種類、色、又は周囲の色を、既にスクロール表示されている他の第2ランク情報42と異なるものとしたり、独自の記号を付したりすることを意味する。この場合、ユーザが一見して先の新規情報43(N1)と他の第2ランク情報42とを区別できる程度に、先の新規情報43(N1)と他の第2ランク情報42との表示態様が異なっていれば良い。本実施形態では、例えば図14から図16に示すように、表示制御部36は、割り込みが行われた先の新規情報43(N1)の周囲に独自の色を付して表示している。
When the
そして、表示制御部36は、先の新規情報43(N1)を、他の第2ランク情報42と異なる態様で所定期間又は所定周期表示した後は、先の新規情報43(N1)と他の第2ランク情報42との表示態様を同一のものとして表示する。その後、表示制御部36は、上記第1実施形態と同様に、先の新規情報43(N1)を第2ランク情報42に含ませて、スクロール表示を繰り返す。
Then, the
この構成によれば、監視対象情報取得部32が、複数の新規の新規情報43を短期間のうちに連続して取得した場合であっても、少なくとも最新の新規情報43を、スクロールせずに表示領域211内に表示することができる。これにより、ユーザは、少なくとも最新の新規情報43については、他の監視対象情報41、42と区別して注意を払うことができる。
According to this configuration, even when the monitored
そして、最新の新規情報43(本実施形態ではN2)を取得する以前に取得された先の新規情報43(本実施形態ではN1)も、他の監視対象情報この場合第2ランク情報42のスクロール表示に割り込ませて表示される。そのため、ユーザは、先の監視対象情報つまり直前まで最新の新規情報であった新規情報43(本実施形態ではN1)についても、スクロールしている表示を見ることで確認することができる。このように、本実施形態によれば、複数の新規情報43が短期間のうちに連続して発生した場合であっても、ユーザは、これら新規情報43(N1、N2)を同時に確認することができ、その結果、更に安全な情報提示が可能になる。
Then, the new information 43 (N1 in the present embodiment) acquired before the latest new information 43 (N2 in the present embodiment) is also the scroll of other monitoring target information in this case, the
また、表示制御部36は、最新の新規情報43の表示位置から離れる方向へ第2ランク情報42をスクロールさせると共に、表示領域211内に現在表示されている第2ランク情報42の最後尾に先の新規情報43を割り込ませる。すなわち、図13から図14にかけて示す例では、表示制御部36は、最新の新規情報43(N2)の表示位置から離れる方向へ各第2ランク情報42をスクロールさせると共に、表示領域211内に現在表示されている第2ランク情報42の最後尾、この場合第2ランク情報42(W4)の後に、先の新規情報43(N1)を割り込ませる。そして、表示制御部36は、第2ランク情報42と共に、割り込ませた先の新規情報43(N1)をスクロールさせて表示する。
Further, the
これによれば、先の新規情報43(N1)を、既にスクロールさせて表示している第2ランク情報42に割り込ませて表示する際に、先の新規情報43(N1)について、スクロールしない表示からスクロールされる表示へと連続的な見た目でスムーズに切り替えを行うことができる。このため、ユーザは、スクロールされている第2ランク情報42に割り込んだ先の新規情報43(N1)が、直前までスクロールされずに表示されていた最新の新規情報であったことを認識し易くなる。これにより、ユーザは、スクロールにより表示されている先の新規情報43(N1)、つまり割り込みがなければスクロールされずに表示される先の新規情報43(N1)について注意を払い易くなり、その結果、より安全な情報提示が可能になる。
According to this, when the previous new information 43 (N1) is interrupted and displayed by the
また、表示制御部36は、先の新規情報43(本実施形態ではN1)を、既にスクロールさせて表示している他の監視対象情報この場合第2ランク情報42に割り込ませて表示する際に、先の新規情報43(本実施形態ではN1)をスクロール表示されている第2ランク情報42の表示態様とは異なる態様で表示する。これによれば、ユーザは、第2ランク情報42のスクロール表示に割り込んだ新規情報43(本実施形態ではN1)と、以前からスクロール表示されていた第2ランク情報42とを、一見して区別し易くなる。したがって、ユーザは、スクロールによって表示されている第2ランク情報42の中からどれが新たに割り込んだ新規情報43(N1)であるかを容易に把握することができ、その結果、より安全な情報提示が可能になる。
Further, when the
(第3実施形態)
次に、第3実施形態について、図17〜図21を参照して説明する。
第3実施形態では、第2ランク情報42のスクロールの方向が、上記第2実施形態と逆になっている。すなわち、表示制御部36は、図17から図18にかけて示すように、最新の新規情報43(本実施形態ではN1)の表示位置に近づく方向、この場合、矢印Bで示すように上方へ、第2ランク情報42をスクロールさせている。そして、表示制御部36は、監視対象情報取得部32が次の新規情報43(本実施形態ではN2)を取得すると、図19に示すように、表示領域211内に現在表示されている第2ランク情報42の最後尾、この場合第2ランク情報42(W4)の後に、先の新規情報43(本実施形態ではN1)を割り込ませる。そして、表示制御部36は、図19から図21にかけて示すように、第2ランク情報42と共に、割り込ませた先の新規情報43(N1)をスクロールさせて表示する。
(Third Embodiment)
Next, the third embodiment will be described with reference to FIGS. 17 to 21.
In the third embodiment, the scroll direction of the
これによれば、先の新規情報43(N1)を、既にスクロールさせて表示している第2ランク情報42に割り込ませて表示する際に、先の新規情報43(N1)について、スクロールしない表示からスクロールされる表示へと非連続的な見た目で切り替えを行うことができる。このため、ユーザは、スクロールさせずに表示されている最新の新規情報43(N2)が、先の新規情報43(N1)から現在の最新の新規情報43(N2)に切り替わったことを認識し易くなる。これにより、ユーザは、最新の新規情報43(N2)により注意を払い易くなり、その結果、より安全な情報提示が可能になる。
According to this, when the previous new information 43 (N1) is interrupted and displayed by the
なお、本発明の実施形態は、上記し又図面に記載した態様に限定されるものではなく、その要旨を逸脱しない範囲で種々の変形や拡張をすることができる。
上記各実施形態において、表示制御部36は、第2ランク情報42のスクロール表示を繰り返して行うことを前提としたが、必ずしも第2ランク情報42のスクロール表示を繰り返して行う必要はない。例えば、表示制御部36は、第2ランク情報42を一度のみスクロール表示させることで、全ての第2ランク情報42を表示するようにしても良い。
It should be noted that the embodiment of the present invention is not limited to the embodiments described above and in the drawings, and various modifications and extensions can be made without departing from the gist thereof.
In each of the above embodiments, the
また、上記第2実施形態及び第3実施形態において、表示制御部36は、監視対象情報取得部32が次の新規情報43(上記実施形態ではN2)を取得すると、図14又は図19に示すように、表示領域211内に現在表示されている第2ランク情報42の最後尾、この場合第2ランク情報42(W4)の後に、先の新規情報43(上記実施形態ではN1)を割り込ませていた。しかしながら、先の新規情報43(N1)の割り込み位置はこれに限られない。例えば、図22及び図23に示すように、表示制御部36は、表示領域211内に現在表示されている第2ランク情報42の中央部、この場合、第2ランク情報42(W3)と第2ランク情報42(W4)との間に割り込ませても良い。これによっても、上記各実施形態と同様の作用効果が得られる。
Further, in the second embodiment and the third embodiment, when the monitoring target
また、例えば制御部31、監視対象情報取得部32、視界情報取得部33、監視対象識別部34、表示領域設定部35、及び表示制御部36を、それぞれ安全装置13側又はHMD20側に分散させて設けても良い。
ロボット11は、特定の場所に固定されているものに限られず、例えば自走可能な構成であってもよい。更に、監視対象は、ロボットに限られず、例えばフォークリフト等のように人が運転する有人搬送車や、自動で走行可能な無人搬送車等の移動体等であっても良い。
Further, for example, the
The
図面中、10は情報表示システム、11はロボット(監視対象)、20はヘッドマウントディスプレイ(装着型ディスプレイ)、32は監視対象情報取得部、35は表示領域設定部、36は表示制御部、40は監視対象情報、41は第1ランク情報、42は第2ランク情報、43は新規情報、を示す。 In the drawing, 10 is an information display system, 11 is a robot (monitoring target), 20 is a head-mounted display (wearable display), 32 is a monitoring target information acquisition unit, 35 is a display area setting unit, 36 is a display control unit, and 40. Indicates monitoring target information, 41 indicates first rank information, 42 indicates second rank information, and 43 indicates new information.
Claims (8)
監視対象に関する情報である監視対象情報を取得可能な監視対象情報取得部と、
ユーザの視界内に前記監視対象情報を表示するための表示領域を設定する表示領域設定部と、
前記監視対象情報の情報量が前記表示領域内に収まる場合は前記監視対象情報を前記表示領域内においてスクロールせずに表示し、前記監視対象情報の情報量が前記表示領域内に収まらない場合は前記監視対象情報を前記表示領域内においてスクロールして表示する表示制御部と、
を備え、
前記表示制御部は、前記監視対象情報を前記表示領域内においてスクロールして表示している場合において、前記監視対象情報取得部が新規に取得した前記監視対象情報のうち少なくとも最新の監視対象情報をスクロールせずに所定期間表示する、
情報表示システム。 A wearable display that is wearable by the user and can display information within the user's field of view,
A monitoring target information acquisition unit that can acquire monitoring target information, which is information about the monitoring target,
A display area setting unit that sets a display area for displaying the monitored information in the user's field of view, and a display area setting unit.
When the amount of information of the monitored target information fits within the display area, the monitored target information is displayed without scrolling in the display area, and when the amount of information of the monitored target information does not fit within the display area. A display control unit that scrolls and displays the monitored information in the display area,
With
When the monitoring target information is scrolled and displayed in the display area, the display control unit obtains at least the latest monitoring target information among the monitoring target information newly acquired by the monitoring target information acquisition unit. Display for a specified period without scrolling,
Information display system.
請求項1に記載の情報表示システム。 The display area setting unit adjusts to the amount of information of the monitoring target information so that the monitoring target information can be displayed without scrolling when the amount of the monitoring target information is within the preset maximum area. A display area is set, and when the amount of information to be monitored does not fit within the maximum area, the display area is set to the maximum area.
The information display system according to claim 1.
前記表示制御部は、前記第1ランク情報を常に表示すると共に、前記第2ランク情報の情報量が前記表示領域内に収まらない場合は前記第2ランク情報をスクロールして表示する、
請求項1又は2に記載の情報表示システム。 The monitored information is classified into first rank information having at least a high degree of risk and second rank information having a lower degree of risk than the first rank information according to the magnitude of the danger.
The display control unit always displays the first rank information, and scrolls and displays the second rank information when the amount of information of the second rank information does not fit within the display area.
The information display system according to claim 1 or 2.
請求項3に記載の情報表示システム。 The display control unit repeatedly displays the second rank information by scrolling at a fixed cycle, and accelerates the scroll cycle as the amount of information of the second rank information increases.
The information display system according to claim 3.
請求項4に記載の情報表示システム。 When the display control unit acquires the next monitoring target information while displaying the monitoring target information acquired by the monitoring target information acquisition unit without scrolling, the display control unit updates the next monitoring target information to the latest. The monitoring target information of is displayed without scrolling, and the above-mentioned monitoring target information is scrolled and displayed by interrupting other monitoring target information that has already been scrolled and displayed.
The information display system according to claim 4.
請求項5に記載の情報表示システム。 When the display control unit interrupts and displays the other monitoring target information that has already been scrolled and displayed, the previous monitoring target information is displayed by interrupting the other monitoring target information of the other monitoring target information. Display in a mode different from the display mode,
The information display system according to claim 5.
請求項5又は6に記載の情報表示システム。 The display control unit scrolls the other monitoring target information in a direction away from the display position of the latest monitoring target information, and at the end of the other monitoring target information displayed in the display area, the destination The monitoring target information of the above is interrupted, and the monitoring target information of the destination is scrolled and displayed together with the other monitoring target information.
The information display system according to claim 5 or 6.
請求項5又は6に記載の情報表示システム。 The display control unit scrolls the other monitoring target information in a direction approaching the display position of the latest monitoring target information, and at the end of the other monitoring target information displayed in the display area, the destination The monitoring target information of the above is interrupted, and the monitoring target information of the destination is scrolled and displayed together with the other monitoring target information.
The information display system according to claim 5 or 6.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/922,561 US10684480B2 (en) | 2017-03-16 | 2018-03-15 | Information display system |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017051545 | 2017-03-16 | ||
JP2017051545 | 2017-03-16 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018156055A JP2018156055A (en) | 2018-10-04 |
JP6958018B2 true JP6958018B2 (en) | 2021-11-02 |
Family
ID=63716709
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017122222A Active JP6958018B2 (en) | 2017-03-16 | 2017-06-22 | Information display system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6958018B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7288823B2 (en) * | 2019-08-19 | 2023-06-08 | 東京パワーテクノロジー株式会社 | Danger prediction activity support system |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3312632B2 (en) * | 1992-05-14 | 2002-08-12 | ソニー株式会社 | Sound recording and / or playback device |
JPH06213693A (en) * | 1993-01-14 | 1994-08-05 | Hitachi Ltd | Plant operation supporting device |
JP6040715B2 (en) * | 2012-11-06 | 2016-12-07 | ソニー株式会社 | Image display apparatus, image display method, and computer program |
CN104335574B (en) * | 2013-02-22 | 2018-07-17 | 索尼公司 | Head-mounted display |
KR102162836B1 (en) * | 2013-08-30 | 2020-10-07 | 삼성전자주식회사 | Apparatas and method for supplying content according to field attribute |
JP2016142988A (en) * | 2015-02-04 | 2016-08-08 | 富士通株式会社 | Display device and display control program |
-
2017
- 2017-06-22 JP JP2017122222A patent/JP6958018B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2018156055A (en) | 2018-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106808496B (en) | Robot safety system | |
CN107015638B (en) | Method and apparatus for alerting a head mounted display user | |
JP6645142B2 (en) | Robot safety system | |
EP3163407B1 (en) | Method and apparatus for alerting to head mounted display user | |
US10489981B2 (en) | Information processing device, information processing method, and program for controlling display of a virtual object | |
US10528125B2 (en) | Method for operating a virtual reality system, and virtual reality system | |
CN110352033B (en) | Determining eye opening with an eye tracking device | |
JP6801333B2 (en) | Display system for robots | |
JP6399692B2 (en) | Head mounted display, image display method and program | |
JP6669019B2 (en) | VEHICLE DISPLAY CONTROL DEVICE, VEHICLE DISPLAY SYSTEM, VEHICLE DISPLAY CONTROL METHOD, AND PROGRAM | |
JP6693223B2 (en) | Information processing apparatus, information processing method, and program | |
US10684480B2 (en) | Information display system | |
JP6958018B2 (en) | Information display system | |
JP6834620B2 (en) | Information display system | |
CN107009961A (en) | Automobile and automobile transparent cockpit system | |
US20200242847A1 (en) | Information processing device and information processing method | |
JP6874448B2 (en) | Information display system | |
WO2016058449A1 (en) | Smart glasses and control method for smart glasses | |
JP2017100204A (en) | Robot operation system | |
JP2022122936A (en) | Information display system | |
JP6965981B2 (en) | Display system for robots | |
JP6690203B2 (en) | Robot safety system | |
CN115079973A (en) | Display system and display device | |
JP6738308B2 (en) | Information processing method, program, virtual space distribution system and device | |
JP2019184758A (en) | Head-mounted display, image display method for head-mounted display, and control program for head-mounted display |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200313 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210319 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210330 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210527 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210608 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210805 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210907 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210920 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6958018 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |