JPH07311362A - Image display device and management device for managing the same - Google Patents

Abstract

PURPOSE:To safely shut off the scene of the outside world and to enable a viewer to observe only the displayed image and to obtain a sufficient immersed feeling by providing an image display device with a means for accepting the interruption information from an external device exclusive of an image display device and a means for controlling the image display or audio device. CONSTITUTION:A receiver 18 transmits the detected and decoded contents to a controller 16 when the interruption information in the event of emergency is transmitted from a security monitor system 2. The interruption is then applied on a CPU and the control contents are selected by these contents. In such a case, a selection as to whether the image V and sound A being produced are to be turned off or not, a selection as to whether the image and sound are to be suddenly turned off or to be gradually turned off by fading out a selection as to how to superimpose the message, and a selection as to whether the necessary message is to be fetched from a memory of a controller 16, etc., are possible depending on the degrees of the emergency and danger and the kinds thereof. The controller 16 controls the image and sound presented to the observer by controlling a right and left image processing circuit 13 and a right and left sound processing circuit 14.

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【産業上の利用分野】本発明は画像表示装置及びそれを
管理する装置に関し、特に画像を観察する者の顔面もし
くは頭部に搭載・固定され、音声をヘッドホンで聞く機
構を有する表示装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image display device and a device for managing the same, and more particularly to a display device mounted / fixed on the face or head of an observer of an image and having a mechanism for listening to sound through headphones. Is.

【０００２】[0002]

【従来の技術】画像表示器の画像を光学系を用いて拡大
虚像として観察者の瞳に導く顔面もしくは頭部に装着す
る表示装置が提案されている。これらのパーソナルな表
示装置は構造上、外界の風景を遮断し表示画像のみを観
察させることにより没入感が得られることを一つの特徴
としている。しかしながら、没入感と引き換えに、観察
者に対し身体的な危険が外部から迫った場合など対処が
不可能という問題を有している。それを解決する手段と
して、ハーフミラー的機能を持ったコンバイナーと呼ば
れる光学素子により表示器からの画像と外界の風景を結
合する、いわゆるシースルーと呼ばれる機能を付加する
方法があるが、逆に没入感が失われてしまう。そこで、
特開平５ー３０４６４６号公報や特願平５−１８４４３
１に示されるように、表示装置そのものに外界からの光
を遮断もしくはその光量を制御する手段と危険を検知す
る手段を設け、危険が迫ったり環境変化が生じた場合に
のみ外界からの光を観察者に導くような制御を行う装置
が提案されている。2. Description of the Related Art A display device has been proposed in which an image of an image display is attached to a face or a head, which leads to an observer's pupil as an enlarged virtual image by using an optical system. One of the features of these personal display devices is that, due to their structure, an immersive sensation can be obtained by blocking the external scenery and observing only the displayed image. However, there is a problem in that it is impossible to deal with such a situation that the observer is in physical danger from the outside in exchange for immersive feeling. As a means to solve it, there is a method of adding a function called so-called see-through, which combines the image from the display and the outside scene with an optical element called a combiner having a half-mirror function, but it is immersive Will be lost. Therefore,
JP-A-5-304646 and Japanese Patent Application No. 5-18443.
As shown in Fig. 1, the display device itself is provided with a means for blocking or controlling the amount of light from the outside world and a means for detecting a danger, so that the light from the outside world is protected only when the danger is approaching or the environment changes. There has been proposed a device that performs control so as to guide the observer.

【０００３】[0003]

【発明が解決しようとする課題】ところが前記従来例に
おいては、危険検知手段が表示装置そのものに付いてい
るだけなので、観察者近傍の危険という限定された状況
しか把握できなかった。また検知できるものが緊急の危
険や環境変化のみで、たとえば電話やインターフォン、
来客や周りの人の話しかけ等の観察者の周囲の環境変化
に対応することができなかった。あるいは音声による検
知のしきい値レベルを下げること等により危険や環境変
化以外の検出ができたとしても、それらに対する処置と
して一様に緊急の危険や環境変化に対する応答を示すた
め突然外界が見えたり突然映像がストップするなど、表
示画像に没入している観察者にとってはその応答自身が
急激な変化であるため精神的なショックを与えるもので
あるという問題を有していた。However, in the above-mentioned conventional example, since the danger detecting means is only attached to the display device itself, only the limited situation of danger near the observer can be grasped. Also, the only things that can be detected are urgent dangers and environmental changes, such as telephones, intercoms,
It was not possible to respond to changes in the environment around the observer, such as talking to visitors or the people around him. Alternatively, even if it is possible to detect something other than a danger or environmental change by lowering the threshold level of voice detection, as a measure against them, the outside world can be suddenly seen because the response to an emergency danger or environmental change is uniformly shown. For an observer who is immersed in the displayed image, such as sudden stop of the image, the response itself is a sudden change, which causes a psychological shock.

【０００４】従ってその様に危険ではないことの検出が
頻繁に起こることにより、かえって表示画像に対す没入
感を損なう結果となり、結局は前記従来例においては緊
急な非常に危険な状況以外には実質的に対応不可能であ
るという問題を有していた。Therefore, such frequent detection of non-danger results in impairing the immersive feeling of the displayed image, and in the end, in the conventional example, it is practically necessary except in an extremely dangerous situation. There was a problem that it was impossible to deal with it.

【０００５】[0005]

【課題を解決するための手段】本発明の画像表示装置
は、画像表示器と音声器とを有し観察者の顔面若しくは
頭部に装着する画像表示装置で、前記画像表示装置以外
の外部装置からの割り込み情報を受け取る手段と、前記
割り込み情報に基づいて前記画像表示器若しくは前記音
声器を制御する手段とを有することを特徴としている。An image display device of the present invention is an image display device having an image display and a sound device to be mounted on the face or head of an observer, and is an external device other than the image display device. And a means for controlling the image display device or the sound device based on the interrupt information.

【０００６】前記制御手段の好ましい形態は、前記割り
込み情報に基づいて制御内容を選択する手段を有するこ
とを特徴としている。A preferred form of the control means is characterized in that it has means for selecting control contents based on the interrupt information.

【０００７】前記画像表示装置の好ましい形態は、更に
前記制御内容を変更する手段を有することを特徴として
いる。A preferred form of the image display device is characterized by further comprising means for changing the control content.

【０００８】前記表示器の好ましい形態は、前記割り込
み情報に基づいた画像を表示する手段を有することを特
徴としている。A preferred form of the display is characterized in that it has means for displaying an image based on the interrupt information.

【０００９】前記音声器の好ましい形態は、前記割り込
み情報に基づいた音を発生する手段を有することを特徴
としている。A preferred form of the voice device is characterized in that it has means for generating a sound based on the interruption information.

【００１０】前記表示器の好ましい形態は、外界の風景
を観察者に視認せしめる外界視認手段を有し、前記制御
器は前記割り込み情報に応じて該外界視認手段を制御す
ることを特徴としている。A preferred form of the display device is characterized in that it has an external environment visualizing means for allowing an observer to visually recognize an external scenery, and the controller controls the external world visualizing means in accordance with the interrupt information.

【００１１】前記音声器の好ましい形態は、外界の音声
を観察者に聴認せしめる外界聴認手段を有し、前記制御
器は前記割り込み情報に応じて、前記外界聴認手段を制
御することを特徴としている。A preferred form of the audio device has an external world listening means for allowing an observer to hear a voice in the external world, and the controller controls the external world listening means according to the interrupt information. It has a feature.

【００１２】更に、前記外部装置からの割り込み情報は
空間電磁波により伝送され、前記画像表示装置のより好
ましい形態は、前記空間電磁波を受信する手段と、該伝
送された割り込み情報を復調する手段を有することを特
徴としている。Further, interrupt information from the external device is transmitted by spatial electromagnetic waves, and a more preferable form of the image display device has means for receiving the spatial electromagnetic waves and means for demodulating the transmitted interrupt information. It is characterized by that.

【００１３】また、本発明の前記画像表示装置を管理す
る管理装置は、前記画像表示装置の周囲の環境状態の変
化を検出する環境変化検出手段と、前記環境変化検出手
段からの信号に基づいた前記割り込み情報を設定する手
段と、前記割り込み情報を前記画像表示装置に伝送する
伝送手段とを有することを特徴としている。Further, the management device for managing the image display device of the present invention is based on an environmental change detection means for detecting a change in the environmental condition around the image display device and a signal from the environmental change detection means. It is characterized by having a means for setting the interruption information and a transmission means for transmitting the interruption information to the image display device.

【００１４】前記環境変化検出手段の好ましい形態は、
環境状態の異なる変化を検出する複数の検出器を有する
ことを特徴としている。A preferred form of the environment change detecting means is
It is characterized by having a plurality of detectors for detecting changes in environmental conditions.

【００１５】前記伝送手段の好ましい形態は、複数の前
記画像表示装置に割り込み情報を伝送することができる
ことを特徴としている。A preferred form of the transmitting means is characterized in that interrupt information can be transmitted to a plurality of the image display devices.

【００１６】前記設定手段の好ましい形態は、複数の前
記画像表示装置に対して異なる割り込み情報を設定する
ことができることを特徴としている。A preferred form of the setting means is characterized in that different interrupt information can be set for a plurality of the image display devices.

【００１７】以上により、観察者近傍に限定されない状
況を把握できるようになった。また検知できるものが緊
急の危険や環境変化ばかりでなく、たとえば電話やイン
ターフォン、来客や周りの人の話しかけ等に対応するこ
とができるようになった。これにより安心して外界の風
景を遮断し表示画像のみを観察し十分な没入感が得られ
るようになった。As described above, it is possible to grasp the situation not limited to the vicinity of the observer. In addition to being able to detect urgent dangers and changes in the environment, it has become possible to respond to telephone calls, intercoms, talking to visitors and others, and so on. As a result, the scenery outside can be cut off without anxiety, and only the displayed image can be observed to provide a sufficient sense of immersion.

【００１８】[0018]

【実施例】図１は本発明の第１の実施例を説明するため
のブロック図である。1 is a block diagram for explaining a first embodiment of the present invention.

【００１９】図１において、１は画像表示装置、２は画
像表示装置も管理する外部装置でここでは火災等を監視
するセキュリティ監視システム、１２は左右両眼用の画
像を表示する液晶表示器（以下ＬＣＤと称す）、１３は
左右のＬＣＤの駆動回路を含む左右の画像処理回路、１
４は左右の音声処理回路、１５は左右の耳に対応したイ
ヤフォン、１６は画像表示装置のコントローラ、１７は
画像ソースでここではＶＴＲ、１８は受信機、２０は警
報ベル、２１はシステムの管理装置、２２は送信器、２
３監視カメラ、２４は温度検知器、２５は煙検知器、波
線Ｗは空間伝送用電磁波でラジオ帯の電波もしくは赤外
帯の光、破線Ｖは画像信号線、破線Ａはオーディオ信号
線、Ｃはコントロール信号線である。In FIG. 1, 1 is an image display device, 2 is an external device that also manages the image display device, and here is a security monitoring system for monitoring a fire or the like, and 12 is a liquid crystal display device for displaying images for the left and right eyes ( Hereinafter, referred to as LCD), 13 is a left and right image processing circuit including left and right LCD drive circuits, 1
4 is a left and right audio processing circuit, 15 is an earphone corresponding to the left and right ears, 16 is a controller of an image display device, 17 is an image source, here is a VTR, 18 is a receiver, 20 is an alarm bell, 21 is system management Device, 22 is transmitter, 2
3 surveillance cameras, 24 temperature detectors, 25 smoke detectors, wavy lines W for space transmission electromagnetic waves in the radio band or infrared band, broken line V is image signal line, broken line A is audio signal line, C Is a control signal line.

【００２０】本実施例ではゲームセンター等のアミュー
ズメントセンターに本発明を適用した場合について説明
する。セキュリティ監視システム２は、センター内の各
所に設置された実際は複数の監視カメラ２３や温度検知
器２４、煙検知器２５等からの信号により管理装置２１
が常にセンター内の安全を監視し、環境変化があれば非
常ベル２０を鳴らしたり、不図示の構内放送システムに
あらかじめ録音された緊急時の放送録音の内容を流した
り、不図示のネットワーク回線により所轄の消防署や警
察署に連絡をする等のよく知られた機能を持つ。本発明
においては、それらに加え緊急の内容を送信器２２から
空間伝送により画像表示装置１に割り込み情報として伝
送する。センター内には表示装置１が複数設置されてお
り、各表示装置にアドレスを持たせ場所や状況により伝
送する割り込み情報を選択できるようにしてあるため伝
送方式としてはスペクトル拡散方式等が最適である。In this embodiment, the case where the present invention is applied to an amusement center such as a game center will be described. The security monitoring system 2 actually manages the management device 21 by signals from a plurality of monitoring cameras 23, temperature detectors 24, smoke detectors 25, etc. installed at various places in the center.
Constantly monitors the safety of the center, rings the emergency bell 20 if there is a change in the environment, broadcasts the contents of the emergency broadcast recording that was pre-recorded in the local broadcast system (not shown), and uses the network line (not shown). It has well-known functions such as contacting the local fire department or police station. In the present invention, in addition to these, the urgent content is transmitted from the transmitter 22 to the image display device 1 as interrupt information by spatial transmission. Since a plurality of display devices 1 are installed in the center and each display device is given an address so that the interrupt information to be transmitted can be selected depending on the place and the situation, a spread spectrum system or the like is optimal as a transmission system. .

【００２１】画像表示装置１は観察者の顔面に装着され
た眼鏡型の２眼表示装置であってヘッド・マウンテッド
・ディスプレイ（以下ＨＭＤと称す）と呼ばれ、眼と耳
が外界から遮断されているため深い没入感、臨場感を味
わうことができる。ＶＴＲ１７からの画像信号Ｖとオー
ディオ信号Ａはそれぞれ左右の画像信号処理回路１３と
左右の音声処理回路１４に入力される。画像処理回路１
３は入力された画像信号Ｖの左右の画像の識別やＬＣＤ
１２用にフリッカ対策等の必要な画像処理を行いＬＣＤ
１２を駆動し、また不図示のバックライトの駆動も行
う。音声処理回路１４も同様に左右のオーディオ信号Ａ
の識別、フィルタ、イコライジング処理等を行いイヤフ
ォン１５を駆動する。これにより上述の没入感と臨場感
が得られる。The image display device 1 is a spectacle-type twin-lens display device mounted on the observer's face, and is called a head mounted display (hereinafter referred to as HMD), in which the eyes and ears are shielded from the outside world. Because of this, you can enjoy a deep immersive and realistic feeling. The image signal V and the audio signal A from the VTR 17 are input to the left and right image signal processing circuits 13 and the left and right audio processing circuits 14, respectively. Image processing circuit 1
Reference numeral 3 indicates the left and right images of the input image signal V and the LCD
LCD with necessary image processing such as flicker countermeasure for 12 LCD
12 is also driven, and a backlight (not shown) is also driven. Similarly, the audio processing circuit 14 also outputs the left and right audio signals A
Is performed, the earphone 15 is driven. As a result, the above-described immersive feeling and realistic feeling can be obtained.

【００２２】セキュリティシステム２から緊急時の割り
込み情報が電磁波Ｗにより空間伝送されると、受信機１
８は検波、デコードした内容をコントローラ１６に伝え
る。その割り込み情報によりコントローラ１６のＣＰＵ
に対し割り込みがかかり、コントローラ１６は緊急の割
り込み情報の内容を判読することができる。判読した内
容によりあらかじめ決められたフローで処理すなわち制
御内容が選択される。When the emergency interrupt information is spatially transmitted by the electromagnetic wave W from the security system 2, the receiver 1
8 transmits the detected and decoded contents to the controller 16. CPU of the controller 16 according to the interrupt information
Is interrupted, the controller 16 can read the contents of the emergency interrupt information. A process, that is, a control content is selected by a predetermined flow according to the read content.

【００２３】緊急度や危険度、その種別により、流して
いた画像Ｖと音声Ａを切るかどうかや突然切るかフェー
ドアウトで徐々に切るかの選択や、メッセージのスーパ
ーインポーズのさせ方の選択や、必要なメッセージをコ
ントローラ１６のメモリから持ってくるかセキュリティ
システム２からのメッセージを流すことか等の選択が可
能である。それらの選択された処置のフローに基づき、
コントローラ１６は左右画像処理回路１３及び左右音声
処理回路１４を制御し観察者に呈示する画像と音声を制
御する。Depending on the degree of urgency, the degree of danger, and the type thereof, it is possible to select whether to cut the image V and the sound A that are being sent, whether to cut suddenly or gradually by fade-out, and how to superimpose a message. It is possible to select whether to bring a necessary message from the memory of the controller 16 or to send a message from the security system 2. Based on those selected treatment flows,
The controller 16 controls the left and right image processing circuit 13 and the left and right sound processing circuit 14 to control the image and sound presented to the observer.

【００２４】本実施例においてはセキュリティシステム
２から画像表示装置ＨＭＤ１への割り込みのプライオリ
ティはデフォルトで最高位にして置く。上述のようにセ
キュリティシステム２が緊急度や危険度や種別の判定を
行いそれからの割り込み情報の内容に応じて、画像表示
装置ＨＭＤ１の処置法が選択でき、警告表示、警告音声
の内容や呈示のさせ方をきめ細かく設定できるため、よ
り柔軟な対応が可能となる。In this embodiment, the priority of the interrupt from the security system 2 to the image display device HMD1 is set to the highest level by default. As described above, the security system 2 determines the degree of urgency, the degree of danger, and the type, and the treatment method of the image display device HMD1 can be selected according to the content of the interrupt information from that, and the content of the warning display and the warning sound and the presentation Since the way to do it can be set finely, it becomes possible to respond more flexibly.

【００２５】図２は別の実施例を示すブロック図であ
る。本実施例は特願平５−１８４４３１に示されるよう
な危険検知システムを内臓した表示装置ＨＭＤに本発明
を実施した例である。FIG. 2 is a block diagram showing another embodiment. The present embodiment is an example in which the present invention is applied to a display device HMD incorporating a danger detection system as shown in Japanese Patent Application No. 5-184431.

【００２６】図２において図１と同じ部番の部材は同一
部材を表わし、ここでは説明の重複をさける。また外部
装置２は図１と同様であるので不図示である。図２にお
いてＨＭＤ１内の３０は左右のＬＣシャッタ、３１は左
右の可動イヤカバー、３３は複数の危険検知センサー、
３２はそれらのドライバでありかつそれらの出力をコン
トローラ１６に結ぶ危険検知入出力回路、Ｓはセンサー
信号線である。In FIG. 2, members having the same part numbers as those in FIG. 1 represent the same members, and the description thereof will be omitted here. The external device 2 is not shown because it is the same as in FIG. In FIG. 2, 30 in the HMD 1 is a left and right LC shutter, 31 is a left and right movable ear cover, 33 is a plurality of danger detection sensors,
Reference numeral 32 is a driver for these, and a danger detection input / output circuit connecting their outputs to the controller 16, and S is a sensor signal line.

【００２７】図３は図２のＨＭＤ１をより具体的な装置
として表した説明図である。図３では観察者の左右の眼
及び耳に対応した各部材にＲ（右）とＬ（左）を付して
いる。画像信号Ｖとオーディオ信号Ａの配線は図示を省
略しコントロール信号Ｃとセンサ信号Ｓのみを図示して
いる。３４Ｒ，３４ＬはＬＣＤ１２Ｒ，１２Ｌの画像を
左右独立に観察者の左右の眼に導くための光学系で非球
面ハーフミラーとリレーレンズ系からなる。非球面ハー
フミラーを介して観察者は外界を見ることが可能だがＬ
Ｃシャッタ３０Ｒ、３０Ｌが閉じている場合は外界から
の光は遮光されている。またイヤフォン１５Ｒ、１５Ｌ
は開放型イヤフォンであり外界の音が聞こえるが可動イ
アカバー３１Ｒ、３１Ｌが閉じている場合は外界から遮
音されている。危険検知センサ３３として、集音マイク
３５、加速度センサ３６、光センサ３７を用いている。
それらのセンサからの信号は信号線Ｓから危険検知入出
力回路３２に伝えられ、しきい値検出もしくはアナログ
／デジタル変換された結果がコントローラ１６に入力さ
れる。これらの値からコントローラ１６は観察者に危険
が迫っているかどうかを判断することができる。FIG. 3 is an explanatory view showing the HMD 1 of FIG. 2 as a more specific device. In FIG. 3, R (right) and L (left) are attached to the respective members corresponding to the left and right eyes and ears of the observer. The wiring of the image signal V and the audio signal A is omitted and only the control signal C and the sensor signal S are shown. 34R and 34L are optical systems for guiding the images on the LCDs 12R and 12L to the left and right eyes of the observer independently, and are composed of an aspherical half mirror and a relay lens system. The observer can see the outside world through the aspherical half mirror, but L
When the C shutters 30R and 30L are closed, the light from the outside is blocked. Earphones 15R, 15L
Is an open type earphone, and sounds of the outside world can be heard, but when the movable ear covers 31R and 31L are closed, the sound is shielded from the outside world. As the danger detection sensor 33, a sound collecting microphone 35, an acceleration sensor 36, and an optical sensor 37 are used.
Signals from these sensors are transmitted from the signal line S to the danger detection input / output circuit 32, and the result of threshold detection or analog / digital conversion is input to the controller 16. From these values, the controller 16 can determine whether the observer is at risk.

【００２８】例えば加速度センサ３６が２Ｇ以上の加速
度を検出した場合、光センサ３７の出力波形に２０ｄＢ
／０．１ｓｅｃ以上もしくは２０ｄＢ／１ｓｅｃ以上の
急激な変化があった場合、集音マイク３５の出力が８０
ホーンを越えるか出力波形に０．１ｄＢ／０．１ｓｅｃ
以上の急激な変化があった場合にはコントローラ１６は
観察者に危険が迫っていると判断する。For example, when the acceleration sensor 36 detects acceleration of 2 G or more, the output waveform of the optical sensor 37 is 20 dB.
If there is a sudden change of 0.1 sec or more or 20 dB / 1 sec or more, the output of the sound collecting microphone 35 becomes 80
Over the horn or output waveform 0.1dB / 0.1sec
When the above-mentioned rapid change occurs, the controller 16 determines that the observer is in danger.

【００２９】危険が検知されるとコントローラ１６は、
ＬＣシャッタ３０Ｒ、３０Ｌを開放にし外界が視認でき
ようにしたり、イヤカバー３１Ｒ、３１Ｌを開け外界の
音を聞けるようにしできる。またそれに合わせて図１の
実施例と同じようにコントローラ１６は画像処理回路１
３と音声処理回路１４を介して観察者に呈示する画像と
音声の内容を制御することができる。When a danger is detected, the controller 16
It is possible to open the LC shutters 30R and 30L so that the outside world can be visually recognized, and to open the ear covers 31R and 31L so that the sound of the outside world can be heard. Further, in accordance with this, the controller 16 operates in the same manner as in the embodiment of FIG.
It is possible to control the contents of the image and the sound to be presented to the observer via the sound processing circuit 3 and the sound processing circuit 14.

【００３０】ＨＭＤ１に内臓された危険検知センサと外
部セキュリティシステム２からとの割り込み情報による
処理について、図４と図５を用いて説明する。The processing based on the interrupt information from the danger detection sensor incorporated in the HMD 1 and the external security system 2 will be described with reference to FIGS. 4 and 5.

【００３１】図４は外部セキュリティシステム２から送
信される割り込み情報のフォーマットの構成図である。
伝送は固定長のパケット通信で行われ、ＳＹＮは同期ク
ロック、ＴＡＤは送信側の機器アドレス、ＲＡＤは受信
側機器アドレス、ＰＩＤはパケットの認識番号、ＥＭＥ
は緊急度、ＲＩＳは危険度、ＫＩＮは種別、ＤＥＶは送
信側の機器名、ＤＡＴＡはデータ、ＥＣＣは誤り訂正符
号である。FIG. 4 is a structural diagram of a format of interrupt information transmitted from the external security system 2.
Transmission is performed by fixed-length packet communication, SYN is a synchronous clock, TAD is a device address on the transmitting side, RAD is a device address on the receiving side, PID is a packet identification number, and EME.
Is an urgency level, RIS is a risk level, KIN is a type, DEV is a device name of the transmitting side, DATA is data, and ECC is an error correction code.

【００３２】ＴＡＤによりセキュリティシステム１が複
数の場合にも対応可能となり、またＤＥＶと組み合わせ
ることによりセキュリティシステム以外の後述するよう
な電話回線やインターフォンや各種ネットワークや訪問
割り込み器等からの伝送にも対応可能となる。ＲＡＤに
より複数のＨＭＤ１の併用時に個別の対応が可能とな
る。ＰＩＤは全体システムの管理・運用に利用される。
ＥＭＥ、ＲＩＳ、ＫＩＮは割り込みの同定に用いられ
る。ＤＡＴＡには各種メッセージや補助情報を入れるこ
とができる。The TAD makes it possible to support a plurality of security systems 1 and, in combination with the DEV, also supports transmission from telephone lines, intercoms, various networks, visit interrupters, etc., which will be described later, other than the security system. It will be possible. RAD enables individual correspondence when a plurality of HMDs 1 are used together. The PID is used for managing and operating the entire system.
EME, RIS, and KIN are used to identify interrupts. Various messages and auxiliary information can be put in DATA.

【００３３】なお本実施例においては外部装置からの割
り込みとＨＭＤ１内部からの割り込みに対して一元的な
対応ができるように、図４に示したデータフォーマット
の割り込み情報をコントローラ１６内部で作成してから
内部からの割り込みを発生させる。内部からの割り込み
の場合はＴＡＤに内部の各危険値検知センサ３３の機器
アドレスを書きＤＥＶに機器名を書いておくことにより
外部からの割り込みと区別することができる。In this embodiment, the interrupt information of the data format shown in FIG. 4 is created inside the controller 16 so that the interrupt from the external device and the interrupt from inside the HMD 1 can be handled in a unified manner. To generate an internal interrupt. In the case of an internal interrupt, the external device can be distinguished from the external interrupt by writing the device address of each internal dangerous value detection sensor 33 in TAD and writing the device name in DEV.

【００３４】本実施例では割り込みのプライオイリティ
は内部からのものを最高位とし外部からのものを次にし
ておく。In the present embodiment, the priority of the interrupt is highest from the inside, and next from the outside.

【００３５】図５はコントローラ１６が割り込みを受け
てから行う処理の一部を示したフローチャートである。
割り込みがある（Ｓ１）と、Ｓ２で割り込みが外部機器
からか内部からかをＴＡＤとＤＥＶから判断し、外部か
らの割り込みの場合は外部からの割り込みであることを
示すフラグをたてる（Ｓ３）。次にＥＭＥから緊急度を
判定する（Ｓ４）。FIG. 5 is a flowchart showing a part of the processing performed after the controller 16 receives an interrupt.
If there is an interrupt (S1), it is determined in S2 whether the interrupt is from an external device or from the inside from TAD and DEV, and if it is an external interrupt, a flag indicating that it is an external interrupt is set (S3). . Next, the degree of urgency is determined from EME (S4).

【００３６】本実施例では緊急度を５段階に分けＥＭＥ
に緊急度の低い方から１〜５の値を与えている。緊急度
が４より低い場合はＬＣＤ１２とイヤフォン１５に流す
メッセージをフェードインさせて没入している画像Ｖと
オーディオＡに対する干渉を和らげるためにそのための
フェードインフラグをたてておく（Ｓ５）。次にＲＩＳ
から危険度を判定する（Ｓ６）。In this embodiment, the degree of urgency is divided into five levels, and EME is used.
Is given a value of 1 to 5 from the one with the lowest urgency. If the degree of urgency is lower than 4, a fade-in flag is set for fading in the message sent to the LCD 12 and the earphone 15 to reduce the interference with the immersive image V and audio A (S5). Then RIS
The degree of danger is determined from (S6).

【００３７】危険度も５段階で評価し、危険度が４以上
に高い場合は画像ＶとオーディオＡの情報呈示を中止し
没入状態からの回復を早めるために、Ａ／Ｖオフモード
フラグをたてる（Ｓ７）。なおこのフラグはＬＣシャッ
タ３０とイアカバー３１の開閉の判断にもにも利用され
る。次にＤＡＴＡの中に観察者に呈示すべきメッセージ
があるかどうかを判定する（Ｓ８）。これはデータの頭
にあらかじめ決められたコードが書いてある場合にはメ
ッセージ有りとしたり、メッセージ自身を括弧などのコ
ードで囲い括弧を検出することでメッセージが有ること
とメッセージ内容の同定を行ってもよい。メッセージが
有る場合はメッセージフラグをたてる（Ｓ９）。次にこ
れらの各フラグとＫＩＮによる種別（火災、地震、津
波、山崩れ、噴火等）とＤＥＶの組み合わせにより処理
を選択し実行する（Ｓ１０）。この時再び各ＥＭＥやＲ
ＩＳ等の値を参照しより細かな処理の選択を行うことも
もちろん可能である。The risk level is also evaluated on a scale of 5 and when the risk level is 4 or higher, the A / V off mode flag is set in order to stop the information presentation of the image V and the audio A and speed up the recovery from the immersion state. (S7). This flag is also used to judge whether the LC shutter 30 and the ear cover 31 are opened or closed. Next, it is determined whether or not there is a message to be presented to the observer in DATA (S8). This is because if a predetermined code is written at the beginning of the data, there is a message, or by enclosing the message with a code such as parentheses and detecting the parentheses, the message is identified and the message content is identified. Good. If there is a message, a message flag is set (S9). Next, a process is selected and executed according to the combination of each flag and the type of KIN (fire, earthquake, tsunami, landslide, eruption, etc.) and DEV (S10). At this time again EME and R
Of course, it is also possible to select a finer processing by referring to the value of IS or the like.

【００３８】例えばアミューズメントセンター内で火災
が生じた場合は、火災箇所に近いＨＭＤに対してはセキ
ュリティシステム３より緊急度５、危険度５、種別火
災、機器名セキュリティシステムといった割り込み情報
が伝送される。割り込み情報を受信したＨＭＤ１ではコ
ントローラ１６がその割り込み情報より状況を判断し、
没入している画像ＶとオーディオＡの呈示を直ちに中止
し、火災であること直ちにＨＭＤ１をはずし係員の誘導
に従って避難すべきことを表示と音声で観察者に知らせ
る。火災箇所に遠いＨＭＤに対しては緊急度５、危険度
４、種別火災、機器名セキュリティシステムで伝送され
同じように画像ＶとオーディオＡの呈示を中止し火災が
起こったことと比較的火災箇所が遠く混乱の無いように
避難すべきこと等を表示と音声で観察者に知らせる。こ
のように各ＨＭＤ１の状況に応じてセキュリティシステ
ム２から細かな対応が可能となる。For example, when a fire occurs in the amusement center, the security system 3 transmits the interrupt information such as the emergency level 5, the danger level 5, the type fire, and the device name security system to the HMD near the fire spot. . In the HMD 1 that has received the interrupt information, the controller 16 judges the situation from the interrupt information,
Immediately stop presenting the immersive image V and audio A, immediately remove the HMD 1 to indicate that there is a fire, and inform the observer by display and voice that evacuation should be performed according to the guidance of the staff. For an HMD far from the fire location, the emergency level 5, danger level 4, type fire, and device name security system were transmitted, and similarly, the presentation of image V and audio A was stopped, and a fire occurred and a relatively fire location. Notify the observer with a display and voice that he should evacuate so that there is no confusion. In this way, the security system 2 can make a detailed response to the situation of each HMD 1.

【００３９】なお本実施例において観察者に外界を呈示
するためにハーフミラー光学系３４とＬＣシャッタ３
０、開放型イヤフォン１５と可動イアカバー３１の組み
合わせを示したが、本発明の本質はこれらの機器の組み
合わせに限定されるものではない。例えば特願平５−１
８４４３１に示されたように危険検知センサ３３として
ＴＶカメラを用い画像処理により危険検知を行う構成を
とれば、外界を観察者に呈示するのにＴＶカメラの画像
をそのままＬＣＤ１２に出力すればよく、ハーフミラー
光学系３４とＬＣシャッタ３０といったシースルーＨＭ
Ｄにする必要はなく図１に示したような直視型ＨＭＤで
も実施可能である。同様にイヤフォン１５を密閉型とし
外界と遮音しマイク３５の音声をそのままにイヤフォン
１５に出力することも可能である。In this embodiment, the half mirror optical system 34 and the LC shutter 3 are provided to present the outside world to the observer.
0, the combination of the open type earphone 15 and the movable ear cover 31 is shown, but the essence of the present invention is not limited to the combination of these devices. For example, Japanese Patent Application No. 5-1
As shown in 84431, if a TV camera is used as the danger detection sensor 33 and danger detection is performed by image processing, the TV camera image may be output to the LCD 12 as it is to present the outside world to the observer. See-through HM such as half mirror optical system 34 and LC shutter 30
It is not necessary to set it to D, and it is also possible to implement it by a direct view type HMD as shown in FIG. Similarly, it is also possible to make the earphones 15 hermetically sealed and to shield the sound from the outside world and output the sound of the microphone 35 as it is to the earphones 15.

【００４０】図６に別の実施例を示す。本実施例は本発
明を家庭内に適用した例で、表示装置ＨＭＤ１は図１の
実施例と同じであり、またセキュリティシステム２は不
図示であるが家庭内セキュリティシステムやマンション
等の集合住宅セキュリティシステムである。FIG. 6 shows another embodiment. The present embodiment is an example in which the present invention is applied to a home, the display device HMD1 is the same as that of the embodiment of FIG. 1, and the security system 2 is not shown, but a security system for home use and security of condominiums such as condominiums are provided. System.

【００４１】図６において、３は電話システム、４はイ
ンターフォンシステム、５は訪問割り込み器である。電
話システム３では電話器４１と回線の間に送信器４０を
挿入し電話がかかってくるとＨＭＤ１に対して割り込み
がかかる。インターフォンシステム４では玄関のインタ
ーフォン４２以外の、リビングインターフォン４３、各
部屋のインターフォン４５、４７にそれぞれ送信器４
４、４６、４８が取り付けられている。各部屋でＨＭＤ
１を使用できるようにしてある。もちろん前述した通り
機器アドレスの管理を行っているので複数のＨＭＤ１の
使用も可能でありその場所も電磁波Ｗの届く範囲内で制
限はない。訪問割り込み器５はポータブルでＡＶ機器の
リモコン程度の大きさのもので、小型ＴＶカメラ４９と
小型マイク５０及び簡単な操作パネル５１がつながった
送信器５２から構成されている。In FIG. 6, 3 is a telephone system, 4 is an intercom system, and 5 is a visit interrupter. In the telephone system 3, the transmitter 40 is inserted between the telephone 41 and the line to interrupt the HMD 1 when a call is received. In the intercom system 4, other than the intercom 42 at the entrance, the living intercom 43 and the intercoms 45 and 47 in each room are provided with the transmitter 4 respectively.
4, 46 and 48 are attached. HMD in each room
1 can be used. Of course, since the device address is managed as described above, it is possible to use a plurality of HMDs 1 and there is no limitation on the place within the range where the electromagnetic waves W reach. The visit interrupter 5 is portable and has a size of a remote controller for AV equipment, and is composed of a transmitter 52 to which a small TV camera 49, a small microphone 50, and a simple operation panel 51 are connected.

【００４２】電話がかかってきた場合は、電話システム
３より緊急度２、危険度１、種別電話、機器名電話器と
いった割り込み情報が伝送される。表示装置１ではコン
トローラ１６がその割り込み情報より状況を判断し、没
入している画像ＶとオーディオＡをそのまま観察者に呈
示したまま、電話の小さなアイコンを呈示画像Ｖの隅に
フェードインで表示しオーディオＡに小音量の電話のベ
ル音を重畳させ、観察者に電話がかかってきたことを知
らせる。家の玄関に来客があった場合はインターフォン
システム４より緊急度３、危険度１、種別来客、機器名
玄関インターフォンという割り込み情報が伝送され、点
滅する玄関来客の小さなアイコンとチャイムが画像Ｖと
オーディオＡに重畳される。When a call is received, the telephone system 3 transmits interruption information such as urgency level 2, danger level 1, type telephone, and equipment name telephone. In the display device 1, the controller 16 judges the situation from the interrupt information, and displays the immersive image V and the audio A as they are to the observer, and displays a small icon of the telephone in the corner of the presented image V by fading in. A low-volume telephone bell is superimposed on the audio A to notify the observer that an incoming call has been made. When there is a visitor at the front door of the house, the intercom system 4 transmits interrupt information such as urgency 3, danger level 1, type visitor, device name front door intercom, and a small blinking front visitor icon and chime are displayed as image V and audio. It is superimposed on A.

【００４３】家族が観察者に用事が有る場合は、訪問割
り込み器５を家族が操作し、緊急度３、危険度１、種別
用事、機器名割り込み器という割り込み情報が伝送さ
れ、観察者に家族が用事があることを知らせる。観察者
は不図示のＨＭＤ１の操作パネルより画像Ｖと音声Ａに
対する割り込みをコントローラ１６に対し許可し、家族
に対し手振りや声により用事を催促し、ＴＶカメラ４９
とマイク５０あるいは操作パネル５１から入力された情
報を画像Ｖと音声Ａにスーパーインポーズすることによ
り家族の用件をＨＭＤ１をつけたまま認識できる。When the family member has an observer's errand, the visitor interrupter 5 is operated by the family member, and interrupt information such as urgency level 3, risk level 1, type task, and device name interrupter is transmitted to the observer. Let you know that you have an errand. The observer permits the controller 16 to interrupt the image V and the voice A from the operation panel of the HMD 1 (not shown), urges the family to do something by waving or voice, and the TV camera 49.
By superimposing the information input from the microphone 50 or the operation panel 51 on the image V and the voice A, the family requirement can be recognized with the HMD 1 still attached.

【００４４】もちろん送信器側のこれらの緊急度、危険
度等の設定は観察者自身で変更可能で、例えば邪魔を嫌
うのであれば留守番電話として緊急度を１まで落とした
りもしくは緊急度０という設定を設け画像Ｖやオーディ
オＡへの割り込みをさせないという設定も可能である。Of course, the settings of the urgency level, the risk level, etc. on the transmitter side can be changed by the observer himself. For example, if he / she does not want to disturb, he / she can drop the urgency level to 1 as an answering machine or set the urgency level to 0. It is also possible to set so that the image V and the audio A are not interrupted.

【００４５】またこれらの緊急度、危険度等の設定を受
信側すなわちＨＭＤ側で観察者自身が変更可能で、割り
込み情報から割り込みを要求した機器を判定するだけで
それに対応した緊急度をＨＭＤ側で設定することも可能
である。The observer himself / herself can change the settings of these urgency level and risk level on the receiving side, that is, the HMD side, and the urgent level corresponding to that can be determined only by determining the device that requested the interrupt from the interrupt information. It is also possible to set with.

【００４６】このように本発明によれば割り込み情報か
ら割り込みを要求した機器とされた機器、さらにその内
容を同定できるため、それに応じてアイコンやテキスト
等の表示内容・音声内容及びフェードインやスーパーイ
ンポーズ等その呈示方法を変化させることが可能とな
る。As described above, according to the present invention, since it is possible to identify the device which is the device requesting the interrupt from the interrupt information and the content thereof, the display contents / voice contents such as icons and texts and the fade-in / super contents can be identified accordingly. It is possible to change the presentation method such as imposing.

【００４７】また各機器から表示装置への割り込みのプ
ライオリティ自身もデフォルト値から必要に応じて変更
できしかもその変更は送信及び受信側両方で可能である
ので、よりユーザーフレンドリな環境を提供できるよう
になる。ただし、観察者の危険に関わるものには受信側
で変更不可能な処置を施すことが必要である。Also, the priority of the interrupt from each device to the display device itself can be changed from the default value as required, and the change can be made on both the transmitting and receiving sides, so that a more user-friendly environment can be provided. Become. However, it is necessary for the receiving side to take irreversible measures for things that are dangerous to the observer.

【００４８】本発明は家庭、オフィス、ゲームセンタ
ー、飛行機や電車等の乗り物の中といったところで実施
可能である。また外部機器・装置としては火災報知器、
煙・ガス検知器、集中管理システム、インターフォン、
電話以外にも放送やネットワークでもよい。 つまり、
放送を仮定すると画像Ｖと音声Ａを提供している同一情
報メディアから割り込みを受け取る構成をとっても、実
施例のようにＶＴＲと無線という別種情報源から受け取
る構成でも本発明は実施可能である。The present invention can be implemented in homes, offices, game arcades, vehicles such as airplanes and trains. Also, as external equipment / devices, fire alarms,
Smoke / gas detector, centralized control system, intercom,
It may be broadcast or network other than telephone. That is,
The present invention can be implemented with a configuration in which an interrupt is received from the same information medium that provides the image V and the sound A under the assumption of broadcasting, or with a configuration in which it is received from different types of information sources such as a VTR and a radio as in the embodiment.

【００４９】以上の実施例において、画像表示器（ＬＣ
Ｄ１２）に表示する画像（Ｖ）は特に２次元画像でも立
体視用に両眼視差をつけた３次元画像であってもよく、
またそこに割り込ませる画像も２次元画像でも３次元画
像でも本発明は実施可能である。In the above embodiments, the image display (LC
The image (V) displayed in D12) may be a two-dimensional image or a three-dimensional image with binocular parallax for stereoscopic vision,
The present invention can be implemented with an image to be interrupted therein as well as a two-dimensional image or a three-dimensional image.

【００５０】[0050]

【発明の効果】以上説明したように、本発明によれば外
部装置から伝送された割り込み情報により、観察者近傍
に限定されない状況を把握できるようになり、また検知
きるものが緊急の危険や変化ばかりでなく、たとえば電
話やインターフォン、来客や周りの人の話しかけ等に対
応することができるようになった。このため安心して外
界の風景を遮断し表示画像のみを観察し十分な没入感が
得られるようになった。As described above, according to the present invention, the interrupt information transmitted from the external device makes it possible to grasp a situation that is not limited to the vicinity of the observer, and what can be detected is an emergency danger or a change. In addition to being able to respond to phone calls, intercoms, talking to visitors and others, for example. For this reason, the scenery outside can be cut off without anxiety, and only the displayed image can be observed to provide a sufficient sense of immersion.

【図面の簡単な説明】[Brief description of drawings]

【図１】本発明の実施例を示すブロック図FIG. 1 is a block diagram showing an embodiment of the present invention.

【図２】本発明の別の実施例を示すブロック図と説明図FIG. 2 is a block diagram and an explanatory diagram showing another embodiment of the present invention.

【図３】本発明の別の実施例を示すブロック図と説明図FIG. 3 is a block diagram and an explanatory diagram showing another embodiment of the present invention.

【図４】本発明で用いるデータフォーマットの一例を示
す模式図FIG. 4 is a schematic diagram showing an example of a data format used in the present invention.

【図５】本発明で用いる処理の一部を示すフローチャー
トFIG. 5 is a flowchart showing a part of processing used in the present invention.

【図６】本発明のもう一つ別の実施例を示すブロック図FIG. 6 is a block diagram showing another embodiment of the present invention.

【符号の説明】[Explanation of symbols]

１ 表示装置 ２ セキュリティシステム ３ 電話システム ４ インターフォンシステム ５ 訪問割り込み器 １６ 表示装置コントローラ １２ 左右眼用ＬＣＤ ３４ 光学系 １８ 受信器 ２２、４０、４２、５２ 送信器 1 Display Device 2 Security System 3 Telephone System 4 Intercom System 5 Visit Interruptor 16 Display Device Controller 12 Left and Right Eye LCD 34 Optical System 18 Receiver 22, 40, 42, 52 Transmitter

Claims (12)

【特許請求の範囲】[Claims] 【請求項１】 画像表示器と音声器とを有し観察者の顔
面若しくは頭部に装着する画像表示装置において、 前記画像表示装置以外の外部装置からの割り込み情報を
受け取る手段と、 前記割り込み情報に基づいて前記画像表示器若しくは前
記音声器を制御する手段とを有することを特徴とする画
像表示装置。1. An image display device having an image display and a sound device to be worn on the face or head of an observer, means for receiving interrupt information from an external device other than the image display device, and the interrupt information. And a means for controlling the image display device or the audio device based on the above. 【請求項２】 前記制御手段は、前記割り込み情報に基
づいて制御内容を選択する手段を有することを特徴とす
る請求項１記載の画像表示装置。2. The image display device according to claim 1, wherein the control unit has a unit for selecting a control content based on the interrupt information. 【請求項３】 前記画像表示装置は、前記制御内容を変
更する手段を有することを特徴とする請求項２の画像表
示装置。3. The image display device according to claim 2, wherein the image display device has means for changing the control content. 【請求項４】 前記表示器は、前記割り込み情報に基づ
いた画像を表示する手段を有することを特徴とする請求
項１記載の画像表示装置。4. The image display device according to claim 1, wherein the display device has means for displaying an image based on the interrupt information. 【請求項５】 前記音声器は、前記割り込み情報に基づ
いた音を発生する手段を有することを特徴とする請求項
１記載の画像表示装置。5. The image display device according to claim 1, wherein the audio device has means for generating a sound based on the interruption information. 【請求項６】 前記表示器は、外界の風景を観察者に視
認せしめる外界視認手段を有し、前記制御器は前記割り
込み情報に応じて該外界視認手段を制御することを特徴
とする請求項１記載の画像表示装置。6. The display device has an external environment visualizing means for allowing an observer to visually recognize an external scenery, and the controller controls the external visualizing means according to the interrupt information. 1. The image display device according to 1. 【請求項７】 前記音声器は、外界の音声を観察者に聴
認せしめる外界聴認手段を有し、前記制御器は前記割り
込み情報に応じて、前記外界聴認手段を制御することを
特徴とする請求項１記載の画像表示装置。7. The sounder has an outside world listening means for allowing an observer to hear the outside world voice, and the controller controls the outside world listening means according to the interrupt information. The image display device according to claim 1. 【請求項８】 前記外部装置からの割り込み情報は空間
電磁波により伝送され、前記画像表示装置は前記空間電
磁波を受信する手段と、該伝送された割り込み情報を復
調する手段を有することを特徴とする特許請求の範囲第
１項記載の画像表示装置。8. The interrupt information from the external device is transmitted by spatial electromagnetic waves, and the image display device has means for receiving the spatial electromagnetic waves and means for demodulating the transmitted interrupt information. The image display device according to claim 1. 【請求項９】 画像表示器と音声器とを有し観察者の顔
面若しくは頭部に装着する画像表示装置で、 前記画像
表示装置以外の外部装置からの割り込み情報を受け取る
手段と、前記割り込み情報に基づいて前記画像表示器若
しくは前記音声器を制御する手段とを有する画像表示装
置を管理する管理装置において、 前記画像表示装置の周囲の環境状態の変化を検出する環
境変化検出手段と、 前記環境変化検出手段からの信号に基づいた前記割り込
み情報を設定する手段と、 前記割り込み情報を前記画像表示装置に伝送する伝送手
段とを有することを特徴とする管理装置。9. An image display device having an image display and a sound device to be worn on the face or head of an observer, means for receiving interrupt information from an external device other than the image display device, and the interrupt information. In a management device for managing an image display device having means for controlling the image display device or the audio device based on, an environment change detection means for detecting a change in an environmental condition around the image display device, and the environment A management apparatus comprising: a means for setting the interrupt information based on a signal from the change detection means; and a transmission means for transmitting the interrupt information to the image display device. 【請求項１０】 前記環境変化検出手段は環境状態の異
なる変化を検出する複数の検出器を有することを特徴と
する請求項９の管理装置。10. The management apparatus according to claim 9, wherein the environment change detecting means has a plurality of detectors for detecting changes in different environmental states. 【請求項１１】 前記伝送手段は、複数の前記画像表示
装置に割り込み情報を伝送することができることを特徴
とする請求項１０の管理装置。11. The management device according to claim 10, wherein the transmission means can transmit interrupt information to a plurality of the image display devices. 【請求項１２】 前記設定手段は、複数の前記画像表示
装置に対して異なる割り込み情報を設定することができ
ることを特徴とする請求項１１の管理装置。12. The management device according to claim 11, wherein the setting unit can set different interrupt information for a plurality of the image display devices.