JP3048927B2 - Pointing device for large screen presentation system - Google Patents

Pointing device for large screen presentation system

Info

Publication number
JP3048927B2
JP3048927B2 JP8198792A JP19879296A JP3048927B2 JP 3048927 B2 JP3048927 B2 JP 3048927B2 JP 8198792 A JP8198792 A JP 8198792A JP 19879296 A JP19879296 A JP 19879296A JP 3048927 B2 JP3048927 B2 JP 3048927B2
Authority
JP
Japan
Prior art keywords
cursor
screen
presenter
sensor
processing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP8198792A
Other languages
Japanese (ja)
Other versions
JPH1039994A (en
Inventor
一則 橋本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Software Hokkaido Ltd
Original Assignee
NEC Software Hokkaido Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Software Hokkaido Ltd filed Critical NEC Software Hokkaido Ltd
Priority to JP8198792A priority Critical patent/JP3048927B2/en
Publication of JPH1039994A publication Critical patent/JPH1039994A/en
Application granted granted Critical
Publication of JP3048927B2 publication Critical patent/JP3048927B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Position Input By Displaying (AREA)

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は大画面プレゼンテー
ションシステム用ポインティング装置に関し、特にソフ
トウェア画像を大画面に表示し画面上の特定位置をカー
ソルで指示してプレゼンテーションを行う大画面プレゼ
ンテーションシステム用ポインティング装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a pointing device for a large-screen presentation system, and more particularly to a pointing device for a large-screen presentation system for displaying a software image on a large screen and designating a specific position on the screen with a cursor. .

【0002】[0002]

【従来の技術】従来の大画面プレゼンテーションシステ
ム用ポインティング装置は、たとえば特開平5−809
25号公報に示されるように、大画面に表示された画像
の任意の特定の座標を片手で容易に指示することがで
き、さらに高い信頼性を期待できる遠隔式の大画面用ポ
インティング装置を得ることを目的としている。
2. Description of the Related Art A conventional pointing device for a large screen presentation system is disclosed, for example, in Japanese Patent Laid-Open No. 5-809.
As disclosed in Japanese Patent Application Publication No. 25-205, a remote large-screen pointing device that can easily indicate any specific coordinates of an image displayed on a large screen with one hand and can be expected to have higher reliability. It is intended to be.

【0003】図4は、従来の大画面プレゼンテーション
システム用ポインティング装置の一例を示すブロック図
である。コントローラ100は、ディスプレイ700上
のカーソル800を説明者が操作するための装置であ
る。コントローラ100は水平方向の角速度を検出する
水平ジャイロ105と、その出力をディジタル値に変換
するためのA/Dコンバータ106と、垂直方向の角速
度を検出する垂直ジャイロ107とその出力をディジタ
ル値に変換するA/Dコンバータ108と、検出された
角速度のディジタル値を処理装置500に送出するため
のインタフェース109とを備え、コントローラ100
の水平、垂直の角速度をディジタル値に変換して処理装
置500に送出する。処理装置500は、コントローラ
100からの角速度情報を受け、カーソル800が表示
されるべきディスプレイ700上の位置を計算して、画
面情報を表示装置600に送出する。表示装置600
は、処理装置500から送出されてくる画面情報に従
い、ディスプレイ700上に画面を映し出す。
FIG. 4 is a block diagram showing an example of a conventional pointing device for a large-screen presentation system. The controller 100 is a device for the explainer to operate the cursor 800 on the display 700. The controller 100 includes a horizontal gyro 105 for detecting a horizontal angular velocity, an A / D converter 106 for converting the output of the horizontal gyro to a digital value, a vertical gyro 107 for detecting a vertical angular velocity, and converting the output to a digital value. An A / D converter 108, and an interface 109 for sending a digital value of the detected angular velocity to the processing device 500.
Are converted to digital values and sent to the processing device 500. The processing device 500 receives the angular velocity information from the controller 100, calculates the position on the display 700 where the cursor 800 should be displayed, and sends out the screen information to the display device 600. Display device 600
Displays a screen on the display 700 in accordance with the screen information sent from the processing device 500.

【0004】次に、図4を用いて動作を説明する。説明
者がコントローラ100の向きを変えると、水平ジャイ
ロ105および垂直ジャイロ107が変位角を検出し、
水平方向の変位角はA/Dコンバータ106が、垂直方
向の変位角はA/Dコンバータ108がそれぞれディジ
タル値に変換する。ディジタル値に変換された水平およ
び垂直の変位角情報は、インタフェース109を通して
処理装置500に送出される。処理装置500は、イン
タフェース109からの変位角情報を受け、ディスプレ
イ700上に表示されるカーソル800の表示位置を計
算する。計算後、ディスプレイ700に表示する画面
に、カーソル800の図形を合成した画面情報を、表示
装置600へ送出しディスプレイ700に画面が表示さ
れる。このポインティング装置によって、説明者はコン
トローラ100を任意の方向に向けることによって、画
面上のカーソル800を動かすことが可能となる。
Next, the operation will be described with reference to FIG. When the presenter changes the direction of the controller 100, the horizontal gyro 105 and the vertical gyro 107 detect the displacement angle,
The A / D converter 106 converts the displacement angle in the horizontal direction into a digital value, and the A / D converter 108 converts the displacement angle in the vertical direction into a digital value. The horizontal and vertical displacement angle information converted into digital values is sent to the processing device 500 through the interface 109. The processing device 500 receives the displacement angle information from the interface 109 and calculates the display position of the cursor 800 displayed on the display 700. After the calculation, screen information obtained by combining the figure of the cursor 800 with the screen displayed on the display 700 is sent to the display device 600, and the screen is displayed on the display 700. With this pointing device, the presenter can move the cursor 800 on the screen by pointing the controller 100 in an arbitrary direction.

【0005】[0005]

【発明が解決しようとする課題】上述した従来の大画面
プレゼンテーションシステム用ポインティング装置は、
コントローラに、水平方向の角速度を検出する水平ジャ
イロと垂直方向の角速度を検出する垂直ジャイロとを組
込みとしているので、説明者の動作が制限されるという
問題点がある。これは、例えば、聴取者が50〜100
人程度の大画面プレゼンテーションシステムの場合、説
明者が積極的に画面の説明のために動いたり、また説明
に際して手首より先だけではなく腕全体でコントローラ
を動かすことがあるが、コントローラは、そのような動
作を想定していないため、水平ジャイロと垂直ジャイロ
とでコントローラ自身の傾きを検出してしまい、あたか
も、カーソルが別の場所を示すかのように動作すること
になり、説明者としては、コントローラの操作に制限を
受けることになる。また、コントローラにカーソルを保
持するための機構がないため、カーソルを目的の個所に
表示したとしても、継続して画面上の一点を指示したま
まにすることが非常に難かしいという問題点もある。
The above-described pointing device for a conventional large-screen presentation system includes:
Since the controller incorporates a horizontal gyro for detecting the angular velocity in the horizontal direction and a vertical gyro for detecting the angular velocity in the vertical direction, the operation of the presenter is limited. This means that, for example, listeners
In the case of a large-screen presentation system for humans, the presenter may actively move to explain the screen, and may move the controller not only beyond the wrist but also across the arm in explaining. Since the horizontal gyro and the vertical gyro detect the inclination of the controller itself, it operates as if the cursor points to another location, and as an explainer, The operation of the controller will be limited. In addition, since the controller does not have a mechanism for holding the cursor, it is very difficult to keep pointing at one point on the screen even if the cursor is displayed at a target location. .

【0006】本発明の目的は、説明者の動きに制限を設
けず、説明者が注視した画面上の点にカーソルを移動さ
せる機能を持つ大画面プレゼンテーションシステム用ポ
インティング装置を提供することにある。
It is an object of the present invention to provide a pointing device for a large-screen presentation system having a function of moving a cursor to a point on a screen watched by a presenter without limiting the movement of the presenter.

【0007】本発明の他の目的は、説明者が注視した画
面上の点にカーソルを移動させる機能とともに、説明者
の動作とは無関係に、画面上の一点にカーソルを指示し
たままにする機能も有する大画面プレゼンテーションシ
ステム用ポインティング装置を提供することにある。
Another object of the present invention is to provide a function of moving a cursor to a point on the screen watched by the presenter and a function of pointing the cursor at one point on the screen irrespective of the operation of the presenter. It is another object of the present invention to provide a pointing device for a large-screen presentation system that also has the following.

【0008】[0008]

【課題を解決するための手段】本発明の大画面プレゼン
テーションシステム用ポインティング装置は、説明者が
掌中で制御するコントローラの出力するカーソルの位置
情報を受けプレゼンテーション用の画面表示装置の画面
上で説明個所を指示するカーソルの位置を制御する処理
装置を有する大画面プレゼンテーションシステム用ポイ
ンティング装置において、前記説明者の眼球の近傍に設
置し前記説明者の注視点を検出する左視線追従センサと
右視線追従センサとを設け、前記処理装置内に前記左視
線追従センサと右視線追従センサの出力を受けて演算し
前記説明者が注視しているプレゼンテーション画面上の
個所に前記カーソルを移動させるべくデータを出力する
注視点計算処理装置を含み、前記説明者の位置を検出す
る位置センサを設け、前記処理装置内に前記位置センサ
の出力を受けて演算しプレゼンテーション画面上に表示
するカーソルの位置を補正させるべくデータを出力する
説明者位置計算処理装置を含み、前記コントローラ内に
カーソルの位置を制御するモードとして各種センサの出
力により制御する通常モードと前記説明者の注視点と前
記カーソルの位置とを一致させる補正モードとのいずれ
か一方を選択するよう制御信号を出力するモード切替ボ
タンと、前記モード切替ボタンが補正モードであるとき
前記説明者の注視点に前記カーソルを移動させる信号を
出力するカーソル移動装置と、前記モード切替ボタンが
補正モードであるときは前記カーソル移動装置で移動さ
せたカーソルの位置を確定し以後の制御を前記通常モー
ドで行うよう制御信号を出力し前記モード切替ボタンが
通常モードであるときは前記説明者の注視点にカーソル
位置を固定するよう制御信号を出力するカーソル制御ボ
タンとを備え、前記処理装置内に前記コントローラの出
力する制御信号を受けモードを切替えるべくデータを出
力するモード切替信号処理装置と、前記カーソルを移動
させるべくデータを出力するカーソル移動信号処理装置
と、前記カーソル制御ボタンの出力する制御信号を検出
するカーソル制御信号検出装置とを含む構成である。
A pointing device for a large screen presentation system according to the present invention receives position information of a cursor output from a controller controlled by a presenter in his / her palm and explains a position on a screen of a screen display device for presentation. in the pointing device for a large-screen presentation system having a processor for controlling the position of the cursor to instruct the left visual line tracking sensor placed near the eye of the presenter detecting the gazing point of the presenter
It provided the right visual line tracking sensors, the left eye in the processing device
Look including the gazing point calculation processing apparatus the presenter is computed by receiving the output of the line follow-up sensor and the right line-of-sight tracking sensor outputs data to move the cursor position on the presentation screen gazing, the description The position of the person
And a position sensor provided in the processing device.
Calculation and display on the presentation screen
Output data to correct the position of the cursor
Including the presenter position calculation processing device, and in the controller
As a mode to control the position of the cursor, the output of various sensors
Normal mode controlled by force
Correction mode to match the cursor position
Mode switching button that outputs a control signal to select
Button and the mode switching button is in the correction mode
A signal to move the cursor to the point of interest of the explainer
The cursor moving device to output and the mode switching button
When in the correction mode, the cursor is moved by the cursor movement device.
The cursor position is determined and the subsequent control is performed in the normal mode.
Output a control signal so that
When in normal mode, move the cursor to the point of interest
Cursor control button that outputs a control signal to fix the position
And an output of the controller in the processing device.
Output data to switch the mode in response to the input control signal.
Mode switch signal processing device to push and move the cursor
Cursor movement signal processing device that outputs data to cause
And the control signal output from the cursor control button is detected.
And a cursor control signal detecting device .

【0009】本発明の大画面プレゼンテーションシステ
ム用ポインティング装置は、説明者が掌中で制御するコ
ントローラの出力するカーソルの位置情報を受けプレゼ
ンテーション用の画面表示装置の画面上で説明個所を指
示するカーソルの位置を制御する処理装置を有する大画
面プレゼンテーションシステム用ポインティング装置に
おいて、前記説明者の眼球の近傍に設置し前記説明者の
注視点を検出する左視線追従センサと右視線追従センサ
を設け、前記説明者の頭部の近傍に設置し首の左右の
振り角度を検出するジャイロセンサ(Y)と頭部の左右
方向の傾きを検出するジャイロセンサ(R)と頭部の上
下の振り角度を検出するジャイロセンサ(P)とを設
、前記処理装置内に前記左視線追従センサと右視線追
従センサ並びに前記ジャイロセンサ(Y)と前記ジャイ
ロセンサ(R)と前記ジャイロセンサ(P)の出力を受
けて演算し前記説明者が注視しているプレゼンテーショ
ン画面上の個所に前記カーソルを移動させるべくデータ
を出力する注視点計算処理装置および頭部情報計算処理
装置を含み、前記説明者の位置を検出する位置センサを
設け、前記処理装置内に前記位置センサの出力を受けて
演算しプレゼンテーション画面上に表示するカーソルの
位置を補正させるべくデータを出力する説明者位置計算
処理装置を含み、前記コントローラ内にカーソルの位置
を制御するモードとして各種センサの出力により制御す
る通常モードと前記説明者の注視点と前記カーソルの位
置とを一致させる補正モードとのいずれか一方を選択す
るよう制御信号を出力するモード切替ボタンと、前記モ
ード切替ボタンが補正モードであるとき前記説明者の注
視点に前記カーソルを移動させる信号を出力するカーソ
ル移動装置と、前記モード切替ボタンが補正モードであ
るときは前記カーソル移動装置で移動させたカーソルの
位置を確定し以後の制御を前記通常モードで行うよう制
御信号を出力し前記モード切替ボタンが通常モードであ
るときは前記説明者の注視点にカーソル位置を固定する
よう制御信号を出力するカーソル制御ボタンとを備え、
前記処理装置内に前記コントローラの出力する制御信号
を受けモードを切替えるべくデータを出力するモード切
替信号処理装置と、前記カーソルを移動させるべくデー
タを出力するカーソル移動信号処理装置と、前記カーソ
ル制御ボタンの出力する制御信号を検出するカーソル制
御信号検出装置とを含む構成である。
A pointing device for a large-screen presentation system according to the present invention receives a cursor position information output by a controller controlled by a presenter in his / her palm, and designates a cursor position for designating a description point on a screen of a presentation screen display device. A pointing device for a large-screen presentation system having a processing device for controlling the position of the presenter, wherein a left-eye tracking sensor and a right-eye tracking sensor that are installed near the presenter's eyeball and detect the gazing point of the presenter
Preparative provided, the right and left neck was placed in the vicinity of the head of the presenter
Gyro sensor (Y) for detecting swing angle and left and right of head
Gyro sensor (R) that detects the inclination of the direction and on the head
A gyro sensor (P) that detects the lower swing angle is installed.
The left eye tracking sensor and the right eye tracking are installed in the processing device.
Slave sensor and the gyro sensor (Y) and the gyro
A gaze point calculation processing device and a head for calculating and receiving outputs of the gyro sensor (R) and the gyro sensor (P) and outputting data to move the cursor to a location on the presentation screen where the presenter is gazing see contains information computing device, a position sensor for detecting the position of the presenter
Receiving the output of the position sensor in the processing device
Cursor to calculate and display on the presentation screen
Explainer position calculation that outputs data to correct position
A processing device, including a cursor position in the controller
Control mode based on the output of various sensors.
Normal mode, the point of interest of the presenter, and the position of the cursor.
Select one of the correction modes that match the
Mode switching button that outputs a control signal to
When the mode switching button is in the correction mode,
A cursor for outputting a signal for moving the cursor to a viewpoint
And the mode switching button is in the correction mode.
The cursor moved by the cursor moving device
The position is determined and the subsequent control is performed in the normal mode.
Output signal and the mode switching button is in the normal mode.
The cursor position at the point of interest of the explainer
And a cursor control button for outputting a control signal so that
A control signal output from the controller in the processing device
Mode to output data to switch the mode
Signal processing device and data to move the cursor.
A cursor movement signal processing device for outputting a cursor;
Cursor control to detect the control signal output from the control button
And a control signal detection device .

【0010】[0010]

【0011】[0011]

【0012】[0012]

【0013】本発明の大画面プレゼンテーションシステ
ム用ポインティング装置は、視線追従センサおよびジャ
イロセンサの少なくともいずれか一方を説明者の頭部に
かぶせる帽子型構造物に格納してもよい。
In the pointing device for a large-screen presentation system according to the present invention, at least one of the line-of-sight tracking sensor and the gyro sensor may be stored in a cap-type structure that covers the head of the presenter.

【0014】本発明の大画面プレゼンテーションシステ
ム用ポインティング装置は、視線追従センサおよびジャ
イロセンサの少なくともいずれか一方を説明者の顔部前
面に掛ける眼鏡型構造物に格納してもよい。
In the pointing device for a large-screen presentation system according to the present invention, at least one of the line-of-sight tracking sensor and the gyro sensor may be stored in a spectacle-type structure that hangs on the front face of the presenter's face.

【0015】本発明の大画面プレゼンテーションシステ
ム用ポインティング装置は、位置センサを画面表示装置
の画面の両側に設置してもよい。
In the pointing device for a large screen presentation system according to the present invention, the position sensors may be installed on both sides of the screen of the screen display device.

【0016】[作用]本発明の大画面プレゼンテーショ
ンシステム用ポインティング装置は、説明者が注視した
ディスプレイ7上の点にカーソル8が表示される。より
具体的には、説明者の注視点を検出する視線追従センサ
2と、説明者の立ち位置を検出する赤外線センサ3,4
と、カーソル位置を計算する処理装置5とを含んでい
る。
[Operation] In the pointing device for a large-screen presentation system according to the present invention, a cursor 8 is displayed at a point on the display 7 where the presenter gazes. More specifically, a line-of-sight tracking sensor 2 for detecting the point of regard of the presenter, and infrared sensors 3 and 4 for detecting the standing position of the presenter
And a processing device 5 for calculating a cursor position.

【0017】また、説明者が任意の点でカーソル8を停
止させることができるコントローラ1を設けてある。
Further, there is provided a controller 1 which allows the presenter to stop the cursor 8 at an arbitrary point.

【0018】説明者が指示すべき点へのカーソル8の移
動は、説明者の注視点を検出することにより行ってい
る。このため、説明者は、指示すべき点を注視するだけ
でよく、手によって指示する必要がない。また、聴取者
が見る方向によって説明者が指示している点を見誤るこ
ともない。さらに、本発明の大画面プレゼンテーション
システム用ポインティング装置は、説明者の位置、首の
動きを動的に監視している。そのため説明者がどのよう
に動いても、カーソル8が指示する点と注視点とがずれ
ることがなく、説明者の動きには影響されない。また、
コントローラ1からの信号により、カーソル8を一時的
に制止させておくことが可能である。そのため、カーソ
ル8を一時的に制止させたいときに、説明者は、指示す
べき点を常に注視している必要はなく、カーソル8の動
作に対して、説明者自身の動作についての制限は受けな
い。
The movement of the cursor 8 to the point to be designated by the presenter is performed by detecting the point of interest of the presenter. For this reason, the explainer need only watch the point to be instructed, and does not need to manually instruct. Also, there is no possibility that the point indicated by the explainer is erroneously determined depending on the direction in which the listener views. Further, the pointing device for the large-screen presentation system of the present invention dynamically monitors the position of the presenter and the movement of the neck. Therefore, no matter how the presenter moves, the point indicated by the cursor 8 does not deviate from the gazing point, and is not affected by the presenter's movement. Also,
The cursor 8 can be temporarily stopped by a signal from the controller 1. Therefore, when the cursor 8 is to be temporarily stopped, the presenter does not need to keep an eye on the point to be instructed at all times. Absent.

【0019】[0019]

【発明の実施の形態】次に、本発明の実施の形態につい
て図面を参照して説明する。
Next, embodiments of the present invention will be described with reference to the drawings.

【0020】図1は本発明の第1の実施の形態を示すブ
ロック図である。
FIG. 1 is a block diagram showing a first embodiment of the present invention.

【0021】本発明の大画面プレゼンテーションシステ
ム用ポインティング装置10は、画面表示装置6からの
制御を受け、プレゼンテーションする画像を表示するデ
ィスプレイ7と、ディスプレイ7上で指示すべき点を表
示するカーソル8と、説明者が注視したディスプレイ7
上の点にカーソル8を表示するため、説明者の注視点を
検出する視線追従センサ2と、説明者の立ち位置を検出
する右赤外線センサ3と、左赤外線センサ4と、カーソ
ル位置を計算する処理装置5と、説明者がカーソル8の
動作モードの切替え、あるいは移動を制御するコントロ
ーラ1とからなる。
The pointing device 10 for a large-screen presentation system according to the present invention is controlled by a screen display device 6 and has a display 7 for displaying an image to be presented and a cursor 8 for displaying a point to be pointed on the display 7. , The display 7 watched by the presenter
In order to display the cursor 8 at the upper point, the line-of-sight tracking sensor 2 for detecting the gaze point of the presenter, the right infrared sensor 3 for detecting the standing position of the presenter, the left infrared sensor 4, and the cursor position are calculated. It comprises a processing device 5 and a controller 1 for controlling the operation mode of the cursor 8 by the presenter or controlling the movement.

【0022】コントローラ1は、カーソル8の位置を制
御するモードとして各種センサの出力により制御する通
常モードと、説明者の注視点とカーソルの位置とを一致
させる補正モードとのいずれか一方を選択するよう制御
信号を出力するモード切替ボタン11と、モード切替ボ
タン11が補正モードであるとき、カーソル8を移動さ
せる信号を出力するカーソル移動装置12と、カーソル
移動装置12で移動させたカーソル8の位置を確定し以
後の制御を通常モードで行うよう制御信号を出力するカ
ーソル制御ボタン13と、処理装置5に制御信号を転送
するインタフェース14とからなる。さらに詳細に説明
すると、モード切替ボタン11はカーソル8を説明者の
視線の通りに動作させる通常モードと、カーソルの基準
位置を補正する補正モードとを切替えるためのモード切
替信号を出力する。カーソル移動装置12はカーソル8
の基準位置を補正する時に、カーソル8を移動させるた
めのカーソル移動信号を出力する。カーソル制御ボタン
13は通常モード時、カーソルを固定させる信号と視線
に追従させる信号、すなわちカーソル制御信号を出力す
る。インタフェース14はモード切替信号とカーソル移
動信号とカーソル制御信号を処理装置5に転送する。こ
こで、コントローラ1と処理装置5との間のデータの転
送方式としては赤外線や電波を用いた無線方式と、コー
ドで接続する有線方式とが考えられ、本発明においては
どちらの方式でも採用可能であるが、本実施の形態では
無線方式を用いるものとして説明する。
The controller 1 selects one of a normal mode in which the position of the cursor 8 is controlled by the output of various sensors and a correction mode in which the point of interest of the presenter matches the cursor position. Mode switching button 11 for outputting a control signal, a cursor moving device 12 for outputting a signal for moving the cursor 8 when the mode switching button 11 is in the correction mode, and a position of the cursor 8 moved by the cursor moving device 12 The cursor control button 13 outputs a control signal so that the control is performed and the subsequent control is performed in the normal mode, and the interface 14 transfers the control signal to the processing device 5. More specifically, the mode switching button 11 outputs a mode switching signal for switching between a normal mode in which the cursor 8 operates according to the line of sight of the presenter and a correction mode in which the reference position of the cursor is corrected. The cursor moving device 12 is a cursor 8
When the reference position is corrected, a cursor movement signal for moving the cursor 8 is output. In the normal mode, the cursor control button 13 outputs a signal for fixing the cursor and a signal for following the line of sight, that is, a cursor control signal. The interface 14 transfers the mode switching signal, the cursor movement signal, and the cursor control signal to the processing device 5. Here, a data transfer method between the controller 1 and the processing device 5 may be a wireless method using infrared rays or radio waves, or a wired method using a cord. In the present invention, either method can be adopted. However, in the present embodiment, a description will be given assuming that a wireless system is used.

【0023】視線追従センサ2は、説明者の頭部にセッ
ト可能な形態とし、説明者の右目の視線方向を追う右視
線追従センサ21と、左目の視線方向を追う左視線追従
センサ22と、右視線追従センサ21と左視線追従セン
サ22から得られる視線追従信号を処理装置5に転送す
るためのインタフェース23とからなる。視線追従セン
サ2と処理装置5との間のデータの転送方式としては、
コントローラ1と同様に2方式が可能であるが、本実施
の形態では無線方式を用いるものとして説明する。
The line-of-sight tracking sensor 2 has a form that can be set on the head of the presenter, and includes a right-line tracking sensor 21 that tracks the line-of-sight direction of the right eye of the presenter, a left-line tracking sensor 22 that tracks the line-of-sight direction of the left eye, The interface 23 is configured to transfer a line-of-sight tracking signal obtained from the right-line tracking sensor 21 and the left-line tracking sensor 22 to the processing device 5. As a data transfer method between the eye tracking sensor 2 and the processing device 5,
Although two systems are possible as in the case of the controller 1, the present embodiment will be described on the assumption that a wireless system is used.

【0024】右赤外線センサ3は、ディスプレイ7の右
側に設置し、右赤外線センサ3から説明者までの距離を
検出する。同じく左赤外線センサ4は、ディスプレイ7
の左側に設置され左赤外線センサ4から説明者までの距
離を検出する。右赤外線センサ3および左赤外線センサ
4で計測された説明者の位置情報は、処理装置5に転送
される。右赤外線センサ3と処理装置5、および左赤外
線センサ4と処理装置5との間のデータの転送方式とし
ては、コントローラ1と同様に2方式が可能であるが、
本実施の形態では有線方式を用いるものとして説明す
る。
The right infrared sensor 3 is installed on the right side of the display 7 and detects the distance from the right infrared sensor 3 to the presenter. Similarly, the left infrared sensor 4 includes a display 7
, And detects the distance from the left infrared sensor 4 to the presenter. The position information of the explainer measured by the right infrared sensor 3 and the left infrared sensor 4 is transferred to the processing device 5. As the data transfer method between the right infrared sensor 3 and the processing device 5 and between the left infrared sensor 4 and the processing device 5, two methods are possible as in the case of the controller 1.
In this embodiment, a description will be given assuming that a wired system is used.

【0025】処理装置5は、コントローラ1からの信号
を受け取るインタフェース51と、モード切替信号処理
装置52と、カーソル移動信号処理装置53と、カーソ
ル制御信号処理装置54と、視線追従センサ2からの信
号を受け取るインタフェース55と、注視点計算処理装
置56と、説明者位置計算処理装置57と、カーソル位
置計算処理装置58と、カーソル表示制御処理装置59
と、画面合成処理装置60と、補正情報更新制御装置6
1と、補正情報記憶装置62と、記憶装置63とからな
る。
The processing device 5 includes an interface 51 for receiving a signal from the controller 1, a mode switching signal processing device 52, a cursor movement signal processing device 53, a cursor control signal processing device 54, and a signal from the eye tracking sensor 2. 55, a point of interest calculation processing device 56, a presenter position calculation processing device 57, a cursor position calculation processing device 58, and a cursor display control processing device 59
, Screen synthesis processing device 60, correction information update control device 6
1, a correction information storage device 62, and a storage device 63.

【0026】インタフェース51は、モード切替情報を
受け取った場合、モード切替信号処理装置52に信号を
送出し、カーソル移動信号を受け取った場合、カーソル
移動信号処理装置53に信号を送出する。インタフェー
ス51がカーソル制御信号を受け取った場合は、カーソ
ル制御信号処理装置54に信号を送出する。
The interface 51 sends a signal to the mode switching signal processing device 52 when receiving the mode switching information, and sends a signal to the cursor movement signal processing device 53 when receiving the cursor movement signal. When the interface 51 receives the cursor control signal, it sends a signal to the cursor control signal processing device 54.

【0027】モード切替信号処理装置52は、信号を受
け取ると、通常モードと補正モードとを相互に切替え、
現在のモードを補正情報更新制御装置61とカーソル位
置計算処理装置58ににそれぞれ伝える。視線追従セン
サ2からのデータを受取るためのインタフェース55
は、信号を受取ると、注視点計算処理装置56に信号を
送る。注視点計算処理装置56は、視線追従センサ2か
ら送られてくる信号に基づき、説明者の注視点位置を計
算する。さらに計算したデータをカーソル位置計算処理
装置58に転送する。
Upon receiving the signal, the mode switching signal processing device 52 switches between the normal mode and the correction mode,
The current mode is transmitted to the correction information update control device 61 and the cursor position calculation processing device 58, respectively. Interface 55 for receiving data from eye tracking sensor 2
Sends a signal to the point-of-regard calculation processor 56 upon receiving the signal. The gazing point calculation processing device 56 calculates the gazing point position of the presenter based on the signal transmitted from the eye tracking sensor 2. Further, the calculated data is transferred to the cursor position calculation processing device 58.

【0028】説明者位置計算処理装置57は、右赤外線
センサ3と左赤外線センサ4とからの信号を受けて、説
明者の立ち位置を計算する。そして計算したデータを、
カーソル位置計算処理装置58に転送する。
The explainer position calculation processing device 57 receives signals from the right infrared sensor 3 and the left infrared sensor 4 and calculates the stander's standing position. And the calculated data,
The data is transferred to the cursor position calculation processing device 58.

【0029】カーソル位置計算処理装置58は、通常モ
ード時は補正情報記憶装置62に記憶された注視点補正
情報、説明者の立ち位置補正情報、および注視点計算処
理装置56から転送される説明者の注視点情報、説明者
計算処理装置57から転送される説明者の立ち位置情報
から、画面上に表示すべきカーソル8の絶対位置を計算
し、計算した結果をカーソル表示制御処理装置59に転
送する。
In the normal mode, the cursor position calculation processing device 58 stores the fixation point correction information stored in the correction information storage device 62, the position correction information of the explainer, and the explainer transferred from the fixation point calculation processing device 56. The absolute position of the cursor 8 to be displayed on the screen is calculated from the gazing point information of the presenter and the standing position information of the presenter transferred from the presenter calculation processing device 57, and the calculated result is transferred to the cursor display control processing device 59. I do.

【0030】カーソル位置計算処理装置58は、通常モ
ード時にカーソル制御信号処理装置54からの信号を受
取ると、カーソル8の表示位置は計算するが、計算結果
は転送しない。カーソル位置計算処理装置58はカーソ
ル制御信号処理装置54からの信号を受け取った時点の
カーソル位置情報を、カーソル表示制御処理装置59に
転送する。再びカーソル制御信号処理装置54から信号
を受け取るまではこの状態を保持する。またカーソル位
置計算処理装置58は、補正モード時はカーソル移動信
号処理装置53からのカーソルの移動信号よりカーソル
8の絶対位置を計算し、その計算結果をカーソル表示制
御処理装置59へ転送する。このとき、注視点計算処理
装置56、説明者位置計算処理装置57からの信号か
ら、ディスプレイ7の特定の点を原点とした座標系に換
算した座標の位置情報と、カーソル表示制御処理装置5
9に転送したカーソル位置情報を、それぞれ補正情報更
新制御装置51に転送する。
When receiving a signal from the cursor control signal processing device 54 in the normal mode, the cursor position calculation processing device 58 calculates the display position of the cursor 8, but does not transfer the calculation result. The cursor position calculation processing device 58 transfers the cursor position information at the time of receiving the signal from the cursor control signal processing device 54 to the cursor display control processing device 59. This state is maintained until a signal is received from the cursor control signal processing device 54 again. In the correction mode, the cursor position calculation processing device 58 calculates the absolute position of the cursor 8 based on the cursor movement signal from the cursor movement signal processing device 53 and transfers the calculation result to the cursor display control processing device 59. At this time, from the signals from the gazing point calculation processing device 56 and the presenter position calculation processing device 57, the position information of the coordinates converted into a coordinate system having the origin at a specific point on the display 7 and the cursor display control processing device 5
9 is transferred to the correction information update control device 51.

【0031】補正情報更新制御装置51は、補正モード
から通常モードに切替わるときのみ、カーソル位置計算
処理装置58から転送されてきた注視点情報と、説明者
の立ち位置情報と、計算したカーソル位置とを補正情報
として、補正情報記憶装置62に記憶する。カーソル表
示制御処理装置59はカーソル位置計算処理装置58か
ら送られてきたカーソル位置情報から、カーソル8が表
示される画面を作成する。カーソル表示制御処理装置5
9は作成した画面情報を画面合成処理装置60に転送す
る。画面合成処理装置60はカーソル表示制御処理装置
59からの画面情報と、記憶装置63に記憶されている
プレゼンテーション画面情報とを合成し、合成した画面
情報を画面表示装置6に送出する。
The correction information update control device 51 only outputs the gazing point information transferred from the cursor position calculation processing device 58, the presenter's standing position information, and the calculated cursor position only when switching from the correction mode to the normal mode. Are stored in the correction information storage device 62 as correction information. The cursor display control processing device 59 creates a screen on which the cursor 8 is displayed from the cursor position information sent from the cursor position calculation processing device 58. Cursor display control processing device 5
9 transfers the created screen information to the screen synthesis processing device 60. The screen composition processing device 60 combines the screen information from the cursor display control processing device 59 with the presentation screen information stored in the storage device 63, and sends the combined screen information to the screen display device 6.

【0032】画面表示装置6は、処理装置5から転送さ
れた画面情報を、ディスプレイ7に映し出す。ここで、
画面表示装置6とディスプレイ7とは、両方が一体にな
っているものと分離しているものがあり、本実施の形態
ではどちらの方式でも採用可能である。また画面表示装
置6とディスプレイ7の画面表示方式として、ブラウン
管などによる自発光方式と、プロジェクタのような投写
型があるが、これも本実施の形態ではどちらでもよい。
本実施の形態では画面表示装置6と、ディスプレイ7と
が分離していて、かつ投写型のものとして説明する。
The screen display device 6 displays the screen information transferred from the processing device 5 on the display 7. here,
The screen display device 6 and the display 7 may be integrated with each other or may be separated from each other. In this embodiment, either type can be adopted. As a screen display method of the screen display device 6 and the display 7, there are a self-luminous method using a cathode ray tube or the like, and a projection type such as a projector.
In the present embodiment, the screen display device 6 and the display 7 are described as being separated from each other and of a projection type.

【0033】図2はコントローラの様々な実施の形態を
説明する説明図である。
FIG. 2 is an explanatory diagram for explaining various embodiments of the controller.

【0034】コントローラ1の形状としては、図2分図
(A)に示すような無線式、図2分図(B)に示す有線
式のものが可能である。また、コントローラ1のカーソ
ル移動装置12の方式にも、図2分図(A)および図2
分図(B)に示すスティックを倒した方向にカーソルが
移動するようなスティックタイプ、図2分図(C)に示
すボールを指で操作することによってカーソルを移動す
るトラックボールタイプ、図2分図(D)に示す指が触
れた点を感知してカーソルを移動する静電感知パッドタ
イプ、図2分図(E)に示す4方向にカーソルを動かす
ためのボタンが付いたボタンタイプなどが可能である。
本実施の形態では図2分図(A)に示す無線式のコント
ローラを用いるものとして説明する。
As the shape of the controller 1, a wireless type as shown in FIG. 2A and a wired type as shown in FIG. 2B are possible. In addition, the method of the cursor moving device 12 of the controller 1 is shown in FIG.
A stick type in which the cursor moves in a direction in which the stick is tilted as shown in FIG. 2B, a trackball type in which the cursor is moved by operating a ball with a finger as shown in FIG. An electrostatic sensing pad type that detects a point touched by a finger as shown in FIG. (D) and moves a cursor, and a button type with buttons for moving a cursor in four directions as shown in FIG. It is possible.
In this embodiment, a description will be given assuming that a wireless controller shown in FIG. 2A is used.

【0035】次に本実施の第1の形態の動作について、
図1を参照して説明する。
Next, the operation of the first embodiment will be described.
This will be described with reference to FIG.

【0036】プレゼンテーションシステムに電源が投入
された初期状態では、カーソル8の動作は通常モードに
なっている。通常モードは説明者が注視した点にカーソ
ル8が移動するモードである。説明者は、最初にコント
ローラ1を持ち、視線追従センサ2を説明者自身の頭部
にセットする。まず説明者はモード切替ボタン11を押
下して補正モードに切替える。補正モードとはディスプ
レイ7に表示されるカーソル8の位置と説明者の注視点
との位置関係を補正するモードである。補正モードに切
替わるとカーソル8は、カーソル位置計算処理装置58
によって強制的に画面の中央に表示されるように表示位
置が変更される。
In the initial state when the power is supplied to the presentation system, the operation of the cursor 8 is in the normal mode. The normal mode is a mode in which the cursor 8 moves to a point watched by the explainer. The presenter first has the controller 1 and sets the line-of-sight tracking sensor 2 on his own head. First, the explainer presses the mode switching button 11 to switch to the correction mode. The correction mode is a mode for correcting the positional relationship between the position of the cursor 8 displayed on the display 7 and the gaze point of the presenter. When the mode is switched to the correction mode, the cursor 8 is moved to the cursor position calculation processing device 58.
The display position is forcibly changed to be displayed in the center of the screen.

【0037】つぎに説明者は、右赤外線センサ3、左赤
外線センサ4が検出可能な範囲内で任意の立ち位置を決
める。立ち位置が決まったら画面上のカーソル8と説明
者が注視している点とを一致させる。補正モードにある
ときには、カーソル位置計算処理装置58がカーソル移
動信号処理装置53からの信号のみを処理するため、カ
ーソル8はコントローラ1のカーソル移動装置12によ
って任意の場所に移動させることができる。カーソル位
置を補正するためにはディスプレイ7の中心部に表示さ
れるカーソル8に自分の視線を向けるか、または、コン
トローラ1のカーソル移動装置12によって、説明者自
身が注視している点にカーソル8を合わせることによっ
て行う。カーソル位置が合ったと説明者が判断した時点
で、説明者はモード切替ボタン11を再び押下する。こ
のときの説明者の立ち位置、視線位置情報が補正情報と
して補正情報記憶装置62に記憶される。記憶された後
システムは通常モードに移行する。
Next, the presenter determines an arbitrary standing position within a range where the right infrared sensor 3 and the left infrared sensor 4 can detect. When the standing position is determined, the cursor 8 on the screen is matched with the point that the presenter is watching. When in the correction mode, the cursor position calculation processing device 58 processes only the signal from the cursor movement signal processing device 53, so that the cursor 8 can be moved to an arbitrary position by the cursor movement device 12 of the controller 1. In order to correct the cursor position, one's gaze is pointed at the cursor 8 displayed at the center of the display 7 or the cursor moving device 12 of the controller 1 moves the cursor 8 to the point where the presenter is gazing. It is done by matching. When the explainer determines that the cursor position is correct, the explainer presses the mode switching button 11 again. At this time, the position of the presenter and the line-of-sight position information are stored in the correction information storage device 62 as correction information. After being stored, the system transitions to the normal mode.

【0038】通常モードでは説明者の注視した点に従い
カーソル8が移動する。カーソル8を一点に固定するた
めには、カーソル8を固定したい点を注視して移動した
後、カーソル制御ボタン13を押下する。カーソル制御
ボタン13が押されると、カーソル位置計算処理装置5
8は、カーソル制御ボタン13が押下された時点でのカ
ーソル位置を保持して、カーソル表示制御処理装置59
にカーソル位置情報を転送するため、画面上のカーソル
8は、カーソル制御ボタン13が押された時点の位置で
固定されて表示される。ただしカーソル8が固定されて
いるときもカーソル位置計算処理装置58では説明者の
注視点位置、および立ち位置から、表示すべきカーソル
8のディスプレイ7上の表示位置を常に計算している。
従って、再びカーソル制御ボタン13を押してカーソル
8の動きを解除すると、カーソル8は、瞬時にして説明
者の注視している点へと移動する。
In the normal mode, the cursor 8 moves according to the point watched by the presenter. In order to fix the cursor 8 at one point, the cursor 8 is moved while paying attention to the point to be fixed, and then the cursor control button 13 is pressed. When the cursor control button 13 is pressed, the cursor position calculation processing device 5
Reference numeral 8 denotes a cursor display control processing device which holds the cursor position at the time when the cursor control button 13 is pressed.
The cursor 8 on the screen is fixedly displayed at the position when the cursor control button 13 is pressed to transfer the cursor position information. However, even when the cursor 8 is fixed, the cursor position calculation processing device 58 always calculates the display position of the cursor 8 to be displayed on the display 7 from the gazing point position of the presenter and the standing position.
Accordingly, when the cursor control button 13 is pressed again to release the movement of the cursor 8, the cursor 8 instantaneously moves to the point where the presenter is watching.

【0039】カーソル位置計算処理装置58の計算した
カーソルの表示位置が、ディスプレイ7の表示範囲外だ
った場合や、右赤外線センサ3や左赤外線センサ4が説
明者の位置を計測できなかった場合は、カーソル表示制
御処理装置59は、カーソル画面を作成しない。すなわ
ち前述のような場合には、カーソル8はディスプレイ7
には表示されない。
When the display position of the cursor calculated by the cursor position calculation processing device 58 is out of the display range of the display 7, or when the right infrared sensor 3 or the left infrared sensor 4 cannot measure the position of the presenter, The cursor display control processor 59 does not create a cursor screen. That is, in the case described above, the cursor 8 is displayed on the display 7.
Is not displayed.

【0040】図3は本発明の第2の実施の形態を示すブ
ロック図である。
FIG. 3 is a block diagram showing a second embodiment of the present invention.

【0041】本発明の第2の実施の形態は、第1の実施
の形態をさらに発展させたもので、第1の実施の形態に
加え、視線追従センサ28が首の左右の振り角度を検出
するジャイロセンサ(Y)24と、頭部の左右方向の傾
きを検出するジャイロセンサ(R)25と、頭部の上下
の振り角度を検出するジャイロセンサ(P)26を有す
る点、また処理装置66が、各ジャイロセンサとのイン
タフェース64と、頭部の位置姿勢状態を計算する頭部
状態計算処理装置65とを有する点で異なる。ここで、
ジャイロセンサ(Y)24は視線追従センサ28の頭頂
部に、ジャイロセンサ(R)25は視線追従センサ28
の後方に、ジャイロセンサ(P)26は視線追従センサ
28の左右どちらかの側方にそれぞれ設置することで、
説明者の頭部の向きや傾きをすべて検出することが可能
である。ジャイロセンサ(Y)24は説明者が左右に首
を振るとその振り角度を検出して、インタフェース27
に信号を送る。ジャイロセンサ(R)25は説明者が左
右に首を傾けた場合、その傾き角度を検出して、インタ
フェース27に信号を送る。ジャイロセンサ(P)26
は説明者の顔の上下の傾きを検出して、インタフェース
27に信号を送る。インタフェース27は、各ジャイロ
センサから信号を受け取ると、送られてきた情報を処理
装置66に送出する。処理装置66のインタフェース5
4は、視線追従センサ28からの信号を受け取ると、頭
部状態計算処理装置65へセンサの情報を転送する。頭
部状態計算処理装置65はジャイロセンサ(Y)24、
ジャイロセンサ(R)25、ジャイロセンサ(P)26
からの情報を元に説明者の頭部の向きや傾きを計算し、
計算結果をカーソル位置計算処理装置58に転送する。
The second embodiment of the present invention is a further development of the first embodiment. In addition to the first embodiment, a line-of-sight sensor 28 detects the right and left swing angles of the neck. A gyro sensor (Y) 24, a gyro sensor (R) 25 for detecting the inclination of the head in the left-right direction, and a gyro sensor (P) 26 for detecting the vertical swing angle of the head. 66 in that it has an interface 64 with each gyro sensor and a head state calculation processing device 65 that calculates the position and orientation of the head. here,
The gyro sensor (Y) 24 is located at the top of the gaze tracking sensor 28, and the gyro sensor (R) 25 is positioned at the gaze tracking sensor
The gyro sensor (P) 26 is installed on the left or right side of the eye tracking sensor 28, respectively,
It is possible to detect all directions and inclinations of the head of the presenter. The gyro sensor (Y) 24 detects the swing angle when the presenter shakes his or her head from side to side, and
Send a signal to The gyro sensor (R) 25 detects the tilt angle when the presenter tilts the head to the left and right, and sends a signal to the interface 27. Gyro sensor (P) 26
Detects the vertical inclination of the presenter's face and sends a signal to the interface 27. When receiving a signal from each gyro sensor, the interface 27 sends the sent information to the processing device 66. Interface 5 of processing device 66
4 receives the signal from the eye tracking sensor 28 and transfers the information of the sensor to the head state calculation processing device 65. The head state calculation processing device 65 includes a gyro sensor (Y) 24,
Gyro sensor (R) 25, Gyro sensor (P) 26
Calculates the orientation and tilt of the explainer's head based on information from
The calculation result is transferred to the cursor position calculation processing device 58.

【0042】次に本実施の第2の形態の動作について、
図3を参照して説明する。
Next, the operation of the second embodiment will be described.
This will be described with reference to FIG.

【0043】ジャイロセンサ(Y)24と、ジャイロセ
ンサ(R)25と、ジャイロセンサ(P)26と、イン
タフェース27と、インタフェース64および頭部状態
計算処理装置65以外は第1の実施の形態と同一なた
め、説明は省略する。
A gyro sensor (Y) 24, a gyro sensor (R) 25, a gyro sensor (P) 26, an interface 27, an interface 64, and a head state calculation processing device 65 except for the first embodiment Since they are the same, description is omitted.

【0044】第1の実施の形態では、説明者の首の動き
に関する補正がまったくなかかったため、説明者は補正
モードのときに設定した状態から首を大きく動かすこと
はできなかった。この説明者の首の動きによる影響は、
ディスプレイ7の画面サイズが小さくなるほど顕著に現
れる。例えば、対角200cm、すなわち縦120cm×横
160cmのスクリーンで、底辺が床から高さ90cmのと
ころに設置され、身長180cmの説明者がスクリーンか
ら2メートル離れて説明するとした場合、概算で角度に
して5度上方向を向いただけで、画面上のカーソル8と
注視点のずれは15cm程度、すなわち縦方向だけで10
%以上の誤差が発生する。従ってこのような説明者の首
の動きを補正しなければ、カーソル8と説明者の注視点
の位置をしばしば補正しなければならず、実用上好まし
くない。
In the first embodiment, since the correction of the movement of the presenter's neck was not applied at all, the presenter could not move his neck greatly from the state set in the correction mode. The effect of this explainer's neck movement is
It becomes more noticeable as the screen size of the display 7 decreases. For example, on a screen 200 cm diagonal, that is, a screen 120 cm long x 160 cm wide, with the bottom installed at a height of 90 cm above the floor and a speaker with a height of 180 cm to explain at a distance of 2 meters from the screen, the angle is roughly calculated. Only 5 degrees upward, the displacement between the cursor 8 on the screen and the gazing point is about 15 cm, that is, 10 points only in the vertical direction.
% Or more error occurs. Therefore, if the movement of the presenter's neck is not corrected, the position of the cursor 8 and the gazing point of the presenter must be frequently corrected, which is not practically preferable.

【0045】本実施の形態では、補正モードの時に視線
追従センサ28に設置されたジャイロセンサ(Y)2
4、ジャイロセンサ(R)25、ジャイロセンサ(P)
26の情報をインタフェース27、インタフェース64
を介して、処理装置66内に取り込み、頭部状態計算処
理装置65で頭部の向きや傾きの初期状態を、注視点の
位置、説明者立ち位置情報とともに補正情報記憶装置6
2に記憶しておく。通常モードにすると説明者の頭部の
向き・傾きの情報に関して情報を採取し、説明者の立ち
位置、注視点の位置、説明者の頭部の向き・傾きの情
報、補正情報を元に、カーソル8の位置をカーソル位置
計算処理装置58で計算する。その結果、説明者の首の
動きに対する補正を行うことなく、説明者が注視してい
る点にカーソル8を追従させることが可能となる。
In the present embodiment, the gyro sensor (Y) 2 installed in the eye tracking sensor 28 in the correction mode
4. Gyro sensor (R) 25, Gyro sensor (P)
26 information to the interface 27 and the interface 64
And the initial state of the head orientation and inclination is calculated by the head state calculation processing unit 65 together with the gazing point position and the presenter's standing position information.
2 is stored. In the normal mode, information is collected on the information on the orientation and tilt of the head of the explainer, and based on the information on the standing position of the explainer, the position of the gazing point, the information on the orientation and tilt of the explainer's head, and the correction information, The position of the cursor 8 is calculated by the cursor position calculation processing device 58. As a result, it is possible to cause the cursor 8 to follow the point where the presenter is gazing without correcting the movement of the presenter's neck.

【0046】[0046]

【発明の効果】以上説明したように、本発明の第1の実
施の形態では、説明者の眼球の近傍に設置し説明者の注
視点を検出する視線追従センサを設け、説明者が掌中で
制御するコントローラの出力するカーソルの位置情報を
受け、プレゼンテーション用の画面表示装置の画面上で
説明個所を指示するカーソルの位置を制御する処理装置
内に、視線追従センサの出力を受けて演算し、説明者が
注視しているプレゼンテーション画面上の個所にカーソ
ルを移動させるべくデータを出力する注視点計算処理装
置を設けることにより、説明者が注視した画面上の点に
カーソルを移動させることができるという効果が有る。
また、本発明の第2の実施の形態では、第1の実施の形
態に加えて、視線追従センサと共に、説明者の頭部の近
傍に頭部の動きを検出するジャイロセンサを設置するこ
とで、説明者の動きに制限を設けずに説明者が注視した
画面上の点にカーソルを移動させることができるという
効果が有る。
As described above, in the first embodiment of the present invention, a line-of-sight tracking sensor which is installed near the eyeball of the presenter and detects the gazing point of the presenter is provided, and Receiving the position information of the cursor output from the controlling controller, in the processing device for controlling the position of the cursor pointing to the description location on the screen of the screen display device for presentation, receiving the output of the eye tracking sensor, and calculating It is possible to move the cursor to a point on the screen watched by the presenter by providing a gaze point calculation processing device that outputs data to move the cursor to a location on the presentation screen that the presenter is watching. It has an effect.
In addition, in the second embodiment of the present invention, in addition to the first embodiment, a gyro sensor that detects the movement of the head is installed near the head of the presenter together with the eye tracking sensor. Thus, there is an effect that the cursor can be moved to a point on the screen watched by the presenter without restricting the movement of the presenter.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第1の実施の形態を示すブロック図で
ある。
FIG. 1 is a block diagram showing a first embodiment of the present invention.

【図2】コントローラの様々な実施の形態を説明する説
明図である。
FIG. 2 is an explanatory diagram illustrating various embodiments of a controller.

【図3】本発明の第2の実施の形態を示すブロック図で
ある。
FIG. 3 is a block diagram showing a second embodiment of the present invention.

【図4】従来の大画面プレゼンテーションシステム用ポ
インティング装置の一例を示すブロック図である。
FIG. 4 is a block diagram showing an example of a conventional pointing device for a large screen presentation system.

【符号の説明】[Explanation of symbols]

1 コントローラ 2,28 視線追従センサ 3 右赤外線センサ 4 左赤外線センサ 5,66 処理装置 6 画面表示装置 7 ディスプレイ 8 カーソル 10 本発明の大画面プレゼンテーションシステム用
ポインティング装置 11 モード切替ボタン 12 カーソル移動装置 13 カーソル制御ボタン 14,23,27,51,55,64 インタフェー
ス 21 右視線追従センサ 22 左視線追従センサ 24 ジャイロセンサ(Y) 25 ジャイロセンサ(R) 26 ジャイロセンサ(P) 52 モード切替信号処理装置 53 カーソル移動信号処理装置 54 カーソル制御信号処理装置 56 注視点計算処理装置 57 説明者位置計算処理装置 58 カーソル位置計算処理装置 59 カーソル表示制御処理装置 60 画面合成処理装置 61 補正情報更新制御装置 62 補正情報記憶装置 63 記憶装置 65 頭部状態計算処理装置
DESCRIPTION OF SYMBOLS 1 Controller 2, 28 Eye tracking sensor 3 Right infrared sensor 4 Left infrared sensor 5, 66 Processing device 6 Screen display device 7 Display 8 Cursor 10 Pointing device for large screen presentation system of the present invention 11 Mode switching button 12 Cursor moving device 13 Cursor Control buttons 14, 23, 27, 51, 55, 64 Interface 21 Right eye tracking sensor 22 Left eye tracking sensor 24 Gyro sensor (Y) 25 Gyro sensor (R) 26 Gyro sensor (P) 52 Mode switching signal processing device 53 Cursor Movement signal processing device 54 Cursor control signal processing device 56 Point of interest calculation processing device 57 Explainer position calculation processing device 58 Cursor position calculation processing device 59 Cursor display control processing device 60 Screen synthesis processing device 61 Update correction information Control device 62 correction information storage unit 63 storage unit 65 the head state calculation processing device

Claims (5)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 説明者が掌中で制御するコントローラの
出力するカーソルの位置情報を受けプレゼンテーション
用の画面表示装置の画面上で説明個所を指示するカーソ
ルの位置を制御する処理装置を有する大画面プレゼンテ
ーションシステム用ポインティング装置において、 前記説明者の眼球の近傍に設置し前記説明者の注視点を
検出する左視線追従センサと右視線追従センサとを設
け、 前記処理装置内に前記左視線追従センサと前記右視線追
従センサの出力を受けて演算し前記説明者が注視してい
るプレゼンテーション画面上の個所に前記カーソルを移
動させるべくデータを出力する注視点計算処理装置を含
み、 前記説明者の位置を検出する位置センサを設け、 前記処理装置内に前記位置センサの出力を受けて演算し
プレゼンテーション画面上に表示するカーソルの位置を
補正させるべくデータを出力する説明者位置計算処理装
置を含み、 前記 コントローラ内にカーソルの位置を制御するモード
として各種センサの出力により制御する通常モードと
説明者の注視点と前記カーソルの位置とを一致させる
補正モードとのいずれか一方を選択するよう制御信号を
出力するモード切替ボタンと、前記モード切替ボタンが
補正モードであるとき前記説明者の注視点に前記カーソ
ルを移動させる信号を出力するカーソル移動装置と、
記モード切替ボタンが補正モードであるときは前記カー
ソル移動装置で移動させたカーソルの位置を確定し以後
の制御を前記通常モードで行うよう制御信号を出力し前
記モード切替ボタンが通常モードであるときは前記説明
者の注視点にカーソル位置を固定するよう制御信号を出
するカーソル制御ボタンとを備え、前記 処理装置内に前記コントローラの出力する制御信号
を受けモードを切替えるべくデータを出力するモード切
替信号処理装置と、前記カーソルを移動させるべくデー
タを出力するカーソル移動信号処理装置と、前記カーソ
ル制御ボタンの出力する制御信号を検出するカーソル制
御信号検出装置とを含む ことを特徴とする大画面プレゼンテーションシステム用
ポインティング装置。
The present invention relates to a controller controlled by a presenter in a palm.
Presentation to receive cursor position information to be output
Cursor on the screen of the screen display device
Screen presenter with processing device for controlling the position of the screen
In the pointing device for the positioner system, it is installed in the vicinity of the presenter's eyeball and the gazing point of the presenter is
A left eye tracking sensor and a right eye tracking sensor
The left eye tracking sensor and the right eye tracking are installed in the processing device.
It receives the output of the slave sensor, calculates it, and
Move the cursor to a location on the presentation screen
Gaze point calculation processor that outputs data to
Only, a position sensor for detecting the position of the presenter is provided, and the output of the position sensor is received and calculated in the processing device.
Change the position of the cursor displayed on the presentation screen.
Explainer position calculation processing device that outputs data to correct
It includes a location, normal mode and before controlled by the output of the various sensors as the mode for controlling the position of the cursor in said controller
A mode switching button for outputting a control signal to select either the correction mode to match the fixation point of the serial explainer and the position of the cursor, the presenter when the mode switching button is the correction mode a cursor moving device for outputting a signal for moving the cursor to the gaze point, before
Serial mode switching when the button is in the correction mode before outputting a control signal so as to control the finalized after the position of the cursor is moved by the cursor moving device in the normal mode
When the mode switching button is in the normal mode,
Control signal to fix the cursor position to the
And a cursor control button for force, cursor movement for outputting the mode switching signal processing apparatus for outputting data to switch the mode receives the control signal output of the controller in the processing unit, the data to move the cursor signal processing apparatus and the cursor control button output and a cursor control signal detector for detecting a control signal, that the pointing device for a large-screen presentation systems that characterized.
【請求項2】 説明者が掌中で制御するコントローラの
出力するカーソルの 位置情報を受けプレゼンテーション
用の画面表示装置の画面上で説明個所を指示するカーソ
ルの位置を制御する処理装置を有する大画面プレゼンテ
ーションシステム用ポインティング装置において、 前記説明者の眼球の近傍に設置し前記説明者の注視点を
検出する左視線追従センサと右視線追従センサとを設
け、 前記説明者の頭部の近傍に設置し首の左右の振り角度を
検出するジャイロセンサ(Y)と頭部の左右方向の傾き
を検出するジャイロセンサ(R)と頭部の上下の振り角
度を検出するジャイロセンサ(P)とを設け、 前記処理装置内に前記左視線追従センサと前記右視線追
従センサ並びに前記ジャイロセンサ(Y)と前記ジャイ
ロセンサ(R)と前記ジャイロセンサ(P)の出力を受
けて演算し前記説明者が注視しているプレゼンテーショ
ン画面上の個所に前記カーソルを移動させるべくデータ
を出力する注視点計算処理装置および頭部情報計算処理
装置を含み、 前記説明者の位置を検出する位置センサを設け、 前記処理装置内に前記位置センサの出力を受けて演算し
プレゼンテーション画面上に表示するカーソルの位置を
補正させるべくデータを出力する説明者位置計算処理装
置を含み、 前記 コントローラ内にカーソルの位置を制御するモード
として各種センサの出力により制御する通常モードと
説明者の注視点と前記カーソルの位置とを一致させる
補正モードとのいずれか一方を選択するよう制御信号を
出力するモード切替ボタンと、前記モード切替ボタンが
補正モードであるとき前記説明者の注視点に前記カーソ
ルを移動させる信号を出力するカーソル移動装置と、
記モード切替ボタンが補正モードであるときは前記カー
ソル移動装置で移動させたカーソルの位置を確定し以後
の制御を前記通常モードで行うよう制御信号を出力し前
記モード切替ボタンが通常モードであるときは前記説明
者の注視点にカーソル位置を固定するよう制御信号を出
するカーソル制御ボタンとを備え、前記 処理装置内に前記コントローラの出力する制御信号
を受けモードを切替えるべくデータを出力するモード切
替信号処理装置と、前記カーソルを移動させるべくデー
タを出力するカーソル移動信号処理装置と、前記カーソ
ル制御ボタンの出力する制御信号を検出するカーソル制
御信号検出装置とを含む ことを特徴とする大画面プレゼンテーションシステム用
ポインティング装置。
2. A controller controlled by a presenter in his / her palm.
Presentation to receive cursor position information to be output
Cursor on the screen of the screen display device
Screen presenter with processing device for controlling the position of the screen
In the pointing device for the positioner system, it is installed in the vicinity of the presenter's eyeball and the gazing point of the presenter is
A left eye tracking sensor and a right eye tracking sensor
And set it near the head of the explainer and adjust the swing angle of the left and right of the neck.
Gyro sensor (Y) to detect and head tilt in left and right direction
Gyro sensor (R) for detecting the angle and the vertical swing angle of the head
A gyro sensor (P) for detecting the degree of vision, and the left eye tracking sensor and the right eye tracking in the processing device.
Slave sensor and the gyro sensor (Y) and the gyro
Receiving the outputs of the gyro sensor (R) and the gyro sensor (P).
And the presentation that the presenter is watching
Data to move the cursor to a location on the screen
-Of-interest calculation processing device and head information calculation processing for outputting the head
Including a device, a position sensor for detecting the position of the presenter is provided, and the output of the position sensor is received and calculated in the processing device.
Change the position of the cursor displayed on the presentation screen.
Explainer position calculation processing device that outputs data to correct
It includes a location, normal mode and before controlled by the output of the various sensors as the mode for controlling the position of the cursor in said controller
A mode switching button for outputting a control signal to select either the correction mode to match the fixation point of the serial explainer and the position of the cursor, the presenter when the mode switching button is the correction mode a cursor moving device for outputting a signal for moving the cursor to the gaze point, before
Serial mode switching when the button is in the correction mode before outputting a control signal so as to control the finalized after the position of the cursor is moved by the cursor moving device in the normal mode
When the mode switching button is in the normal mode,
Control signal to fix the cursor position to the
And a cursor control button for force, cursor movement for outputting the mode switching signal processing apparatus for outputting data to switch the mode receives the control signal output of the controller in the processing unit, the data to move the cursor signal processing apparatus and the cursor control button output and a cursor control signal detector for detecting a control signal, that the pointing device for a large-screen presentation systems that characterized.
【請求項3】 前記視線追従センサおよび前記ジャイロ
センサの少なくともいずれか一方を前記説明者の頭部に
かぶせる帽子型構造物に格納することを特徴とする請求
項1または請求項2記載の大画面プレゼンテーションシ
ステム用ポインティング装置。
Wherein the gaze tracking sensor and claim 1 or claim 2 large screen wherein storing at least one of the gyro sensor in the hat-shaped structure covering the head portion of the presenter Pointing device for presentation system.
【請求項4】 前記視線追従センサおよび前記ジャイロ
センサの少なくともいずれか一方を前記説明者の顔部前
面に掛ける眼鏡型構造物に格納することを特徴とする請
求項1または請求項2記載の大画面プレゼンテーション
システム用ポインティング装置。
Wherein said visual axis tracking sensor and claim 1 or claim 2 die, wherein the storing in the eyeglass-type structure at least either hung on the face portion front face of the presenter of the gyro sensor Pointing device for screen presentation system.
【請求項5】 前記位置センサが前記画面表示装置の画
面の両側に設置することを特徴とする請求項1または請
求項2記載の大画面プレゼンテーションシステム用ポイ
ンティング装置。
5. A method according to claim 1 or請, characterized in that said position sensor is placed on either side of the screen of the screen display device
The pointing device for a large-screen presentation system according to claim 2 .
JP8198792A 1996-07-29 1996-07-29 Pointing device for large screen presentation system Expired - Fee Related JP3048927B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP8198792A JP3048927B2 (en) 1996-07-29 1996-07-29 Pointing device for large screen presentation system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP8198792A JP3048927B2 (en) 1996-07-29 1996-07-29 Pointing device for large screen presentation system

Publications (2)

Publication Number Publication Date
JPH1039994A JPH1039994A (en) 1998-02-13
JP3048927B2 true JP3048927B2 (en) 2000-06-05

Family

ID=16396991

Family Applications (1)

Application Number Title Priority Date Filing Date
JP8198792A Expired - Fee Related JP3048927B2 (en) 1996-07-29 1996-07-29 Pointing device for large screen presentation system

Country Status (1)

Country Link
JP (1) JP3048927B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7119788B2 (en) 1998-12-17 2006-10-10 Sony Corporation Image processing apparatus, image processing method, providing medium and presentation system
JP2003280805A (en) * 2002-03-26 2003-10-02 Gen Tec:Kk Data inputting device
JP4984583B2 (en) * 2006-03-15 2012-07-25 オムロン株式会社 Display device, projector, display system, display method, display program, and recording medium
TWI337320B (en) 2007-08-10 2011-02-11 Ind Tech Res Inst An input control apparatus and an interactive system using the same
JP6557981B2 (en) * 2015-01-30 2019-08-14 富士通株式会社 Display device, display program, and display method
JP6197012B2 (en) * 2015-10-27 2017-09-13 株式会社ソニー・インタラクティブエンタテインメント Information processing apparatus and information processing method
JP6262283B2 (en) * 2016-05-17 2018-01-17 株式会社コロプラ Method, program, and recording medium for providing virtual space
JP6545415B1 (en) * 2018-07-02 2019-07-17 三菱電機株式会社 Editing device, editing method, editing program, and editing system

Also Published As

Publication number Publication date
JPH1039994A (en) 1998-02-13

Similar Documents

Publication Publication Date Title
EP2040465B1 (en) Remote control for sensing movement, image display apparatus for controlling pointer by the remote control, and controlling method thereof
US20120127074A1 (en) Screen operation system
JP5974189B2 (en) Projection-type image display apparatus and projection-type image display method
JP2004062774A (en) Presentation display device
WO2004019199A1 (en) Display device for presentation
US20240143066A1 (en) Head-mounted information processing apparatus and its controlling method
JP3048927B2 (en) Pointing device for large screen presentation system
JPH0580925A (en) Pointing device for large-screen display
US20240054975A1 (en) Head mounted display and setting method
EP3401766B1 (en) Display device for displaying a cursor
US6297803B1 (en) Apparatus and method for image display
JP7498330B2 (en) Virtual object operation method and head-mounted display
JP2001125736A (en) Image display device, presentation system and information storage medium
JP2003044220A (en) Presentation system
KR100980261B1 (en) Pointing/interface system
JP2001125737A (en) Projection image display device, presentation system and information storage medium
JPH11338458A (en) Display unit, image displaying method, and storage medium
JP2007279869A (en) Projector, remote controller for projector and pointer system
JPH10207681A (en) Cursor display device
JPH09204260A (en) Method and device for inputting data and image pickup method using them and device therefor
JPH05110965A (en) Cursor controller in television receiver
JP2003044221A (en) Presentation system
KR20240108143A (en) Controlling system of position and view point of the combinaton between VR and AR
KR20210081779A (en) Tool panel positioning method in virtual reality according to view point
JPH0934636A (en) Coordinate input device

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20000307

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees