JPH0564061A - Video camera - Google Patents
Video cameraInfo
- Publication number
- JPH0564061A JPH0564061A JP3218574A JP21857491A JPH0564061A JP H0564061 A JPH0564061 A JP H0564061A JP 3218574 A JP3218574 A JP 3218574A JP 21857491 A JP21857491 A JP 21857491A JP H0564061 A JPH0564061 A JP H0564061A
- Authority
- JP
- Japan
- Prior art keywords
- gazing point
- watching point
- viewfinder
- photographer
- video camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Optical Radar Systems And Details Thereof (AREA)
- Position Input By Displaying (AREA)
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本願発明は撮影画像を電気的に表
示する電子ビューファインダを備えたビデオカメラに関
するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a video camera equipped with an electronic viewfinder for electrically displaying a photographed image.
【０００２】[0002]
【従来の技術】従来、撮影画像を表示するビューファイ
ンダを備えるビデオカメラにおいて、撮影者が撮影中に
各種機能の入力を行おうとする際には、前記ビューファ
インダを覗きながら機能入力（スイッチ）等の操作を行
わなければならなかった。2. Description of the Related Art Conventionally, in a video camera having a viewfinder for displaying a photographed image, when a photographer tries to input various functions during photographing, he or she looks into the viewfinder to input a function input (switch) or the like. Had to do.
【０００３】また、各種機能のスイッチを確認しながら
操作するためには一度前記ビューファインダから目を離
さなければならず、撮影画面が乱れたり被写体を見失っ
たりする可能性がある。Further, in order to operate while confirming the switches of various functions, it is necessary to take an eye away from the viewfinder once, and there is a possibility that the photographing screen is disturbed or the subject is lost.
【０００４】更に、近年ユーザー用途の多様化などでビ
デオカメラに付随する各種機能は増加する傾向にある。Furthermore, in recent years, various functions associated with video cameras have been increasing due to diversification of user applications.
【０００５】このような背景を鑑みれば、ビューファイ
ンダを覗いている撮影者の視線を検出し、機能入力に応
用すれば、ビューファインダから目を離すこと無く、容
易に機能入力を行うことが可能となる。In view of such a background, if the line of sight of the photographer looking into the viewfinder is detected and applied to the function input, it is possible to easily perform the function input without keeping an eye on the viewfinder. Becomes
【０００６】観察者が観察面上のどの位置を観察してい
るかを検出するいわゆる視線（視軸）を検出する装置は
既に提案されている。An apparatus for detecting a so-called line of sight (visual axis) for detecting which position on the observation surface the observer is observing has already been proposed.
【０００７】例えば、特開昭６１−１７２５５２号公報
においては、光源からの平行光束を観察者の眼球の前眼
部へ投射し、角膜からの反射光による角膜反射像と瞳孔
の結像位置を利用して視軸を求めている。For example, in Japanese Unexamined Patent Publication No. 61-172552, a collimated light beam from a light source is projected onto the anterior segment of the eyeball of an observer, and a corneal reflection image and a pupil image formation position due to reflected light from the cornea are displayed. We are looking for the visual axis.
【０００８】図９及び図１０は視線検出方法の原理説明
図で、図９は視線検出光学系の概略図、図１０は図９の
光電素子列６からの出力信号の強度図である。9 and 10 are explanatory views of the principle of the line-of-sight detection method. FIG. 9 is a schematic diagram of the line-of-sight detection optical system, and FIG. 10 is an intensity diagram of an output signal from the photoelectric element array 6 of FIG.
【０００９】図９において、５は観察者に対して不感の
赤外光を放射する発光ダイオードなどの光源であり、投
光レンズ３の焦点面に配置されている。In FIG. 9, reference numeral 5 denotes a light source such as a light emitting diode which emits infrared light insensitive to an observer, and is arranged on the focal plane of the light projecting lens 3.
【００１０】光源５より発光した赤外光は投光レンズ３
により平行光となりハーフミラー２で反射し、眼球２０
１の角膜２１を照明する。The infrared light emitted from the light source 5 is projected by the projection lens 3
Collimated into parallel light and reflected by the half mirror 2, and the eyeball 20
Illuminate one cornea 21.
【００１１】この時、角膜２１の表面で反射した赤外光
の一部による角膜反射像ｄはハーフミラー２を透過し受
光レンズ４により集光され光電素子列６上の位置Ｚｄ’
に再結像する。At this time, the corneal reflection image d due to a part of the infrared light reflected on the surface of the cornea 21 is transmitted through the half mirror 2, is condensed by the light receiving lens 4, and is located at the position Zd 'on the photoelectric element array 6.
Re-image.
【００１２】また、虹彩２３の端部ａ，ｂからの光束は
ハーフミラー２、受光レンズ４を介して光電素子列６上
の位置Ｚａ’，Ｚｂ’に該端部ａ，ｂの像を結像する。Light fluxes from the ends a and b of the iris 23 form images of the ends a and b at positions Za ′ and Zb ′ on the photoelectric element array 6 via the half mirror 2 and the light receiving lens 4. Image.
【００１３】受光レンズ４の光軸（光軸ア）に対する眼
球の光軸イの回転角θが小さい場合、虹彩２３の端部
ａ，ｂのＺ座標をＺａ，Ｚｂとすると、虹彩２３の中心
位置ｃの座標Ｚｃは Ｚｃ＝（Ｚａ＋Ｚｂ）／２ と表される。If the rotation angle θ of the optical axis a of the eyeball with respect to the optical axis (optical axis a) of the light receiving lens 4 is small, and the Z coordinates of the ends a and b of the iris 23 are Za and Zb, the center of the iris 23 is assumed. The coordinate Zc of the position c is expressed as Zc = (Za + Zb) / 2.
【００１４】また、角膜反射像の発生位置ＤのＺ座標を
Ｚｄ、角膜２１の曲率中心Ｏと虹彩２３の中心Ｃまでの
距離をＯＣとすると眼球光軸イの回転角θは、 ＯＣ×ｓｉｎθ＝Ｚｃ−Ｚｄ ・・・（１） の関係式を略満足する。When the Z coordinate of the corneal reflection image generation position D is Zd and the distance between the center of curvature O of the cornea 21 and the center C of the iris 23 is OC, the rotation angle θ of the optical axis a of the eyeball is OC × sin θ. = Zc-Zd (1) The relational expression is substantially satisfied.
【００１５】ここで、角膜反射像の位置ｄのＺ座標Ｚｄ
と角膜２１の曲率中心ＯのＺ座標Ｚとは一致している。
このため演算手段９において、図９に示すごとく光電素
子列６面上に投影された各特異点（角膜反射像ｄ及び虹
彩の端部ａ，ｂ）の位置を検出することにより眼球光軸
イの回転角θを求めることができる。この時、（１）式
は、 β×ＯＣ×ｓｉｎθ＝（Ｚａ’＋Ｚｂ’）／２−Ｚｄ’ ・・・（２） と書き換えられる。Here, the Z coordinate Zd of the position d of the corneal reflection image.
And the Z coordinate Z of the center of curvature O of the cornea 21 match.
Therefore, the computing means 9 detects the position of each singular point (corneal reflection image d and the edges a and b of the iris) projected on the surface of the photoelectric element array 6 as shown in FIG. Can be obtained. At this time, the expression (1) is rewritten as β × OC × sin θ = (Za ′ + Zb ′) / 2−Zd ′ (2).
【００１６】但し、βは角膜反射像の発生位置ｄと受光
レンズ４との距離Ｌ１と受光レンズ４と光電素子列６と
の距離Ｌ０で決まる倍率で、通常略一定の値となってい
る。However, β is a magnification determined by the distance L1 between the corneal reflection image generation position and the light receiving lens 4 and the distance L0 between the light receiving lens 4 and the photoelectric element array 6, and is usually a substantially constant value.
【００１７】以上、説明したような視線（視軸）検出装
置をビデオカメラに応用すれば、操作性を向上させた使
い勝手の良いビデオカメラを実現できる。By applying the visual axis (visual axis) detecting device as described above to a video camera, a user-friendly video camera with improved operability can be realized.
【００１８】[0018]
【発明が解決しようとしている課題】しかし、撮影者の
視線情報をビデオカメラの制御に利用する場合、ビュー
ファインダを覗いている撮影者の視線（注視点）情報を
撮影者自身が認識していないと、例えば撮影者の注視点
情報を基にビデオカメラのＡＦ，ＡＥ，ＡＷＢ，ＡＳな
どの制御を行う時に、所望の被写体に対して正常に注視
点を検出して、上述の如き制御が正常に行われているの
か否かの判断ができない。However, when utilizing the line-of-sight information of the photographer for controlling the video camera, the photographer himself does not recognize the line-of-sight (gazing point) information of the photographer looking into the viewfinder. For example, when the AF, AE, AWB, AS, etc. of the video camera are controlled based on the gazing point information of the photographer, the gazing point is normally detected for the desired subject, and the above-described control is performed normally. It is not possible to judge whether or not it is being carried out.
【００１９】そのため、所望の主被写体への注視が行わ
れておらず、適切な撮影が行えていない場合が発生する
という問題が生じる。Therefore, there is a problem that a desired main subject is not gazed at and a proper photographing is not performed.
【００２０】本願発明は斯かる背景下に於て、視線検出
手段により検出された撮影者の視線（注視点）を撮影者
自身で確認でき、適切な撮影を可能としたビデオカメラ
を提供することを目的とする。Under such a background, the present invention provides a video camera which enables the photographer himself to confirm the line of sight (gazing point) of the photographer detected by the line-of-sight detecting means, and which enables appropriate photographing. With the goal.
【００２１】[0021]
【課題を解決するための手段】本願発明に係るビデオカ
メラは、撮影画像等を電気的に表示するビューファイン
ダを備えたビデオカメラであって、撮影者の注視点を検
出する注視点検出手段と、前記注視点検出手段によって
検出された注視点を前記ビューファインダに表示する表
示手段とを有することを特徴とするものである。A video camera according to the present invention is a video camera equipped with a viewfinder for electrically displaying captured images and the like, and a gazing point detecting means for detecting a gazing point of a photographer. And display means for displaying the gazing point detected by the gazing point detecting means on the viewfinder.
【００２２】[0022]
【作用】本願発明のビデオカメラによれば、注視点検出
手段により検出された注視点情報をモニタ用のビューフ
ァインダに表示させることにより、撮影者はビデオカメ
ラが正常に注視点を検出しているのを即座に確認しなが
ら撮影を行うことを可能とする。According to the video camera of the present invention, the video camera normally detects the gazing point by displaying the gazing point information detected by the gazing point detecting means on the viewfinder for the monitor. It is possible to shoot while confirming immediately.
【００２３】[0023]
【実施例】以下、本発明の実施例を詳細に説明する。EXAMPLES Examples of the present invention will be described in detail below.
【００２４】図１は本実施例にかかるビデオカメラ、ビ
デオレンズ、及び視線検出機構を組み込んだ電子ビュー
ファインダユニット等からなるカメラ一体型ＶＴＲのブ
ロック図である。FIG. 1 is a block diagram of a camera-integrated VTR including a video camera, a video lens, and an electronic viewfinder unit incorporating a line-of-sight detection mechanism according to this embodiment.
【００２５】図１において、１は接眼レンズで、その内
側には可視光透過・赤外光反射のダイクロイックミラー
２が斜設されており、光路分割器を兼ねている。In FIG. 1, reference numeral 1 denotes an eyepiece lens, and a dichroic mirror 2 for transmitting visible light and reflecting infrared light is obliquely provided inside the eyepiece lens, which also serves as an optical path splitter.
【００２６】４は受光レンズ、５は照明手段であり、例
えば後述する各位置に配設された３個の各赤外発光ダイ
オード５ａ，５ｃ，不図示の５ｂより成る。Reference numeral 4 is a light receiving lens, and 5 is an illuminating means, which is composed of, for example, three infrared light emitting diodes 5a and 5c and 5b (not shown) arranged at respective positions described later.
【００２７】６は光電素子列、受光レンズ４と光電素子
列６は受光手段の一要素を構成している。前記光電素子
列６は通常、図面垂直方向に一次元的に複数の光電素子
が並んだデバイスを使うが、必要に応じて２次元に光電
素子が並設されたデバイスを使用する。Reference numeral 6 denotes a photoelectric element array, and the light receiving lens 4 and the photoelectric element array 6 constitute one element of the light receiving means. The photoelectric element array 6 usually uses a device in which a plurality of photoelectric elements are arranged one-dimensionally in the vertical direction of the drawing, but a device in which photoelectric elements are arranged two-dimensionally is used as necessary.
【００２８】これらの各構成要素１，２，４，５，６よ
り眼球２０１の視線検出系を構成している。These constituent elements 1, 2, 4, 5 and 6 constitute a visual axis detection system for the eyeball 201.
【００２９】１０１はモニタ兼用の電子ビューファイン
ダ（ＥＶＦ）、１０２はファインダ画面である。Reference numeral 101 is an electronic viewfinder (EVF) which also serves as a monitor, and 102 is a finder screen.
【００３０】本実施例では、ファインダ画面１０２に映
し出される映像は、接眼レンズ１を介してアイポイント
Ｅに導かれる。In the present embodiment, the image displayed on the finder screen 102 is guided to the eyepoint E via the eyepiece lens 1.
【００３１】本実施例にかかる視線検出手段は、各構成
要素１，２，４，５，６で表された部材より構成された
前記視線検出系と、演算手段である注視点位置処理回路
１０９に含まれる眼球光軸検出回路、眼球判別回路、視
軸補正回路、注視点検出回路等から構成されている。The line-of-sight detecting means according to the present embodiment comprises the line-of-sight detecting system composed of the members represented by the respective constituent elements 1, 2, 4, 5, 6 and the gazing point position processing circuit 109 which is a calculating means. It includes an eyeball optical axis detection circuit, an eyeball discrimination circuit, a visual axis correction circuit, a gazing point detection circuit, and the like.
【００３２】前記視線検出系において、赤外発光ダイオ
ード５から放射される赤外光は、アイポイントＥ近傍に
位置する観察者の眼球２０１を照明する。In the line-of-sight detection system, the infrared light emitted from the infrared light emitting diode 5 illuminates the eyeball 201 of the observer located near the eye point E.
【００３３】また、眼球２０１で反射した赤外光は、ダ
イクロックミラー２で反射され受光レンズ４によって収
斂しながら光電素子列６上に像を形成する。The infrared light reflected by the eyeball 201 is reflected by the dichroic mirror 2 and converged by the light receiving lens 4 to form an image on the photoelectric element array 6.
【００３４】また、前記注視点位置処理回路１０９はマ
イクロコンピュータのソフトウエアで実行される。Further, the gazing point position processing circuit 109 is executed by software of a microcomputer.
【００３５】１１０はビューファインダ映像処理表示回
路、１３０はビデオレンズ、１３１はＡＦ，ＡＥ，ＡＷ
Ｂ等の制御回路を含むビデオレンズ駆動回路、１３２は
ビデオ映像信号処理回路、１３３はビデオ映像記録再生
回路、１４０はビデオレコーダである。110 is a viewfinder image processing display circuit, 130 is a video lens, and 131 is AF, AE, AW.
A video lens driving circuit including a control circuit such as B, 132 is a video image signal processing circuit, 133 is a video image recording / reproducing circuit, and 140 is a video recorder.
【００３６】１２０はシャッタースピードやズーム等の
変換を行うための撮影モード機能入力回路で、スイッチ
１２２が具備されている。Reference numeral 120 denotes a photographing mode function input circuit for converting shutter speed, zoom, etc., which is equipped with a switch 122.
【００３７】ここで、本願発明の実施例である撮影者の
視線位置（注視点）検出方法を詳細に、図２〜図５を用
いて説明する。Here, the method of detecting the line-of-sight position (gazing point) of the photographer, which is an embodiment of the present invention, will be described in detail with reference to FIGS.
【００３８】図２に、図１の視線検出系の要部斜視図、
また図３（Ａ）、（Ｂ）に、視線検出系の光学原理図を
示す。FIG. 2 is a perspective view of a main part of the visual axis detection system shown in FIG.
Further, FIGS. 3A and 3B show optical principle diagrams of the line-of-sight detection system.
【００３９】照明用の赤外発光ダイオード５ａ，５ｂ，
５ｃは、カメラと観察者の眼球との距離を検出するため
に２個一組で使用され、カメラの姿勢に応じて赤外発光
ダイオード５ａ，５ｂで横位置、赤外発光ダイオード５
ｂ，５ｃで縦位置の検出を行っている。Infrared light emitting diodes 5a, 5b for illumination,
5c are used as a pair to detect the distance between the camera and the eyeball of the observer, and the infrared light emitting diodes 5a and 5b are positioned laterally depending on the posture of the camera.
The vertical position is detected by b and 5c.
【００４０】尚、図２及び図３にはカメラの姿勢検知手
段は図示されていないが、水銀スイッチ等を利用した姿
勢検知手段が有効である。Although the attitude detecting means of the camera is not shown in FIGS. 2 and 3, the attitude detecting means using a mercury switch or the like is effective.
【００４１】赤外発光ダイオード５ａ，５ｂは受光レン
ズ４の光軸（Ｘ軸）に対して光電素子列６の列方向（Ｚ
軸方向）及びこの列方向と直交する方向にシフトした位
置に配置されている。The infrared light emitting diodes 5a and 5b are arranged in the row direction (Z
It is arranged at a position shifted in the direction orthogonal to the axial direction) and the column direction.
【００４２】図３（Ａ）において、光電素子列６の列方
向（Ｚ軸方向）に分離して配置された赤外発光ダイオー
ド５ａ，５ｂからの光束はＺ軸方向に分離した位置に角
膜反射像ｅ，ｄをそれぞれ形成する。In FIG. 3A, the luminous fluxes from the infrared light emitting diodes 5a and 5b separately arranged in the row direction (Z-axis direction) of the photoelectric element row 6 are reflected on the cornea at positions separated in the Z-axis direction. Images e and d are formed, respectively.
【００４３】この時、角膜反射像ｅ及びｄの中点のＺ座
標は角膜２１の曲率中心ＯのＺ座標と一致している。At this time, the Z coordinate of the midpoint of the corneal reflection images e and d coincides with the Z coordinate of the center of curvature O of the cornea 21.
【００４４】また、角膜反射像ｅ及びｄの間隔は赤外発
光ダイオードと観察者の眼球との距離に対応して変化す
るため、光電素子列６上に再結像した角膜反射像の位置
ｅ’，ｄ’を検出することにより眼球からの反射像の結
像倍率βを求めることが可能となる。Further, since the interval between the corneal reflection images e and d changes according to the distance between the infrared light emitting diode and the observer's eyeball, the position e of the corneal reflection image re-imaged on the photoelectric element array 6 is indicated. By detecting “, d”, it becomes possible to obtain the imaging magnification β of the reflected image from the eyeball.
【００４５】また、図３（Ｂ）において、光電素子列６
の列方向と直交する方向に配置された赤外発光ダイオー
ド５ａ、不図示の５ｂは観察者の眼球を斜め上から照明
することになり、そのため観察者の眼球が垂直方向（Ｘ
−Ｙ平面内）に回転していない場合は角膜反射像ｅ（ｄ
は不図示）は角膜の曲率中心及び瞳孔の中心よりも図中
＋Ｙ方向に形成される。Further, in FIG. 3B, the photoelectric element array 6
The infrared light emitting diodes 5a and 5b (not shown) arranged in a direction orthogonal to the column direction illuminate the eyeball of the observer obliquely from above, so that the eyeball of the observer is in the vertical direction (X
If not rotated in the (-Y plane), the corneal reflection image e (d
Is formed in the + Y direction in the figure with respect to the center of curvature of the cornea and the center of the pupil.
【００４６】図４（Ａ）は、本実施例において光電素子
列６の複数の光電素子列面上に投影された眼球からの反
射像を示す説明図で、光電素子列６上に投影された眼球
からの反射像を示したものである。同図において角膜反
射像ｅ’，ｄ’は光電素子列Ｙｐ’上に再結像してい
る。この時光電素子列Ｙｐ’より得られる出力信号を図
４（Ｂ）に示す。FIG. 4A is an explanatory diagram showing reflected images from the eyeballs projected on the plurality of photoelectric element array surfaces of the photoelectric element array 6 in this embodiment, and is projected on the photoelectric element array 6. It shows a reflection image from the eyeball. In the figure, the corneal reflection images e ′ and d ′ are re-formed on the photoelectric element array Yp ′. The output signal obtained from the photoelectric element array Yp 'at this time is shown in FIG.
【００４７】次に、本実施例における視線検出動作を図
５のシーケンスフローチャートを用いて説明する。Next, the visual axis detection operation in this embodiment will be described with reference to the sequence flowchart of FIG.
【００４８】まず、ステップＳ１では注視点位置処理回
路１０９に含まれる眼球光軸検出回路において眼球光軸
の回転角が検出される。First, in step S1, the rotation angle of the eyeball optical axis is detected by the eyeball optical axis detection circuit included in the gazing point position processing circuit 109.
【００４９】次いで光電素子列６の像信号の読み出しを
図４（Ａ）で示す−Ｙ方向より順次行い、角膜反射像
ｅ’，ｄ’が形成される光電素子列（ライン）Ｙｐ’を
検出する。Next, the image signals of the photoelectric element array 6 are sequentially read in the -Y direction shown in FIG. 4A, and the photoelectric element array (line) Yp 'where the corneal reflection images e'and d'are formed is detected. To do.
【００５０】次にステップＳ２では、角膜反射像ｅ’，
ｄ’の列方向の発生位置Ｚｄ’，Ｚｅ’を検出する。Next, in step S2, the corneal reflection image e ',
The generation positions Zd ′ and Ze ′ of d ′ in the column direction are detected.
【００５１】ステップＳ３では、この角膜反射像の間隔
｜Ｚｄ’−Ｚｅ’｜より光学系の結像倍率βを求める。In step S3, the imaging magnification β of the optical system is obtained from the interval | Zd'-Ze '| of the corneal reflection images.
【００５２】更に次のステップＳ４で、この光電素子列
（ライン）Ｙｐ’上に虹彩２３と瞳孔２４との境界点Ｚ
２ａ’，Ｚ２ｂ’を検出し、ステップＳ５でこの光電素
子列Ｙｐ’上の瞳孔長｜Ｚ２ａ’−Ｚ２ｂ’｜を算出す
る。Further, in the next step S4, a boundary point Z between the iris 23 and the pupil 24 is formed on the photoelectric element array (line) Yp '.
2a 'and Z2b' are detected, and the pupil length | Z2a'-Z2b '| on the photoelectric element array Yp' is calculated in step S5.
【００５３】次にステップＳ６に進み、図４（Ａ）に示
すように通常、角膜反射像が形成される光電素子列Ｙ
ｐ’は瞳孔中心Ｃ’の存在する光電素子列ＹＯ’より図
中−Ｙ方向に発生し、像信号の読み出しを行うべきもう
一つの光電素子列Ｙ１’は前記結像倍率β及び瞳孔長の
値より算出される。この時、上記光電素子列Ｙ１’は光
電素子列Ｙｐ’に対して十分な間隔を有するように設定
される。Next, in step S6, as shown in FIG. 4A, the photoelectric element array Y on which a corneal reflection image is normally formed is usually used.
p'is generated in the -Y direction in the figure from the photoelectric element array YO 'in which the pupil center C'is present, and another photoelectric element array Y1' from which an image signal is to be read has the imaging magnification β and the pupil length. Calculated from the value. At this time, the photoelectric element array Y1 ′ is set to have a sufficient distance from the photoelectric element array Yp ′.
【００５４】同様に、ステップＳ７で光電素子列Ｙ１’
上の虹彩２３と瞳孔２４との境界点Ｚ１ａ’，Ｚ１ｂ’
が検出されると、これら境界点（Ｚ１ａ’，Ｙ１’），
（Ｚ１ｂ’，Ｙ１’）及び前記境界点（Ｚ２ａ’，Ｙ
２’），（Ｚ２ｂ’，Ｙ２’）のうち少なくとも３点を
用いて瞳孔の中心位置Ｃ’（Ｚｃ’，Ｙｃ’）が求めら
れる。Similarly, in step S7, the photoelectric element array Y1 '
Boundary points Z1a 'and Z1b' between the upper iris 23 and the pupil 24
Is detected, these boundary points (Z1a ′, Y1 ′),
(Z1b ', Y1') and the boundary point (Z2a ', Y
The center position C '(Zc', Yc ') of the pupil is obtained by using at least three points of 2') and (Z2b ', Y2').
【００５５】更にステップＳ８では眼球光軸の回転角を
算出する。つまり前記角膜反射像の位置（Ｚｄ’，Ｙ
ｐ’），（Ｚｅ’，Ｙｐ’）を用いて前記（２）式を変
形すると眼球光軸の回転角θｚ，θｙは、 β×ＯＣ×ｓｉｎθｚ≒Ｚｃ’−（Ｚｄ’＋Ｚｅ’）／２ ・・・（３） β×ＯＣ×ｓｉｎθｙ≒Ｙｃ’−Ｙｐ’＋δＹ’ ・・・（４） を満足する。Further, in step S8, the rotation angle of the optical axis of the eyeball is calculated. That is, the position of the corneal reflection image (Zd ', Y
p ′), (Ze ′, Yp ′) is used to transform the equation (2), the rotation angles θz and θy of the optical axis of the eyeball become β × OC × sin θz≈Zc ′ − (Zd ′ + Ze ′) / 2. (3) β × OC × sin θy≈Yc′−Yp ′ + δY ′ (4)
【００５６】ただしδＹ’は赤外発光ダイオードが受光
レンズ４に対して光電素子列６の列方向と直交する方向
に配置されていることにより、角膜反射像の再結像位置
ｅ’，ｄ’が光電素子列６上で角膜２１の曲率中心のＹ
座標に対してＹ軸方向にシフトしている分を補正する値
である。However, δY 'is the re-imaging positions e', d'of the cornea reflection image because the infrared light emitting diode is arranged in the direction orthogonal to the row direction of the photoelectric element row 6 with respect to the light receiving lens 4. Is Y of the center of curvature of the cornea 21 on the photoelectric element array 6.
It is a value for correcting the shift amount in the Y-axis direction with respect to the coordinates.
【００５７】更に、ステップＳ９では注視点位置処理回
路１０９に含まれる眼球判別回路においては、例えば算
出される眼球光軸の回転角の分布よりビューファインダ
１０１を覗いている観察者の目が右目か左目かを判別す
る。Further, in step S9, in the eyeball discriminating circuit included in the gazing point position processing circuit 109, whether the eye of the observer looking through the viewfinder 101 is the right eye or not from the distribution of the calculated rotation angles of the eyeball optical axis, for example. Determine if it is the left eye.
【００５８】更にステップＳ１０で視軸補正回路におい
て該眼球判別情報と前記眼球光軸の回転角に基づいて視
軸の補正が行われる。また注視点検出回路においては、
ステップＳ１１でファインダ光学系の光学定数に基づい
て注視点を算出する。Further, in step S10, the visual axis correction circuit corrects the visual axis based on the eyeball discrimination information and the rotation angle of the eyeball optical axis. In the gazing point detection circuit,
In step S11, the gazing point is calculated based on the optical constants of the finder optical system.
【００５９】以上のような構成及び視線検出系を備える
ビデオカメラのビューファインダ画面の表示例を図１及
び図６を用いて説明する。A display example of a viewfinder screen of a video camera having the above-described structure and line-of-sight detection system will be described with reference to FIGS. 1 and 6.
【００６０】まず単に撮影者の視線（注視点）をビュー
ファインダの表示画面に表示する時は、視線検出手段に
より検出された注視点情報が注視点位置処理回路１０９
より出力され、ビューファインダ映像処理表示回路１１
０に入力される。First, when simply displaying the line of sight (gazing point) of the photographer on the display screen of the viewfinder, the gazing point information detected by the line of sight detecting means is the gazing point position processing circuit 109.
Output from the viewfinder video processing display circuit 11
Input to 0.
【００６１】一方、ビデオレンズ１３０で撮影された画
像は電気信号としてビデオ映像信号処理回路１３２を介
して、ビューファインダ映像処理表示回路１１０に入力
される。On the other hand, the image photographed by the video lens 130 is input as an electric signal to the viewfinder image processing / displaying circuit 110 via the video image signal processing circuit 132.
【００６２】ビューファインダ映像処理表示回路１１０
は入力された注視点情報と撮影画像とをミックスさせた
後、ファインダ画面１０２に表示する。図６にその表示
例を示す。Viewfinder video processing display circuit 110
Displays the finder screen 102 after mixing the input gazing point information and the captured image. FIG. 6 shows an example of the display.
【００６３】図６では電子ビューファインダ１０１を覗
いている撮影者の注視点を、図に示すような視点カーソ
ルｐ１で撮影画面と共に映し出している。In FIG. 6, the gazing point of the photographer looking into the electronic viewfinder 101 is displayed together with the photographing screen by the viewpoint cursor p1 as shown in the figure.
【００６４】例えば、撮影者の視線が図６中のａからｂ
へ移動すると、視点カーソルｐ１も図６（Ａ）から
（Ｂ）に示すように移動する。For example, the line of sight of the photographer is from a to b in FIG.
When moved to, the viewpoint cursor p1 also moves as shown in FIGS.
【００６５】次に前述した視線表示をＡＦ、ＡＥ及びＡ
ＷＢなどの制御に利用した例を図１及び図７を用いて説
明する。Next, the above-mentioned line-of-sight display is changed to AF, AE and A.
An example used for control of WB and the like will be described with reference to FIGS. 1 and 7.
【００６６】注視点位置処理回路１０９より出力される
注視点情報は、ビューファインダ映像処理表示回路１１
０に入力されると共にビデオレンズ駆動回路１３１にも
入力される。The gazing point information output from the gazing point position processing circuit 109 is the viewfinder video processing display circuit 11
It is input to 0 as well as to the video lens drive circuit 131.
【００６７】前記ビデオレンズ駆動回路１３１では、入
力された注視点情報の近傍部分をＡＦ，ＡＥ，ＡＷＢ等
を行うエリアとして処理する。In the video lens drive circuit 131, a portion near the input gazing point information is processed as an area for AF, AE, AWB and the like.
【００６８】ＡＦ，ＡＥ，ＡＷＢ等を行うエリアは、上
述と同様に撮影画像と共にファインダ画面１０２に表示
される。その表示例を図７に示す。Areas for performing AF, AE, AWB, etc. are displayed on the finder screen 102 together with the photographed image as described above. An example of the display is shown in FIG.
【００６９】図７では電子ビューファインダ１０１を覗
いている撮影者の注視点を図に示すような視点カーソル
ｐ２（四角いワク）で撮影画面と共に映し出されてい
る。前記ワク部分がＡＦ，ＡＥ，ＡＷＢ等を行う測距枠
となる。In FIG. 7, the gazing point of the photographer looking into the electronic viewfinder 101 is displayed together with the photographing screen by the viewpoint cursor p2 (square frame) as shown in the figure. The above-mentioned portion serves as a distance measuring frame for performing AF, AE, AWB and the like.
【００７０】例えば、撮影者の視線が図７中のａからｂ
へ移動すると、視点カーソルｐ２も図７（Ａ）から
（Ｂ）に示すように移動する。For example, the line of sight of the photographer is from a to b in FIG.
When moved to, the viewpoint cursor p2 also moves as shown in FIG. 7 (A) to (B).
【００７１】尚、前記測距枠は四角に限るものではない
丸い形や、その他任意の形状でもよい。The distance measuring frame is not limited to a square shape, but may be a round shape or any other shape.
【００７２】次に前述した視線表示を撮影モード入力に
利用した例を図１及び図８を用いて説明する。Next, an example in which the above-mentioned line-of-sight display is used for inputting a photographing mode will be described with reference to FIGS. 1 and 8.
【００７３】ここではシャッタースピード変更について
述べる。Here, changing the shutter speed will be described.
【００７４】注視点位置検出回路１０９より出力される
注視点情報は、ビューファインダ映像処理表示回路１１
０に入力されると共に撮影モード機能入力回路１２０に
も入力される。The gazing point information output from the gazing point position detection circuit 109 is the viewfinder video processing display circuit 11
It is input to 0 and also to the shooting mode function input circuit 120.
【００７５】ビューファインダ映像処理表示回路１１０
はファインダ画面１０２上に撮影画像と共に撮影者の注
視点を図８中に示す視点カーソルｐ３で表示する。Viewfinder video processing display circuit 110
Displays the gazing point of the photographer on the finder screen 102 together with the photographed image with the viewpoint cursor p3 shown in FIG.
【００７６】シャッタースピードの変更を行う場合はフ
ァインダ画面１０２上のシャッタースピード表示位置に
視線を向け、視点カーソルｐ３をシャッタースピード表
示位置に移動する（図８（Ａ）参照）。When the shutter speed is changed, the line of sight is directed to the shutter speed display position on the viewfinder screen 102 and the viewpoint cursor p3 is moved to the shutter speed display position (see FIG. 8A).
【００７７】この時、スイッチ１２１を操作することに
よりシャッタースピードが順次変更される（図８（Ｂ）
参照）。その変更情報は機能入力回路１２０よりビデオ
レンズ駆動回路１３１に入力され、シャッタースピード
が制御される。At this time, the shutter speed is sequentially changed by operating the switch 121 (FIG. 8B).
reference). The change information is input to the video lens drive circuit 131 from the function input circuit 120, and the shutter speed is controlled.
【００７８】尚、視線による撮影モード入力はシャッタ
ースピードだけに限るものではない。The shooting mode input by the line of sight is not limited to the shutter speed.
【００７９】[0079]
【発明の効果】以上説明したように、上記発明によれば
注視点検出手段により検出された注視点情報をモニター
用のビューファインダに表示させることにより、撮影者
はビデオカメラが被写体に対して正常に注視点を検出し
ているのを即座に確認しながら適切な撮影を行うことが
可能となる。As described above, according to the above invention, by displaying the gazing point information detected by the gazing point detecting means on the viewfinder for the monitor, the photographer can confirm that the video camera is normal to the subject. It is possible to perform appropriate shooting while immediately confirming that the gazing point is detected.
【００８０】例えば、撮影者の視線によるＡＦ，ＡＥ，
ＡＷＢ等を行う場合、撮影者は自分自身の注視点が正常
に検出されているかどうか確認しながら撮影できるの
で、誤動作を防止することができる。For example, AF, AE, depending on the line of sight of the photographer,
When performing AWB or the like, the photographer can take a photograph while confirming whether or not his / her gazing point is normally detected, so that a malfunction can be prevented.
【図１】本実施例に係るカメラ一体型ＶＴＲのブロック
図である。FIG. 1 is a block diagram of a camera-integrated VTR according to an embodiment.
【図２】図１の視線検出系の要部斜視図である。FIG. 2 is a perspective view of a main part of the line-of-sight detection system of FIG.
【図３】図２の光学原理図である。3 is an optical principle diagram of FIG.
【図４】本実施例に係る光電素子列上の反射象を説明す
る図である。FIG. 4 is a diagram illustrating a reflected image on a photoelectric element array according to the present embodiment.
【図５】本実施例に係る視線検出方法のシーケンスフロ
ーチャートである。FIG. 5 is a sequence flowchart of a visual line detection method according to the present embodiment.
【図６】本実施例に係るビューファインダ画面の表示例
を説明する図である。FIG. 6 is a diagram illustrating a display example of a viewfinder screen according to the present embodiment.
【図７】本実施例に係るビューファインダ画面の表示例
を説明する図である。FIG. 7 is a diagram illustrating a display example of a viewfinder screen according to the present embodiment.
【図８】本実施例に係るビューファインダ画面の表示例
を説明する図である。FIG. 8 is a diagram illustrating a display example of a viewfinder screen according to the present embodiment.
【図９】視線検出光学系の概略図である。FIG. 9 is a schematic view of a line-of-sight detection optical system.
【図１０】図９の光電素子列からの出力信号の強度図で
ある。10 is an intensity diagram of an output signal from the photoelectric element array in FIG.
２ ダイクロイックミラー ４ 受光レンズ ５ 照明手段 ６ 光電素子列 １０１ 電子ビューファインダ １０２ ファインダ画面 １０９ 注視点位置処理回路 １１０ ビューファインダ映像処理表示回路 2 dichroic mirror 4 light receiving lens 5 illumination means 6 photoelectric element array 101 electronic viewfinder 102 viewfinder screen 109 gazing point position processing circuit 110 viewfinder image processing display circuit
Claims (2)
ァインダを備えたビデオカメラであって、 撮影者の注視点を検出する注視点検出手段と、 前記注視点検出手段によって検出された注視点情報を前
記ビューファインダに表示する表示手段とを有すること
を特徴とするビデオカメラ。1. A video camera having a viewfinder for electrically displaying a photographed image and the like, wherein a gazing point detecting means for detecting a gazing point of a photographer, and a gazing point detected by the gazing point detecting means. A video camera, comprising: display means for displaying information on the viewfinder.
像に重ね合わせてビューファインダに表示することを特
徴とする請求項１のビデオカメラ。2. The video camera according to claim 1, wherein the display unit displays the gazing point information on a viewfinder by superimposing it on a captured image.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3218574A JPH0564061A (en) | 1991-08-29 | 1991-08-29 | Video camera |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3218574A JPH0564061A (en) | 1991-08-29 | 1991-08-29 | Video camera |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH0564061A true JPH0564061A (en) | 1993-03-12 |
Family
ID=16722082
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP3218574A Pending JPH0564061A (en) | 1991-08-29 | 1991-08-29 | Video camera |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0564061A (en) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6388707B1 (en) | 1994-04-12 | 2002-05-14 | Canon Kabushiki Kaisha | Image pickup apparatus having means for appointing an arbitrary position on the display frame and performing a predetermined signal process thereon |
| US6424376B1 (en) * | 1993-07-30 | 2002-07-23 | Canon Kabushiki Kaisha | Selection apparatus using an observer's line of sight |
| JP2005500630A (en) * | 2001-08-15 | 2005-01-06 | キネテイツク・リミテツド | Target tracking system |
| WO2007111383A1 (en) * | 2006-03-27 | 2007-10-04 | Fujifilm Corporation | Image recording apparatus, image recording method and image recording program |
| WO2007114405A1 (en) * | 2006-03-28 | 2007-10-11 | Fujifilm Corporation | Image recording apparatus, image recording method and image recording program |
-
1991
- 1991-08-29 JP JP3218574A patent/JPH0564061A/en active Pending
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6424376B1 (en) * | 1993-07-30 | 2002-07-23 | Canon Kabushiki Kaisha | Selection apparatus using an observer's line of sight |
| US6388707B1 (en) | 1994-04-12 | 2002-05-14 | Canon Kabushiki Kaisha | Image pickup apparatus having means for appointing an arbitrary position on the display frame and performing a predetermined signal process thereon |
| JP2005500630A (en) * | 2001-08-15 | 2005-01-06 | キネテイツク・リミテツド | Target tracking system |
| US7391887B2 (en) | 2001-08-15 | 2008-06-24 | Qinetiq Limited | Eye tracking systems |
| WO2007111383A1 (en) * | 2006-03-27 | 2007-10-04 | Fujifilm Corporation | Image recording apparatus, image recording method and image recording program |
| JP2007289659A (en) * | 2006-03-27 | 2007-11-08 | Fujifilm Corp | Image recording apparatus, image recording method, and image recording program |
| US9498123B2 (en) | 2006-03-27 | 2016-11-22 | Fujifilm Corporation | Image recording apparatus, image recording method and image recording program stored on a computer readable medium |
| WO2007114405A1 (en) * | 2006-03-28 | 2007-10-11 | Fujifilm Corporation | Image recording apparatus, image recording method and image recording program |
| US8150118B2 (en) | 2006-03-28 | 2012-04-03 | Fujifilm Corporation | Image recording apparatus, image recording method and image recording program stored on a computer readable medium |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH0846846A (en) | Image pickup device | |
| US5606390A (en) | Visual-line detecting device and optical apparatus having the same | |
| JPH0564061A (en) | Video camera | |
| JP3192483B2 (en) | Optical equipment | |
| JP3109870B2 (en) | Video camera | |
| JPH0556924A (en) | Video camera | |
| JPH05304631A (en) | Image pickup device | |
| JPH0541822A (en) | Video camera | |
| JPH0591394A (en) | Video camera | |
| JP3397335B2 (en) | Video camera | |
| JPH05183798A (en) | Video camera | |
| JPH05145830A (en) | Video camera | |
| JP3296578B2 (en) | camera | |
| JP3310999B2 (en) | Video camera | |
| JP3266293B2 (en) | Video camera | |
| JP3290450B2 (en) | Magnetic recording and photographing apparatus and focus control apparatus and method | |
| JPH05191710A (en) | Video camera | |
| JPH0568188A (en) | Video camera | |
| JPH0591391A (en) | Video camera | |
| JPH0568187A (en) | Video camera | |
| JPH05232372A (en) | Camera provided with device for detecting line of sight | |
| JPH05161038A (en) | Video camera | |
| JPH07336585A (en) | Observation device and image pickup device having the observation device | |
| JP2000131599A (en) | Device and camera having line-of-sight selecting function | |
| JPH05130479A (en) | Magnetic recording image pickup device |