JP2006338122A - Portable terminal device - Google Patents

Abstract

<P>PROBLEM TO BE SOLVED: To provide a portable terminal device applicable to a system performing strict personal identification based on a plurality of pieces of biological information including a face three-dimensional photographic image. <P>SOLUTION: The portable terminal device 10 includes a stereo camera module 17 capable of performing at least either three-dimensional photographing of the face of an authentication object person or photographing of the iris thereof. A control part 60 transmits, according to shutter operating input of an operation button 39, at least either the three-dimensional face information or the iris information to a host computer 71 through an external communication part 63 with identification information of the own device retained in a recording part 61. When the personal identification result by the host computer 17 is valid, access to security data managed by the host computer 71 is performed, and the accessed data is displayed on an LCD panel 31. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、認証対象者の入力操作が容易な携帯端末装置に関するものである。   The present invention relates to a portable terminal device that can be easily input by a person to be authenticated.

一般に、セキュリティシステムにより保護されたデータにアクセスするためには、人物認証によって対象者が予め登録された本人であることを確認する必要がある。こうした人物認証として、従来は、パスワード、バーコードや磁気ストライプによりデータを記録したｌＤカード、筆跡、指紋、声紋、手形等が利用されている。より、一層厳密な認証を行うためには、生体自身の特徴点を示す生体情報（バイオメトリックス）に基く方式が望まれている。更には、複数の生体情報に基いて認証がなされることが望ましいとされている。   In general, in order to access data protected by a security system, it is necessary to confirm that the target person is a registered person in advance by person authentication. Conventionally, as such person authentication, an ID card, data, a handwriting, a fingerprint, a voiceprint, a bill, and the like on which data is recorded by a password, a barcode, or a magnetic stripe are used. In order to perform more strict authentication, a system based on biometric information (biometrics) indicating a feature point of the biometric body is desired. Furthermore, it is desirable that authentication is performed based on a plurality of pieces of biological information.

そして、例えば、下記特許文献１には、顔面画像中の特徴点のセット候補を複数抽出し、テンプレートパターンとの照合により適合度の高いセット候補を選択して正規化画像を生成し、この正規化画像と登録データとを比較して顔面認証を行う技術が開示されている（例えば、特許文献１参照）。   For example, in Patent Document 1 below, a plurality of feature point set candidates in a face image are extracted, a set candidate having a high degree of matching is selected by matching with a template pattern, and a normalized image is generated. A technique for performing face authentication by comparing a digitized image with registered data is disclosed (for example, see Patent Document 1).

また、顔面認証としては、認証用の閾値を動的に変更可能な顔面認証技術が開示されている（例えば、特許文献２参照）。更に、顔面を含む複合認証として、バーコード読取装置、指紋センサ、顔面認証カメラを一体化したことにより、複合情報に基いて人物認証を行うシステムが開示されている（例えば、特許文献３参照）。   In addition, as face authentication, a face authentication technique capable of dynamically changing the threshold value for authentication is disclosed (for example, see Patent Document 2). Furthermore, a system that performs person authentication based on composite information by integrating a barcode reader, a fingerprint sensor, and a face authentication camera as composite authentication including a face is disclosed (for example, see Patent Document 3). .

そして、虹彩認証として、被認証者が撮影範囲に入る前に認証画像撮像手段の配向を適正位置に合せることにより、撮影準備時間を短縮した虹彩撮影装置が開示されている（例えば、特許文献４参照）。   As an iris authentication, an iris photographing apparatus is disclosed in which the preparation time for photographing is shortened by aligning the orientation of the authentication image photographing means to an appropriate position before the person to be authenticated enters the photographing range (for example, Patent Document 4). reference).

また、ＩＤ入力として、医用画像撮影システムに適用されるＰＤＡ装置に於いて、使用者に付されたＩＤコードを入力してローカルエリアネットワークにログインするセキュリティシステムが知られている（例えば、特許文献５参照）。
特開平９−２５１５３４号公報 特開２００２−１８３７３４公報 特開２００３−１６８０８４公報 特開２００４−２９７５１８公報 特開２００４−１４７９０７公報 In addition, a security system is known in which an ID code assigned to a user is input to log in to a local area network in a PDA device applied to a medical imaging system as an ID input (for example, patent document). 5).
JP-A-9-251534 JP 2002-183734 A JP 2003-168084 A JP 2004-297518 A JP 2004-147907 A

ところで、厳密な人物認証を要する例として、医療機関に於いて治療対象となる複数患者に対して、交代勤務制の複数人員で対応する場合であって、医師により患者毎に指定された投薬を行うような場合を考えると、個々の患者とそれぞれに対する投薬との組合わせに誤りがあってはならないことは容易に理解されるところである。   By the way, as an example that requires strict person authentication, it is a case where multiple patients who are treatment targets in a medical institution are handled by multiple staff members in shift work, and the medication specified by the doctor for each patient is given. Given the cases to do, it is readily understood that there should be no error in the combination of individual patients and medications for each.

一方で、上述した特許文献１乃至５に記載されたような技術による顔面認証、バーコード、指紋といった本人認証の信頼性には限界がある。例えば、ＲＦ−ＩＤタグ、バーコードでは、取り付け間違いが発生すれば致命的である。また、２次元画像での顔面認証を追加したとしても、ＬＣＤ上のデータ画像と本人を見た人の認識に委ねられることになる。加えて、指紋認証に於いても、リトライの場合が多く、実際の使用場面に於いては現実的なものになり得ていないものである。   On the other hand, there is a limit to the reliability of identity authentication such as face authentication, barcode, and fingerprint by the techniques described in Patent Documents 1 to 5 described above. For example, RF-ID tags and barcodes are fatal if an attachment error occurs. Even if facial authentication is added with a two-dimensional image, it is left to the recognition of the person who viewed the data image on the LCD and the person himself / herself. In addition, in fingerprint authentication, there are many cases of retries, which cannot be realistic in actual use situations.

したがって本発明は、顔面立体撮影画像を含む複数の生体情報に基いて厳密な個人認証を行うシステムに適用可能な携帯端末装置を提供することを目的とする。   Therefore, an object of the present invention is to provide a portable terminal device that can be applied to a system that performs strict personal authentication based on a plurality of pieces of biological information including a face stereoscopic image.

すなわち、請求項１に記載の発明は、画像表示手段、手動操作手段、記憶手段、外部通信手段及び制御手段を備えた携帯端末装置であって、認証対象者の顔面を立体撮影及び虹彩の少なくとも何れか一方を撮影可能なステレオ撮像ユニットを具備し、上記制御手段は、上記手動操作手段の操作入力に応じて、立体顔面情報及び虹彩情報の少なくとも何れか一方を、上記記憶手段に保持された装置自身の識別情報と共に上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定のホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする。   That is, the invention described in claim 1 is a portable terminal device that includes an image display unit, a manual operation unit, a storage unit, an external communication unit, and a control unit. A stereo imaging unit capable of photographing either one of the three-dimensional face information and iris information is held in the storage unit in response to an operation input of the manual operation unit. Security that is sent to a predetermined host computer device through the external communication means together with the identification information of the device itself, and managed by the predetermined host computer device when the result of personal authentication by the predetermined host computer device is correct Data is accessed, and the accessed data is displayed on the image display means.

請求項２に記載の発明は、請求項１に記載の発明に於いて、上記認証対象者に付されたデジタルコードを読み取る読み取り手段を更に具備し、上記制御手段は、上記読み取り手段で読み取ったデジタルコード情報を上記記憶手段に保持された装置自身の識別情報と共に上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定のホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする。   The invention according to claim 2 further comprises reading means for reading the digital code given to the person to be authenticated in the invention according to claim 1, wherein the control means reads by the reading means. When digital code information is sent to a predetermined host computer device via the external communication means together with identification information of the device itself held in the storage means, and the personal authentication result by the predetermined host computer device is correct, Security data managed by the predetermined host computer device is accessed, and the accessed data is displayed on the image display means.

請求項３に記載の発明は、請求項２に記載の発明に於いて、上記認証対象者の指紋を認証する指紋認証手段を更に具備し、上記制御手段は、上記手動操作手段の操作入力に応じて、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報、上記認証対象者の指紋情報を、上記記憶手段に保持された装置自身の識別情報と共に、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする。   The invention according to claim 3 further comprises fingerprint authentication means for authenticating the fingerprint of the person to be authenticated, according to the invention according to claim 2, wherein the control means is used for operation input of the manual operation means. In response, at least one of the read digital code information, stereoscopic face information and iris information, and the fingerprint information of the person to be authenticated, together with the identification information of the device itself held in the storage means, the external communication When the personal authentication result by the predetermined host computer device is correct, the security data managed by the predetermined host computer device is accessed, and the accessed data is sent to the predetermined host computer device via the means. It is displayed on the image display means.

請求項４に記載の発明は、請求項２に記載の発明に於いて、音声認証手段を更に具備し、上記制御手段は、上記手動操作手段の操作入カに応じて、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報、認証対象者の音声情報を、上記記憶手段に保持された装置自身の識別情報と共に、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定ホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする。   According to a fourth aspect of the present invention, in the second aspect of the present invention, the voice authentication unit further includes a voice authentication unit, and the control unit controls the read digital code according to an operation input of the manual operation unit. Information, at least one of three-dimensional face information and iris information, and voice information of the person to be authenticated, together with identification information of the device itself held in the storage means, via the external communication means, a predetermined host computer device When the personal authentication result by the predetermined host computer device is correct, the security data managed by the predetermined host computer device is accessed, and the accessed data is displayed on the image display means. And

請求項５に記載の発明は、請求項３に記載の発明に於いて、音声認証手段を更に具備し、上記制御手段は、上記手動操作手段の操作入力に応じて、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報、指紋情報及び音声情報を、上記記憶手段に保持された装置自身の識別情報と共に、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする。   According to a fifth aspect of the present invention, in the third aspect of the invention, the voice authentication unit further includes a voice authentication unit, and the control unit reads the read digital code information in response to an operation input of the manual operation unit. , Information on at least one of three-dimensional face information and iris information, fingerprint information, and voice information are sent to a predetermined host computer device through the external communication unit together with identification information of the device itself held in the storage unit. When the result of personal authentication by the predetermined host computer device is correct, the security data managed by the predetermined host computer device is accessed, and the accessed data is displayed on the image display means. To do.

請求項６に記載の発明は、請求項１に記載の発明に於いて、上記ステレオ撮像ユニットは、単一の撮像素子を有することを特徴とする。   The invention described in claim 6 is the invention described in claim 1, wherein the stereo image pickup unit has a single image pickup device.

請求項７に記載の発明は、請求項１に記載の発明に於いて、上記ステレオ撮像ユニットは、一対の撮像素子を有することを特徴とする。   According to a seventh aspect of the invention, in the first aspect of the invention, the stereo imaging unit has a pair of imaging elements.

請求項８に記載の発明は、所定の案内枠を表示可能な画像表示手段と、撮影トリガを含む手動操作手段と、外部通信手段と、デジタルコード読み取り手段と、顔面の立体撮影及び虹彩撮影の少なくとも何れか一方の撮影を可能なステレオ撮像ユニットと、デジタルコード情報、顔面情報及び虹彩情報の少なくとも何れか一方の情報を、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定ホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行う制御手段と、を備え、上記制御手段は、上記撮影トリガの入カに応じて、上記画像表示手段に上記案内枠を表示させ、この案内枠内に認証対象者の顔が入ったときに撮影を行うことを特徴とする。   The invention according to claim 8 is an image display means capable of displaying a predetermined guide frame, a manual operation means including a photographing trigger, an external communication means, a digital code reading means, a stereoscopic photographing of the face and an iris photographing. A stereo imaging unit capable of photographing at least one of the information and at least one of digital code information, face information, and iris information is sent to a predetermined host computer device via the external communication means, and this predetermined Control means for accessing security data managed by the predetermined host computer device when the result of personal authentication by the host computer device is correct, the control means according to the input of the imaging trigger The guide frame is displayed on the image display means, and photographing is performed when the face of the person to be authenticated enters the guide frame. And wherein the door.

請求項９に記載の発明は、請求項８に記載の発明に於いて、上記ステレオ撮像ユニットの撮影光軸は、上記画像表示手段の表示画面と略直交することを特徴とする。   The invention described in claim 9 is the invention described in claim 8, characterized in that the photographing optical axis of the stereo imaging unit is substantially orthogonal to the display screen of the image display means.

請求項１０に記載の発明は、請求項８に記載の発明に於いて、上記ステレオ撮像ユニットの撮影光軸は、上記画像表示手段の表示画面と略平行であることを特徴とする。   According to a tenth aspect of the present invention, in the eighth aspect of the present invention, the photographing optical axis of the stereo imaging unit is substantially parallel to the display screen of the image display means.

請求項１１に記載の発明は、請求項８に記載の発明に於いて、上記ステレオ撮像ユニットは、回動可能であることを特徴とする。   The invention described in claim 11 is the invention described in claim 8, wherein the stereo image pickup unit is rotatable.

請求項１２に記載の発明は、所定の案内枠を表示可能な画像表示手段と、撮影トリガを含む手動操作手段と、操作者に付与された固有のデジタルコードを読み取るデジタルコード読み取り手段と、外部通信手段と、顔面の立体撮影及び虹彩撮影の少なくとも何れか一方を撮影可能なステレオ撮像ユニットと、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報を、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定のホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行う制御手段と、を具備し、上記制御手段は、上記撮影トリガが入力されると、上記画像表示手段に操作者の顔を表示させ、該操作者の顔が所定の大きさになったときに撮影を行うことを特徴とする。   According to a twelfth aspect of the present invention, there is provided an image display means capable of displaying a predetermined guide frame, a manual operation means including a photographing trigger, a digital code reading means for reading a unique digital code given to an operator, and an external A communication unit; a stereo imaging unit capable of photographing at least one of three-dimensional imaging and iris imaging; and at least one of the read digital code information, three-dimensional facial information and iris information. Control means for accessing security data managed by the predetermined host computer device when the result of personal authentication by the predetermined host computer device is correct, The control means operates the image display means when the shooting trigger is input. To display the person's face, the face of 該操 authors and performing photographing when a predetermined magnitude.

請求項１３に記載の発明は、請求項１２に記載の発明に於いて、上記制御手段は、上記撮影トリガが入力されると、上記画像表示手段に上記案内枠を表示させ、この案内枠内に操作者の顔が入ったときに撮影を行うことを特徴とする。   According to a thirteenth aspect of the present invention, in the invention according to the twelfth aspect, when the photographing trigger is input, the control means displays the guide frame on the image display means, and the inside of the guide frame is displayed. When the operator's face enters, shooting is performed.

請求項１４に記載の発明は、請求項１２に記載の発明に於いて、上記ステレオ撮像ユニットの撮影光軸は、上記画像表示手段の表示画面と略直交することを特徴とする。   The invention described in claim 14 is characterized in that, in the invention described in claim 12, the photographing optical axis of the stereo imaging unit is substantially orthogonal to the display screen of the image display means.

本発明によれば、顔面立体撮影画像を含む複数の生体情報に基いて厳密な個人認証を行うシステムに適用可能な携帯端末装置を提供することができる。   According to the present invention, it is possible to provide a mobile terminal device that can be applied to a system that performs strict personal authentication based on a plurality of pieces of biological information including a face stereoscopic image.

更に、本発明によれば、顔面立体撮影画像を含む複数の生体情報に基いて厳密な個人認証を行うシステムに適用可能な携帯端末装置に於いて顔面撮影時の使い勝手を向上することができる。   Furthermore, according to the present invention, it is possible to improve the usability at the time of face photographing in a portable terminal device that can be applied to a system that performs strict personal authentication based on a plurality of biological information including a three-dimensional facial image.

以下、図面を参照して本発明の実施形態について説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

（第１の実施形態）
図１は、本発明の第１の実施形態に係る携帯端末装置の構成を示す分解斜視図である。
図１に示されるように、この携帯端末装置１０は、上部枠１１と下部枠１２とが外部筐体として構成される。そして、下部枠１２の長手方向と直交する方向の下部枠１２には、詳細を後述するステレオカメラモジュール１７が嵌挿されるべく開口１５が形成されている。ステレオカメラモジュール１７は、ステレオカメラモジュール固定板１８と、カメラ部分を内蔵するハウジング部１９とより構成されるもので、このハウジング部１９が上記開口１５に嵌挿されて固定される。下部枠１２内には、また、ＲＦ−ＩＤアンテナ２０と、バッテリ２２を装着する際の凹み２１が設けられている。バッテリ２２は、図１に於いて下方側より上記凹み２１に装着されるもので、バッテリ蓋２３が下部枠１２と係合することによって、該下部枠１２からバッテリ２２が脱落することを防止している。 (First embodiment)
FIG. 1 is an exploded perspective view showing the configuration of the mobile terminal device according to the first embodiment of the present invention.
As shown in FIG. 1, the mobile terminal device 10 includes an upper frame 11 and a lower frame 12 as an external housing. An opening 15 is formed in the lower frame 12 in a direction orthogonal to the longitudinal direction of the lower frame 12 so that a stereo camera module 17 described later in detail can be inserted. The stereo camera module 17 is composed of a stereo camera module fixing plate 18 and a housing part 19 containing a camera part. The housing part 19 is fitted into the opening 15 and fixed. In the lower frame 12, an RF-ID antenna 20 and a recess 21 for mounting the battery 22 are provided. The battery 22 is attached to the recess 21 from the lower side in FIG. 1, and the battery cover 23 is engaged with the lower frame 12 to prevent the battery 22 from dropping from the lower frame 12. ing.

上記下部枠１２と上部枠１１の間には、本体基板２５及び補強部材３０が介在されている。本体基板２５の上面側には、表示部として液晶表示素子（ＬＣＤ）で構成されるＬＣＤパネル３１が実装される。また、本体基板２５の上面側には、後述する各操作釦３９に対応するように、複数のスイッチ２６及びキー入力部２７と、デジタルコード読み取り手段であるバーコードリーダ部２８が実装されている。バーコードリーダ部２８は、図５に示されるバーコード処理部６６の一部を成し、例えば、周知のレーザビームスキャン方式のリーダを利用することができる。尚、本体基板２５の図示されない裏面側には、後述する制御部６０、メモリ部６５等、図５に示される各構成部位に対応する回路素子が実装されている。   A main body substrate 25 and a reinforcing member 30 are interposed between the lower frame 12 and the upper frame 11. An LCD panel 31 composed of a liquid crystal display element (LCD) is mounted on the upper surface side of the main body substrate 25 as a display unit. A plurality of switches 26 and a key input unit 27 and a barcode reader unit 28 serving as a digital code reading unit are mounted on the upper surface side of the main body substrate 25 so as to correspond to each operation button 39 described later. . The barcode reader unit 28 forms a part of the barcode processing unit 66 shown in FIG. 5, and for example, a known laser beam scanning reader can be used. Circuit elements corresponding to the components shown in FIG. 5, such as a control unit 60 and a memory unit 65, which will be described later, are mounted on the back side (not shown) of the main board 25.

上部枠１１の上面部には、上述したＬＣＤパネル３１の画面が嵌挿されるための開口３５が形成されている。つまり、このＬＣＤパネル３１の表示面は、ステレオカメラモジュール１７の光軸方向とは平行になるように配置されている。上記開口３５の近傍には、複数の入力キー３８と、撮影トリガを行うためのシャッタスイッチやモード選択等の指示を行うスイッチに対応した複数の操作釦３９と、個人認証用の指紋センサ４１とが設けられている。指紋センサ４１は、静電容量検出方式や光学読み取り方式のセンサを利用することができる。手動操作手段である上記入力キー３８、操作釦３９と、上述したスイッチ２６及びキー入力部２７により、後述する入力部６４が構成される。また、上部枠１１外周側面部には、ステレオカメラモジュール１７を使用して撮影を行う際の補助発光を行うためのストロボ３６や外部通信部を構成するアンテナ４２、音声入力端子４３ａ及び音声出力端子４３ｂ等が設けられている。音声入力端子４３ａ及び音声出力端子４３ｂは、図５に示される音声入出力部４３を構成する。   An opening 35 is formed in the upper surface of the upper frame 11 for receiving the screen of the LCD panel 31 described above. That is, the display surface of the LCD panel 31 is disposed so as to be parallel to the optical axis direction of the stereo camera module 17. In the vicinity of the opening 35, a plurality of input keys 38, a plurality of operation buttons 39 corresponding to a shutter switch for triggering shooting and a switch for instructing mode selection, etc., a fingerprint sensor 41 for personal authentication, Is provided. The fingerprint sensor 41 can use a capacitance detection type sensor or an optical reading type sensor. The input key 38 and the operation button 39 which are manual operation means, the switch 26 and the key input unit 27 described above constitute an input unit 64 which will be described later. Further, on the outer peripheral side surface of the upper frame 11, a strobe 36 for performing auxiliary light emission when shooting using the stereo camera module 17, an antenna 42 constituting an external communication unit, an audio input terminal 43 a, and an audio output terminal 43b and the like are provided. The audio input terminal 43a and the audio output terminal 43b constitute the audio input / output unit 43 shown in FIG.

図２は、上述したステレオカメラモジュールの第１の構成例を示すもので、（ａ）は対物レンズ側から見た正面図、（ｂ）は側断面図、（ｃ）は一部を切り欠いて見た平面図である。ここで、第１の構成例としては、２つの撮像光学系に対して２つの撮像素子を有したステレオカメラモジュール１７を示している。   2A and 2B show a first configuration example of the above-described stereo camera module, where FIG. 2A is a front view seen from the objective lens side, FIG. 2B is a side sectional view, and FIG. FIG. Here, as a first configuration example, a stereo camera module 17 having two imaging elements for two imaging optical systems is shown.

このステレオカメラモジュール１７は、所定の間隔をおいて２つの撮像光学系が配置されている。このステレオカメラモジュール１７は、それぞれの光軸が略平行に配置された対物レンズ４７ａ、４７ｂと、これらの対物レンズ４７ａ、４７ｂの後方に配置されたリレーレンズ４８ａ、４８ｂと、上記対物レンズ４７ａ、４７ｂ及びリレーレンズ４８ａ、４８ｂを介して取り込まれた図示されない被写体の像を結像する撮像素子５０ａ、５０ｂとにより構成される。尚、リレーレンズ４８ａ及び４８ｂは、支え部材４９ａ及び４９ｂによって、それぞれハウジング部１９内に固定支持されている。   The stereo camera module 17 has two imaging optical systems arranged at a predetermined interval. The stereo camera module 17 includes objective lenses 47a and 47b in which the optical axes are arranged substantially in parallel, relay lenses 48a and 48b arranged behind the objective lenses 47a and 47b, and the objective lenses 47a, 47b, 47b and imaging elements 50a and 50b that form an image of a subject (not shown) captured via the relay lenses 48a and 48b. The relay lenses 48a and 48b are fixedly supported in the housing portion 19 by supporting members 49a and 49b, respectively.

図３は、上述したステレオカメラモジュールの第２の構成例を示すもので、（ａ）は対物レンズ側から見た正面図、（ｂ）は側断面図、（ｃ）は一部を切り欠いて見た平面図である。ここで、第２の構成例としては、２つの撮像光学系に対して１つの撮像素子を有したステレオカメラモジュール１７′を示している。   3A and 3B show a second configuration example of the above-described stereo camera module. FIG. 3A is a front view seen from the objective lens side, FIG. 3B is a side sectional view, and FIG. FIG. Here, as a second configuration example, a stereo camera module 17 ′ having one image pickup device for two image pickup optical systems is shown.

尚、第２の構成例に於けるステレオカメラモジュール１７′の構成については、一部を除いて図２に示される第１の構成例のステレオカメラモジュール１７の構成と同様であるので、同一の部分には同一の参照番号を付して、その図示及び説明を省略し、異なる部分についてのみ説明する。   The configuration of the stereo camera module 17 'in the second configuration example is the same as the configuration of the stereo camera module 17 of the first configuration example shown in FIG. Parts are denoted by the same reference numerals, illustration and description thereof are omitted, and only different parts will be described.

このステレオカメラモジュール１７′は、上述した２つの対物レンズ４７ａ、４７ｂと、２つのリレーレンズ４８ａ、４８ｂと、支え部材４９ａ、４９ｂの他に、反射板５２ａ、５２ｂと、リレーレンズ５３ａ、５３ｂと、プリズム５５と、１つの撮像素子５０とを有した構成となっている。プリズム５５は、図示されない被写体からの光を撮像素子５０の画面を２分割した上下各々半分に反射するためのものである。この場合、一方の対物レンズ４７ａから入射された図示されない被写体の像は、リレーレンズ４８ａを通って反射板５２ａで反射され、更にリレーレンズ５３ａを通ってプリズム５５により反射されて、撮像素子５０の結像面の、例えば上半分に結像される。また、他方の対物レンズ４７ｂから入射された図示されない被写体の像は、リレーレンズ４８ｂを通って反射板５２ｂで反射され、更にリレーレンズ５３ｂを通ってプリズム５５により反射されて、撮像素子５０の結像面の、例えば下半分に結像される。   The stereo camera module 17 ′ includes the above-described two objective lenses 47a and 47b, two relay lenses 48a and 48b, support members 49a and 49b, a reflection plate 52a and 52b, and relay lenses 53a and 53b. The prism 55 and one image sensor 50 are provided. The prism 55 is for reflecting light from a subject (not shown) to the upper and lower halves obtained by dividing the screen of the image sensor 50 into two. In this case, an image of a subject (not shown) incident from one objective lens 47a is reflected by the reflecting plate 52a through the relay lens 48a, and further reflected by the prism 55 through the relay lens 53a. The image is formed on the upper half of the image plane. Further, an image of a subject (not shown) incident from the other objective lens 47b is reflected by the reflecting plate 52b through the relay lens 48b, further reflected by the prism 55 through the relay lens 53b, and connected to the imaging device 50. The image is formed on, for example, the lower half of the image plane.

図４は、上述したステレオカメラモジュールの第２の構成例の変形例を示すもので、（ａ）は一部を切り欠いて見た平面図、（ｂ）は背面図である。ここで、第２の構成例の変形例としては、上述した第２の構成例のステレオカメラモジュール１７′がハウジング１９′内に対物レンズ方向と反対方向に撮像素子の撮像面を向けた１つの撮像素子を配置していたのに対し、この変形例によるステレオカメラモジュール１７″では撮像素子の撮像面を対物レンズと同方向に向けて配置した点が異なっている。その他の部分の構成は、図３に示される上述した第２の構成例と同様であるので、説明は省略する。   4A and 4B show a modification of the above-described second configuration example of the stereo camera module. FIG. 4A is a plan view with a part cut away, and FIG. 4B is a rear view. Here, as a modification of the second configuration example, the stereo camera module 17 ′ of the second configuration example described above is one in which the imaging surface of the imaging device is directed in the opposite direction to the objective lens direction in the housing 19 ′. Whereas the image pickup device is arranged, the stereo camera module 17 ″ according to this modification is different in that the image pickup surface of the image pickup device is arranged in the same direction as the objective lens. Since this is the same as the above-described second configuration example shown in FIG.

これら第２の構成例及びその変形例によるステレオカメラモジュール１７′及び１７″は、第１の構成例によるステレオカメラモジュール１７が２つの撮像素子を用いているのに対して１つでよいので、コストを抑えることができる。   The stereo camera modules 17 ′ and 17 ″ according to the second configuration example and the modifications thereof may be one, whereas the stereo camera module 17 according to the first configuration example uses two imaging elements. Cost can be reduced.

図５は、本発明の第１の実施形態に係る携帯端末装置１０の構成を示すブロック図である。
図５に於いて、制御部６０は指紋認証手段及び音声認証手段としての機能を有するものであり、この携帯端末装置１０の各構成部位を含む全体の動作を制御するＣＰＵ等から構成される。そして、この制御部６０には、上述したステレオカメラモジュール１７と、ＲＦ−ＩＤアンテナ２０と、表示部３１と、ストロボ３６と、指紋センサ４１と、音声入出力部４３と、記録部６１と、外部通信部６３と、入力部６４と、メモリ部６５と、バーコード処理部６６とが接続されている。指紋センサ４１により読み取られた指紋は、制御部６０により特徴点群のみが抽出され、少ないいて量で個人の特定を行うように構成される。 FIG. 5 is a block diagram showing the configuration of the mobile terminal device 10 according to the first embodiment of the present invention.
In FIG. 5, the control unit 60 has functions as a fingerprint authentication unit and a voice authentication unit, and is configured by a CPU or the like that controls the entire operation including each component of the mobile terminal device 10. The control unit 60 includes the above-described stereo camera module 17, the RF-ID antenna 20, the display unit 31, the strobe 36, the fingerprint sensor 41, the voice input / output unit 43, the recording unit 61, An external communication unit 63, an input unit 64, a memory unit 65, and a barcode processing unit 66 are connected. Only the feature point group is extracted from the fingerprint read by the fingerprint sensor 41 by the control unit 60, and the person is specified with a small amount.

上記ステレオカメラモジュール１７は、上述した対物レンズ、リレーレンズ等から成る撮像光学系６９と、撮像素子５０と、この撮像素子５０により得られた被写体（図示せず）の信号を処理する画像処理部７０とで構成される。音声入出力部４３は、音声入力端子４３ａと出力端子４３ｂとより成るもので、外部との音声の入出力を行うためのものである。音声入力端子４３ａにより入力された音声は、制御部６０によって、例えば声紋を抽出し、適宜なデータ処理を行うことにより、少ないデータ量で話者の特定を行うように構成される。記録部６１は、該記録部６１に着脱自在な記録媒体（メモリカード等）６２に処理されたデータや画像等を記録するためのものである。但し、記録部６１は、記録媒体６２に対して情報を記録するだけでなく、記録媒体６２に記録された情報を読み出して取り込む機能を有してもよい。   The stereo camera module 17 includes an imaging optical system 69 including the above-described objective lens, relay lens, and the like, an imaging element 50, and an image processing unit that processes a signal of a subject (not shown) obtained by the imaging element 50. 70. The audio input / output unit 43 includes an audio input terminal 43a and an output terminal 43b, and is used to input / output audio from / to the outside. The voice input from the voice input terminal 43a is configured to identify a speaker with a small amount of data by, for example, extracting a voice print by the control unit 60 and performing appropriate data processing. The recording unit 61 is for recording processed data, images, and the like on a recording medium (memory card or the like) 62 that is detachable from the recording unit 61. However, the recording unit 61 may not only record information on the recording medium 62 but also have a function of reading and capturing information recorded on the recording medium 62.

外部通信部６３は、ＲＳ２３２Ｃ、無線ＬＡＮ、ブルートゥース等により構成されるもので、装置外部のホストコンピュータ７１等と通信を行うものである。入力部６４は、装置本体に設けられた複数の入力キー３８及び操作釦３９によってキー入力及びモード選択等の指示を行うためのものである。メモリ部６５は、動作及び処理のためのプログラムを予め記憶するものである。また、バーコード処理部６６は、バーコードリーダ部２８で読み取ったバーコードを解読するための処理部である。   The external communication unit 63 is configured by RS232C, wireless LAN, Bluetooth, or the like, and communicates with a host computer 71 or the like outside the apparatus. The input unit 64 is for instructing key input and mode selection by a plurality of input keys 38 and operation buttons 39 provided on the apparatus main body. The memory unit 65 stores a program for operation and processing in advance. The barcode processing unit 66 is a processing unit for decoding the barcode read by the barcode reader unit 28.

ここで、図６を参照して、この携帯端末装置１０のステレオカメラモジュール１７に於ける測距式を簡単に説明する。   Here, with reference to FIG. 6, the distance measuring method in the stereo camera module 17 of the mobile terminal device 10 will be briefly described.

図６（ａ）に於いて、焦点距離ｆの受光レンズ７５ａ及び７５ｂが、レンズ間距離（基線長）Ｂをおいて配置されている。そして、これらの受光レンズ７５ａ及び７５ｂの後方に焦点距離ｆだけ離れた位置に撮像素子５０ａ及び５０ｂが配置されている。この場合、撮像素子５０ａの結像位置に対する撮像素子５０ｂの結像位置をｘとすると、受光レンズ７５ａ及び７５ｂから被写体７３までの焦点距離Ｌは、周知の三角測距の原理に従って、次式の関係により求められる。
Ｌ＝Ｂ・ｆ／ｘ …（１）
但し、Ｌは被写体距離、Ｂは受光レンズ間の距離（基線長）、ｆは受光レンズの焦点距離である。
また、上記ｘが、受光位置の変位、すなわち受光レンズ７５ａ及び７５ｂによる左右対応点のズレである。このとき、撮像素子５０ａ及び５０ｂに結像される被写体像７６ａ及び７６ｂは、図６（ｂ）のように示される。 In FIG. 6A, the light receiving lenses 75a and 75b having a focal length f are arranged with a distance (baseline length) B between the lenses. The image sensors 50a and 50b are arranged behind the light receiving lenses 75a and 75b at positions separated by a focal length f. In this case, if the imaging position of the imaging device 50b with respect to the imaging position of the imaging device 50a is x, the focal length L from the light receiving lenses 75a and 75b to the subject 73 is expressed by the following equation according to the well-known principle of triangulation. Required by relationship.
L = B · f / x (1)
Here, L is the subject distance, B is the distance between the light receiving lenses (base line length), and f is the focal length of the light receiving lens.
Further, x is the displacement of the light receiving position, that is, the shift of the left and right corresponding points by the light receiving lenses 75a and 75b. At this time, the subject images 76a and 76b formed on the image sensors 50a and 50b are shown as shown in FIG.

尚、上述したステレオカメラモジュールの第２の構成例及びその変形例では、１つの撮像素子５０を上下に分割して被写体像を結像するようにしている。これらの場合は、図７（ａ）に示されるようにして、それぞれの受光レンズ７５ａ、７５ｂを介した被写体像が１つの撮像素子５０に結像される。そして、図７（ｂ）に示されるように、例えば左側の受光レンズ７５ａを通った被写体像が上側の被写体像７７ａとして結像され、右側の受光レンズ７５ｂを通った被写体像が下側の被写体像７７ｂとして結像される。   In the above-described second configuration example and modification of the stereo camera module, one image sensor 50 is vertically divided to form a subject image. In these cases, as shown in FIG. 7A, the subject image via the respective light receiving lenses 75 a and 75 b is formed on one image sensor 50. Then, as shown in FIG. 7B, for example, a subject image that has passed through the left light receiving lens 75a is formed as an upper subject image 77a, and a subject image that has passed through the right light receiving lens 75b is a lower subject. An image is formed as an image 77b.

次に、図８のフローチャートを参照して、本発明の第１の実施形態による携帯端末装置１０を用いた人物の認証動作について説明する。   Next, a person authentication operation using the mobile terminal device 10 according to the first embodiment of the present invention will be described with reference to the flowchart of FIG.

先ず、ステップＳ１に於いて、認証対象者である使用者によって操作釦３９内のシャッタスイッチがオンされる。続いて、ステップＳ２にて、制御部６０によってステレオカメラモジュール１７が起動されて撮像素子５０による撮像が開始されると共に被写体像が随時取り込まれる。そして、ステップＳ３にて、上記（１）式に従って測距計算が行われる。その結果、ステップＳ４にて、上記ステップＳ３での計算の結果、被写体となるべく人物の顔及び虹彩の認証が可能であるか否かが判定される。   First, in step S1, the shutter switch in the operation button 39 is turned on by the user who is the subject of authentication. Subsequently, in step S2, the stereo camera module 17 is activated by the control unit 60 and imaging by the imaging device 50 is started, and a subject image is captured as needed. In step S3, ranging calculation is performed according to the above equation (1). As a result, in step S4, it is determined as a result of the calculation in step S3 whether the human face and iris can be authenticated as much as possible.

この人物の顔及び虹彩の認証の判定については種々の方法があるが、本実施の形態に於いては次のようにして行う。図９の画像表示は、ＬかＲの画像を拡大して、どちらか一方を表示している。
先ず、上記ステップＳ２に於ける映像の取り込み時は、図９（ａ）に示されるように、ＬＣＤパネル３１の表示画面９０に対して被写体９１が所定の大きさになるように、携帯端末装置を移動させる。このとき、図９（ｂ）に示されるように、表示画面９０上に複数本のガイド表示線９２を表示させるようにしてもよい。例えば、この場合、ガイド表示線９２により囲まれた枠内に被写体９１の顔が収まるようにすれば、認証が可能な状態となる。尚、設定時にガイド表示線９２の位置を決定することにより、枠の大きさは変更が可能である。このようにして、人物の認証が行われる。 There are various methods for determining the authentication of the person's face and iris. In the present embodiment, the determination is performed as follows. In the image display of FIG. 9, either the L or R image is enlarged and one of them is displayed.
First, at the time of capturing an image in the above step S2, as shown in FIG. 9A, the portable terminal device is set so that the subject 91 has a predetermined size with respect to the display screen 90 of the LCD panel 31. Move. At this time, as shown in FIG. 9B, a plurality of guide display lines 92 may be displayed on the display screen 90. For example, in this case, if the face of the subject 91 is set within the frame surrounded by the guide display line 92, authentication is possible. The size of the frame can be changed by determining the position of the guide display line 92 at the time of setting. In this way, person authentication is performed.

ここで、人物の認証ができない場合は、上記ステップＳ２に移行して移行の処理が繰り返される。一方、上記ステップＳ４にて人物の認証ができた場合は、ステップＳ５に移行して当該人物の顔の撮影が行われる。次いで、ステップＳ６にて、上記ステップＳ５にて撮影された人物の顔の画像が、外部通信部６３を介してホストコンピュータ７１内のサーバ等に転送される。そして、ステップＳ７に於いて、上記サーバ内に記録されているデータと、本携帯端末装置１０で得られた撮影画像とが比較されて認証処理が行われる。その後、ステップＳ８に於いて、セキュリティデータへのアクセスの許可の有無が判定される。その結果、アクセスが許可されたならば本シーケンスが終了する。一方、アクセスが許可されない場合は、上記ステップＳ１に移行して移行の処理が繰り返される。   If the person cannot be authenticated, the process proceeds to step S2 and the process of shifting is repeated. On the other hand, if the person can be authenticated in step S4, the process moves to step S5 and the face of the person is photographed. Next, in step S <b> 6, the image of the person's face photographed in step S <b> 5 is transferred to a server or the like in the host computer 71 via the external communication unit 63. In step S7, the data recorded in the server is compared with the photographed image obtained by the portable terminal device 10 to perform authentication processing. Thereafter, in step S8, it is determined whether or not access to the security data is permitted. As a result, if access is permitted, this sequence ends. On the other hand, if access is not permitted, the process proceeds to step S1 and the process of shifting is repeated.

このように、第１の実施形態によれば、ステレオカメラモジュール１７によって、顔面立体撮影画像を含む複数の生体情報に基いて厳密な個人認証を行うことができる。   As described above, according to the first embodiment, the stereo camera module 17 can perform strict personal authentication based on a plurality of pieces of biological information including a face stereoscopic image.

尚、上述した第１の実施形態では、ステレオカメラモジュールは撮像素子を２つ用いた第１の構成例として動作を説明したが、これに限られるものではなく、上述した第２の構成例及びその変形例によるステレオカメラモジュール１７′及び１７″を用いても同様の効果を得ることができる。   In the above-described first embodiment, the operation of the stereo camera module is described as the first configuration example using two imaging elements. However, the operation is not limited to this, and the above-described second configuration example and The same effect can be obtained by using stereo camera modules 17 'and 17 "according to the modification.

（第２の実施形態）
次に、本発明の第２の実施形態について説明する。 (Second Embodiment)
Next, a second embodiment of the present invention will be described.

上述した第１の実施形態では、ステレオカメラモジュール１７の光軸方向はＬＣＤパネル３１の表示面と平行になるように配置されていたが、この第２の実施形態では、ステレオカメラモジュール１７の光軸方向をＬＣＤパネル３１の表示面と垂直な方向に配置している。   In the first embodiment described above, the optical axis direction of the stereo camera module 17 is arranged so as to be parallel to the display surface of the LCD panel 31, but in this second embodiment, the light of the stereo camera module 17 is arranged. The axial direction is arranged in a direction perpendicular to the display surface of the LCD panel 31.

以下、この第２の実施形態について説明するが、ステレオカメラモジュール１７の取り付け部分以外の携帯端末装置の構成については、図１乃至図９に示される第１の実施形態と同じであり、基本的な撮影動作についても同様である。したがって、これらの構成及び動作については、同一の部分には同一の参照番号を付して、その図示及び説明は省略する。   Hereinafter, the second embodiment will be described. The configuration of the mobile terminal device other than the portion where the stereo camera module 17 is attached is the same as that of the first embodiment shown in FIGS. The same applies to various photographing operations. Accordingly, for these configurations and operations, the same reference numerals are given to the same parts, and illustration and description thereof are omitted.

図１０は、本発明の第２の実施形態に係る携帯端末装置の構成を示す分解斜視図である。
図１０に示されるように、この携帯端末装置８０は、上部枠１１と下部枠８１とが外部筐体として構成される。そして、下部枠１２の底面部には、上述したステレオカメラモジュール１７が嵌挿されるべく開口８２が形成されている。つまり、ステレオカメラモジュール１７の光軸方向はＬＣＤパネル３１の表示面と垂直な方向で、且つＬＣＤパネル３１の表示面とは反対側に配置されている。 FIG. 10 is an exploded perspective view showing the configuration of the mobile terminal device according to the second embodiment of the present invention.
As shown in FIG. 10, the portable terminal device 80 includes an upper frame 11 and a lower frame 81 as an external housing. An opening 82 is formed in the bottom surface of the lower frame 12 so that the above-described stereo camera module 17 can be inserted therein. In other words, the optical axis direction of the stereo camera module 17 is arranged in a direction perpendicular to the display surface of the LCD panel 31 and on the side opposite to the display surface of the LCD panel 31.

尚、ここでは２つの撮像素子を有したステレオカメラモジュール１７について説明したが、上述した第２の構成例及びその変形例のように１つの撮像素子を有したステレオカメラモジュール１７′及び１７″を用いてもよいのは勿論である。   Although the stereo camera module 17 having two image sensors has been described here, the stereo camera modules 17 ′ and 17 ″ having one image sensor as in the above-described second configuration example and modifications thereof are used. Of course, it may be used.

このように第２の実施形態によれば、携帯端末装置のＬＣＤパネルの表示面を垂直方向にしても被写体を撮影することが可能となる。   As described above, according to the second embodiment, the subject can be photographed even when the display surface of the LCD panel of the portable terminal device is in the vertical direction.

（第３の実施形態）
図１１は、本発明の第３の実施形態に係る携帯端末装置の構成を示す外観斜視図である。尚、この第３の実施形態に於いて、ステレオカメラモジュール１７の取り付け部分以外の携帯端末装置の構成については、図１乃至図１０に示される第１及び第２の実施形態と同じであり、基本的な撮影動作についても同様である。したがって、これらの構成及び動作については、同一の部分には同一の参照番号を付して、その図示及び説明は省略する。 (Third embodiment)
FIG. 11 is an external perspective view showing the configuration of a mobile terminal device according to the third embodiment of the present invention. In the third embodiment, the configuration of the mobile terminal device other than the mounting portion of the stereo camera module 17 is the same as that of the first and second embodiments shown in FIGS. The same applies to the basic shooting operation. Accordingly, for these configurations and operations, the same reference numerals are given to the same parts, and illustration and description thereof are omitted.

図１１に示されるように、この携帯端末装置８５は、ＬＣＤパネル３１の表示面と同一面で、該ＬＣＤパネル３１の近傍に、ＬＣＤパネル３１の表示面と垂直方向に光軸を有したステレオカメラモジュール１７が取り付けられている。   As shown in FIG. 11, the portable terminal device 85 is a stereo having the same surface as the display surface of the LCD panel 31 and an optical axis in the vicinity of the LCD panel 31 in the direction perpendicular to the display surface of the LCD panel 31. A camera module 17 is attached.

尚、ここでは２つの撮像素子を有したステレオカメラモジュール１７について説明したが、上述した第２の構成例及びその変形例のように１つの撮像素子を有したステレオカメラモジュール１７′及び１７″を用いてもよいのは勿論である。   Although the stereo camera module 17 having two image sensors has been described here, the stereo camera modules 17 ′ and 17 ″ having one image sensor as in the above-described second configuration example and modifications thereof are used. Of course, it may be used.

このように第３の実施形態によれば、使用者本人の顔画像を撮影することが容易になる。   As described above, according to the third embodiment, it is easy to capture the face image of the user himself / herself.

（第４の実施形態）
図１２は、本発明の第４の実施形態に係る携帯端末装置の構成を示す外観斜視図である。尚、この第４の実施形態に於いて、ステレオカメラモジュール１７の取り付け部分以外の携帯端末装置の構成については、図１乃至図１１に示される第１乃至第３の実施形態と同じであり、基本的な撮影動作についても同様である。したがって、これらの構成及び動作については、同一の部分には同一の参照番号を付して、その図示及び説明は省略する。 (Fourth embodiment)
FIG. 12 is an external perspective view showing a configuration of a mobile terminal device according to the fourth embodiment of the present invention. In the fourth embodiment, the configuration of the mobile terminal device other than the mounting portion of the stereo camera module 17 is the same as that of the first to third embodiments shown in FIGS. The same applies to the basic shooting operation. Accordingly, for these configurations and operations, the same reference numerals are given to the same parts, and illustration and description thereof are omitted.

図１２に示されるように、この携帯端末装置８７は、上部枠８８のＬＣＤパネル３１の近傍に、図示矢印方向に、回動可能な（例えば、１８０度）ステレオカメラモジュール１７が取り付けられている。このステレオカメラモジュール１７は、回動範囲であれば何れの位置でも撮影が可能であるものとする。   As shown in FIG. 12, the portable terminal device 87 has a stereo camera module 17 that can be rotated (for example, 180 degrees) in the direction of the arrow in the vicinity of the LCD panel 31 of the upper frame 88. . It is assumed that the stereo camera module 17 can shoot at any position within the rotation range.

尚、ここでは２つの撮像素子を有したステレオカメラモジュール１７について説明したが、上述した第２の構成例及びその変形例のように１つの撮像素子を有したステレオカメラモジュール１７′及び１７″を用いてもよいのは勿論である。   Although the stereo camera module 17 having two image sensors has been described here, the stereo camera modules 17 ′ and 17 ″ having one image sensor as in the above-described second configuration example and modifications thereof are used. Of course, it may be used.

このように第４の実施形態によれば、被写体の形態に応じてステレオカメラモジュールの位置を調整することができるので、上述した第１乃至第３の実施形態よりも更に使い勝手が向上する。   As described above, according to the fourth embodiment, since the position of the stereo camera module can be adjusted according to the form of the subject, usability is further improved as compared with the first to third embodiments described above.

（第５の実施形態）
次に、本発明の第５の実施形態について説明する。 (Fifth embodiment)
Next, a fifth embodiment of the present invention will be described.

本第５の実施形態は、上述した第１乃至第４の実施形態に従って構成された携帯端末装置を使用した人物の認証動作の第２の例を説明するものである。したがって、携帯端末装置の構成は、図１乃至図１２に示される上述した第１乃至第４の実施形態と同じであるので、同一の部分には同一の参照番号を付してその図示及び説明は省略し、動作についてのみ説明する。   In the fifth embodiment, a second example of a person authentication operation using the mobile terminal device configured according to the first to fourth embodiments described above will be described. Accordingly, the configuration of the mobile terminal device is the same as that of the first to fourth embodiments described above shown in FIGS. 1 to 12, and therefore, the same reference numerals are given to the same portions, and the illustration and description thereof are given. Is omitted, and only the operation will be described.

図１３を参照して、本発明の第５の実施形態による携帯端末装置１０を用いた人物の認証動作について説明する。   With reference to FIG. 13, a person authentication operation using the mobile terminal device 10 according to the fifth embodiment of the present invention will be described.

先ず、ステップＳ１１に於いて、認証対象者である使用者によって操作釦３９内のシャッタスイッチがオンされる。続いて、ステップＳ１２にて、制御部６０によってステレオカメラモジュール１７が起動されて撮像素子５０による撮像が開始されると共に使用者本人の顔の映像が取り込まれる。そして、ステップＳ１３にて、撮影された使用者本人の顔の映像が、外部通信部６３を介してホストコンピュータ７１内のサーバ等に転送される。そして、ステップＳ１４に於いて、上記サーバ内に記録されているデータと、携帯端末装置１０で得られた撮影画像とが比較されて認証処理が行われる。   First, in step S11, the shutter switch in the operation button 39 is turned on by the user who is the subject of authentication. Subsequently, in step S12, the stereo camera module 17 is activated by the control unit 60 and imaging by the imaging device 50 is started, and an image of the face of the user is captured. In step S <b> 13, the photographed image of the user's face is transferred to a server or the like in the host computer 71 via the external communication unit 63. In step S14, the data recorded in the server is compared with the photographed image obtained by the mobile terminal device 10 to perform authentication processing.

次に、ステップＳ１５に於いて、上記ステップＳ１４にて行われた認証処理の結果が判定される。すなわち、認証の結果が、上記サーバに記録された登録者であると判定された場合はステップＳ１６へ移行する。一方、登録者でないと判定された場合は、上記ステップＳ１２へ移行して上記ステップＳ１２〜Ｓ１５の処理動作が繰り返される。   Next, in step S15, the result of the authentication process performed in step S14 is determined. That is, if it is determined that the authentication result is a registrant recorded in the server, the process proceeds to step S16. On the other hand, if it is determined that the user is not a registrant, the process proceeds to step S12, and the processing operations of steps S12 to S15 are repeated.

ステップＳ１６では、使用者本人であることが確定しているので、サーバ上から医療情報の取得準備が行われる。次いで、ステップＳ１７にて、使用者により指定された個人情報がサーバより送られてきて、携帯端末装置１０或いは図示されない他の端末装置のＬＣＤパネル等に開示される。   In step S <b> 16, since it is confirmed that the user is the user, preparation for acquiring medical information is performed from the server. Next, in step S17, personal information designated by the user is sent from the server and disclosed on the LCD panel or the like of the mobile terminal device 10 or another terminal device not shown.

このように、第５の実施形態によれば、ステレオカメラモジュール１７によって、個人認証を行うことができた場合にのみ、ホストコンピュータ等に対してデータリクエストが可能になるので、第３者に個人情報が漏洩することを防止できる。   As described above, according to the fifth embodiment, since the stereo camera module 17 can make a data request to the host computer or the like only when the personal authentication can be performed, Information can be prevented from leaking.

尚、上述した第５の実施形態では、ステレオカメラモジュールは撮像素子を２つ用いた第１の構成例として動作を説明したが、これに限られるものではなく、上述した第２の構成例及びその変形例によるステレオカメラモジュール１７′及び１７″を用いても同様の効果を得ることができる。また、携帯端末装置１０に限られずに、上述した第２乃至第４の実施形態で示された携帯端末装置８０、８５、８７を用いてもよいのは勿論である。   In the above-described fifth embodiment, the stereo camera module has been described as operating as a first configuration example using two imaging elements. However, the operation is not limited to this, and the above-described second configuration example and Similar effects can be obtained by using the stereo camera modules 17 ′ and 17 ″ according to the modified example. Further, the present invention is not limited to the portable terminal device 10 and has been described in the second to fourth embodiments. Of course, you may use the portable terminal device 80,85,87.

また、上述した第１乃至第５の実施形態に従った携帯端末装置は、以下のように使用することも可能である。   The portable terminal device according to the first to fifth embodiments described above can also be used as follows.

例えば、図１４に示されるように、ステレオカメラモジュール１７を搭載した携帯端末装置９５を使用して、被写体である容器９６を撮影する。これにより、撮影された容器９６の形状、色を認識することができるので、医療過誤を防止することができる。
更に、図１５に示されるように、ステレオカメラモジュール１７を搭載した携帯端末装置９８にＯＣＲ機能を持たせて、被写体である容器９９に貼着されたラベルの文字１００を読み込むことができるようにする。これにより、文字情報を認識することができるので、医療行為の信頼性を向上させることができる。 For example, as shown in FIG. 14, a container 96 that is a subject is photographed using a portable terminal device 95 equipped with a stereo camera module 17. Thereby, since the shape and color of the photographed container 96 can be recognized, a medical error can be prevented.
Further, as shown in FIG. 15, the portable terminal device 98 equipped with the stereo camera module 17 is provided with an OCR function so that the label character 100 attached to the container 99 as the subject can be read. To do. Thereby, since character information can be recognized, the reliability of medical practice can be improved.

また、図１６に示されるように、本携帯端末装置の機能を携帯電話機１０３に適用して、使用者１０４に対して認証を行うようにしてもよい。これにより、更に特定使用者の制限をかけることができる。   In addition, as shown in FIG. 16, the function of the mobile terminal device may be applied to the mobile phone 103 to authenticate the user 104. This can further limit the specific user.

以上、本発明の実施形態について説明したが、本発明の主旨を逸脱しない範囲で変形可能であることは勿論である。   The embodiment of the present invention has been described above, but it goes without saying that the present invention can be modified without departing from the gist of the present invention.

本発明の第１の実施形態に係る携帯端末装置の構成を示す分解斜視図である。It is a disassembled perspective view which shows the structure of the portable terminal device which concerns on the 1st Embodiment of this invention. ステレオカメラモジュールの第１の構成例を示すもので、（ａ）は対物レンズ側から見た正面図、（ｂ）は側断面図、（ｃ）は一部を切り欠いて見た平面図である。1 shows a first configuration example of a stereo camera module, where (a) is a front view seen from the objective lens side, (b) is a side sectional view, and (c) is a plan view seen with a part cut away. is there. ステレオカメラモジュールの第２の構成例を示すもので、（ａ）は対物レンズ側から見た正面図、（ｂ）は側断面図、（ｃ）は一部を切り欠いて見た平面図である。FIG. 2 shows a second configuration example of a stereo camera module, where (a) is a front view seen from the objective lens side, (b) is a side sectional view, and (c) is a plan view seen with a part cut away. is there. ステレオカメラモジュールの第２の構成例の変形例を示すもので、一部を切り欠いて見た平面図である。It is the top view which showed the modification of the 2nd structural example of a stereo camera module, and was cut away and looked at it. 本発明の第１の実施形態に係る携帯端末装置１０の構成を示すブロック図である。It is a block diagram which shows the structure of the portable terminal device 10 which concerns on the 1st Embodiment of this invention. 携帯端末装置１０のステレオカメラモジュール１７に於ける測距式を簡単に説明する図である。It is a figure which illustrates simply the ranging type in the stereo camera module 17 of the portable terminal device 10. FIG. ステレオカメラモジュールの第２の構成例及びその変形例による、１つの撮像素子５０を上下に分割して被写体像を結像する例を説明する図である。It is a figure explaining the example which forms the to-be-photographed image by dividing | segmenting one imaging element 50 up and down by the 2nd structural example of a stereo camera module, and its modification. 本発明の第１の実施形態による携帯端末装置１０を用いた人物の認証動作について説明するフローチャートである。It is a flowchart explaining the authentication operation | movement of the person using the portable terminal device 10 by the 1st Embodiment of this invention. 人物の顔及び虹彩の認証の判定方法を説明する図である。It is a figure explaining the determination method of authentication of a person's face and iris. 本発明の第２の実施形態に係る携帯端末装置の構成を示す分解斜視図である。It is a disassembled perspective view which shows the structure of the portable terminal device which concerns on the 2nd Embodiment of this invention. 本発明の第３の実施形態に係る携帯端末装置の構成を示す外観斜視図である。It is an external appearance perspective view which shows the structure of the portable terminal device which concerns on the 3rd Embodiment of this invention. 本発明の第４の実施形態に係る携帯端末装置の構成を示す外観斜視図である。It is an external appearance perspective view which shows the structure of the portable terminal device which concerns on the 4th Embodiment of this invention. 本発明の第５の実施形態による携帯端末装置１０を用いた人物の認証動作について説明するフローチャートである。It is a flowchart explaining the authentication operation | movement of the person using the portable terminal device 10 by the 5th Embodiment of this invention. ステレオカメラモジュール１７を搭載した携帯端末装置９５を使用して、被写体である容器９６を撮影する例を示した図である。It is the figure which showed the example which image | photographs the container 96 which is a to-be-photographed object using the portable terminal device 95 carrying the stereo camera module 17. FIG. ステレオカメラモジュール１７を搭載した携帯端末装置９８にＯＣＲ機能を持たせて、被写体である容器９９に貼着されたラベルの文字１００を読み込む例を示した図である。It is the figure which gave the OCR function to the portable terminal device 98 carrying the stereo camera module 17, and showed the example which reads the character 100 of the label affixed on the container 99 which is a to-be-photographed object. 本携帯端末装置の機能を携帯電話機１０３に適用して、使用者１０４に対０して認証を行う例を示した図である。It is the figure which applied the function of this portable terminal device to the mobile telephone 103, and showed the example which authenticates with respect to the user 104. FIG.

符号の説明Explanation of symbols

１０…携帯端末装置、１１…上部枠、１２…下部枠、１５、３５、４２…開口、１７、１７′、１７″…ステレオカメラモジュール、１８…ステレオカメラモジュール固定板、１９…ハウジング部、２０…ＲＦ−ＩＤアンテナ、２２…バッテリ、２５…本体基板、２８…バーコードリーダ部、３０…補強部材、３１…ＬＣＤパネル、３６…ストロボ、３８…入力キー、３９…操作釦、４１…指紋センサ、４７ａ、４７ｂ…対物レンズ、４８ａ、４８ｂ…リレーレンズ、５０、５０ａ、５０ｂ…撮像素子、５５…プリズム、６０…制御部（ＣＰＵ）、６１…記録部、６２…記録媒体、６３…外部通信部、６４…入力部、６５…メモリ部、６６…バーコード処理部、６９…撮像光学系、７０…画像処理部、７１…ホストコンピュータ。   DESCRIPTION OF SYMBOLS 10 ... Portable terminal device, 11 ... Upper frame, 12 ... Lower frame, 15, 35, 42 ... Opening, 17, 17 ', 17 "... Stereo camera module, 18 ... Stereo camera module fixing plate, 19 ... Housing part, 20 ... RF-ID antenna, 22 ... Battery, 25 ... Body substrate, 28 ... Bar code reader, 30 ... Reinforcing member, 31 ... LCD panel, 36 ... Strobe, 38 ... Input key, 39 ... Operation button, 41 ... Fingerprint sensor 47a, 47b ... objective lens, 48a, 48b ... relay lens, 50, 50a, 50b ... imaging element, 55 ... prism, 60 ... control unit (CPU), 61 ... recording unit, 62 ... recording medium, 63 ... external communication Reference numeral 64: Input unit 65: Memory unit 66: Bar code processing unit 69: Imaging optical system 70: Image processing unit 71: Host computer

Claims (14)

画像表示手段、手動操作手段、記憶手段、外部通信手段及び制御手段を備えた携帯端末装置であって、
認証対象者の顔面を立体撮影及び虹彩の少なくとも何れか一方を撮影可能なステレオ撮像ユニットを具備し、
上記制御手段は、上記手動操作手段の操作入力に応じて、立体顔面情報及び虹彩情報の少なくとも何れか一方を、上記記憶手段に保持された装置自身の識別情報と共に上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定のホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする携帯端末装置。 A portable terminal device comprising image display means, manual operation means, storage means, external communication means and control means,
A stereo imaging unit capable of photographing at least one of stereoscopic imaging and iris of the face of the person to be authenticated;
In response to an operation input of the manual operation means, the control means is configured to store at least one of the three-dimensional face information and the iris information together with the identification information of the device itself held in the storage means via the external communication means. When the personal authentication result by the predetermined host computer device is correct, the security data managed by the predetermined host computer device is accessed, and the accessed data is displayed on the image display means. A mobile terminal device characterized by being displayed on the screen. 上記認証対象者に付されたデジタルコードを読み取る読み取り手段を更に具備し、
上記制御手段は、上記読み取り手段で読み取ったデジタルコード情報を上記記憶手段に保持された装置自身の識別情報と共に上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定のホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする請求項１に記載の携帯端末装置。 It further comprises reading means for reading the digital code attached to the person to be authenticated,
The control means sends the digital code information read by the reading means to a predetermined host computer device via the external communication means together with the identification information of the device itself held in the storage means, and this predetermined host computer device 2. The security data managed by the predetermined host computer device is accessed when the result of personal authentication by the user is correct, and the accessed data is displayed on the image display means. Mobile terminal device. 上記認証対象者の指紋を認証する指紋認証手段を更に具備し、
上記制御手段は、上記手動操作手段の操作入力に応じて、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報、上記認証対象者の指紋情報を、上記記憶手段に保持された装置自身の識別情報と共に、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする請求項２に記載の携帯端末装置。 A fingerprint authentication means for authenticating the fingerprint of the person to be authenticated;
In response to an operation input of the manual operation means, the control means stores the read digital code information, at least one of the three-dimensional face information and iris information, and the fingerprint information of the person to be authenticated in the storage means. Along with the held identification information of the device itself, the information is sent to a predetermined host computer device via the external communication means, and managed by the predetermined host computer device when the personal authentication result by the predetermined host computer device is correct. 3. The portable terminal device according to claim 2, wherein the security data is accessed and the accessed data is displayed on the image display means. 音声認証手段を更に具備し、
上記制御手段は、上記手動操作手段の操作入カに応じて、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報、認証対象者の音声情報を、上記記憶手段に保持された装置自身の識別情報と共に、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定ホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする請求項２に記載の携帯端末装置。 Further comprising voice authentication means,
In response to an operation input of the manual operation means, the control means stores the read digital code information, at least one of the three-dimensional face information and iris information, and the voice information of the person to be authenticated in the storage means. Along with the held identification information of the device itself, it is sent to a predetermined host computer device via the external communication means, and is managed by the predetermined host computer device when the personal authentication result by the predetermined host computer device is correct. The mobile terminal device according to claim 2, wherein the security data is accessed and the accessed data is displayed on the image display means. 音声認証手段を更に具備し、
上記制御手段は、上記手動操作手段の操作入力に応じて、上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報、指紋情報及び音声情報を、上記記憶手段に保持された装置自身の識別情報と共に、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行い、アクセスしたデータを上記画像表示手段に表示させることを特徴とする請求項３に記載の携帯端末装置。 Further comprising voice authentication means,
In response to an operation input of the manual operation means, the control means holds at least one of the read digital code information, stereoscopic face information and iris information, fingerprint information and audio information in the storage means. Along with the identification information of the device itself, it is sent to a predetermined host computer device via the external communication means, and is managed by the predetermined host computer device when the personal authentication result by the predetermined host computer device is correct. 4. The portable terminal device according to claim 3, wherein security data is accessed, and the accessed data is displayed on the image display means. 上記ステレオ撮像ユニットは、単一の撮像素子を有することを特徴とする請求項１に記載の携帯端末装置。   The portable terminal device according to claim 1, wherein the stereo imaging unit includes a single imaging device. 上記ステレオ撮像ユニットは、一対の撮像素子を有することを特徴とする請求項１に記載の携帯端末装置。   The portable terminal device according to claim 1, wherein the stereo imaging unit includes a pair of imaging elements. 所定の案内枠を表示可能な画像表示手段と、撮影トリガを含む手動操作手段と、外部通信手段と、デジタルコード読み取り手段と、
顔面の立体撮影及び虹彩撮影の少なくとも何れか一方の撮影を可能なステレオ撮像ユニットと、
デジタルコード情報、顔面情報及び虹彩情報の少なくとも何れか一方の情報を、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定ホストコンピュータ装置による個人認証結果が是である際に、上記所定ホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行う制御手段と、
を備え、
上記制御手段は、上記撮影トリガの入カに応じて、上記画像表示手段に上記案内枠を表示させ、この案内枠内に認証対象者の顔が入ったときに撮影を行うことを特徴とする携帯端末装置。 Image display means capable of displaying a predetermined guide frame, manual operation means including a shooting trigger, external communication means, digital code reading means,
A stereo imaging unit capable of photographing at least one of stereoscopic photographing and iris photographing of the face;
When at least one of digital code information, facial information and iris information is sent to a predetermined host computer device via the external communication means, and the personal authentication result by the predetermined host computer device is correct, Control means for accessing security data managed by the predetermined host computer device;
With
The control means causes the image display means to display the guide frame in response to an input of the shooting trigger, and performs shooting when the face of the person to be authenticated enters within the guide frame. Mobile terminal device. 上記ステレオ撮像ユニットの撮影光軸は、上記画像表示手段の表示画面と略直交することを特徴とする請求項８に記載の携帯端末装置。   9. The portable terminal device according to claim 8, wherein a photographing optical axis of the stereo imaging unit is substantially orthogonal to a display screen of the image display means. 上記ステレオ撮像ユニットの撮影光軸は、上記画像表示手段の表示画面と略平行であることを特徴とする請求項８に記載の携帯端末装置。   9. The portable terminal device according to claim 8, wherein a photographing optical axis of the stereo imaging unit is substantially parallel to a display screen of the image display unit. 上記ステレオ撮像ユニットは、回動可能であることを特徴とする請求項８に記載の携帯端末装置。   The portable terminal device according to claim 8, wherein the stereo imaging unit is rotatable. 所定の案内枠を表示可能な画像表示手段と、
撮影トリガを含む手動操作手段と、
操作者に付与された固有のデジタルコードを読み取るデジタルコード読み取り手段と、
外部通信手段と、
顔面の立体撮影及び虹彩撮影の少なくとも何れか一方の撮影が可能なステレオ撮像ユニットと、
上記読み取ったデジタルコード情報、立体顔面情報及び虹彩情報の少なくとも何れか一方の情報を、上記外部通信手段を介して所定のホストコンピュータ装置に送出し、この所定のホストコンピュータ装置による個人認証結果が是である際に、上記所定のホストコンピュータ装置により管理されるセキュリティデータヘのアクセスを行う制御手段と、
を具備し、
上記制御手段は、上記撮影トリガが入力されると、上記画像表示手段に操作者の顔を表示させ、該操作者の顔が所定の大きさになったときに撮影を行うことを特徴とする携帯端末装置。 Image display means capable of displaying a predetermined guide frame;
Manual operation means including a shooting trigger;
A digital code reading means for reading a unique digital code given to the operator;
An external communication means;
A stereo imaging unit capable of photographing at least one of stereoscopic photographing and iris photographing of the face;
At least one of the read digital code information, stereoscopic face information and iris information is sent to a predetermined host computer device via the external communication means, and the personal authentication result by the predetermined host computer device is corrected. Control means for accessing security data managed by the predetermined host computer device,
Comprising
The control unit displays the operator's face on the image display unit when the shooting trigger is input, and performs shooting when the operator's face becomes a predetermined size. Mobile terminal device. 上記制御手段は、上記撮影トリガが入力されると、上記画像表示手段に上記案内枠を表示させ、この案内枠内に操作者の顔が入ったときに撮影を行うことを特徴とする請求項１２に記載の携帯端末装置。   The control means causes the image display means to display the guide frame when the shooting trigger is input, and takes a picture when an operator's face enters the guide frame. 12. The mobile terminal device according to 12. 上記ステレオ撮像ユニットの撮影光軸は、上記画像表示手段の表示画面と略直交することを特徴とする請求項１２に記載の携帯端末装置。   The portable terminal device according to claim 12, wherein a photographing optical axis of the stereo imaging unit is substantially orthogonal to a display screen of the image display means.

Images