JP2009087264A - Hollow type switching device and electronic device with the same - Google Patents

Hollow type switching device and electronic device with the same Download PDF

Info

Publication number
JP2009087264A
JP2009087264A JP2007259189A JP2007259189A JP2009087264A JP 2009087264 A JP2009087264 A JP 2009087264A JP 2007259189 A JP2007259189 A JP 2007259189A JP 2007259189 A JP2007259189 A JP 2007259189A JP 2009087264 A JP2009087264 A JP 2009087264A
Authority
JP
Japan
Prior art keywords
operation member
switch device
hollow
geometric pattern
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007259189A
Other languages
Japanese (ja)
Other versions
JP4916994B2 (en
Inventor
Takeshi Yamazaki
壮 山崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alps Alpine Co Ltd
Original Assignee
Alps Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alps Electric Co Ltd filed Critical Alps Electric Co Ltd
Priority to JP2007259189A priority Critical patent/JP4916994B2/en
Publication of JP2009087264A publication Critical patent/JP2009087264A/en
Application granted granted Critical
Publication of JP4916994B2 publication Critical patent/JP4916994B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To recognize various operation inputs by an operator and to raise operability and operation feelings of a user. <P>SOLUTION: This hollow type switching device 10 is provided with a hollow semi-sphere shaped operation member 12. The operation member 12 is constituted of elastic materials such as rubber, though the operation member 12 is elastically deformed when the operation input is applied from the outer surface, when the operation input is removed, restored to the initial state. An optical part 16 having a wide angle lens is installed inside the operation member 12, and geometrical patterns P are projected on the inner surface of the operation member 12. Variation of the geometrical patterns P in accordance with deformation of the operation member 12 is picked up through an optical lens, and a position and size of the operation input are read from an image. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、多種多様な形態で操作を受け付けることが可能な中空型スイッチ装置及びこれを備えた電子機器に関するものである。   The present invention relates to a hollow switch device capable of accepting operations in various forms and an electronic apparatus including the same.

この種のスイッチ装置に関連する先行技術として、デジタルカメラ等の電子機器に搭載される光学式操作装置が知られている(例えば、特許文献1参照。)。この先行技術は、所定の幾何学的パターンが表面に形成された弾性体の操作シートを備えており、指やペンなどの操作体によって操作シートに押圧が加わると、操作シートの変形に伴う幾何学的パターンの形状変化を検出し、操作者による入力操作を認識するものである。   As a prior art related to this type of switch device, an optical operation device mounted on an electronic device such as a digital camera is known (for example, see Patent Document 1). This prior art is provided with an elastic operation sheet having a predetermined geometric pattern formed on the surface, and when the operation sheet is pressed by an operation body such as a finger or a pen, the geometry associated with the deformation of the operation sheet is provided. A change in the shape of a geometric pattern is detected and an input operation by an operator is recognized.

具体的には、操作シートはPET等の透明な弾性体の樹脂フィルムで構成されており、その外面にストライプパターンやハニカムパターン、格子パターン等の幾何学的パターンが印刷されている。そして先行技術では、この幾何学的パターンに対して光を照射し、その反射光を受光してパターンデータを生成する。パターンデータは、メモリにバッファリングされて順次最新データに書き換えられる。そして、CPUがパターンデータの変化から操作シートの押圧位置を認識すると、これをプログラムモジュールにしたがっていずれかの操作認識(上、下、左、右、右上、左上、左下、右下、中央等)に置き換え、その操作をデジタルカメラの動作部に対して反映させている。
特開2007−72669号公報(第8−11頁、図4)
Specifically, the operation sheet is made of a transparent elastic resin film such as PET, and a geometric pattern such as a stripe pattern, a honeycomb pattern, or a lattice pattern is printed on the outer surface thereof. In the prior art, the geometric pattern is irradiated with light, and the reflected light is received to generate pattern data. The pattern data is buffered in the memory and sequentially rewritten to the latest data. When the CPU recognizes the pressed position of the operation sheet from the change in pattern data, it recognizes any operation according to the program module (up, down, left, right, upper right, upper left, lower left, lower right, center, etc.) The operation is reflected on the operation part of the digital camera.
JP 2007-72669 A (page 8-11, FIG. 4)

しかしながら上記の先行技術は、平面的な操作シート上でどの位置が押圧されたかを認識するだけに留まる。このため、ユーザが指やペンによる操作を行うにしても、操作シート上のいずれか1箇所だけをスポットでタッチできるだけであり、それ以上の多種多様な操作を実現することはできない。   However, the above prior art only recognizes which position is pressed on the planar operation sheet. For this reason, even if the user performs an operation with a finger or a pen, only one place on the operation sheet can be touched with a spot, and a variety of operations beyond that cannot be realized.

そこで本発明は、操作者による多種多様な操作入力を実現可能とし、ユーザの操作性や操作感覚を向上できる技術の提供を課題としたものである。   Therefore, an object of the present invention is to provide a technique that can realize various types of operation inputs by an operator and can improve user operability and operation feeling.

上記の課題を解決するため、本発明は以下の解決手段を採用する。
本発明は、内面に所定の幾何学模様が形成された状態で、外面からの操作入力に応じて初期状態から弾性変形する一方、操作入力の除去に伴い、その弾性で初期状態に復元可能な中空形状の操作部材と、この操作部材の内側に配置された広角レンズを通じて幾何学模様を撮像する撮像素子とを備えた中空型スイッチ装置である。
In order to solve the above problems, the present invention employs the following solutions.
The present invention is elastically deformed from the initial state in response to an operation input from the outer surface in a state where a predetermined geometric pattern is formed on the inner surface, and can be restored to the initial state by the elasticity as the operation input is removed. This is a hollow switch device including a hollow operation member and an image sensor that images a geometric pattern through a wide-angle lens arranged inside the operation member.

本発明によれば、操作部材が単なる平面的な部材ではなく、立体的な中空形状を有しているため、その外面に対して多方向(複数の角度)からの操作入力を受け付け可能とする。この点、先行技術のような平面的な操作シートに対しては、これを一方向に押圧することしかできなかったが、本発明では立体的な操作部材の外面に対していろいろな方向(角度)から押圧操作を加えることができる。また弾性を有した操作部材を用いることで、操作入力による変形状態から初期状態に自己復帰させるための部品が必要とされないため、簡易な構造で且つ小型化可能である。   According to the present invention, since the operation member is not a simple planar member but has a three-dimensional hollow shape, operation inputs from multiple directions (a plurality of angles) can be received with respect to the outer surface. . In this respect, the planar operation sheet as in the prior art can only be pressed in one direction. However, in the present invention, various directions (angles) with respect to the outer surface of the three-dimensional operation member. ) Can be pressed. Further, by using an operation member having elasticity, a part for self-returning from a deformed state by an operation input to an initial state is not required, so that the structure can be reduced with a simple structure.

また本発明では、操作部材の内面に形成された幾何学模様を広角レンズで撮像するため、操作部材の内面が立体的な形状(例えば凹面、内球面)であっても、多方向からの操作入力に対する幾何学模様の変化を確実に撮像することができる。   Further, in the present invention, since the geometric pattern formed on the inner surface of the operation member is imaged with a wide-angle lens, even if the inner surface of the operation member has a three-dimensional shape (for example, concave surface, inner spherical surface), the operation from multiple directions is performed. The change of the geometric pattern with respect to the input can be reliably imaged.

より実用的には、本発明は以下の構成を備えることが好ましい。
すなわち、本発明の中空型スイッチ装置は、撮像素子により撮像された画像に基づいて、操作部材の弾性変形に伴う幾何学模様の形態の変化を検出する画像認識手段と、画像認識手段の検出結果から操作部材に対する操作入力の内容を判断する入力判断手段とを備えたものである。
More practically, the present invention preferably has the following configuration.
That is, the hollow switch device of the present invention includes an image recognition unit that detects a change in the shape of the geometric pattern accompanying elastic deformation of the operation member based on an image captured by the image sensor, and a detection result of the image recognition unit. Input determining means for determining the content of the operation input to the operation member.

上記の構成により、操作部材に対して多様な操作入力が加えられた場合であっても、これに伴う幾何学模様の変化を画像から読み取ることで、実際にいかなる操作入力がなされたかを判断することができる。例えば、操作部材の複数箇所が同時に押圧されたり、ある程度の面積を有する範囲にわたって押圧されたりした場合であっても、そのときの操作部材の弾性変形に追従して幾何学模様が変化するため、この変化を画像から読み取って、実際に行われた操作入力の内容を判断することが可能となる。   With the above configuration, even when various operation inputs are applied to the operation member, it is possible to determine what operation input is actually performed by reading a change in the geometric pattern accompanying the change from the image. be able to. For example, even when a plurality of locations of the operating member are pressed at the same time or pressed over a range having a certain area, the geometric pattern changes following the elastic deformation of the operating member at that time, It is possible to read the change from the image and determine the contents of the operation input actually performed.

本発明の中空型スイッチ装置は、広角レンズを通じて操作部材の内面に向けて光を照射する光照射素子と、光照射素子から照射された光を回折させ、この回折光を操作部材の内面に幾何学模様として投射させる回折格子とをさらに備えてもよい。   The hollow switch device of the present invention diffracts the light irradiation element that irradiates light toward the inner surface of the operation member through the wide-angle lens, and the light irradiated from the light irradiation element, and geometrically diffracts the diffracted light on the inner surface of the operation member. You may further provide the diffraction grating projected as a geometric pattern.

この場合、操作部材の内面には予め幾何学模様が形成されていなくても、光照射素子及び回折格子を用いて所望の幾何学模様を光の投射によって描くことができる。したがって、印刷・捺染等による固定的な幾何学模様だけでなく、使用する回折格子の特性に応じて多様な幾何学模様を形成することができる。   In this case, even if a geometric pattern is not formed in advance on the inner surface of the operation member, a desired geometric pattern can be drawn by light projection using the light irradiation element and the diffraction grating. Therefore, not only a fixed geometric pattern by printing / printing or the like, but also various geometric patterns can be formed according to the characteristics of the diffraction grating used.

また本発明の中空型スイッチ装置は、光照射素子の照射光軸に対して回折格子を相対的に変位させ、操作部材の内面にて回折格子による幾何学模様の投射位置を変位させる駆動手段と、この駆動手段を制御する制御手段とをさらに備えている。この場合、上記の入力判断手段は、画像認識手段の検出結果に基づいて操作部材に対する操作入力の内容を判断し、そして制御手段は、入力判断手段の判断結果に基づいて駆動手段を制御することにより、操作部材に対して操作入力がなされた位置に対応させて幾何学模様の投射位置を変位させることが好ましい。   Further, the hollow switch device of the present invention includes a driving unit that displaces the diffraction grating relative to the irradiation optical axis of the light irradiation element and displaces the projection position of the geometric pattern by the diffraction grating on the inner surface of the operation member. And a control means for controlling the driving means. In this case, the input determination unit determines the content of the operation input to the operation member based on the detection result of the image recognition unit, and the control unit controls the drive unit based on the determination result of the input determination unit. Thus, it is preferable to displace the projection position of the geometric pattern in correspondence with the position where the operation input is made to the operation member.

例えば、内面に投射される幾何学模様の形態(同心円形、格子形、ドット配列形等)によっては、模様の構成要素(線やドット)の分布が密になる所もあれば、分布が粗になる所もある。構成要素の分布が密であれば、それだけ幾何学模様の変化に対する分解能が高くなるため、操作入力がなされた位置に分解能の高い所を集中させれば、より認識精度を向上することができる。   For example, depending on the shape of the geometric pattern projected on the inner surface (such as concentric circles, grids, and dot arrangement), the pattern components (lines and dots) may be densely distributed, but the distribution may be coarse. There is a place to become. If the distribution of the constituent elements is dense, the resolution with respect to the change of the geometric pattern becomes higher. Therefore, if the place with high resolution is concentrated at the position where the operation input is made, the recognition accuracy can be further improved.

そこで本発明では、制御手段の制御の下で駆動手段によって回折格子の位置を適宜動かし、操作入力がなされた位置に対応させて幾何学模様の投射位置を自在に変位させている。これにより、必要に応じて認識精度をコントロールし、より正確な処理判断を実現することができる。   Therefore, in the present invention, the position of the diffraction grating is appropriately moved by the drive means under the control of the control means, and the projection position of the geometric pattern is freely displaced corresponding to the position where the operation input is made. Thereby, the recognition accuracy can be controlled as necessary, and more accurate processing determination can be realized.

また本発明は、操作部材及び撮像素子をそれぞれ支持する基台と、この基台に設けられ、操作入力に伴い操作部材を通じて基台に伝達される圧力を検出する圧力センサとをさらに備えてもよい。この場合、上記の入力判断手段は、画像認識手段の検出結果と、圧力センサによる検出結果とから操作部材に対する操作入力の内容を判断することが好ましい。   The present invention further includes a base that supports the operation member and the image sensor, and a pressure sensor that is provided on the base and detects a pressure transmitted to the base through the operation member in accordance with an operation input. Good. In this case, it is preferable that the input determination unit determines the content of the operation input to the operation member from the detection result of the image recognition unit and the detection result of the pressure sensor.

上記の構成によれば、幾何学模様の変化だけから判断がつきにくい操作入力であっても、操作部材を通じて基台に伝わる圧力(基台に生じる剪断力)を判断要素に追加することで、多様な操作入力をより正確に判断することができる。   According to the above configuration, even if the operation input is difficult to determine only from the change of the geometric pattern, by adding the pressure transmitted to the base through the operation member (shearing force generated in the base) to the determination element, Various operation inputs can be judged more accurately.

例えば、操作部材への操作入力に関して鉛直方向(Z軸)及び水平方向(X軸,Y軸)を規定し、(1)操作部材を鉛直下方へ全体的に押し込む、(2)鉛直上方へ操作部材を全体的に引っ張り上げる、(3)水平軸周りのモーメントを操作部材に加える、といった各種の形態で操作入力がなされた場合を考える。これらの場合、局部的な押圧の場合と違って幾何学模様が全体的に変化するため、(1)と(2)の操作入力を正確に判別することは難しい。また(3)の操作入力については、幾何学模様にあまり大きな変化が生じないため、画像だけでは判断が困難になることがある。   For example, the vertical direction (Z-axis) and the horizontal direction (X-axis, Y-axis) are defined for the operation input to the operation member, (1) the operation member is entirely pushed downward vertically, and (2) the operation is vertically upward. Consider a case where operation input is made in various forms such as pulling up the member as a whole, or (3) applying a moment around the horizontal axis to the operation member. In these cases, unlike the case of local pressing, the geometric pattern changes as a whole, so it is difficult to accurately determine the operation inputs (1) and (2). In addition, regarding the operation input of (3), since the geometric pattern does not change so much, it may be difficult to make a judgment based on the image alone.

そこで、これらの場合に圧力センサによる検出結果を判断要素に追加すれば、(1)と(2)では基台に加わる圧力(剪断力)が逆方向であるため、それによって(1)と(2)の操作入力を正しく判別することができる。また(3)の操作入力についても、基台に加わる圧力(剪断力)の変化を判断要素に追加すれば、操作部材に対してモーメントが加わっていることを正確に判断することができる。   Therefore, if the detection result by the pressure sensor is added to the determination element in these cases, the pressure (shearing force) applied to the base in (1) and (2) is in the opposite direction, so that (1) and ( The operation input of 2) can be correctly identified. In addition, regarding the operation input in (3), if a change in pressure (shearing force) applied to the base is added to the determination element, it can be accurately determined that a moment is applied to the operation member.

なお、上記の圧力センサは、基台に対して複数箇所に設置されていることが好ましい。例えば、上記(3)の操作入力のように、同じ操作部材に対して片側(X軸の正方向)では鉛直下方の圧力が加わり、反対側(X軸の負方向)では鉛直上方の圧力が加わるという場合もある。この場合、場所によって方向が異なる圧力の変化を読み取ることで、より正確な判断を可能とすることができる。   In addition, it is preferable that said pressure sensor is installed in multiple places with respect to the base. For example, as in the operation input in (3) above, a vertical downward pressure is applied to the same operation member on one side (the positive direction of the X axis), and a vertical upward pressure is applied to the opposite side (the negative direction of the X axis). There is also a case of joining. In this case, it is possible to make a more accurate determination by reading the change in pressure whose direction differs depending on the location.

あるいは、上記の圧力センサは、操作部材の外周縁に沿って基台の複数箇所に設置されていてもよい。操作部材に加わる外力(押圧力等)は、その外周縁から基台に伝達されるため、その影響を最も顕著に受けるのは外周縁の直下及びその近傍である。そこで、操作部材の外周縁に沿って(直下又は近傍)に複数箇所に圧力センサを設置することで、より正確な判断に資することが可能になる。   Or said pressure sensor may be installed in the multiple places of a base along the outer periphery of an operation member. Since the external force (pressing force or the like) applied to the operating member is transmitted from the outer peripheral edge to the base, the influence is most noticeably directly below and in the vicinity thereof. Therefore, it is possible to contribute to more accurate determination by installing pressure sensors at a plurality of locations along the outer peripheral edge of the operation member (directly or in the vicinity).

なお、上記の操作部材は光透過性を有する素材で構成されていることが好ましい。例えば、幾何学模様が印刷や捺染によって形成されている場合、撮像素子によって幾何学模様を撮像するには、操作部材の内部環境に適度な明るさが必要である。操作部材が光透過性を有していれば、外光を内部に透過させることができるので、特に内部に光源を持たなくても、予め形成された幾何学模様を撮像するのに充分な光量を得ることができる。   In addition, it is preferable that said operation member is comprised with the raw material which has a light transmittance. For example, when the geometric pattern is formed by printing or textile printing, an appropriate brightness is required for the internal environment of the operation member in order to capture the geometric pattern by the imaging element. If the operation member is light transmissive, external light can be transmitted to the inside, so that the amount of light is sufficient to image a pre-formed geometric pattern even without a light source inside. Can be obtained.

また上記のように、光照射素子によって幾何学模様を投射する場合、その投射光が操作部材を透過して外部に拡散するため、適度なイルミネーション効果を発揮することができ、視覚的な美観を向上することができる。   In addition, as described above, when a geometric pattern is projected by the light irradiation element, since the projection light is transmitted through the operation member and diffused to the outside, an appropriate illumination effect can be exhibited, and a visual aesthetics can be achieved. Can be improved.

あるいは、操作部材が光透過性を有する場合、その内側に発光素子が設けられていてもよい。この場合、発光素子の発した光が操作部材の外部に拡散されて、上記のようにイルミネーション効果を発揮する。   Alternatively, when the operation member has light transmittance, a light emitting element may be provided inside thereof. In this case, the light emitted from the light emitting element is diffused to the outside of the operation member, and the illumination effect is exhibited as described above.

また本発明は、上記の中空型スイッチ装置を備えた電子機器として構成してもよい。この場合、中空型スイッチ装置によって多様な操作入力を判断し、その判断結果を電子機器の動作に反映させることができる。   Moreover, you may comprise this invention as an electronic device provided with said hollow type switch apparatus. In this case, various operation inputs can be determined by the hollow switch device, and the determination result can be reflected in the operation of the electronic device.

以上のように本発明によれば、従来の単純な押圧操作だけでなく、多方向からの押圧操作や一定範囲内での押圧操作を受け付け可能にし、従来にない操作性や操作感覚をユーザに提供することができる。また、多様な操作性を活かしたユーザインタフェースを電子機器に提供することで、その利便性を大きく向上することができる。   As described above, according to the present invention, not only a conventional simple pressing operation but also a pressing operation from multiple directions and a pressing operation within a certain range can be accepted, and unprecedented operability and operation feeling can be received by the user. Can be provided. In addition, by providing a user interface utilizing various operability to an electronic device, the convenience can be greatly improved.

以下、本発明の実施形態について図面を参照しながら説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

〔第1実施形態〕
図1は、第1実施形態の中空型スイッチ装置10を示す斜視図である。先ず、中空型スイッチ装置10の基本構成について説明する。
[First Embodiment]
FIG. 1 is a perspective view showing a hollow switch device 10 of the first embodiment. First, the basic configuration of the hollow switch device 10 will be described.

中空型スイッチ装置10は、例えば外形が半球状をなす操作部材12を備えている。この操作部材12は、ゴム等の弾性素材から成型されており、その内部は中空(ドーム型)となっている。図中に破線で示されているように、操作部材12はある程度の肉厚を有しているが、その厚みは操作部材12の外径に比較して小さい。   The hollow switch device 10 includes an operation member 12 whose outer shape is, for example, a hemisphere. The operation member 12 is molded from an elastic material such as rubber, and the inside thereof is hollow (dome-shaped). As indicated by a broken line in the figure, the operation member 12 has a certain thickness, but its thickness is smaller than the outer diameter of the operation member 12.

操作部材12は、基台14上に設置されている。基台14は、例えば樹脂基板や金属基板で構成されており、その外形は操作部材12に合わせて円盤状をなしている。なお操作部材12は、その下端に位置する外周縁を基台14の上面に接着された状態で基台14に支持されている。基台14の外径は操作部材12よりも僅かに大きく、このため基台14の外縁部は、操作部材12から径方向に張り出している。   The operation member 12 is installed on the base 14. The base 14 is made of, for example, a resin substrate or a metal substrate, and its outer shape is disk-shaped in accordance with the operation member 12. The operation member 12 is supported by the base 14 with the outer peripheral edge located at the lower end thereof adhered to the upper surface of the base 14. The outer diameter of the base 14 is slightly larger than that of the operation member 12. Therefore, the outer edge portion of the base 14 protrudes from the operation member 12 in the radial direction.

基台14の外縁部には、例えば周方向に等間隔で取付部14aが形成されている。これら取付部14aは、中空型スイッチ装置10を他の部材(電子機器の筐体等)に固定するためのものである。   At the outer edge of the base 14, for example, mounting portions 14 a are formed at equal intervals in the circumferential direction. These attachment portions 14a are for fixing the hollow switch device 10 to other members (such as a casing of an electronic device).

また基台14には、操作部材12の内側に位置して光学部16が設置されている。光学部16は図示しない広角レンズを有しており、この広角レンズを通じて操作部材12の内面に光を投射し、内面に所望の幾何学模様P(パターン)を形成する。また光学部16は、操作部材12の内面全域から反射光(又は透過光)を集光し、図示しない撮像素子による撮像を可能にする。なお、光学部16の具体的な構成についてはさらに後述する。   An optical unit 16 is installed on the base 14 so as to be positioned inside the operation member 12. The optical unit 16 has a wide-angle lens (not shown), and projects light onto the inner surface of the operation member 12 through the wide-angle lens to form a desired geometric pattern P (pattern) on the inner surface. The optical unit 16 collects reflected light (or transmitted light) from the entire inner surface of the operation member 12 and enables imaging by an imaging element (not shown). The specific configuration of the optical unit 16 will be further described later.

図2は、中空型スイッチ装置10の垂直断面図(図1中のII−II線)である。図2に示されているように、基台14の下面には圧力センサ18が設置されている。圧力センサ18は、例えばピエゾ抵抗効果を利用して圧力の大きさに応じた電気信号を出力する圧電素子である。このような圧力センサ18を用いれば、操作部材12から基台14に伝達される圧力(それによって生じる剪断力)を検出することができる。   FIG. 2 is a vertical sectional view of the hollow switch device 10 (II-II line in FIG. 1). As shown in FIG. 2, a pressure sensor 18 is installed on the lower surface of the base 14. The pressure sensor 18 is a piezoelectric element that outputs an electrical signal corresponding to the magnitude of pressure using, for example, a piezoresistance effect. By using such a pressure sensor 18, it is possible to detect the pressure (shearing force generated thereby) transmitted from the operation member 12 to the base 14.

例えば、鉛直下方(図中Z軸の負方向)に操作部材12が押圧されたり、逆に鉛直上方(図中Z軸の正方向)に操作部材12が引っ張り上げられたりすると、操作部材12から基台14に下向き又は上向きの圧力が伝達される。基台14は図示しない電子機器の筐体等に固定されており、基台14に伝達された圧力は、基台14内部で剪断力として作用する。このときの剪断力(+/−)が圧力センサ18の検出信号として取り出されることになる。   For example, if the operating member 12 is pressed vertically downward (the negative direction of the Z axis in the figure), or conversely pulled upward (positive direction of the Z axis in the figure), the operating member 12 A downward or upward pressure is transmitted to the base 14. The base 14 is fixed to a housing or the like of an electronic device (not shown), and the pressure transmitted to the base 14 acts as a shearing force inside the base 14. The shearing force (+/−) at this time is taken out as a detection signal of the pressure sensor 18.

また図中に矢印Fで示されるように、例えば操作部材12を水平軸(例えば図中Y軸)の周りに回転させようとするモーメントが作用すると、水平方向でみて片側(図中X軸の正方向)とその反対側(図中X軸の負方向)とで互いに圧力の向きが反対となる。このときの剪断力は互いに符号(+/−)が逆となり、これが2つの圧力センサ18による検出信号として別々に取り出されることになる。   Further, as shown by an arrow F in the figure, for example, when a moment is applied to rotate the operating member 12 around a horizontal axis (for example, the Y axis in the figure), one side (on the X axis in the figure) is seen in the horizontal direction. The direction of pressure is opposite between the positive direction) and the opposite side (the negative direction of the X axis in the figure). At this time, the signs (+/−) of the shearing forces are opposite to each other, and these are taken out separately as detection signals from the two pressure sensors 18.

なお、図2には2つの圧力センサ18だけが示されているが、これ以外の複数箇所にも他の圧力センサ18が設置されている。圧力センサ18の設置場所は、例えば操作部材12の外周縁の直下か、もしくはその近傍が好ましい。   In FIG. 2, only two pressure sensors 18 are shown, but other pressure sensors 18 are also installed at a plurality of other locations. The installation location of the pressure sensor 18 is preferably, for example, directly below or near the outer peripheral edge of the operation member 12.

〔広角レンズの応用〕
図3は、操作部材12に対する多様な操作入力の例を示す図である。上記のように、基台14に設けられた光学部16は、広角レンズを用いて操作部材12の内面全域に幾何学模様を形成しつつ、その内面に生じた幾何学模様の変化を撮像可能とする。第1実施形態の中空型スイッチ装置10は、このような広角レンズを用いて光学的に幾何学模様を読み取ることで、より多様な操作入力に対する応答性を実現している。以下、第1実施形態の中空型スイッチ装置10で使用可能な操作入力の例について説明する。
[Application of wide-angle lens]
FIG. 3 is a diagram illustrating examples of various operation inputs to the operation member 12. As described above, the optical unit 16 provided on the base 14 can form a geometric pattern on the entire inner surface of the operation member 12 using a wide-angle lens, and can image a change in the geometric pattern generated on the inner surface. And The hollow switch device 10 of the first embodiment realizes responsiveness to more various operation inputs by optically reading a geometric pattern using such a wide-angle lens. Hereinafter, examples of operation inputs that can be used in the hollow switch device 10 of the first embodiment will be described.

図3中(A):中空型スイッチ装置10は、操作部材12に対する1点(1箇所)の押圧操作を受け付け可能である。このような操作入力は、例えばユーザが1本指で操作部材12を押し込む形態に該当する。   3A: The hollow switch device 10 can accept one point (one place) pressing operation on the operation member 12. FIG. Such an operation input corresponds to a form in which the user pushes the operation member 12 with one finger, for example.

操作部材12に対する押圧位置(方向)はユーザの任意であり、広角レンズによる幾何学模様の投射及び撮像範囲内であれば、ユーザは操作部材12の外面のどこを押圧してもよい。操作部材12が押圧された場合、そのときの押圧箇所に操作部材12の弾性変形が生じ、それに追従して幾何学模様にも変化が生じる。第1実施形態では、このような幾何学模様の変化を光学的に読み取り、ユーザが行った押圧操作を認識することができる。   The pressing position (direction) with respect to the operation member 12 is arbitrary by the user, and the user may press anywhere on the outer surface of the operation member 12 as long as it is within the projection and imaging range of the geometric pattern by the wide-angle lens. When the operation member 12 is pressed, elastic deformation of the operation member 12 occurs at the pressed position at that time, and the geometric pattern changes accordingly. In the first embodiment, such a change in the geometric pattern can be optically read to recognize the pressing operation performed by the user.

押圧力の大きさは、ユーザが任意に加減することができる。操作部材12は押圧力の大きさにほぼ比例して変形量が大きくなることから、より大きな押圧力が加われば、それだけ幾何学模様の変化も大きくなる。したがって、幾何学模様の変化量から操作入力(押圧力)そのものの大きさを光学的に認識することができる。   The magnitude of the pressing force can be arbitrarily adjusted by the user. Since the amount of deformation of the operating member 12 increases substantially in proportion to the magnitude of the pressing force, if a larger pressing force is applied, the change in the geometric pattern increases accordingly. Therefore, the magnitude of the operation input (pressing force) itself can be optically recognized from the change amount of the geometric pattern.

図3中(B):また中空型スイッチ装置10は、操作部材12に対する多点(複数箇所)での押圧操作を受け付け可能である。このような操作入力は、例えばユーザが2本指(人差し指と親指等)で操作部材12をつまむ形態に該当する。   In FIG. 3 (B): The hollow switch device 10 can accept a pressing operation at multiple points (a plurality of locations) on the operating member 12. Such an operation input corresponds to a form in which the user pinches the operation member 12 with two fingers (for example, an index finger and a thumb).

操作部材12をつまむ位置(方向)はユーザの任意であり、広角レンズによる幾何学模様の投射及び撮像範囲内であれば、ユーザは操作部材12の外面のどこをつまんでもよい。同時に操作部材12の複数箇所が押圧された場合、それぞれの押圧箇所に操作部材12の弾性変形が生じ、それに追従して幾何学模様にも変化が生じる。第1実施形態では、このような幾何学模様の変化を光学的に読み取り、ユーザが行った複数箇所への押圧操作を認識することができる。   The position (direction) for pinching the operation member 12 is arbitrary by the user, and the user may pinch anywhere on the outer surface of the operation member 12 as long as it is within the projection and imaging range of the geometric pattern by the wide-angle lens. When a plurality of locations on the operating member 12 are simultaneously pressed, the elastic deformation of the operating member 12 occurs at each pressed location, and the geometric pattern changes accordingly. In the first embodiment, it is possible to optically read such a change in the geometric pattern and recognize the pressing operations to a plurality of places performed by the user.

また、つまむときの力の大きさは、ユーザが任意に加減することができる。操作部材12を強くつまめば、それだけ幾何学模様の変化も大きくなることから、操作入力(つまむ力)そのものの大きさを光学的に認識することができる。   Further, the magnitude of the force when pinching can be arbitrarily adjusted by the user. If the operation member 12 is strongly pinched, the change in the geometric pattern increases accordingly, so that the size of the operation input (pinch force) itself can be optically recognized.

図3中(C):中空型スイッチ装置10は、操作部材12に対する多点での押圧操作を入力したまま、全体を水平方向に移動させる操作入力を受け付け可能である。このような操作入力は、上記のようにユーザが操作部材12をつまんだ状態で、そのつまんだ指をさらに前後左右(又は斜め)に動かす(外面上を滑らせる)形態に該当する。   In FIG. 3, (C): The hollow switch device 10 can accept an operation input for moving the entire device in the horizontal direction while inputting multi-point pressing operations on the operation member 12. Such an operation input corresponds to a form in which the user grips the operation member 12 as described above and moves the pinched finger further back and forth and right and left (or diagonally) (slides on the outer surface).

上記のように操作部材12に対する複数箇所の押圧は、幾何学模様の変化から光学的に読み取り可能である。この状態からさらに操作部材12が全体的に水平方向へ弾性変形すると、押圧による局部的な幾何学模様の変化を維持したまま、幾何学模様全体の位置が水平方向にずれることになる。第1実施形態では、このような幾何学模様の変化を光学的に読み取り、ユーザが行った複合的な操作入力(つまんで動かす)を認識することができる。   As described above, pressing at a plurality of locations on the operation member 12 can be optically read from a change in the geometric pattern. When the operation member 12 is further elastically deformed in the horizontal direction as a whole from this state, the position of the entire geometric pattern is shifted in the horizontal direction while maintaining the local change in the geometric pattern due to the pressing. In the first embodiment, such a change in geometric pattern can be optically read to recognize a complex operation input (pinch and move) performed by the user.

〔圧力変化を追加した判断〕
また第1実施形態では、幾何学模様の変化の他に、基台14に加わる圧力の変化を判断要素に追加することで、より多彩な操作入力を認識することもできる。
[Judgment adding pressure change]
In the first embodiment, a variety of operation inputs can be recognized by adding a change in pressure applied to the base 14 to the determination element in addition to the change in the geometric pattern.

例えば、図3中(A)において、押圧位置に最も近い位置では、操作部材12から基台14に加わる圧力が最大になる。また図3中(B)においては、それぞれの押圧位置に最も近い位置で操作部材12から基台14に加わる圧力が最大になる。さらに図3中(C)においては、水平方向への移動によって操作部材12にモーメントが加わるため、上記のように対称位置で圧力(剪断力)の向きが逆になる。このため、複数箇所に設けた圧力センサ18からの検出信号をそれぞれ判断要素に追加することで、より正確な操作入力の認識・判断が可能になる。   For example, in FIG. 3A, the pressure applied from the operation member 12 to the base 14 becomes maximum at the position closest to the pressing position. In FIG. 3B, the pressure applied from the operating member 12 to the base 14 is maximized at the position closest to each pressing position. Further, in FIG. 3C, since a moment is applied to the operation member 12 by the movement in the horizontal direction, the direction of the pressure (shearing force) is reversed at the symmetrical position as described above. For this reason, by adding detection signals from the pressure sensors 18 provided at a plurality of locations to the determination elements, it becomes possible to recognize and determine the operation input more accurately.

〔センシング手法〕
図4は、中空型スイッチ装置10によるセンシング動作を実現するための機能構成を示すブロック図である。中空型スイッチ装置10は、そのセンシング動作をコントロールするデバイスコントローラ20を備えている。デバイスコントローラ20は、例えば制御用IC22や出力回路24,26、入力回路28,30等を有する電子回路モジュールとして構成されている。
[Sensing method]
FIG. 4 is a block diagram showing a functional configuration for realizing a sensing operation by the hollow switch device 10. The hollow switch device 10 includes a device controller 20 that controls the sensing operation. The device controller 20 is configured as an electronic circuit module having, for example, a control IC 22, output circuits 24 and 26, input circuits 28 and 30, and the like.

制御用IC22は、例えばCPU22aやメモリ22b、I/Oポート22cを有する他、図示しないクロックジェネレータ等を内蔵するマイクロコンピュータである。CPU22aはデバイスコントローラ20の制御中枢であり、所定の組み込みプログラムを実行して各部を制御する。メモリ22bは、CPU22aのメインメモリとなる記憶デバイス(例えば、EEPROM、RAM等)であり、CPU22aが実行するプログラムは、このメモリ22bに格納されている。またI/Oポート22cは、制御用IC22と出力回路24,26、入力回路28,30との間で信号のやりとりを行う。   The control IC 22 is, for example, a microcomputer having a CPU 22a, a memory 22b, an I / O port 22c, and a clock generator (not shown). The CPU 22a is a control center of the device controller 20, and controls each unit by executing a predetermined built-in program. The memory 22b is a storage device (e.g., EEPROM, RAM, etc.) serving as the main memory of the CPU 22a, and a program executed by the CPU 22a is stored in the memory 22b. The I / O port 22c exchanges signals between the control IC 22 and the output circuits 24 and 26 and the input circuits 28 and 30.

光学部16は、上記の広角レンズを含む光学レンズ16a,16b,16cを有している。また光学部16は、光照射素子32とともに回折格子34及びハーフミラー36を有している。光照射素子32は半導体レーザやLED等であり、例えば可視光波長の光を照射することができる。光照射素子32の照射光は回折格子34で回折された後にハーフミラー36で反射され、上記のように光学部16の広角レンズを通じて操作部材12の内面に向けて照射される。回折格子34は照射光を回折させ、この回折光を所望の幾何学模様として操作部材12の内面に投射させる。   The optical unit 16 includes optical lenses 16a, 16b, and 16c including the wide-angle lens. The optical unit 16 includes a diffraction grating 34 and a half mirror 36 together with the light irradiation element 32. The light irradiation element 32 is a semiconductor laser, an LED, or the like, and can emit light having a visible light wavelength, for example. The light irradiated from the light irradiation element 32 is diffracted by the diffraction grating 34, then reflected by the half mirror 36, and irradiated toward the inner surface of the operation member 12 through the wide-angle lens of the optical unit 16 as described above. The diffraction grating 34 diffracts the irradiated light and projects the diffracted light onto the inner surface of the operation member 12 as a desired geometric pattern.

デバイスコントローラ20は、出力回路26を通じて光照射素子32に駆動信号を印加し、照射光の出力タイミングや出力期間(パルス幅)、光強度(振幅)等を制御することができる。   The device controller 20 can apply a drive signal to the light irradiation element 32 through the output circuit 26 to control the output timing, output period (pulse width), light intensity (amplitude), and the like of the irradiation light.

回折格子34にはアクチュエータ38が連結されている。アクチュエータ38は、例えばリニアソレノイド等の駆動素子であり、このアクチュエータ38は、回折格子34を光軸に対して垂直方向(x−yの2次元平面上)に変位させることができる。回折格子34が光軸に対して変位すると、幾何学模様の位置が連動して変位することになる。   An actuator 38 is connected to the diffraction grating 34. The actuator 38 is a drive element such as a linear solenoid, for example, and the actuator 38 can displace the diffraction grating 34 in a direction perpendicular to the optical axis (on an xy two-dimensional plane). When the diffraction grating 34 is displaced with respect to the optical axis, the position of the geometric pattern is displaced in conjunction with it.

デバイスコントローラ20は、出力回路24を通じてアクチュエータ38に対する駆動信号を印加し、光軸に対する回折格子34の位置(変位量)を制御することができる。   The device controller 20 can apply a drive signal to the actuator 38 through the output circuit 24 to control the position (displacement amount) of the diffraction grating 34 with respect to the optical axis.

この他に光学部16は、撮像素子40を備えている。広角レンズで集光された光(内面からの反射光)はハーフミラー36を透過し、撮像素子40にて撮像される。撮像素子40は、例えばCCDイメージセンサ、CMOSイメージセンサ等であり、広角レンズを通じて受けた光を各画素で光電変換し、画像信号として出力することができる。   In addition to this, the optical unit 16 includes an image sensor 40. Light condensed by the wide-angle lens (reflected light from the inner surface) passes through the half mirror 36 and is imaged by the image sensor 40. The image sensor 40 is, for example, a CCD image sensor, a CMOS image sensor, or the like, and can photoelectrically convert light received through a wide-angle lens in each pixel and output it as an image signal.

デバイスコントローラ20は、入力回路28を通じて画像信号を受け取り、必要な信号処理(フィルタリング、強度補正、A/D変換等)を行う。制御用IC22は処理済みの画像信号を受け取ると、これを撮像データとしてメモリ22bにバッファリングする。   The device controller 20 receives the image signal through the input circuit 28 and performs necessary signal processing (filtering, intensity correction, A / D conversion, etc.). When receiving the processed image signal, the control IC 22 buffers the image signal as image data in the memory 22b.

またデバイスコントローラ20は、入力回路30を通じて各圧力センサ18からの検出信号を受け取り、これをA/D変換して制御用IC22に入力する。なお、圧力センサ18からの検出信号は、それぞれの取付位置と関連付けた状態で信号処理される。例えば、検出信号を記述するビットデータ内には、その数値とともに取付位置を表すデータ(4ビット程度)が含まれる。   The device controller 20 receives detection signals from the pressure sensors 18 through the input circuit 30, A / D converts them, and inputs them to the control IC 22. In addition, the detection signal from the pressure sensor 18 is signal-processed in the state linked | related with each attachment position. For example, the bit data describing the detection signal includes data (about 4 bits) indicating the mounting position together with the numerical value.

以上がセンシング動作を実現するための基本構成であるが、次に、これら基本構成を用いて実際にセンシング動作を行う際の処理手法について説明する。   The above is the basic configuration for realizing the sensing operation. Next, a processing method when actually performing the sensing operation using these basic configurations will be described.

〔センシングプログラム〕
図5は、デバイスコントローラ20の制御用IC22(CPU22a)が実行するメイン制御処理の手順例を示すフローチャートである。デバイスコントローラ20が起動すると、CPU22aが先頭のプログラムアドレスから処理を開始する。以下、各手順に沿って処理の流れを説明する。
[Sensing program]
FIG. 5 is a flowchart illustrating a procedure example of main control processing executed by the control IC 22 (CPU 22a) of the device controller 20. When the device controller 20 is activated, the CPU 22a starts processing from the top program address. Hereinafter, the flow of processing will be described along each procedure.

ステップS10:CPU22aは、アクチュエータ管理処理を実行する。この処理では、CPU22aはアクチュエータ38の動作を制御することで、照射光軸に対して回折格子34の位置決めを行う。なお初期状態では、特にアクチュエータ38を駆動せず、回折格子34を初期位置(原点)にセットしている。   Step S10: The CPU 22a executes actuator management processing. In this process, the CPU 22a controls the operation of the actuator 38 to position the diffraction grating 34 with respect to the irradiation optical axis. In the initial state, the actuator 38 is not particularly driven, and the diffraction grating 34 is set at the initial position (origin).

ステップS12:次にCPU22aは、パターン出力処理を実行する。この処理では、CPU22aは光照射素子32に対する駆動信号を出力し、実際に光照射素子32から照射光を出力させる。またCPU22aは、この処理の中で例えばフィードバック補正を行い、適宜、その出力強度をコントロールする。これにより、実際に広角レンズを通じて回折光が照射され、操作部材12の内面に所望の幾何学模様が投射されることになる。   Step S12: Next, the CPU 22a executes a pattern output process. In this process, the CPU 22a outputs a drive signal for the light irradiation element 32 and actually outputs the irradiation light from the light irradiation element 32. Further, the CPU 22a performs, for example, feedback correction in this process, and appropriately controls the output intensity. Thereby, the diffracted light is actually irradiated through the wide-angle lens, and a desired geometric pattern is projected on the inner surface of the operation member 12.

ステップS14:続いてCPU22aは、センサ入力処理を実行する。この処理では、入力回路28,30から順次ポーリング受信を行い、撮像素子40からの画像データ及び各圧力センサ18からの検出信号をメモリ22bに転送する。   Step S14: Subsequently, the CPU 22a executes sensor input processing. In this process, polling is sequentially received from the input circuits 28 and 30, and the image data from the image sensor 40 and the detection signals from the pressure sensors 18 are transferred to the memory 22b.

ステップS16:そしてCPU22aは、画像解析処理を実行する。この処理では、先のステップS14でバッファリングした画像信号に基づいて、幾何学模様の変化を解析する。上記のメモリ22b内には幾何学模様の原型データが格納されており、CPU22aはバッファリングした最新の画像データと原型データとを対比する。なお原型データは、操作部材12に操作入力が全く加わっていない初期状態で、その内面に投射される幾何学模様に相当する。CPU22aは、原型データと画像データとの対比結果から幾何学模様の変化量と変化位置を演算すると、その演算結果をメモリ22bに保存する。   Step S16: Then, the CPU 22a executes image analysis processing. In this process, the change in the geometric pattern is analyzed based on the image signal buffered in the previous step S14. The memory 22b stores geometric pattern prototype data, and the CPU 22a compares the latest buffered image data with the prototype data. The original data corresponds to a geometric pattern projected on the inner surface in an initial state where no operation input is applied to the operation member 12. When the CPU 22a calculates the change amount and change position of the geometric pattern from the comparison result between the prototype data and the image data, the CPU 22a stores the calculation result in the memory 22b.

〔幾何学模様の例〕
図6は、実際に投射される幾何学模様の例とその変化の様子を示す図である。
図6中(A):この例では、操作部材12の内面に同心円状の幾何学模様が投射されている。操作部材12に対して操作入力がされていない初期状態では、幾何学模様の中心(各円の中心)は、平面視でみた操作部材12の中心に合致している。上記の原型データは、このときの幾何学模様を広角レンズで撮像したものと一致する。
[Example of geometric pattern]
FIG. 6 is a diagram showing an example of a geometric pattern actually projected and how it changes.
In FIG. 6, (A): In this example, a concentric geometric pattern is projected on the inner surface of the operation member 12. In an initial state where no operation input is made to the operation member 12, the center of the geometric pattern (the center of each circle) coincides with the center of the operation member 12 in plan view. The above prototype data is consistent with that obtained by imaging the geometric pattern at this time with a wide-angle lens.

図6中(B):操作部材12に対して、例えば1箇所(図中のハッチング領域)を押圧する操作入力がなされると、その押圧により操作部材12が弾性変形し、これに追従して幾何学模様にも変化が生じていることが分かる。なお、操作入力は1箇所への押圧だけであるため、その他の大部分には弾性変形が生じていない。このため幾何学模様の変化も、主に押圧箇所を中心とした弾性変形領域のみとなる。   FIG. 6B: When an operation input is made to the operating member 12 to press, for example, one place (hatched area in the figure), the operating member 12 is elastically deformed by the pressing and follows this. It can be seen that there is also a change in the geometric pattern. In addition, since the operation input is only pressing to one place, elastic deformation does not occur in the other most. For this reason, the change in the geometric pattern is mainly only the elastic deformation region centered on the pressed portion.

図6中(B)の幾何学模様を広角レンズで撮像した画像データと、上記の原型データとを対比することで、CPU22aは幾何学模様の変化量と変化位置を演算する。変化量は、例えば各円周上でサンプリングした点の移動距離から演算することができ、変化量が大きければ、それだけ強い力で押圧されていることになる。また変化位置は、例えば最も変化量が大きいサンプル点について、中心からの距離(r)と円周方向でみた角度(θ)、そして基台14の上面からの仰角(φ)から演算することができる。変化位置の中心からの距離(r)が大きければ、それだけ操作部材12の外周縁に近い所が押圧されていることになる。また角度(θ)が大きければ(180°以内)、それだけ基準点(0°)から円周方向に離れた所が押圧されていることになる。仰角(φ)が大きければ、それだけ基台14の上面(0°)から上方にある所が押圧されていることになる。   The CPU 22a calculates the change amount and change position of the geometric pattern by comparing the image data obtained by capturing the geometric pattern of FIG. 6B with a wide-angle lens and the above-described prototype data. The amount of change can be calculated from, for example, the moving distance of the points sampled on each circumference. If the amount of change is large, the force is pressed with a stronger force. The change position can be calculated from, for example, the distance (r) from the center, the angle (θ) seen in the circumferential direction, and the elevation angle (φ) from the upper surface of the base 14 for the sample point having the largest change amount. it can. If the distance (r) from the center of the change position is large, the portion closer to the outer peripheral edge of the operation member 12 is pressed. Further, if the angle (θ) is large (within 180 °), the portion away from the reference point (0 °) in the circumferential direction is pressed. If the elevation angle (φ) is large, the portion above the upper surface (0 °) of the base 14 is pressed.

〔図5:再びメイン制御処理を参照〕
ステップS18:ここでCPU22aは、画像解析処理の結果を受けて、幾何学模様(パターン)の補正が必要であるか否かを判断する。例えば、バッファリングした画像データが不鮮明(受光強度不足)であれば、CPU22aは補正が必要であると判断する。この場合の補正は、光照射素子32による出力強度の向上を意味する。これとは別に、演算により得られた変化量や変化位置が不明確(変化量が小さい、変化位置が不特定)である場合、CPU22aは解析精度を向上するための補正を行う必要があると判断する。この場合の補正は、幾何学模様の位置を変位させ、より高い分解能が得られる所を変化位置に集中させることを意味する。幾何学模様の位置補正が必要と判断した場合、CPU22aは合わせてその補正量(Δx,Δy)を決定する。
[Fig. 5: See main control process again]
Step S18: Here, the CPU 22a receives the result of the image analysis process, and determines whether or not the geometric pattern (pattern) needs to be corrected. For example, if the buffered image data is unclear (the received light intensity is insufficient), the CPU 22a determines that correction is necessary. Correction in this case means improvement in output intensity by the light irradiation element 32. Apart from this, if the change amount or change position obtained by the calculation is unclear (change amount is small, change position is unspecified), the CPU 22a needs to make corrections to improve the analysis accuracy. to decide. The correction in this case means that the position of the geometric pattern is displaced, and a place where higher resolution is obtained is concentrated on the change position. When determining that the position correction of the geometric pattern is necessary, the CPU 22a also determines the correction amount (Δx, Δy).

上記のステップS18で補正の必要があると判断した場合(Yes)、CPU22aはステップS10に戻ってアクチュエータ管理処理を実行する。このとき、幾何学模様の位置に対する補正量があれば(Δx≠0,Δy≠0)、CPU22aは補正の要求に従ってアクチュエータ38を駆動する。これにより、回折格子34が初期位置から変位し、その結果、幾何学模様の投射位置が補正位置に変更されることになる。   If it is determined in step S18 that correction is necessary (Yes), the CPU 22a returns to step S10 and executes actuator management processing. At this time, if there is a correction amount for the position of the geometric pattern (Δx ≠ 0, Δy ≠ 0), the CPU 22a drives the actuator 38 in accordance with the correction request. Thereby, the diffraction grating 34 is displaced from the initial position, and as a result, the projection position of the geometric pattern is changed to the correction position.

また、ステップS18で出力強度の補正が必要であると判断した場合(Yes)CPU22aは次のパターン出力処理(ステップS12)において光照射素子32による出力強度を所定レベルだけ上昇させる。   If it is determined in step S18 that the output intensity needs to be corrected (Yes), the CPU 22a increases the output intensity by the light irradiation element 32 by a predetermined level in the next pattern output process (step S12).

ステップS18で補正の必要がないと判断した場合(No)、CPU22aは次にステップS20に進む。   If it is determined in step S18 that no correction is necessary (No), the CPU 22a then proceeds to step S20.

ステップS20:CPU22aは、入力認識処理を実行する。この処理では、CPU22aは画像解析処理で得た演算結果に基づき、あるいは、これに圧力センサ18による検出結果を追加して、実際に行われた操作入力の内容を認識・判断する。   Step S20: The CPU 22a executes an input recognition process. In this process, the CPU 22a recognizes / determines the contents of the operation input actually performed based on the calculation result obtained by the image analysis process or by adding the detection result by the pressure sensor 18 to the calculation result.

ステップS22:そしてCPU22aは、先のステップS20で得た認識結果を出力する。認識結果の出力は、デバイスコントローラ20からの外部出力として利用することもできるし、制御用IC22の内部(他のプログラム)で利用することもできる。   Step S22: The CPU 22a outputs the recognition result obtained in the previous step S20. The output of the recognition result can be used as an external output from the device controller 20, or can be used inside the control IC 22 (another program).

CPU22aは以上の手順を繰り返し実行し、リアルタイムで操作部材12に対する実際の操作入力を認識・判断し、その認識結果を出力している。なお、上記のアクチュエータ管理処理やパターン出力処理、センサ入力処理は、CPU22aに所定周期(数ミリ秒程度)ごとにタイマ割込を発生させ、割込処理として実行してもよい。   The CPU 22a repeatedly executes the above procedure, recognizes and determines an actual operation input to the operation member 12 in real time, and outputs the recognition result. The actuator management process, the pattern output process, and the sensor input process described above may be executed as an interrupt process by causing the CPU 22a to generate a timer interrupt every predetermined period (about several milliseconds).

〔応用例〕
図7は、第1実施形態の中空型スイッチ装置10を電子機器に応用した場合の構成例を示すブロック図である。ここでは電子機器の一例として、車両用のナビゲーションシステム50を挙げて説明する。
[Application example]
FIG. 7 is a block diagram illustrating a configuration example when the hollow switch device 10 of the first embodiment is applied to an electronic device. Here, a vehicle navigation system 50 will be described as an example of the electronic apparatus.

ナビゲーションシステム50は、例えばGPSアンテナ52や記憶装置54、表示装置56を用いて構成されている。GPSアンテナ52は車両に装備された状態で衛星からの位置信号を受信する。また記憶装置54は、例えばハードディスクやDVDメディア等の大容量記憶装置であり、ここには地図データや地形データ、施設データ等の情報が記憶されている。表示装置56は、例えば液晶ディスプレイである。   The navigation system 50 is configured using, for example, a GPS antenna 52, a storage device 54, and a display device 56. The GPS antenna 52 receives a position signal from a satellite while mounted on the vehicle. The storage device 54 is a large-capacity storage device such as a hard disk or a DVD medium, and stores information such as map data, terrain data, and facility data. The display device 56 is a liquid crystal display, for example.

またナビゲーションシステム50には、車載ECU(電子制御ユニット)58から車速信号や加速度信号、ヨーレート信号、ハンドル操作角信号、ブレーキ操作信号、パーキングブレーキ操作信号等が提供されている。ナビゲーションシステム50は、これら信号をもとに車両の走行状態を認識する。なお、ナビゲーションシステム50の動作や機能については公知であるため、ここではその詳細を省略する。   The navigation system 50 is provided with a vehicle speed signal, an acceleration signal, a yaw rate signal, a steering wheel operation angle signal, a brake operation signal, a parking brake operation signal, and the like from an in-vehicle ECU (electronic control unit) 58. The navigation system 50 recognizes the traveling state of the vehicle based on these signals. In addition, since the operation | movement and function of the navigation system 50 are well-known, the detail is abbreviate | omitted here.

第1実施形態の中空型スイッチ装置10は、例えばナビゲーションシステム50の入力デバイス(ユーザインタフェース)として利用することができる。デバイスコントローラ20は、上記のメイン制御処理を通じて得た認識結果(操作入力の内容)をナビゲーションシステム50に提供し、これを受け取ったナビゲーションシステム50は、ユーザが行った操作入力に対応した処理を実行することができる。以下、中空型スイッチ装置10に対する操作入力と、それに対するナビゲーションシステム50の動作例について説明する。   The hollow switch device 10 of the first embodiment can be used as an input device (user interface) of the navigation system 50, for example. The device controller 20 provides the navigation system 50 with the recognition result (the contents of the operation input) obtained through the main control process, and the navigation system 50 that receives the recognition result executes a process corresponding to the operation input performed by the user. can do. Hereinafter, an operation input to the hollow switch device 10 and an operation example of the navigation system 50 corresponding thereto will be described.

〔動作例1〕
先ず図8は、ナビゲーションシステム50の動作例1を示す説明図である。
図8中(A):例えば、ナビゲーションシステム50のユーザ(運転者又は同乗者)が操作部材12の1箇所を指で軽く触れた場合を想定する。この場合、デバイスコントローラ20がセンシング動作(メイン制御処理)を実行することにより、例えば「1箇所(r,θ,φ)を軽く押圧」という認識結果がナビゲーションシステム50に対して提供される。なお、認識結果の極座標(r,θ,φ)はユーザの指の位置に合致する。
[Operation example 1]
First, FIG. 8 is an explanatory diagram showing an operation example 1 of the navigation system 50.
In FIG. 8, (A): For example, it is assumed that a user (driver or passenger) of the navigation system 50 touches one place of the operation member 12 with a finger. In this case, when the device controller 20 executes the sensing operation (main control process), for example, a recognition result “lightly press one place (r, θ, φ)” is provided to the navigation system 50. The polar coordinates (r, θ, φ) of the recognition result coincide with the position of the user's finger.

図8中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上に各種の操作メニューを表示させる処理を行う。操作メニューは、例えば地図上に重ねられたアイコンの形態で表示される。   In FIG. 8, (B): In response, the navigation system 50 performs processing for displaying various operation menus on the screen of the display device 56. The operation menu is displayed, for example, in the form of an icon superimposed on the map.

図8中(C):続いて、ユーザが操作部材12に触れたままの状態で指を動かすと、その都度、デバイスコントローラ20は操作入力がなされた位置をリアルタイムに判断し、「1箇所(r,θ,φ)を軽く押圧」という認識結果をナビゲーションシステム50に対して提供する。この場合、認識結果の極座標(r,θ,φ)はユーザの指の位置に合わせて変化する。   In FIG. 8, (C): Subsequently, when the user moves his / her finger while touching the operation member 12, the device controller 20 determines in real time the position where the operation input has been made, and “1 ( A recognition result that “r, θ, φ) is lightly pressed” is provided to the navigation system 50. In this case, the polar coordinates (r, θ, φ) of the recognition result change according to the position of the user's finger.

図8中(D):ナビゲーションシステム50は、これを受けて画面上でカーソルを移動させる処理を行う。カーソルは、例えば操作メニューのアイコンを強調表示することで表現されている。この後、例えば所望の位置でユーザが操作部材12を強く押し込むと、カーソルで選択された操作メニューの実行をナビゲーションシステム50に対して指示することができる。   In FIG. 8, (D): The navigation system 50 receives this and moves the cursor on the screen. The cursor is expressed, for example, by highlighting an icon of the operation menu. Thereafter, for example, when the user strongly presses the operation member 12 at a desired position, the navigation system 50 can be instructed to execute the operation menu selected by the cursor.

〔動作例2〕
次に図9は、ナビゲーションシステム50の動作例2を示す説明図である。
図9中(A):今度は、動作例1のときよりもユーザが操作部材12の1箇所を指で強く押し込んだ場合を想定する。この場合、例えばデバイスコントローラ20から「1箇所(r,θ,φ)を強く押圧」という認識結果がナビゲーションシステム50に対して提供される。
[Operation example 2]
Next, FIG. 9 is an explanatory diagram showing an operation example 2 of the navigation system 50.
In FIG. 9, (A): This time, it is assumed that the user presses one place of the operation member 12 with a finger more strongly than in the first operation example. In this case, for example, the device controller 20 provides the navigation system 50 with a recognition result of “strongly pressing one location (r, θ, φ)”.

図9中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上に地図カーソルを表示させる処理を行う。地図カーソルは、例えば地図上でみた現在地に対応する位置に中心を合わせた状態で表示される。   In FIG. 9, (B): In response, the navigation system 50 performs a process of displaying a map cursor on the screen of the display device 56. The map cursor is displayed, for example, in a state where the center is aligned with the position corresponding to the current location on the map.

図9中(C):続いて、ユーザが操作部材12に触れたままの状態で指を動かすと、その都度、デバイスコントローラ20は操作入力がなされた位置をリアルタイムに判断し、同様に「1箇所(r,θ,φ)を強く押圧」という認識結果をナビゲーションシステム50に対して提供する。   In FIG. 9, (C): Subsequently, each time the user moves his / her finger while touching the operation member 12, the device controller 20 determines the position where the operation input has been made in real time, and similarly “1” The navigation system 50 is provided with a recognition result that “the location (r, θ, φ) is strongly pressed”.

図9中(D):ナビゲーションシステム50は、これを受けて画面上で地図を図中矢印方向にスクロール表示させる処理を行う。   In FIG. 9, (D): The navigation system 50 receives this and performs a process of scrolling and displaying the map in the direction of the arrow in the figure.

以上の動作例1,2は、操作部材12の1箇所を押圧する操作入力についてのものであるが、操作部材12をユーザがつまむ操作入力を行った場合、ナビゲーションシステム50は例えば以下の動作例を示す。   The above operation examples 1 and 2 relate to an operation input for pressing one place of the operation member 12. However, when the user performs an operation input to pinch the operation member 12, the navigation system 50 includes, for example, the following operation example. Indicates.

〔動作例3〕
図10は、ナビゲーションシステム50の動作例3を示す説明図である。
図10中(A):ユーザが操作部材12を軽くつまんでから、その指を離した場合を想定する。この場合、最初にデバイスコントローラ20から「2箇所(r1,θ1,φ1),(r2,θ2,φ2)をそれぞれ軽く押圧」という認識結果がナビゲーションシステム50に対して提供された後、続いて「操作入力なしの状態に復帰」という認識結果がナビゲーションシステム50に対して提供される。
[Operation example 3]
FIG. 10 is an explanatory diagram showing an operation example 3 of the navigation system 50.
In FIG. 10, (A): The case where the user lifts the finger after lightly pinching the operation member 12 is assumed. In this case, after the device controller 20 first provides the navigation system 50 with the recognition result “lightly presses two locations (r1, θ1, φ1), (r2, θ2, φ2)”, The recognition result “return to the state without operation input” is provided to the navigation system 50.

図10中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上で地図をズームアウト表示させる処理を行う。なお、上記の操作入力(軽くつまんで離す)をユーザが数回繰り返すと、その都度、地図がズームアウト表示される態様であってもよい。   In FIG. 10, (B): In response, the navigation system 50 performs a process of zooming out the map on the screen of the display device 56. Note that the map may be zoomed out each time the user repeats the above operation input (lightly pinch and release) several times.

図10中(C):今度は、ユーザが操作部材12を強くつまんでから、その指を中央に寄せていった場合を想定する。この場合、最初にデバイスコントローラ20から「2箇所(r1,θ1,φ1),(r2,θ2,φ2)をそれぞれ強く押圧」という認識結果がナビゲーションシステム50に対して提供された後、連続して「2箇所(r1,θ1,φ1),(r2,θ2,φ2)をそれぞれ強く押圧」という認識結果がナビゲーションシステム50に対して提供される。なお極座標は、その都度、ユーザの指の位置に合わせて変化する。   In FIG. 10, (C): This time, it is assumed that the user has pinched the operation member 12 and then moved the finger to the center. In this case, after the device controller 20 first provides the navigation system 50 with a recognition result that “two locations (r1, θ1, φ1), (r2, θ2, φ2) are strongly pressed”, respectively, continuously. The recognition result that “two places (r1, θ1, φ1), (r2, θ2, φ2) are pressed strongly” is provided to the navigation system 50. The polar coordinates change according to the position of the user's finger each time.

図10中(D):ナビゲーションシステム50は、これを受けて表示装置56の画面上で地図をズームイン表示させる処理を行う。ここでも同様に、上記の操作入力(強くつまんで寄せる)をユーザが数回繰り返すと、その都度、地図がズームイン表示される態様であってもよい。   In FIG. 10, (D): The navigation system 50 performs a process of zooming in on the map on the screen of the display device 56 in response to this. Similarly, the map may be zoomed in each time when the user repeats the above operation input (pinch strongly) several times.

〔動作例4〕
次に図11は、ナビゲーションシステム50の動作例4を示す説明図である。
図11中(A):ここでは、ユーザが操作部材12の一部(ユーザからみて手前側)をつまんだ場合を想定する。この場合、デバイスコントローラ20から「2箇所(r1,θ1,φ1),(r2,θ2,φ2)を押圧」という認識結果がナビゲーションシステム50に対して提供される。
[Operation Example 4]
Next, FIG. 11 is an explanatory diagram showing an operation example 4 of the navigation system 50.
In FIG. 11, (A): Here, it is assumed that the user has pinched a part of the operation member 12 (the front side as viewed from the user). In this case, the device controller 20 provides the navigation system 50 with a recognition result of “pressing two locations (r1, θ1, φ1), (r2, θ2, φ2)”.

図11中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上で地図を俯瞰図(3D表示)に切り換える処理を行う。   In FIG. 11, (B): In response, the navigation system 50 performs a process of switching the map to an overhead view (3D display) on the screen of the display device 56.

図11中(C):図11中(A)の状態から、さらにユーザが操作部材12を指を動かすと、その都度、デバイスコントローラ20は操作入力がなされた位置をリアルタイムに判断し、「2箇所(r1,θ1,φ1),(r2,θ2,φ2)を押圧」という認識結果をナビゲーションシステム50に対して提供する。この場合、認識結果の極座標はユーザの指の位置に合わせて変化する。   In FIG. 11, (C): When the user further moves his / her finger on the operation member 12 from the state shown in FIG. 11 (A), the device controller 20 determines the position where the operation input has been made in real time, and “2 The navigation system 50 is provided with the recognition result that “the location (r1, θ1, φ1), (r2, θ2, φ2) is pressed”. In this case, the polar coordinates of the recognition result change according to the position of the user's finger.

図11中(D):ナビゲーションシステム50は、これを受けて表示装置56の画面上で地図を図中矢印方向にスクロール表示させる処理を行う。   In FIG. 11, (D): The navigation system 50 receives this and performs a process of scrolling and displaying the map in the arrow direction in the figure on the screen of the display device 56.

〔その他の操作入力例〕
図12は、操作部材12に対する各種の操作入力の例を示す図である。以下、それぞれについて説明する。
[Other operation input examples]
FIG. 12 is a diagram illustrating examples of various operation inputs to the operation member 12. Each will be described below.

図12中(A):この例は、操作部材12の外面をユーザが手のひら全体で押さえる操作入力である。この場合であっても、デバイスコントローラ20は広い範囲に及ぶ幾何学模様の変化を認識することで、ユーザが行った操作入力の内容(形態)を正確に判断することができる。   In FIG. 12, (A): This example is an operation input in which the user presses the outer surface of the operation member 12 with the entire palm. Even in this case, the device controller 20 can accurately determine the content (form) of the operation input performed by the user by recognizing the change in the geometric pattern over a wide range.

図12中(B):この例は、操作部材12をユーザが手の中に包み込み、全体的に図中斜め左上方向にずらす操作入力である。この場合、デバイスコントローラ20は幾何学模様の全体的な変化を認識することで、ユーザが行った操作入力の内容(形態)を正確に判断することができる。また適宜、圧力センサ18による検出結果を追加することで、デバイスコントローラ20は操作部材12がずらされている方向をより正確に認識することができる。   In FIG. 12, (B): This example is an operation input in which the user wraps the operating member 12 in his / her hand and shifts in the diagonally upper left direction as a whole. In this case, the device controller 20 can accurately determine the content (form) of the operation input performed by the user by recognizing the overall change in the geometric pattern. Further, by appropriately adding the detection result by the pressure sensor 18, the device controller 20 can more accurately recognize the direction in which the operation member 12 is shifted.

図12中(C):この例は、ユーザが操作部材12の3点以上をつまむ操作入力である。この場合も同様に、デバイスコントローラ20が幾何学模様の変化位置(3箇所)を認識することで、ユーザが行った操作入力の内容(形態)を正確に判断することができる。   (C) in FIG. 12: This example is an operation input in which the user pinches three or more points of the operation member 12. In this case as well, the device controller 20 can accurately determine the content (form) of the operation input performed by the user by recognizing the change positions (three positions) of the geometric pattern.

〔第2実施形態〕
図13は、第2実施形態の中空型スイッチ装置100を示す斜視図である。なお、上記の中空型スイッチ装置10と共通する事項については同じ符号を付し、その重複した説明を省略するものとする。
[Second Embodiment]
FIG. 13 is a perspective view showing the hollow switch device 100 of the second embodiment. In addition, the same code | symbol is attached | subjected about the matter which is common in said hollow type switch apparatus 10, and the duplicate description shall be abbreviate | omitted.

第2実施形態の場合、基台14上で操作部材12の内側に複数の発光素子102が設けられている。発光素子102は例えばLED(フルカラー/単色)であり、基台14上から操作部材12の内面に向けて光(照明光)を照射することができる。操作部材12はある程度の光透過性を有しており、発光素子102を発行させると、その光が操作部材12を透過して拡散するため、これを外部からイルミネーションとして観察することができる。   In the case of the second embodiment, a plurality of light emitting elements 102 are provided inside the operation member 12 on the base 14. The light emitting element 102 is, for example, an LED (full color / single color), and can emit light (illumination light) from the base 14 toward the inner surface of the operation member 12. The operation member 12 has a certain degree of light transmittance, and when the light emitting element 102 is issued, the light is transmitted through the operation member 12 and diffused, so that it can be observed as illumination from the outside.

なお、先の中空型スイッチ装置10においても、操作部材12が適度な光透過性を有するため、ある程度は幾何学模様の投射光が操作部材12を透過して拡散する。したがって、特に発光素子102を設けない場合であってもイルミネーション効果を発揮することができる。   In the above hollow switch device 10 as well, since the operation member 12 has an appropriate light transmittance, the projection light having a geometric pattern is transmitted through the operation member 12 and diffuses to some extent. Accordingly, the illumination effect can be exhibited even when the light emitting element 102 is not provided.

一方、第2実施形態のように発光素子102を設けた場合、これをイルミネーション専用として活用することができるので、より装飾性を向上することができる。特に中空型スイッチ装置100を車載用として使用する場合、その装飾性の高さがインテリアとしての価値を高め、車両の内装品の美観を向上する効果が得られる。   On the other hand, when the light emitting element 102 is provided as in the second embodiment, it can be used exclusively for illumination, so that the decorativeness can be further improved. In particular, when the hollow switch device 100 is used for in-vehicle use, the high decorativeness increases the value of the interior, and the effect of improving the aesthetics of the interior of the vehicle is obtained.

〔第3実施形態〕
図14は、第3実施形態の中空型スイッチ装置200を示す斜視図である。ここでも同様に、上記の中空型スイッチ装置10と共通する事項については同じ符号を付し、その重複した説明を省略するものとする。
[Third Embodiment]
FIG. 14 is a perspective view showing a hollow switch device 200 of the third embodiment. Here, similarly, the same reference numerals are assigned to items common to the hollow switch device 10 described above, and redundant description thereof will be omitted.

第3実施形態の場合、操作部材120の形状が異なっている。第3実施形態の操作部材120は、例えば中空の四角柱形状をなしている。また基台140は、操作部材120の外形に合わせて四角板形状を有する。なお、基台140の四隅にはそれぞれ取付部140aが形成されている。   In the case of the third embodiment, the shape of the operation member 120 is different. The operation member 120 of the third embodiment has a hollow quadrangular prism shape, for example. The base 140 has a square plate shape in accordance with the outer shape of the operation member 120. Note that attachment portions 140a are formed at the four corners of the base 140, respectively.

第3実施形態のように、操作部材120を中空の四角柱形状とした場合、操作入力の方向をある程度まで絞り込むことができる。すなわち、操作部材120の外面が上、左右、前後の5面で構成されているため、操作入力をこれら5つの面に絞って受け付けることができる。なお第3実施形態では、操作部材120の内面形状に合わせて幾何学模様の形態を変更してもよい。   When the operation member 120 has a hollow quadrangular prism shape as in the third embodiment, the direction of operation input can be narrowed down to a certain extent. That is, since the outer surface of the operation member 120 is composed of the upper, left, right, and front and rear surfaces, the operation input can be received by focusing on these five surfaces. In the third embodiment, the shape of the geometric pattern may be changed according to the shape of the inner surface of the operation member 120.

〔第4実施形態〕
図15は、第4実施形態の中空型スイッチ装置300を示す正面図である。第4実施形態の場合、特に基台142の構成が異なっている。基台142には、例えば下方に突出する突出部142aが形成されており、基台142は、その突出部142aとともに支持部材144に支持されている。支持部材144は、例えばある程度の高さを有した円錐台形状をなしており、その内部には圧力センサ18が縦向きの姿勢と横向きの姿勢で設置されている。
[Fourth Embodiment]
FIG. 15 is a front view showing a hollow switch device 300 of the fourth embodiment. In the case of the fourth embodiment, the configuration of the base 142 is particularly different. For example, a protrusion 142a protruding downward is formed on the base 142, and the base 142 is supported by the support member 144 together with the protrusion 142a. The support member 144 has a truncated cone shape having a certain height, for example, and the pressure sensor 18 is installed in a vertical posture and a horizontal posture in the inside thereof.

このうち縦向きの姿勢にある圧力センサ18は、上記の第1実施形態と同様に基台142に加わる圧力(剪断力)を検出する。これに対し、横向きの姿勢にある圧力センサ18は、操作部材12に加わる鉛直軸線(図中Z軸)周りのモーメントによって生じる圧力を検出する。   Among these, the pressure sensor 18 in the vertical orientation detects the pressure (shearing force) applied to the base 142 as in the first embodiment. On the other hand, the pressure sensor 18 in the horizontal posture detects a pressure generated by a moment around the vertical axis (Z axis in the figure) applied to the operation member 12.

第4実施形態によれば、ユーザが操作部材12をひねる操作入力を行った場合であっても、これを横向きの姿勢にある圧力センサ18の検出信号を用いて正確に認識することができる。したがって、操作入力に基づいて水平軸線周りのモーメント(図中矢印MV)に加え、鉛直軸線周りのモーメント(図中矢印MH)が操作部材12に対して加えられた場合であっても、デバイスコントローラ20によって操作入力の内容を高精度に認識・判断することができる。   According to the fourth embodiment, even when the user performs an operation input for twisting the operation member 12, it can be accurately recognized using the detection signal of the pressure sensor 18 in the horizontal orientation. Therefore, even when a moment around the vertical axis (arrow MH in the figure) is applied to the operation member 12 in addition to a moment around the horizontal axis (arrow MV in the figure) based on the operation input, the device controller 20 can recognize and judge the contents of the operation input with high accuracy.

〔実施形態のまとめ〕
以上のように、各実施形態によれば、単なる平面上での操作入力でなく、立体物に対する3次元的な操作入力が可能となる。このため例えば、各実施形態の中空型スイッチ装置をコンピュータのユーザインタフェースに利用すれば、3次元CADやコンピュータグラフィックス、コンピュータゲーム等で扱われる3次元データに対する直感的な操作を可能とする。
[Summary of Embodiment]
As described above, according to each embodiment, it is possible to perform a three-dimensional operation input for a three-dimensional object instead of a simple operation input on a plane. Therefore, for example, if the hollow switch device of each embodiment is used for a user interface of a computer, an intuitive operation on three-dimensional data handled in three-dimensional CAD, computer graphics, a computer game, etc. can be performed.

また操作部材に弾性素材を用いているため、ユーザに対して反発力をフィードバックさせ、その力加減(強く押圧、弱く押圧等)を感覚的に調節させやすくすることができる。   Further, since an elastic material is used for the operation member, it is possible to feed back the repulsive force to the user and easily adjust the force (strongly pressed, weakly pressed, etc.) sensuously.

本発明は各実施形態に制約されることなく、各種の変形を伴って実施することができる。操作部材の形状は、ドーム型や四角柱型に限らず、その他であってもよい。また、操作部材を含めた全体の大きさは任意である。   The present invention can be implemented with various modifications without being limited to the embodiments. The shape of the operation member is not limited to the dome shape or the quadrangular prism shape, but may be other shapes. Moreover, the whole size including the operation member is arbitrary.

幾何学模様は光によって投射するものだけでなく、予め印刷されていてもよい。この場合であっても、操作部材が光透過性を有していれば、特に内部に照明を設けなくても撮像素子による撮像が可能である。   The geometric pattern is not only projected by light, but may be printed in advance. Even in this case, as long as the operation member is light transmissive, it is possible to take an image with the image pickup element without providing illumination inside.

各実施形態では操作部材を基台に対して固定としているが、操作部材が基台に対して垂直軸線周りに回転自在であってもよい。操作部材が半球形状の場合、基台上で操作部材が回転しても幾何学模様には変化が生じないため、画像認識上で問題となることはない。一方、操作部材が回転自在であれば、ユーザがつまんだ状態で回転操作を加えることができ、それだけ操作入力の多様性が拡がる。   In each embodiment, although the operation member is fixed with respect to the base, the operation member may be rotatable about a vertical axis with respect to the base. When the operation member has a hemispherical shape, the geometric pattern does not change even if the operation member rotates on the base, so that there is no problem in image recognition. On the other hand, if the operation member is freely rotatable, a rotation operation can be applied while the user is pinching, and the variety of operation inputs is expanded accordingly.

また、中空型スイッチ装置を適用する電子機器はナビゲーションシステムに限らず、その他の電子機器であってもよい。   Moreover, the electronic device to which the hollow switch device is applied is not limited to the navigation system, and may be other electronic devices.

第1実施形態の中空型スイッチ装置を示す斜視図である。It is a perspective view which shows the hollow type switch apparatus of 1st Embodiment. 図1中のII−II線に沿う中空型スイッチ装置の垂直断面図である。FIG. 2 is a vertical sectional view of the hollow switch device taken along line II-II in FIG. 1. 操作部材に対する多様な操作入力の例を示す図である。It is a figure which shows the example of the various operation input with respect to an operation member. 中空型スイッチ装置によるセンシング動作を実現するための機能構成を示すブロック図である。It is a block diagram which shows the function structure for implement | achieving the sensing operation by a hollow type switch apparatus. メイン制御処理の手順例を示すフローチャートである。It is a flowchart which shows the example of a procedure of a main control process. 実際に投射される幾何学模様の例とその変化の様子を示す図である。It is a figure which shows the example of the geometric pattern actually projected, and the mode of the change. 中空型スイッチ装置を電子機器に応用した場合の構成例を示すブロック図である。It is a block diagram which shows the structural example at the time of applying a hollow type switch apparatus to an electronic device. ナビゲーションシステムの動作例1を示す説明図である。It is explanatory drawing which shows the operation example 1 of a navigation system. ナビゲーションシステムの動作例2を示す説明図である。It is explanatory drawing which shows the operation example 2 of a navigation system. ナビゲーションシステムの動作例3を示す説明図である。It is explanatory drawing which shows the operation example 3 of a navigation system. ナビゲーションシステムの動作例4を示す説明図である。It is explanatory drawing which shows the operation example 4 of a navigation system. 操作部材に対する各種の操作入力の例を示す図である。It is a figure which shows the example of the various operation inputs with respect to an operation member. 第2実施形態の中空型スイッチ装置を示す斜視図である。It is a perspective view which shows the hollow type switch apparatus of 2nd Embodiment. 第3実施形態の中空型スイッチ装置を示す斜視図である。It is a perspective view which shows the hollow type switch apparatus of 3rd Embodiment. 第4実施形態の中空型スイッチ装置を示す正面図である。It is a front view which shows the hollow type switch apparatus of 4th Embodiment.

符号の説明Explanation of symbols

10,100,200,300 中空型スイッチ装置
12 操作部材
14 基台
16 光学部
18 圧力センサ
20 デバイスコントローラ(画像認識手段、入力判断手段)
32 光照射素子
34 回折格子
36 ハーフミラー
38 アクチュエータ
40 撮像素子
102 発光素子
DESCRIPTION OF SYMBOLS 10,100,200,300 Hollow type switch apparatus 12 Operation member 14 Base 16 Optical part 18 Pressure sensor 20 Device controller (image recognition means, input judgment means)
32 Light irradiation element 34 Diffraction grating 36 Half mirror 38 Actuator 40 Imaging element 102 Light emitting element

Claims (10)

内面に所定の幾何学模様が形成された状態で、外面からの操作入力に応じて初期状態から弾性変形する一方、前記操作入力の除去に伴い、その弾性で前記初期状態に復元可能な中空形状の操作部材と、
前記操作部材の内側に配置された広角レンズを通じて前記幾何学模様を撮像する撮像素子と
を備えたことを特徴とする中空型スイッチ装置。
A hollow shape that is elastically deformed from the initial state in response to an operation input from the outer surface with a predetermined geometric pattern formed on the inner surface, and can be restored to the initial state by its elasticity when the operation input is removed An operation member of
A hollow switch device, comprising: an imaging device that images the geometric pattern through a wide-angle lens disposed inside the operation member.
請求項1に記載の中空型スイッチ装置において、
前記撮像素子により撮像された画像に基づいて前記操作部材の弾性変形に伴う前記幾何学模様の形態の変化を検出する画像認識手段と、
前記画像認識手段の検出結果から前記操作部材に対する操作入力の内容を判断する入力判断手段と
をさらに備えたことを特徴とする中空型スイッチ装置。
The hollow switch device according to claim 1,
Image recognition means for detecting a change in the shape of the geometric pattern accompanying elastic deformation of the operation member based on an image captured by the image sensor;
A hollow switch device, further comprising: an input determination unit that determines a content of an operation input to the operation member from a detection result of the image recognition unit.
請求項2に記載の中空型スイッチ装置において、
前記広角レンズを通じて前記操作部材の内面に向けて光を照射する光照射素子と、
前記光照射素子から照射された光を回折させ、この回折光を前記操作部材の内面に前記幾何学模様として投射させる回折格子と
をさらに備えたことを特徴とする中空型スイッチ装置。
The hollow switch device according to claim 2,
A light irradiation element for irradiating light toward the inner surface of the operation member through the wide-angle lens;
A hollow switch device, further comprising: a diffraction grating that diffracts light irradiated from the light irradiation element and projects the diffracted light onto the inner surface of the operation member as the geometric pattern.
請求項3に記載の中空型スイッチ装置において、
前記光照射素子の照射光軸に対して前記回折格子を相対的に変位させ、前記操作部材の内面にて前記回折格子による前記幾何学模様の投射位置を変位させる駆動手段と、
前記駆動手段を制御する制御手段とをさらに備え、
前記入力判断手段は、
前記画像認識手段の検出結果に基づいて前記操作部材に対する操作入力の内容を判断し、
前記制御手段は、
前記入力判断手段の判断結果に基づいて前記駆動手段を制御することにより、前記操作部材に対して操作入力がなされた位置に対応させて前記幾何学模様の投射位置を変位させることを特徴とする中空型スイッチ装置。
The hollow switch device according to claim 3,
Driving means for displacing the diffraction grating relative to the irradiation optical axis of the light irradiation element and displacing the projection position of the geometric pattern by the diffraction grating on the inner surface of the operation member;
Control means for controlling the driving means,
The input determining means includes
Based on the detection result of the image recognition means, determine the content of the operation input to the operation member,
The control means includes
The projection position of the geometric pattern is displaced by controlling the driving unit based on the determination result of the input determining unit, so as to correspond to the position where the operation input is made to the operation member. Hollow switch device.
請求項2から4のいずれかに記載の中空型スイッチ装置において、
前記操作部材及び前記撮像素子をそれぞれ支持する基台と、
前記基台に設けられ、前記操作入力に伴い前記操作部材を通じて前記基台に伝達される圧力を検出する圧力センサとをさらに備え、
前記入力判断手段は、
前記画像認識手段の検出結果と、前記圧力センサによる検出結果とから前記操作部材に対する操作入力の内容を判断することを特徴とする中空型スイッチ装置。
The hollow switch device according to any one of claims 2 to 4,
A base for supporting the operation member and the imaging device,
A pressure sensor that is provided on the base and detects a pressure transmitted to the base through the operation member in accordance with the operation input;
The input determining means includes
A hollow switch device that determines the content of an operation input to the operation member from a detection result of the image recognition means and a detection result of the pressure sensor.
請求項5に記載の中空型スイッチ装置において、
前記圧力センサは、前記基台に対して複数箇所に設置されていることを特徴とする中空型スイッチ装置。
The hollow switch device according to claim 5, wherein
The said pressure sensor is installed in multiple places with respect to the said base, The hollow type switch apparatus characterized by the above-mentioned.
請求項6に記載の中空型スイッチ装置において、
前記圧力センサは、前記操作部材の外周縁に沿って前記基台の複数箇所に設置されていることを特徴とする中空型スイッチ装置。
The hollow switch device according to claim 6,
The said pressure sensor is installed in the multiple places of the said base along the outer periphery of the said operation member, The hollow type switch apparatus characterized by the above-mentioned.
請求項1から7のいずれかに記載の中空型スイッチ装置において、
前記操作部材が光透過性を有することを特徴とする中空型スイッチ装置。
The hollow switch device according to any one of claims 1 to 7,
The hollow switch device, wherein the operation member has light permeability.
請求項1から8のいずれかに記載の中空型スイッチ装置において、
前記操作部材の内側に設けられ、その内面に向けて光を発する発光素子をさらに備えたことを特徴とする中空型スイッチ装置。
The hollow switch device according to any one of claims 1 to 8,
A hollow switch device further comprising a light emitting element provided inside the operation member and emitting light toward the inner surface thereof.
請求項1から9のいずれかに記載の中空型スイッチ装置を備えた電子機器。   An electronic apparatus comprising the hollow switch device according to claim 1.
JP2007259189A 2007-10-02 2007-10-02 Hollow switch device and electronic device equipped with the same Expired - Fee Related JP4916994B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007259189A JP4916994B2 (en) 2007-10-02 2007-10-02 Hollow switch device and electronic device equipped with the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007259189A JP4916994B2 (en) 2007-10-02 2007-10-02 Hollow switch device and electronic device equipped with the same

Publications (2)

Publication Number Publication Date
JP2009087264A true JP2009087264A (en) 2009-04-23
JP4916994B2 JP4916994B2 (en) 2012-04-18

Family

ID=40660572

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007259189A Expired - Fee Related JP4916994B2 (en) 2007-10-02 2007-10-02 Hollow switch device and electronic device equipped with the same

Country Status (1)

Country Link
JP (1) JP4916994B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010231758A (en) * 2009-03-02 2010-10-14 Kddi Corp Information terminal device
JP2011113386A (en) * 2009-11-27 2011-06-09 Tokai Rubber Ind Ltd Input interface device
WO2014087634A1 (en) * 2012-12-03 2014-06-12 パナソニック株式会社 Input apparatus
KR101777731B1 (en) * 2016-08-09 2017-09-12 한국생산기술연구원 A detecting apparatus for touch-condition and force using sampling and quantization of images and a method for detecting touch-condition and force
KR101781024B1 (en) * 2016-08-09 2017-09-25 한국생산기술연구원 An apparatus and a method for detecting bio-signal and touch status using a cushion, images and sensors
KR101910187B1 (en) * 2017-05-02 2018-10-19 한국생산기술연구원 Method for touch location and depth measurement for 3-dimensional touch recognition
WO2018194227A1 (en) * 2017-04-20 2018-10-25 한국생산기술연구원 Three-dimensional touch recognition device using deep learning and three-dimensional touch recognition method using same
JP2020027537A (en) * 2018-08-16 2020-02-20 株式会社齋藤創造研究所 Input device and mobile entity

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07182101A (en) * 1993-10-26 1995-07-21 Itu Res Inc Apparatus and method for input of graphic, operating method of graphic object and supply method of graphic input signal
JP2002032173A (en) * 2000-07-13 2002-01-31 Jatco Transtechnology Ltd Information input device
JP2005165670A (en) * 2003-12-02 2005-06-23 Olympus Corp Human interface device and human interface system
JP2007072669A (en) * 2005-09-06 2007-03-22 Fujifilm Corp Optical operation device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07182101A (en) * 1993-10-26 1995-07-21 Itu Res Inc Apparatus and method for input of graphic, operating method of graphic object and supply method of graphic input signal
JP2002032173A (en) * 2000-07-13 2002-01-31 Jatco Transtechnology Ltd Information input device
JP2005165670A (en) * 2003-12-02 2005-06-23 Olympus Corp Human interface device and human interface system
JP2007072669A (en) * 2005-09-06 2007-03-22 Fujifilm Corp Optical operation device

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010231758A (en) * 2009-03-02 2010-10-14 Kddi Corp Information terminal device
JP2011113386A (en) * 2009-11-27 2011-06-09 Tokai Rubber Ind Ltd Input interface device
WO2014087634A1 (en) * 2012-12-03 2014-06-12 パナソニック株式会社 Input apparatus
KR101777731B1 (en) * 2016-08-09 2017-09-12 한국생산기술연구원 A detecting apparatus for touch-condition and force using sampling and quantization of images and a method for detecting touch-condition and force
KR101781024B1 (en) * 2016-08-09 2017-09-25 한국생산기술연구원 An apparatus and a method for detecting bio-signal and touch status using a cushion, images and sensors
WO2018194227A1 (en) * 2017-04-20 2018-10-25 한국생산기술연구원 Three-dimensional touch recognition device using deep learning and three-dimensional touch recognition method using same
KR101921140B1 (en) * 2017-04-20 2018-11-22 한국생산기술연구원 3 dimensional touch sensing apparatus usnig deep learning and method for sensing 3 dimensional touch usnig the same
KR101910187B1 (en) * 2017-05-02 2018-10-19 한국생산기술연구원 Method for touch location and depth measurement for 3-dimensional touch recognition
WO2018203590A1 (en) * 2017-05-02 2018-11-08 한국생산기술연구원 Contact position and depth measurement algorithm for three-dimensional touch recognition
JP2020027537A (en) * 2018-08-16 2020-02-20 株式会社齋藤創造研究所 Input device and mobile entity

Also Published As

Publication number Publication date
JP4916994B2 (en) 2012-04-18

Similar Documents

Publication Publication Date Title
JP4916994B2 (en) Hollow switch device and electronic device equipped with the same
JP4274997B2 (en) Operation input device and operation input method
JP6116064B2 (en) Gesture reference control system for vehicle interface
US8754862B2 (en) Sequential classification recognition of gesture primitives and window-based parameter smoothing for high dimensional touchpad (HDTP) user interfaces
US8325154B2 (en) Optical touch control apparatus and method thereof
US6281878B1 (en) Apparatus and method for inputing data
US20080259050A1 (en) Optical touch control apparatus and method thereof
US20170351336A1 (en) Time of flight based gesture control devices, systems and methods
US20110279369A1 (en) Hybrid pointing device
EP1914621A1 (en) Executing an operation associated with a region proximate a graphic element on a surface
US20110304548A1 (en) Mouse provided with a dot pattern reading function
CN108027656B (en) Input device, input method, and program
KR20100037014A (en) Optical finger navigation utilizing quantized movement information
EP1516280A2 (en) Apparatus and method for inputting data
US10540023B2 (en) User interface devices for virtual reality system
CN1811682A (en) Input apparatus and touch-reading character/symbol input method
WO2012019322A1 (en) Input method, input system and input device of vision directing type mouse using monocular camera calibration technique
US20200094864A1 (en) Operation input device
JP5664303B2 (en) Computer apparatus, input system, and program
EP3185106A1 (en) Operating apparatus, control method therefor, program, and storage medium storing program
JP2016103137A (en) User interface system, image processor and control program
US8780084B2 (en) Apparatus for detecting a touching position on a flat panel display and a method thereof
JP2018018308A (en) Information processing device and control method and computer program therefor
JP4244202B2 (en) Operation input device and operation input method
JP2014041602A (en) Information reading apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100730

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111012

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111025

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120110

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120125

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150203

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4916994

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees