JP2009087264A - Hollow type switching device and electronic device with the same - Google Patents
Hollow type switching device and electronic device with the same Download PDFInfo
- Publication number
- JP2009087264A JP2009087264A JP2007259189A JP2007259189A JP2009087264A JP 2009087264 A JP2009087264 A JP 2009087264A JP 2007259189 A JP2007259189 A JP 2007259189A JP 2007259189 A JP2007259189 A JP 2007259189A JP 2009087264 A JP2009087264 A JP 2009087264A
- Authority
- JP
- Japan
- Prior art keywords
- operation member
- switch device
- hollow
- geometric pattern
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Position Input By Displaying (AREA)
Abstract
Description
本発明は、多種多様な形態で操作を受け付けることが可能な中空型スイッチ装置及びこれを備えた電子機器に関するものである。 The present invention relates to a hollow switch device capable of accepting operations in various forms and an electronic apparatus including the same.
この種のスイッチ装置に関連する先行技術として、デジタルカメラ等の電子機器に搭載される光学式操作装置が知られている(例えば、特許文献1参照。)。この先行技術は、所定の幾何学的パターンが表面に形成された弾性体の操作シートを備えており、指やペンなどの操作体によって操作シートに押圧が加わると、操作シートの変形に伴う幾何学的パターンの形状変化を検出し、操作者による入力操作を認識するものである。 As a prior art related to this type of switch device, an optical operation device mounted on an electronic device such as a digital camera is known (for example, see Patent Document 1). This prior art is provided with an elastic operation sheet having a predetermined geometric pattern formed on the surface, and when the operation sheet is pressed by an operation body such as a finger or a pen, the geometry associated with the deformation of the operation sheet is provided. A change in the shape of a geometric pattern is detected and an input operation by an operator is recognized.
具体的には、操作シートはPET等の透明な弾性体の樹脂フィルムで構成されており、その外面にストライプパターンやハニカムパターン、格子パターン等の幾何学的パターンが印刷されている。そして先行技術では、この幾何学的パターンに対して光を照射し、その反射光を受光してパターンデータを生成する。パターンデータは、メモリにバッファリングされて順次最新データに書き換えられる。そして、CPUがパターンデータの変化から操作シートの押圧位置を認識すると、これをプログラムモジュールにしたがっていずれかの操作認識(上、下、左、右、右上、左上、左下、右下、中央等)に置き換え、その操作をデジタルカメラの動作部に対して反映させている。
しかしながら上記の先行技術は、平面的な操作シート上でどの位置が押圧されたかを認識するだけに留まる。このため、ユーザが指やペンによる操作を行うにしても、操作シート上のいずれか1箇所だけをスポットでタッチできるだけであり、それ以上の多種多様な操作を実現することはできない。 However, the above prior art only recognizes which position is pressed on the planar operation sheet. For this reason, even if the user performs an operation with a finger or a pen, only one place on the operation sheet can be touched with a spot, and a variety of operations beyond that cannot be realized.
そこで本発明は、操作者による多種多様な操作入力を実現可能とし、ユーザの操作性や操作感覚を向上できる技術の提供を課題としたものである。 Therefore, an object of the present invention is to provide a technique that can realize various types of operation inputs by an operator and can improve user operability and operation feeling.
上記の課題を解決するため、本発明は以下の解決手段を採用する。
本発明は、内面に所定の幾何学模様が形成された状態で、外面からの操作入力に応じて初期状態から弾性変形する一方、操作入力の除去に伴い、その弾性で初期状態に復元可能な中空形状の操作部材と、この操作部材の内側に配置された広角レンズを通じて幾何学模様を撮像する撮像素子とを備えた中空型スイッチ装置である。
In order to solve the above problems, the present invention employs the following solutions.
The present invention is elastically deformed from the initial state in response to an operation input from the outer surface in a state where a predetermined geometric pattern is formed on the inner surface, and can be restored to the initial state by the elasticity as the operation input is removed. This is a hollow switch device including a hollow operation member and an image sensor that images a geometric pattern through a wide-angle lens arranged inside the operation member.
本発明によれば、操作部材が単なる平面的な部材ではなく、立体的な中空形状を有しているため、その外面に対して多方向(複数の角度)からの操作入力を受け付け可能とする。この点、先行技術のような平面的な操作シートに対しては、これを一方向に押圧することしかできなかったが、本発明では立体的な操作部材の外面に対していろいろな方向(角度)から押圧操作を加えることができる。また弾性を有した操作部材を用いることで、操作入力による変形状態から初期状態に自己復帰させるための部品が必要とされないため、簡易な構造で且つ小型化可能である。 According to the present invention, since the operation member is not a simple planar member but has a three-dimensional hollow shape, operation inputs from multiple directions (a plurality of angles) can be received with respect to the outer surface. . In this respect, the planar operation sheet as in the prior art can only be pressed in one direction. However, in the present invention, various directions (angles) with respect to the outer surface of the three-dimensional operation member. ) Can be pressed. Further, by using an operation member having elasticity, a part for self-returning from a deformed state by an operation input to an initial state is not required, so that the structure can be reduced with a simple structure.
また本発明では、操作部材の内面に形成された幾何学模様を広角レンズで撮像するため、操作部材の内面が立体的な形状(例えば凹面、内球面)であっても、多方向からの操作入力に対する幾何学模様の変化を確実に撮像することができる。 Further, in the present invention, since the geometric pattern formed on the inner surface of the operation member is imaged with a wide-angle lens, even if the inner surface of the operation member has a three-dimensional shape (for example, concave surface, inner spherical surface), the operation from multiple directions is performed. The change of the geometric pattern with respect to the input can be reliably imaged.
より実用的には、本発明は以下の構成を備えることが好ましい。
すなわち、本発明の中空型スイッチ装置は、撮像素子により撮像された画像に基づいて、操作部材の弾性変形に伴う幾何学模様の形態の変化を検出する画像認識手段と、画像認識手段の検出結果から操作部材に対する操作入力の内容を判断する入力判断手段とを備えたものである。
More practically, the present invention preferably has the following configuration.
That is, the hollow switch device of the present invention includes an image recognition unit that detects a change in the shape of the geometric pattern accompanying elastic deformation of the operation member based on an image captured by the image sensor, and a detection result of the image recognition unit. Input determining means for determining the content of the operation input to the operation member.
上記の構成により、操作部材に対して多様な操作入力が加えられた場合であっても、これに伴う幾何学模様の変化を画像から読み取ることで、実際にいかなる操作入力がなされたかを判断することができる。例えば、操作部材の複数箇所が同時に押圧されたり、ある程度の面積を有する範囲にわたって押圧されたりした場合であっても、そのときの操作部材の弾性変形に追従して幾何学模様が変化するため、この変化を画像から読み取って、実際に行われた操作入力の内容を判断することが可能となる。 With the above configuration, even when various operation inputs are applied to the operation member, it is possible to determine what operation input is actually performed by reading a change in the geometric pattern accompanying the change from the image. be able to. For example, even when a plurality of locations of the operating member are pressed at the same time or pressed over a range having a certain area, the geometric pattern changes following the elastic deformation of the operating member at that time, It is possible to read the change from the image and determine the contents of the operation input actually performed.
本発明の中空型スイッチ装置は、広角レンズを通じて操作部材の内面に向けて光を照射する光照射素子と、光照射素子から照射された光を回折させ、この回折光を操作部材の内面に幾何学模様として投射させる回折格子とをさらに備えてもよい。 The hollow switch device of the present invention diffracts the light irradiation element that irradiates light toward the inner surface of the operation member through the wide-angle lens, and the light irradiated from the light irradiation element, and geometrically diffracts the diffracted light on the inner surface of the operation member. You may further provide the diffraction grating projected as a geometric pattern.
この場合、操作部材の内面には予め幾何学模様が形成されていなくても、光照射素子及び回折格子を用いて所望の幾何学模様を光の投射によって描くことができる。したがって、印刷・捺染等による固定的な幾何学模様だけでなく、使用する回折格子の特性に応じて多様な幾何学模様を形成することができる。 In this case, even if a geometric pattern is not formed in advance on the inner surface of the operation member, a desired geometric pattern can be drawn by light projection using the light irradiation element and the diffraction grating. Therefore, not only a fixed geometric pattern by printing / printing or the like, but also various geometric patterns can be formed according to the characteristics of the diffraction grating used.
また本発明の中空型スイッチ装置は、光照射素子の照射光軸に対して回折格子を相対的に変位させ、操作部材の内面にて回折格子による幾何学模様の投射位置を変位させる駆動手段と、この駆動手段を制御する制御手段とをさらに備えている。この場合、上記の入力判断手段は、画像認識手段の検出結果に基づいて操作部材に対する操作入力の内容を判断し、そして制御手段は、入力判断手段の判断結果に基づいて駆動手段を制御することにより、操作部材に対して操作入力がなされた位置に対応させて幾何学模様の投射位置を変位させることが好ましい。 Further, the hollow switch device of the present invention includes a driving unit that displaces the diffraction grating relative to the irradiation optical axis of the light irradiation element and displaces the projection position of the geometric pattern by the diffraction grating on the inner surface of the operation member. And a control means for controlling the driving means. In this case, the input determination unit determines the content of the operation input to the operation member based on the detection result of the image recognition unit, and the control unit controls the drive unit based on the determination result of the input determination unit. Thus, it is preferable to displace the projection position of the geometric pattern in correspondence with the position where the operation input is made to the operation member.
例えば、内面に投射される幾何学模様の形態(同心円形、格子形、ドット配列形等)によっては、模様の構成要素(線やドット)の分布が密になる所もあれば、分布が粗になる所もある。構成要素の分布が密であれば、それだけ幾何学模様の変化に対する分解能が高くなるため、操作入力がなされた位置に分解能の高い所を集中させれば、より認識精度を向上することができる。 For example, depending on the shape of the geometric pattern projected on the inner surface (such as concentric circles, grids, and dot arrangement), the pattern components (lines and dots) may be densely distributed, but the distribution may be coarse. There is a place to become. If the distribution of the constituent elements is dense, the resolution with respect to the change of the geometric pattern becomes higher. Therefore, if the place with high resolution is concentrated at the position where the operation input is made, the recognition accuracy can be further improved.
そこで本発明では、制御手段の制御の下で駆動手段によって回折格子の位置を適宜動かし、操作入力がなされた位置に対応させて幾何学模様の投射位置を自在に変位させている。これにより、必要に応じて認識精度をコントロールし、より正確な処理判断を実現することができる。 Therefore, in the present invention, the position of the diffraction grating is appropriately moved by the drive means under the control of the control means, and the projection position of the geometric pattern is freely displaced corresponding to the position where the operation input is made. Thereby, the recognition accuracy can be controlled as necessary, and more accurate processing determination can be realized.
また本発明は、操作部材及び撮像素子をそれぞれ支持する基台と、この基台に設けられ、操作入力に伴い操作部材を通じて基台に伝達される圧力を検出する圧力センサとをさらに備えてもよい。この場合、上記の入力判断手段は、画像認識手段の検出結果と、圧力センサによる検出結果とから操作部材に対する操作入力の内容を判断することが好ましい。 The present invention further includes a base that supports the operation member and the image sensor, and a pressure sensor that is provided on the base and detects a pressure transmitted to the base through the operation member in accordance with an operation input. Good. In this case, it is preferable that the input determination unit determines the content of the operation input to the operation member from the detection result of the image recognition unit and the detection result of the pressure sensor.
上記の構成によれば、幾何学模様の変化だけから判断がつきにくい操作入力であっても、操作部材を通じて基台に伝わる圧力(基台に生じる剪断力)を判断要素に追加することで、多様な操作入力をより正確に判断することができる。 According to the above configuration, even if the operation input is difficult to determine only from the change of the geometric pattern, by adding the pressure transmitted to the base through the operation member (shearing force generated in the base) to the determination element, Various operation inputs can be judged more accurately.
例えば、操作部材への操作入力に関して鉛直方向(Z軸)及び水平方向(X軸,Y軸)を規定し、(1)操作部材を鉛直下方へ全体的に押し込む、(2)鉛直上方へ操作部材を全体的に引っ張り上げる、(3)水平軸周りのモーメントを操作部材に加える、といった各種の形態で操作入力がなされた場合を考える。これらの場合、局部的な押圧の場合と違って幾何学模様が全体的に変化するため、(1)と(2)の操作入力を正確に判別することは難しい。また(3)の操作入力については、幾何学模様にあまり大きな変化が生じないため、画像だけでは判断が困難になることがある。 For example, the vertical direction (Z-axis) and the horizontal direction (X-axis, Y-axis) are defined for the operation input to the operation member, (1) the operation member is entirely pushed downward vertically, and (2) the operation is vertically upward. Consider a case where operation input is made in various forms such as pulling up the member as a whole, or (3) applying a moment around the horizontal axis to the operation member. In these cases, unlike the case of local pressing, the geometric pattern changes as a whole, so it is difficult to accurately determine the operation inputs (1) and (2). In addition, regarding the operation input of (3), since the geometric pattern does not change so much, it may be difficult to make a judgment based on the image alone.
そこで、これらの場合に圧力センサによる検出結果を判断要素に追加すれば、(1)と(2)では基台に加わる圧力(剪断力)が逆方向であるため、それによって(1)と(2)の操作入力を正しく判別することができる。また(3)の操作入力についても、基台に加わる圧力(剪断力)の変化を判断要素に追加すれば、操作部材に対してモーメントが加わっていることを正確に判断することができる。 Therefore, if the detection result by the pressure sensor is added to the determination element in these cases, the pressure (shearing force) applied to the base in (1) and (2) is in the opposite direction, so that (1) and ( The operation input of 2) can be correctly identified. In addition, regarding the operation input in (3), if a change in pressure (shearing force) applied to the base is added to the determination element, it can be accurately determined that a moment is applied to the operation member.
なお、上記の圧力センサは、基台に対して複数箇所に設置されていることが好ましい。例えば、上記(3)の操作入力のように、同じ操作部材に対して片側(X軸の正方向)では鉛直下方の圧力が加わり、反対側(X軸の負方向)では鉛直上方の圧力が加わるという場合もある。この場合、場所によって方向が異なる圧力の変化を読み取ることで、より正確な判断を可能とすることができる。 In addition, it is preferable that said pressure sensor is installed in multiple places with respect to the base. For example, as in the operation input in (3) above, a vertical downward pressure is applied to the same operation member on one side (the positive direction of the X axis), and a vertical upward pressure is applied to the opposite side (the negative direction of the X axis). There is also a case of joining. In this case, it is possible to make a more accurate determination by reading the change in pressure whose direction differs depending on the location.
あるいは、上記の圧力センサは、操作部材の外周縁に沿って基台の複数箇所に設置されていてもよい。操作部材に加わる外力(押圧力等)は、その外周縁から基台に伝達されるため、その影響を最も顕著に受けるのは外周縁の直下及びその近傍である。そこで、操作部材の外周縁に沿って(直下又は近傍)に複数箇所に圧力センサを設置することで、より正確な判断に資することが可能になる。 Or said pressure sensor may be installed in the multiple places of a base along the outer periphery of an operation member. Since the external force (pressing force or the like) applied to the operating member is transmitted from the outer peripheral edge to the base, the influence is most noticeably directly below and in the vicinity thereof. Therefore, it is possible to contribute to more accurate determination by installing pressure sensors at a plurality of locations along the outer peripheral edge of the operation member (directly or in the vicinity).
なお、上記の操作部材は光透過性を有する素材で構成されていることが好ましい。例えば、幾何学模様が印刷や捺染によって形成されている場合、撮像素子によって幾何学模様を撮像するには、操作部材の内部環境に適度な明るさが必要である。操作部材が光透過性を有していれば、外光を内部に透過させることができるので、特に内部に光源を持たなくても、予め形成された幾何学模様を撮像するのに充分な光量を得ることができる。 In addition, it is preferable that said operation member is comprised with the raw material which has a light transmittance. For example, when the geometric pattern is formed by printing or textile printing, an appropriate brightness is required for the internal environment of the operation member in order to capture the geometric pattern by the imaging element. If the operation member is light transmissive, external light can be transmitted to the inside, so that the amount of light is sufficient to image a pre-formed geometric pattern even without a light source inside. Can be obtained.
また上記のように、光照射素子によって幾何学模様を投射する場合、その投射光が操作部材を透過して外部に拡散するため、適度なイルミネーション効果を発揮することができ、視覚的な美観を向上することができる。 In addition, as described above, when a geometric pattern is projected by the light irradiation element, since the projection light is transmitted through the operation member and diffused to the outside, an appropriate illumination effect can be exhibited, and a visual aesthetics can be achieved. Can be improved.
あるいは、操作部材が光透過性を有する場合、その内側に発光素子が設けられていてもよい。この場合、発光素子の発した光が操作部材の外部に拡散されて、上記のようにイルミネーション効果を発揮する。 Alternatively, when the operation member has light transmittance, a light emitting element may be provided inside thereof. In this case, the light emitted from the light emitting element is diffused to the outside of the operation member, and the illumination effect is exhibited as described above.
また本発明は、上記の中空型スイッチ装置を備えた電子機器として構成してもよい。この場合、中空型スイッチ装置によって多様な操作入力を判断し、その判断結果を電子機器の動作に反映させることができる。 Moreover, you may comprise this invention as an electronic device provided with said hollow type switch apparatus. In this case, various operation inputs can be determined by the hollow switch device, and the determination result can be reflected in the operation of the electronic device.
以上のように本発明によれば、従来の単純な押圧操作だけでなく、多方向からの押圧操作や一定範囲内での押圧操作を受け付け可能にし、従来にない操作性や操作感覚をユーザに提供することができる。また、多様な操作性を活かしたユーザインタフェースを電子機器に提供することで、その利便性を大きく向上することができる。 As described above, according to the present invention, not only a conventional simple pressing operation but also a pressing operation from multiple directions and a pressing operation within a certain range can be accepted, and unprecedented operability and operation feeling can be received by the user. Can be provided. In addition, by providing a user interface utilizing various operability to an electronic device, the convenience can be greatly improved.
以下、本発明の実施形態について図面を参照しながら説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
〔第1実施形態〕
図1は、第1実施形態の中空型スイッチ装置10を示す斜視図である。先ず、中空型スイッチ装置10の基本構成について説明する。
[First Embodiment]
FIG. 1 is a perspective view showing a
中空型スイッチ装置10は、例えば外形が半球状をなす操作部材12を備えている。この操作部材12は、ゴム等の弾性素材から成型されており、その内部は中空(ドーム型)となっている。図中に破線で示されているように、操作部材12はある程度の肉厚を有しているが、その厚みは操作部材12の外径に比較して小さい。
The
操作部材12は、基台14上に設置されている。基台14は、例えば樹脂基板や金属基板で構成されており、その外形は操作部材12に合わせて円盤状をなしている。なお操作部材12は、その下端に位置する外周縁を基台14の上面に接着された状態で基台14に支持されている。基台14の外径は操作部材12よりも僅かに大きく、このため基台14の外縁部は、操作部材12から径方向に張り出している。
The
基台14の外縁部には、例えば周方向に等間隔で取付部14aが形成されている。これら取付部14aは、中空型スイッチ装置10を他の部材(電子機器の筐体等)に固定するためのものである。
At the outer edge of the
また基台14には、操作部材12の内側に位置して光学部16が設置されている。光学部16は図示しない広角レンズを有しており、この広角レンズを通じて操作部材12の内面に光を投射し、内面に所望の幾何学模様P(パターン)を形成する。また光学部16は、操作部材12の内面全域から反射光(又は透過光)を集光し、図示しない撮像素子による撮像を可能にする。なお、光学部16の具体的な構成についてはさらに後述する。
An
図2は、中空型スイッチ装置10の垂直断面図(図1中のII−II線)である。図2に示されているように、基台14の下面には圧力センサ18が設置されている。圧力センサ18は、例えばピエゾ抵抗効果を利用して圧力の大きさに応じた電気信号を出力する圧電素子である。このような圧力センサ18を用いれば、操作部材12から基台14に伝達される圧力(それによって生じる剪断力)を検出することができる。
FIG. 2 is a vertical sectional view of the hollow switch device 10 (II-II line in FIG. 1). As shown in FIG. 2, a
例えば、鉛直下方(図中Z軸の負方向)に操作部材12が押圧されたり、逆に鉛直上方(図中Z軸の正方向)に操作部材12が引っ張り上げられたりすると、操作部材12から基台14に下向き又は上向きの圧力が伝達される。基台14は図示しない電子機器の筐体等に固定されており、基台14に伝達された圧力は、基台14内部で剪断力として作用する。このときの剪断力(+/−)が圧力センサ18の検出信号として取り出されることになる。
For example, if the operating
また図中に矢印Fで示されるように、例えば操作部材12を水平軸(例えば図中Y軸)の周りに回転させようとするモーメントが作用すると、水平方向でみて片側(図中X軸の正方向)とその反対側(図中X軸の負方向)とで互いに圧力の向きが反対となる。このときの剪断力は互いに符号(+/−)が逆となり、これが2つの圧力センサ18による検出信号として別々に取り出されることになる。
Further, as shown by an arrow F in the figure, for example, when a moment is applied to rotate the operating
なお、図2には2つの圧力センサ18だけが示されているが、これ以外の複数箇所にも他の圧力センサ18が設置されている。圧力センサ18の設置場所は、例えば操作部材12の外周縁の直下か、もしくはその近傍が好ましい。
In FIG. 2, only two
〔広角レンズの応用〕
図3は、操作部材12に対する多様な操作入力の例を示す図である。上記のように、基台14に設けられた光学部16は、広角レンズを用いて操作部材12の内面全域に幾何学模様を形成しつつ、その内面に生じた幾何学模様の変化を撮像可能とする。第1実施形態の中空型スイッチ装置10は、このような広角レンズを用いて光学的に幾何学模様を読み取ることで、より多様な操作入力に対する応答性を実現している。以下、第1実施形態の中空型スイッチ装置10で使用可能な操作入力の例について説明する。
[Application of wide-angle lens]
FIG. 3 is a diagram illustrating examples of various operation inputs to the
図3中(A):中空型スイッチ装置10は、操作部材12に対する1点(1箇所)の押圧操作を受け付け可能である。このような操作入力は、例えばユーザが1本指で操作部材12を押し込む形態に該当する。
3A: The
操作部材12に対する押圧位置(方向)はユーザの任意であり、広角レンズによる幾何学模様の投射及び撮像範囲内であれば、ユーザは操作部材12の外面のどこを押圧してもよい。操作部材12が押圧された場合、そのときの押圧箇所に操作部材12の弾性変形が生じ、それに追従して幾何学模様にも変化が生じる。第1実施形態では、このような幾何学模様の変化を光学的に読み取り、ユーザが行った押圧操作を認識することができる。
The pressing position (direction) with respect to the
押圧力の大きさは、ユーザが任意に加減することができる。操作部材12は押圧力の大きさにほぼ比例して変形量が大きくなることから、より大きな押圧力が加われば、それだけ幾何学模様の変化も大きくなる。したがって、幾何学模様の変化量から操作入力(押圧力)そのものの大きさを光学的に認識することができる。
The magnitude of the pressing force can be arbitrarily adjusted by the user. Since the amount of deformation of the operating
図3中(B):また中空型スイッチ装置10は、操作部材12に対する多点(複数箇所)での押圧操作を受け付け可能である。このような操作入力は、例えばユーザが2本指(人差し指と親指等)で操作部材12をつまむ形態に該当する。
In FIG. 3 (B): The
操作部材12をつまむ位置(方向)はユーザの任意であり、広角レンズによる幾何学模様の投射及び撮像範囲内であれば、ユーザは操作部材12の外面のどこをつまんでもよい。同時に操作部材12の複数箇所が押圧された場合、それぞれの押圧箇所に操作部材12の弾性変形が生じ、それに追従して幾何学模様にも変化が生じる。第1実施形態では、このような幾何学模様の変化を光学的に読み取り、ユーザが行った複数箇所への押圧操作を認識することができる。
The position (direction) for pinching the
また、つまむときの力の大きさは、ユーザが任意に加減することができる。操作部材12を強くつまめば、それだけ幾何学模様の変化も大きくなることから、操作入力(つまむ力)そのものの大きさを光学的に認識することができる。
Further, the magnitude of the force when pinching can be arbitrarily adjusted by the user. If the
図3中(C):中空型スイッチ装置10は、操作部材12に対する多点での押圧操作を入力したまま、全体を水平方向に移動させる操作入力を受け付け可能である。このような操作入力は、上記のようにユーザが操作部材12をつまんだ状態で、そのつまんだ指をさらに前後左右(又は斜め)に動かす(外面上を滑らせる)形態に該当する。
In FIG. 3, (C): The
上記のように操作部材12に対する複数箇所の押圧は、幾何学模様の変化から光学的に読み取り可能である。この状態からさらに操作部材12が全体的に水平方向へ弾性変形すると、押圧による局部的な幾何学模様の変化を維持したまま、幾何学模様全体の位置が水平方向にずれることになる。第1実施形態では、このような幾何学模様の変化を光学的に読み取り、ユーザが行った複合的な操作入力(つまんで動かす)を認識することができる。
As described above, pressing at a plurality of locations on the
〔圧力変化を追加した判断〕
また第1実施形態では、幾何学模様の変化の他に、基台14に加わる圧力の変化を判断要素に追加することで、より多彩な操作入力を認識することもできる。
[Judgment adding pressure change]
In the first embodiment, a variety of operation inputs can be recognized by adding a change in pressure applied to the base 14 to the determination element in addition to the change in the geometric pattern.
例えば、図3中(A)において、押圧位置に最も近い位置では、操作部材12から基台14に加わる圧力が最大になる。また図3中(B)においては、それぞれの押圧位置に最も近い位置で操作部材12から基台14に加わる圧力が最大になる。さらに図3中(C)においては、水平方向への移動によって操作部材12にモーメントが加わるため、上記のように対称位置で圧力(剪断力)の向きが逆になる。このため、複数箇所に設けた圧力センサ18からの検出信号をそれぞれ判断要素に追加することで、より正確な操作入力の認識・判断が可能になる。
For example, in FIG. 3A, the pressure applied from the
〔センシング手法〕
図4は、中空型スイッチ装置10によるセンシング動作を実現するための機能構成を示すブロック図である。中空型スイッチ装置10は、そのセンシング動作をコントロールするデバイスコントローラ20を備えている。デバイスコントローラ20は、例えば制御用IC22や出力回路24,26、入力回路28,30等を有する電子回路モジュールとして構成されている。
[Sensing method]
FIG. 4 is a block diagram showing a functional configuration for realizing a sensing operation by the
制御用IC22は、例えばCPU22aやメモリ22b、I/Oポート22cを有する他、図示しないクロックジェネレータ等を内蔵するマイクロコンピュータである。CPU22aはデバイスコントローラ20の制御中枢であり、所定の組み込みプログラムを実行して各部を制御する。メモリ22bは、CPU22aのメインメモリとなる記憶デバイス(例えば、EEPROM、RAM等)であり、CPU22aが実行するプログラムは、このメモリ22bに格納されている。またI/Oポート22cは、制御用IC22と出力回路24,26、入力回路28,30との間で信号のやりとりを行う。
The
光学部16は、上記の広角レンズを含む光学レンズ16a,16b,16cを有している。また光学部16は、光照射素子32とともに回折格子34及びハーフミラー36を有している。光照射素子32は半導体レーザやLED等であり、例えば可視光波長の光を照射することができる。光照射素子32の照射光は回折格子34で回折された後にハーフミラー36で反射され、上記のように光学部16の広角レンズを通じて操作部材12の内面に向けて照射される。回折格子34は照射光を回折させ、この回折光を所望の幾何学模様として操作部材12の内面に投射させる。
The
デバイスコントローラ20は、出力回路26を通じて光照射素子32に駆動信号を印加し、照射光の出力タイミングや出力期間(パルス幅)、光強度(振幅)等を制御することができる。
The
回折格子34にはアクチュエータ38が連結されている。アクチュエータ38は、例えばリニアソレノイド等の駆動素子であり、このアクチュエータ38は、回折格子34を光軸に対して垂直方向(x−yの2次元平面上)に変位させることができる。回折格子34が光軸に対して変位すると、幾何学模様の位置が連動して変位することになる。
An
デバイスコントローラ20は、出力回路24を通じてアクチュエータ38に対する駆動信号を印加し、光軸に対する回折格子34の位置(変位量)を制御することができる。
The
この他に光学部16は、撮像素子40を備えている。広角レンズで集光された光(内面からの反射光)はハーフミラー36を透過し、撮像素子40にて撮像される。撮像素子40は、例えばCCDイメージセンサ、CMOSイメージセンサ等であり、広角レンズを通じて受けた光を各画素で光電変換し、画像信号として出力することができる。
In addition to this, the
デバイスコントローラ20は、入力回路28を通じて画像信号を受け取り、必要な信号処理(フィルタリング、強度補正、A/D変換等)を行う。制御用IC22は処理済みの画像信号を受け取ると、これを撮像データとしてメモリ22bにバッファリングする。
The
またデバイスコントローラ20は、入力回路30を通じて各圧力センサ18からの検出信号を受け取り、これをA/D変換して制御用IC22に入力する。なお、圧力センサ18からの検出信号は、それぞれの取付位置と関連付けた状態で信号処理される。例えば、検出信号を記述するビットデータ内には、その数値とともに取付位置を表すデータ(4ビット程度)が含まれる。
The
以上がセンシング動作を実現するための基本構成であるが、次に、これら基本構成を用いて実際にセンシング動作を行う際の処理手法について説明する。 The above is the basic configuration for realizing the sensing operation. Next, a processing method when actually performing the sensing operation using these basic configurations will be described.
〔センシングプログラム〕
図5は、デバイスコントローラ20の制御用IC22(CPU22a)が実行するメイン制御処理の手順例を示すフローチャートである。デバイスコントローラ20が起動すると、CPU22aが先頭のプログラムアドレスから処理を開始する。以下、各手順に沿って処理の流れを説明する。
[Sensing program]
FIG. 5 is a flowchart illustrating a procedure example of main control processing executed by the control IC 22 (
ステップS10:CPU22aは、アクチュエータ管理処理を実行する。この処理では、CPU22aはアクチュエータ38の動作を制御することで、照射光軸に対して回折格子34の位置決めを行う。なお初期状態では、特にアクチュエータ38を駆動せず、回折格子34を初期位置(原点)にセットしている。
Step S10: The
ステップS12:次にCPU22aは、パターン出力処理を実行する。この処理では、CPU22aは光照射素子32に対する駆動信号を出力し、実際に光照射素子32から照射光を出力させる。またCPU22aは、この処理の中で例えばフィードバック補正を行い、適宜、その出力強度をコントロールする。これにより、実際に広角レンズを通じて回折光が照射され、操作部材12の内面に所望の幾何学模様が投射されることになる。
Step S12: Next, the
ステップS14:続いてCPU22aは、センサ入力処理を実行する。この処理では、入力回路28,30から順次ポーリング受信を行い、撮像素子40からの画像データ及び各圧力センサ18からの検出信号をメモリ22bに転送する。
Step S14: Subsequently, the
ステップS16:そしてCPU22aは、画像解析処理を実行する。この処理では、先のステップS14でバッファリングした画像信号に基づいて、幾何学模様の変化を解析する。上記のメモリ22b内には幾何学模様の原型データが格納されており、CPU22aはバッファリングした最新の画像データと原型データとを対比する。なお原型データは、操作部材12に操作入力が全く加わっていない初期状態で、その内面に投射される幾何学模様に相当する。CPU22aは、原型データと画像データとの対比結果から幾何学模様の変化量と変化位置を演算すると、その演算結果をメモリ22bに保存する。
Step S16: Then, the
〔幾何学模様の例〕
図6は、実際に投射される幾何学模様の例とその変化の様子を示す図である。
図6中(A):この例では、操作部材12の内面に同心円状の幾何学模様が投射されている。操作部材12に対して操作入力がされていない初期状態では、幾何学模様の中心(各円の中心)は、平面視でみた操作部材12の中心に合致している。上記の原型データは、このときの幾何学模様を広角レンズで撮像したものと一致する。
[Example of geometric pattern]
FIG. 6 is a diagram showing an example of a geometric pattern actually projected and how it changes.
In FIG. 6, (A): In this example, a concentric geometric pattern is projected on the inner surface of the
図6中(B):操作部材12に対して、例えば1箇所(図中のハッチング領域)を押圧する操作入力がなされると、その押圧により操作部材12が弾性変形し、これに追従して幾何学模様にも変化が生じていることが分かる。なお、操作入力は1箇所への押圧だけであるため、その他の大部分には弾性変形が生じていない。このため幾何学模様の変化も、主に押圧箇所を中心とした弾性変形領域のみとなる。
FIG. 6B: When an operation input is made to the operating
図6中(B)の幾何学模様を広角レンズで撮像した画像データと、上記の原型データとを対比することで、CPU22aは幾何学模様の変化量と変化位置を演算する。変化量は、例えば各円周上でサンプリングした点の移動距離から演算することができ、変化量が大きければ、それだけ強い力で押圧されていることになる。また変化位置は、例えば最も変化量が大きいサンプル点について、中心からの距離(r)と円周方向でみた角度(θ)、そして基台14の上面からの仰角(φ)から演算することができる。変化位置の中心からの距離(r)が大きければ、それだけ操作部材12の外周縁に近い所が押圧されていることになる。また角度(θ)が大きければ(180°以内)、それだけ基準点(0°)から円周方向に離れた所が押圧されていることになる。仰角(φ)が大きければ、それだけ基台14の上面(0°)から上方にある所が押圧されていることになる。
The
〔図5:再びメイン制御処理を参照〕
ステップS18:ここでCPU22aは、画像解析処理の結果を受けて、幾何学模様(パターン)の補正が必要であるか否かを判断する。例えば、バッファリングした画像データが不鮮明(受光強度不足)であれば、CPU22aは補正が必要であると判断する。この場合の補正は、光照射素子32による出力強度の向上を意味する。これとは別に、演算により得られた変化量や変化位置が不明確(変化量が小さい、変化位置が不特定)である場合、CPU22aは解析精度を向上するための補正を行う必要があると判断する。この場合の補正は、幾何学模様の位置を変位させ、より高い分解能が得られる所を変化位置に集中させることを意味する。幾何学模様の位置補正が必要と判断した場合、CPU22aは合わせてその補正量(Δx,Δy)を決定する。
[Fig. 5: See main control process again]
Step S18: Here, the
上記のステップS18で補正の必要があると判断した場合(Yes)、CPU22aはステップS10に戻ってアクチュエータ管理処理を実行する。このとき、幾何学模様の位置に対する補正量があれば(Δx≠0,Δy≠0)、CPU22aは補正の要求に従ってアクチュエータ38を駆動する。これにより、回折格子34が初期位置から変位し、その結果、幾何学模様の投射位置が補正位置に変更されることになる。
If it is determined in step S18 that correction is necessary (Yes), the
また、ステップS18で出力強度の補正が必要であると判断した場合(Yes)CPU22aは次のパターン出力処理(ステップS12)において光照射素子32による出力強度を所定レベルだけ上昇させる。
If it is determined in step S18 that the output intensity needs to be corrected (Yes), the
ステップS18で補正の必要がないと判断した場合(No)、CPU22aは次にステップS20に進む。
If it is determined in step S18 that no correction is necessary (No), the
ステップS20:CPU22aは、入力認識処理を実行する。この処理では、CPU22aは画像解析処理で得た演算結果に基づき、あるいは、これに圧力センサ18による検出結果を追加して、実際に行われた操作入力の内容を認識・判断する。
Step S20: The
ステップS22:そしてCPU22aは、先のステップS20で得た認識結果を出力する。認識結果の出力は、デバイスコントローラ20からの外部出力として利用することもできるし、制御用IC22の内部(他のプログラム)で利用することもできる。
Step S22: The
CPU22aは以上の手順を繰り返し実行し、リアルタイムで操作部材12に対する実際の操作入力を認識・判断し、その認識結果を出力している。なお、上記のアクチュエータ管理処理やパターン出力処理、センサ入力処理は、CPU22aに所定周期(数ミリ秒程度)ごとにタイマ割込を発生させ、割込処理として実行してもよい。
The
〔応用例〕
図7は、第1実施形態の中空型スイッチ装置10を電子機器に応用した場合の構成例を示すブロック図である。ここでは電子機器の一例として、車両用のナビゲーションシステム50を挙げて説明する。
[Application example]
FIG. 7 is a block diagram illustrating a configuration example when the
ナビゲーションシステム50は、例えばGPSアンテナ52や記憶装置54、表示装置56を用いて構成されている。GPSアンテナ52は車両に装備された状態で衛星からの位置信号を受信する。また記憶装置54は、例えばハードディスクやDVDメディア等の大容量記憶装置であり、ここには地図データや地形データ、施設データ等の情報が記憶されている。表示装置56は、例えば液晶ディスプレイである。
The
またナビゲーションシステム50には、車載ECU(電子制御ユニット)58から車速信号や加速度信号、ヨーレート信号、ハンドル操作角信号、ブレーキ操作信号、パーキングブレーキ操作信号等が提供されている。ナビゲーションシステム50は、これら信号をもとに車両の走行状態を認識する。なお、ナビゲーションシステム50の動作や機能については公知であるため、ここではその詳細を省略する。
The
第1実施形態の中空型スイッチ装置10は、例えばナビゲーションシステム50の入力デバイス(ユーザインタフェース)として利用することができる。デバイスコントローラ20は、上記のメイン制御処理を通じて得た認識結果(操作入力の内容)をナビゲーションシステム50に提供し、これを受け取ったナビゲーションシステム50は、ユーザが行った操作入力に対応した処理を実行することができる。以下、中空型スイッチ装置10に対する操作入力と、それに対するナビゲーションシステム50の動作例について説明する。
The
〔動作例1〕
先ず図8は、ナビゲーションシステム50の動作例1を示す説明図である。
図8中(A):例えば、ナビゲーションシステム50のユーザ(運転者又は同乗者)が操作部材12の1箇所を指で軽く触れた場合を想定する。この場合、デバイスコントローラ20がセンシング動作(メイン制御処理)を実行することにより、例えば「1箇所(r,θ,φ)を軽く押圧」という認識結果がナビゲーションシステム50に対して提供される。なお、認識結果の極座標(r,θ,φ)はユーザの指の位置に合致する。
[Operation example 1]
First, FIG. 8 is an explanatory diagram showing an operation example 1 of the
In FIG. 8, (A): For example, it is assumed that a user (driver or passenger) of the
図8中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上に各種の操作メニューを表示させる処理を行う。操作メニューは、例えば地図上に重ねられたアイコンの形態で表示される。
In FIG. 8, (B): In response, the
図8中(C):続いて、ユーザが操作部材12に触れたままの状態で指を動かすと、その都度、デバイスコントローラ20は操作入力がなされた位置をリアルタイムに判断し、「1箇所(r,θ,φ)を軽く押圧」という認識結果をナビゲーションシステム50に対して提供する。この場合、認識結果の極座標(r,θ,φ)はユーザの指の位置に合わせて変化する。
In FIG. 8, (C): Subsequently, when the user moves his / her finger while touching the
図8中(D):ナビゲーションシステム50は、これを受けて画面上でカーソルを移動させる処理を行う。カーソルは、例えば操作メニューのアイコンを強調表示することで表現されている。この後、例えば所望の位置でユーザが操作部材12を強く押し込むと、カーソルで選択された操作メニューの実行をナビゲーションシステム50に対して指示することができる。
In FIG. 8, (D): The
〔動作例2〕
次に図9は、ナビゲーションシステム50の動作例2を示す説明図である。
図9中(A):今度は、動作例1のときよりもユーザが操作部材12の1箇所を指で強く押し込んだ場合を想定する。この場合、例えばデバイスコントローラ20から「1箇所(r,θ,φ)を強く押圧」という認識結果がナビゲーションシステム50に対して提供される。
[Operation example 2]
Next, FIG. 9 is an explanatory diagram showing an operation example 2 of the
In FIG. 9, (A): This time, it is assumed that the user presses one place of the
図9中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上に地図カーソルを表示させる処理を行う。地図カーソルは、例えば地図上でみた現在地に対応する位置に中心を合わせた状態で表示される。
In FIG. 9, (B): In response, the
図9中(C):続いて、ユーザが操作部材12に触れたままの状態で指を動かすと、その都度、デバイスコントローラ20は操作入力がなされた位置をリアルタイムに判断し、同様に「1箇所(r,θ,φ)を強く押圧」という認識結果をナビゲーションシステム50に対して提供する。
In FIG. 9, (C): Subsequently, each time the user moves his / her finger while touching the
図9中(D):ナビゲーションシステム50は、これを受けて画面上で地図を図中矢印方向にスクロール表示させる処理を行う。
In FIG. 9, (D): The
以上の動作例1,2は、操作部材12の1箇所を押圧する操作入力についてのものであるが、操作部材12をユーザがつまむ操作入力を行った場合、ナビゲーションシステム50は例えば以下の動作例を示す。
The above operation examples 1 and 2 relate to an operation input for pressing one place of the
〔動作例3〕
図10は、ナビゲーションシステム50の動作例3を示す説明図である。
図10中(A):ユーザが操作部材12を軽くつまんでから、その指を離した場合を想定する。この場合、最初にデバイスコントローラ20から「2箇所(r1,θ1,φ1),(r2,θ2,φ2)をそれぞれ軽く押圧」という認識結果がナビゲーションシステム50に対して提供された後、続いて「操作入力なしの状態に復帰」という認識結果がナビゲーションシステム50に対して提供される。
[Operation example 3]
FIG. 10 is an explanatory diagram showing an operation example 3 of the
In FIG. 10, (A): The case where the user lifts the finger after lightly pinching the
図10中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上で地図をズームアウト表示させる処理を行う。なお、上記の操作入力(軽くつまんで離す)をユーザが数回繰り返すと、その都度、地図がズームアウト表示される態様であってもよい。
In FIG. 10, (B): In response, the
図10中(C):今度は、ユーザが操作部材12を強くつまんでから、その指を中央に寄せていった場合を想定する。この場合、最初にデバイスコントローラ20から「2箇所(r1,θ1,φ1),(r2,θ2,φ2)をそれぞれ強く押圧」という認識結果がナビゲーションシステム50に対して提供された後、連続して「2箇所(r1,θ1,φ1),(r2,θ2,φ2)をそれぞれ強く押圧」という認識結果がナビゲーションシステム50に対して提供される。なお極座標は、その都度、ユーザの指の位置に合わせて変化する。
In FIG. 10, (C): This time, it is assumed that the user has pinched the
図10中(D):ナビゲーションシステム50は、これを受けて表示装置56の画面上で地図をズームイン表示させる処理を行う。ここでも同様に、上記の操作入力(強くつまんで寄せる)をユーザが数回繰り返すと、その都度、地図がズームイン表示される態様であってもよい。
In FIG. 10, (D): The
〔動作例4〕
次に図11は、ナビゲーションシステム50の動作例4を示す説明図である。
図11中(A):ここでは、ユーザが操作部材12の一部(ユーザからみて手前側)をつまんだ場合を想定する。この場合、デバイスコントローラ20から「2箇所(r1,θ1,φ1),(r2,θ2,φ2)を押圧」という認識結果がナビゲーションシステム50に対して提供される。
[Operation Example 4]
Next, FIG. 11 is an explanatory diagram showing an operation example 4 of the
In FIG. 11, (A): Here, it is assumed that the user has pinched a part of the operation member 12 (the front side as viewed from the user). In this case, the
図11中(B):これを受けて、ナビゲーションシステム50は表示装置56の画面上で地図を俯瞰図(3D表示)に切り換える処理を行う。
In FIG. 11, (B): In response, the
図11中(C):図11中(A)の状態から、さらにユーザが操作部材12を指を動かすと、その都度、デバイスコントローラ20は操作入力がなされた位置をリアルタイムに判断し、「2箇所(r1,θ1,φ1),(r2,θ2,φ2)を押圧」という認識結果をナビゲーションシステム50に対して提供する。この場合、認識結果の極座標はユーザの指の位置に合わせて変化する。
In FIG. 11, (C): When the user further moves his / her finger on the
図11中(D):ナビゲーションシステム50は、これを受けて表示装置56の画面上で地図を図中矢印方向にスクロール表示させる処理を行う。
In FIG. 11, (D): The
〔その他の操作入力例〕
図12は、操作部材12に対する各種の操作入力の例を示す図である。以下、それぞれについて説明する。
[Other operation input examples]
FIG. 12 is a diagram illustrating examples of various operation inputs to the
図12中(A):この例は、操作部材12の外面をユーザが手のひら全体で押さえる操作入力である。この場合であっても、デバイスコントローラ20は広い範囲に及ぶ幾何学模様の変化を認識することで、ユーザが行った操作入力の内容(形態)を正確に判断することができる。
In FIG. 12, (A): This example is an operation input in which the user presses the outer surface of the
図12中(B):この例は、操作部材12をユーザが手の中に包み込み、全体的に図中斜め左上方向にずらす操作入力である。この場合、デバイスコントローラ20は幾何学模様の全体的な変化を認識することで、ユーザが行った操作入力の内容(形態)を正確に判断することができる。また適宜、圧力センサ18による検出結果を追加することで、デバイスコントローラ20は操作部材12がずらされている方向をより正確に認識することができる。
In FIG. 12, (B): This example is an operation input in which the user wraps the operating
図12中(C):この例は、ユーザが操作部材12の3点以上をつまむ操作入力である。この場合も同様に、デバイスコントローラ20が幾何学模様の変化位置(3箇所)を認識することで、ユーザが行った操作入力の内容(形態)を正確に判断することができる。
(C) in FIG. 12: This example is an operation input in which the user pinches three or more points of the
〔第2実施形態〕
図13は、第2実施形態の中空型スイッチ装置100を示す斜視図である。なお、上記の中空型スイッチ装置10と共通する事項については同じ符号を付し、その重複した説明を省略するものとする。
[Second Embodiment]
FIG. 13 is a perspective view showing the
第2実施形態の場合、基台14上で操作部材12の内側に複数の発光素子102が設けられている。発光素子102は例えばLED(フルカラー/単色)であり、基台14上から操作部材12の内面に向けて光(照明光)を照射することができる。操作部材12はある程度の光透過性を有しており、発光素子102を発行させると、その光が操作部材12を透過して拡散するため、これを外部からイルミネーションとして観察することができる。
In the case of the second embodiment, a plurality of
なお、先の中空型スイッチ装置10においても、操作部材12が適度な光透過性を有するため、ある程度は幾何学模様の投射光が操作部材12を透過して拡散する。したがって、特に発光素子102を設けない場合であってもイルミネーション効果を発揮することができる。
In the above
一方、第2実施形態のように発光素子102を設けた場合、これをイルミネーション専用として活用することができるので、より装飾性を向上することができる。特に中空型スイッチ装置100を車載用として使用する場合、その装飾性の高さがインテリアとしての価値を高め、車両の内装品の美観を向上する効果が得られる。
On the other hand, when the
〔第3実施形態〕
図14は、第3実施形態の中空型スイッチ装置200を示す斜視図である。ここでも同様に、上記の中空型スイッチ装置10と共通する事項については同じ符号を付し、その重複した説明を省略するものとする。
[Third Embodiment]
FIG. 14 is a perspective view showing a
第3実施形態の場合、操作部材120の形状が異なっている。第3実施形態の操作部材120は、例えば中空の四角柱形状をなしている。また基台140は、操作部材120の外形に合わせて四角板形状を有する。なお、基台140の四隅にはそれぞれ取付部140aが形成されている。
In the case of the third embodiment, the shape of the
第3実施形態のように、操作部材120を中空の四角柱形状とした場合、操作入力の方向をある程度まで絞り込むことができる。すなわち、操作部材120の外面が上、左右、前後の5面で構成されているため、操作入力をこれら5つの面に絞って受け付けることができる。なお第3実施形態では、操作部材120の内面形状に合わせて幾何学模様の形態を変更してもよい。
When the
〔第4実施形態〕
図15は、第4実施形態の中空型スイッチ装置300を示す正面図である。第4実施形態の場合、特に基台142の構成が異なっている。基台142には、例えば下方に突出する突出部142aが形成されており、基台142は、その突出部142aとともに支持部材144に支持されている。支持部材144は、例えばある程度の高さを有した円錐台形状をなしており、その内部には圧力センサ18が縦向きの姿勢と横向きの姿勢で設置されている。
[Fourth Embodiment]
FIG. 15 is a front view showing a
このうち縦向きの姿勢にある圧力センサ18は、上記の第1実施形態と同様に基台142に加わる圧力(剪断力)を検出する。これに対し、横向きの姿勢にある圧力センサ18は、操作部材12に加わる鉛直軸線(図中Z軸)周りのモーメントによって生じる圧力を検出する。
Among these, the
第4実施形態によれば、ユーザが操作部材12をひねる操作入力を行った場合であっても、これを横向きの姿勢にある圧力センサ18の検出信号を用いて正確に認識することができる。したがって、操作入力に基づいて水平軸線周りのモーメント(図中矢印MV)に加え、鉛直軸線周りのモーメント(図中矢印MH)が操作部材12に対して加えられた場合であっても、デバイスコントローラ20によって操作入力の内容を高精度に認識・判断することができる。
According to the fourth embodiment, even when the user performs an operation input for twisting the
〔実施形態のまとめ〕
以上のように、各実施形態によれば、単なる平面上での操作入力でなく、立体物に対する3次元的な操作入力が可能となる。このため例えば、各実施形態の中空型スイッチ装置をコンピュータのユーザインタフェースに利用すれば、3次元CADやコンピュータグラフィックス、コンピュータゲーム等で扱われる3次元データに対する直感的な操作を可能とする。
[Summary of Embodiment]
As described above, according to each embodiment, it is possible to perform a three-dimensional operation input for a three-dimensional object instead of a simple operation input on a plane. Therefore, for example, if the hollow switch device of each embodiment is used for a user interface of a computer, an intuitive operation on three-dimensional data handled in three-dimensional CAD, computer graphics, a computer game, etc. can be performed.
また操作部材に弾性素材を用いているため、ユーザに対して反発力をフィードバックさせ、その力加減(強く押圧、弱く押圧等)を感覚的に調節させやすくすることができる。 Further, since an elastic material is used for the operation member, it is possible to feed back the repulsive force to the user and easily adjust the force (strongly pressed, weakly pressed, etc.) sensuously.
本発明は各実施形態に制約されることなく、各種の変形を伴って実施することができる。操作部材の形状は、ドーム型や四角柱型に限らず、その他であってもよい。また、操作部材を含めた全体の大きさは任意である。 The present invention can be implemented with various modifications without being limited to the embodiments. The shape of the operation member is not limited to the dome shape or the quadrangular prism shape, but may be other shapes. Moreover, the whole size including the operation member is arbitrary.
幾何学模様は光によって投射するものだけでなく、予め印刷されていてもよい。この場合であっても、操作部材が光透過性を有していれば、特に内部に照明を設けなくても撮像素子による撮像が可能である。 The geometric pattern is not only projected by light, but may be printed in advance. Even in this case, as long as the operation member is light transmissive, it is possible to take an image with the image pickup element without providing illumination inside.
各実施形態では操作部材を基台に対して固定としているが、操作部材が基台に対して垂直軸線周りに回転自在であってもよい。操作部材が半球形状の場合、基台上で操作部材が回転しても幾何学模様には変化が生じないため、画像認識上で問題となることはない。一方、操作部材が回転自在であれば、ユーザがつまんだ状態で回転操作を加えることができ、それだけ操作入力の多様性が拡がる。 In each embodiment, although the operation member is fixed with respect to the base, the operation member may be rotatable about a vertical axis with respect to the base. When the operation member has a hemispherical shape, the geometric pattern does not change even if the operation member rotates on the base, so that there is no problem in image recognition. On the other hand, if the operation member is freely rotatable, a rotation operation can be applied while the user is pinching, and the variety of operation inputs is expanded accordingly.
また、中空型スイッチ装置を適用する電子機器はナビゲーションシステムに限らず、その他の電子機器であってもよい。 Moreover, the electronic device to which the hollow switch device is applied is not limited to the navigation system, and may be other electronic devices.
10,100,200,300 中空型スイッチ装置
12 操作部材
14 基台
16 光学部
18 圧力センサ
20 デバイスコントローラ(画像認識手段、入力判断手段)
32 光照射素子
34 回折格子
36 ハーフミラー
38 アクチュエータ
40 撮像素子
102 発光素子
DESCRIPTION OF SYMBOLS 10,100,200,300 Hollow
32
Claims (10)
前記操作部材の内側に配置された広角レンズを通じて前記幾何学模様を撮像する撮像素子と
を備えたことを特徴とする中空型スイッチ装置。 A hollow shape that is elastically deformed from the initial state in response to an operation input from the outer surface with a predetermined geometric pattern formed on the inner surface, and can be restored to the initial state by its elasticity when the operation input is removed An operation member of
A hollow switch device, comprising: an imaging device that images the geometric pattern through a wide-angle lens disposed inside the operation member.
前記撮像素子により撮像された画像に基づいて前記操作部材の弾性変形に伴う前記幾何学模様の形態の変化を検出する画像認識手段と、
前記画像認識手段の検出結果から前記操作部材に対する操作入力の内容を判断する入力判断手段と
をさらに備えたことを特徴とする中空型スイッチ装置。 The hollow switch device according to claim 1,
Image recognition means for detecting a change in the shape of the geometric pattern accompanying elastic deformation of the operation member based on an image captured by the image sensor;
A hollow switch device, further comprising: an input determination unit that determines a content of an operation input to the operation member from a detection result of the image recognition unit.
前記広角レンズを通じて前記操作部材の内面に向けて光を照射する光照射素子と、
前記光照射素子から照射された光を回折させ、この回折光を前記操作部材の内面に前記幾何学模様として投射させる回折格子と
をさらに備えたことを特徴とする中空型スイッチ装置。 The hollow switch device according to claim 2,
A light irradiation element for irradiating light toward the inner surface of the operation member through the wide-angle lens;
A hollow switch device, further comprising: a diffraction grating that diffracts light irradiated from the light irradiation element and projects the diffracted light onto the inner surface of the operation member as the geometric pattern.
前記光照射素子の照射光軸に対して前記回折格子を相対的に変位させ、前記操作部材の内面にて前記回折格子による前記幾何学模様の投射位置を変位させる駆動手段と、
前記駆動手段を制御する制御手段とをさらに備え、
前記入力判断手段は、
前記画像認識手段の検出結果に基づいて前記操作部材に対する操作入力の内容を判断し、
前記制御手段は、
前記入力判断手段の判断結果に基づいて前記駆動手段を制御することにより、前記操作部材に対して操作入力がなされた位置に対応させて前記幾何学模様の投射位置を変位させることを特徴とする中空型スイッチ装置。 The hollow switch device according to claim 3,
Driving means for displacing the diffraction grating relative to the irradiation optical axis of the light irradiation element and displacing the projection position of the geometric pattern by the diffraction grating on the inner surface of the operation member;
Control means for controlling the driving means,
The input determining means includes
Based on the detection result of the image recognition means, determine the content of the operation input to the operation member,
The control means includes
The projection position of the geometric pattern is displaced by controlling the driving unit based on the determination result of the input determining unit, so as to correspond to the position where the operation input is made to the operation member. Hollow switch device.
前記操作部材及び前記撮像素子をそれぞれ支持する基台と、
前記基台に設けられ、前記操作入力に伴い前記操作部材を通じて前記基台に伝達される圧力を検出する圧力センサとをさらに備え、
前記入力判断手段は、
前記画像認識手段の検出結果と、前記圧力センサによる検出結果とから前記操作部材に対する操作入力の内容を判断することを特徴とする中空型スイッチ装置。 The hollow switch device according to any one of claims 2 to 4,
A base for supporting the operation member and the imaging device,
A pressure sensor that is provided on the base and detects a pressure transmitted to the base through the operation member in accordance with the operation input;
The input determining means includes
A hollow switch device that determines the content of an operation input to the operation member from a detection result of the image recognition means and a detection result of the pressure sensor.
前記圧力センサは、前記基台に対して複数箇所に設置されていることを特徴とする中空型スイッチ装置。 The hollow switch device according to claim 5, wherein
The said pressure sensor is installed in multiple places with respect to the said base, The hollow type switch apparatus characterized by the above-mentioned.
前記圧力センサは、前記操作部材の外周縁に沿って前記基台の複数箇所に設置されていることを特徴とする中空型スイッチ装置。 The hollow switch device according to claim 6,
The said pressure sensor is installed in the multiple places of the said base along the outer periphery of the said operation member, The hollow type switch apparatus characterized by the above-mentioned.
前記操作部材が光透過性を有することを特徴とする中空型スイッチ装置。 The hollow switch device according to any one of claims 1 to 7,
The hollow switch device, wherein the operation member has light permeability.
前記操作部材の内側に設けられ、その内面に向けて光を発する発光素子をさらに備えたことを特徴とする中空型スイッチ装置。 The hollow switch device according to any one of claims 1 to 8,
A hollow switch device further comprising a light emitting element provided inside the operation member and emitting light toward the inner surface thereof.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007259189A JP4916994B2 (en) | 2007-10-02 | 2007-10-02 | Hollow switch device and electronic device equipped with the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007259189A JP4916994B2 (en) | 2007-10-02 | 2007-10-02 | Hollow switch device and electronic device equipped with the same |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009087264A true JP2009087264A (en) | 2009-04-23 |
JP4916994B2 JP4916994B2 (en) | 2012-04-18 |
Family
ID=40660572
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007259189A Expired - Fee Related JP4916994B2 (en) | 2007-10-02 | 2007-10-02 | Hollow switch device and electronic device equipped with the same |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4916994B2 (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010231758A (en) * | 2009-03-02 | 2010-10-14 | Kddi Corp | Information terminal device |
JP2011113386A (en) * | 2009-11-27 | 2011-06-09 | Tokai Rubber Ind Ltd | Input interface device |
WO2014087634A1 (en) * | 2012-12-03 | 2014-06-12 | パナソニック株式会社 | Input apparatus |
KR101777731B1 (en) * | 2016-08-09 | 2017-09-12 | 한국생산기술연구원 | A detecting apparatus for touch-condition and force using sampling and quantization of images and a method for detecting touch-condition and force |
KR101781024B1 (en) * | 2016-08-09 | 2017-09-25 | 한국생산기술연구원 | An apparatus and a method for detecting bio-signal and touch status using a cushion, images and sensors |
KR101910187B1 (en) * | 2017-05-02 | 2018-10-19 | 한국생산기술연구원 | Method for touch location and depth measurement for 3-dimensional touch recognition |
WO2018194227A1 (en) * | 2017-04-20 | 2018-10-25 | 한국생산기술연구원 | Three-dimensional touch recognition device using deep learning and three-dimensional touch recognition method using same |
JP2020027537A (en) * | 2018-08-16 | 2020-02-20 | 株式会社齋藤創造研究所 | Input device and mobile entity |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07182101A (en) * | 1993-10-26 | 1995-07-21 | Itu Res Inc | Apparatus and method for input of graphic, operating method of graphic object and supply method of graphic input signal |
JP2002032173A (en) * | 2000-07-13 | 2002-01-31 | Jatco Transtechnology Ltd | Information input device |
JP2005165670A (en) * | 2003-12-02 | 2005-06-23 | Olympus Corp | Human interface device and human interface system |
JP2007072669A (en) * | 2005-09-06 | 2007-03-22 | Fujifilm Corp | Optical operation device |
-
2007
- 2007-10-02 JP JP2007259189A patent/JP4916994B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07182101A (en) * | 1993-10-26 | 1995-07-21 | Itu Res Inc | Apparatus and method for input of graphic, operating method of graphic object and supply method of graphic input signal |
JP2002032173A (en) * | 2000-07-13 | 2002-01-31 | Jatco Transtechnology Ltd | Information input device |
JP2005165670A (en) * | 2003-12-02 | 2005-06-23 | Olympus Corp | Human interface device and human interface system |
JP2007072669A (en) * | 2005-09-06 | 2007-03-22 | Fujifilm Corp | Optical operation device |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010231758A (en) * | 2009-03-02 | 2010-10-14 | Kddi Corp | Information terminal device |
JP2011113386A (en) * | 2009-11-27 | 2011-06-09 | Tokai Rubber Ind Ltd | Input interface device |
WO2014087634A1 (en) * | 2012-12-03 | 2014-06-12 | パナソニック株式会社 | Input apparatus |
KR101777731B1 (en) * | 2016-08-09 | 2017-09-12 | 한국생산기술연구원 | A detecting apparatus for touch-condition and force using sampling and quantization of images and a method for detecting touch-condition and force |
KR101781024B1 (en) * | 2016-08-09 | 2017-09-25 | 한국생산기술연구원 | An apparatus and a method for detecting bio-signal and touch status using a cushion, images and sensors |
WO2018194227A1 (en) * | 2017-04-20 | 2018-10-25 | 한국생산기술연구원 | Three-dimensional touch recognition device using deep learning and three-dimensional touch recognition method using same |
KR101921140B1 (en) * | 2017-04-20 | 2018-11-22 | 한국생산기술연구원 | 3 dimensional touch sensing apparatus usnig deep learning and method for sensing 3 dimensional touch usnig the same |
KR101910187B1 (en) * | 2017-05-02 | 2018-10-19 | 한국생산기술연구원 | Method for touch location and depth measurement for 3-dimensional touch recognition |
WO2018203590A1 (en) * | 2017-05-02 | 2018-11-08 | 한국생산기술연구원 | Contact position and depth measurement algorithm for three-dimensional touch recognition |
JP2020027537A (en) * | 2018-08-16 | 2020-02-20 | 株式会社齋藤創造研究所 | Input device and mobile entity |
Also Published As
Publication number | Publication date |
---|---|
JP4916994B2 (en) | 2012-04-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4916994B2 (en) | Hollow switch device and electronic device equipped with the same | |
JP4274997B2 (en) | Operation input device and operation input method | |
JP6116064B2 (en) | Gesture reference control system for vehicle interface | |
US8754862B2 (en) | Sequential classification recognition of gesture primitives and window-based parameter smoothing for high dimensional touchpad (HDTP) user interfaces | |
US8325154B2 (en) | Optical touch control apparatus and method thereof | |
US6281878B1 (en) | Apparatus and method for inputing data | |
US20080259050A1 (en) | Optical touch control apparatus and method thereof | |
US20170351336A1 (en) | Time of flight based gesture control devices, systems and methods | |
US20110279369A1 (en) | Hybrid pointing device | |
EP1914621A1 (en) | Executing an operation associated with a region proximate a graphic element on a surface | |
US20110304548A1 (en) | Mouse provided with a dot pattern reading function | |
CN108027656B (en) | Input device, input method, and program | |
KR20100037014A (en) | Optical finger navigation utilizing quantized movement information | |
EP1516280A2 (en) | Apparatus and method for inputting data | |
US10540023B2 (en) | User interface devices for virtual reality system | |
CN1811682A (en) | Input apparatus and touch-reading character/symbol input method | |
WO2012019322A1 (en) | Input method, input system and input device of vision directing type mouse using monocular camera calibration technique | |
US20200094864A1 (en) | Operation input device | |
JP5664303B2 (en) | Computer apparatus, input system, and program | |
EP3185106A1 (en) | Operating apparatus, control method therefor, program, and storage medium storing program | |
JP2016103137A (en) | User interface system, image processor and control program | |
US8780084B2 (en) | Apparatus for detecting a touching position on a flat panel display and a method thereof | |
JP2018018308A (en) | Information processing device and control method and computer program therefor | |
JP4244202B2 (en) | Operation input device and operation input method | |
JP2014041602A (en) | Information reading apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100730 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111012 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111215 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120110 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120125 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150203 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4916994 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |