JP6207023B2 - Rotate objects on the screen - Google Patents
Rotate objects on the screen Download PDFInfo
- Publication number
- JP6207023B2 JP6207023B2 JP2014509861A JP2014509861A JP6207023B2 JP 6207023 B2 JP6207023 B2 JP 6207023B2 JP 2014509861 A JP2014509861 A JP 2014509861A JP 2014509861 A JP2014509861 A JP 2014509861A JP 6207023 B2 JP6207023 B2 JP 6207023B2
- Authority
- JP
- Japan
- Prior art keywords
- axis
- hand
- change
- angle
- space
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims description 20
- 239000003638 chemical reducing agent Substances 0.000 claims description 12
- 238000000034 method Methods 0.000 claims description 11
- 238000005259 measurement Methods 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 5
- 230000005672 electromagnetic field Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 1
- 230000036512 infertility Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2016—Rotation, translation, scaling
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Architecture (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Description
本発明は、スクリーン上のオブジェクトを回転させる装置に関する。本発明はさらに、スクリーン上のオブジェクトを回転させる装置、方法、コンピュータ・プログラム製品及び媒体に関する。 The present invention relates to an apparatus for rotating an object on a screen. The invention further relates to an apparatus, a method, a computer program product and a medium for rotating an object on a screen.
そのような装置の例は、例えば医師が無菌状態を維持する必要がある医療分野における、例えば制御者が1つ以上のスクリーンの前で制御を実行する制御分野における、或いは、例えば芸術監督が1つ以上のスクリーンの前で創作を行う創作分野における、ジェスチャに基づく画像操作装置である。 Examples of such devices are, for example, in the medical field where a physician needs to maintain sterility, for example in the control field where the controller performs control in front of one or more screens, or for example by an artistic director. An image manipulation device based on gestures in the creative field of creating in front of two or more screens.
US2009/0021475A1は、ジェスチャ認識を用いて医療起源の画像データを表示する及び/又は処理する方法を開示する。この方法は比較的複雑である。 US2009 / 0021475A1 discloses a method for displaying and / or processing medical origin image data using gesture recognition. This method is relatively complex.
比較的単純な装置を提供することが本発明の目的である。本発明の更なる目的は、装置、比較的単純な方法、コンピュータ・プログラム製品及び媒体を提供することである。 It is an object of the present invention to provide a relatively simple device. It is a further object of the present invention to provide an apparatus, a relatively simple method, a computer program product and a medium.
第1の態様によれば、スクリーン上のオブジェクトを回転させるための装置が提供され、当該装置は、
- ユーザの第1の手と関連がある第1の3D位置情報に応じて、及び、ユーザの第2の手と関連がある第2の3D位置情報に応じて、手の軸を定めるための定義ユニット、
- 3D空間の軸に対する手の軸の変更された方向を検出する検出ユニット、及び
- 検出ユニットからの検出結果に応じて、スクリーン上のオブジェクトの回転を計算する計算ユニット、を有する。
According to a first aspect, there is provided an apparatus for rotating an object on a screen, the apparatus comprising:
-For determining the axis of the hand according to the first 3D position information associated with the user's first hand and according to the second 3D position information associated with the user's second hand Definition unit,
-A detection unit for detecting the changed direction of the hand axis relative to the axis in 3D space; and
-It has a calculation unit that calculates the rotation of the object on the screen according to the detection result from the detection unit.
定義ユニットは、3Dカメラ若しくは2台の2D(二次元)カメラ、GPS(Global Positioning System)検出器、ローカル・ポジショニング・システム検出器、電磁場の乱れを検出する検出器、又は、レーダー若しくはソナー技術に基づく検出器などのような位置測定システムから、ユーザの第1の手と関連がある第1の3D(三次元)位置情報及びユーザの第2の手と関連がある第2の3D位置情報を受信する。第1及び第2の3D位置情報に応じて、定義ユニットは手の軸を定める。この手の軸は、例えば、3D位置情報によって示されるように、手の中心を通過するか、手の特定の指の先端を通過するか、又は手に保持されるアイテムを通過するなどである。 Definition units include 3D cameras or two 2D (two-dimensional) cameras, GPS (Global Positioning System) detectors, local positioning system detectors, detectors that detect disturbances in electromagnetic fields, or radar or sonar technology A first 3D (three-dimensional) position information associated with the user's first hand and a second 3D position information associated with the user's second hand from the position measurement system, such as a detector based on Receive. In accordance with the first and second 3D position information, the definition unit defines a hand axis. This hand axis, for example, passes through the center of the hand, through the tip of a particular finger of the hand, or through an item held in the hand, as indicated by the 3D position information .
検出ユニットは、3D空間の1つ以上の軸に対する手の軸の変更された方向を検出し、計算ユニットは、検出ユニットからの検出結果に応じてスクリーン上のオブジェクトの回転を計算する。その結果、手の軸を導入したことによって、比較的単純な装置が生成された。そのような比較的単純な装置は、例えば、より高速で、より安価であり、より頑丈で、より信頼性が高く、より安全である。 The detection unit detects the changed direction of the hand axis relative to one or more axes in 3D space, and the calculation unit calculates the rotation of the object on the screen according to the detection result from the detection unit. As a result, the introduction of the hand shaft produced a relatively simple device. Such a relatively simple device is, for example, faster, cheaper, more rugged, more reliable and safer.
手の軸は、より多くの目的(例えばズーミング)のために用いられることができる。より長い手の軸はズームアウトに対応し、より短い手の軸はズームインに対応することができ、逆もまた同じである。 The hand axis can be used for more purposes (eg zooming). Longer hand axes can correspond to zoom out, shorter hand axes can correspond to zoom in, and vice versa.
装置の実施の形態は、手の軸と3D空間の第1の軸との間の第1の角度の第1の変化と、手の軸と3D空間の第2の軸との間の第2の角度の第2の変化と、手の軸と3D空間の第3の軸との間の第3の角度の第3の変化を含む、手の軸の変更された方向によって定められる。一旦手の軸が定められると、手の軸と3D空間の各々の軸との間の角度の変化に対する手の軸の変更された方向を定めることが有利である。 Embodiments of the apparatus include a first change in a first angle between a hand axis and a first axis in 3D space, and a second between the hand axis and a second axis in 3D space. Defined by a changed direction of the hand axis, including a second change in the angle of the hand and a third change in the third angle between the hand axis and the third axis in 3D space. Once the hand axis is defined, it is advantageous to define the changed direction of the hand axis relative to the change in angle between the hand axis and each axis in 3D space.
装置の実施の形態は、ゼロに等しくない第1、第2及び第3の変化のそれぞれによって定められる。この場合には、ユーザは、3D回転を実行しているか又は実行した。 An embodiment of the device is defined by each of the first, second and third changes not equal to zero. In this case, the user is or has performed a 3D rotation.
装置の実施の形態は、第1、第2及び第3の角度を検出するための角度検出器、第1、第2及び第3の角度それぞれを第1、第2及び第3の閾値それぞれと比較するための比較器、第1、第2及び第3の比較結果それぞれに応じて、第1、第2及び第3の変化の1つ以上を低減するための低減器を有する検出ユニットによって定められる。第1(第2、第3)の角度が第1(第2、第3)の閾値以下の場合には、第1(第2、第3)の変化は、安定性を改善するために低減されることができる。 An embodiment of the apparatus includes an angle detector for detecting the first, second, and third angles, the first, second, and third angles respectively as the first, second, and third threshold values, respectively. A comparator for comparison, defined by a detection unit having a reducer for reducing one or more of the first, second and third changes, depending on the first, second and third comparison results, respectively. It is done. If the first (second, third) angle is less than or equal to the first (second, third) threshold, the first (second, third) change is reduced to improve stability Can be done.
装置の実施の形態は、対応する閾値以下の対応する角度を示す第1、第2及び第3の比較結果のうちの1つ、並びに、対応する変化をゼロに向けて低減する低減器によって定められる。 An embodiment of the apparatus is defined by one of the first, second and third comparison results indicating a corresponding angle below a corresponding threshold, and a reducer that reduces the corresponding change towards zero. It is done.
装置の実施の形態は、対応する閾値以下の対応する角度を示す第1、第2及び第3の比較結果のうちの1つ、並びに、対応する変化に重み付けする低減器によって定められる。重みづけ係数はここで通常0%から100%の間である。 The device embodiment is defined by one of the first, second and third comparison results indicating a corresponding angle below a corresponding threshold and a reducer that weights the corresponding change. The weighting factor here is usually between 0% and 100%.
装置の実施の形態は、対応する閾値以下である対応する角度を示す第1、第2及び第3の比較結果のうちの2つ、及び、対応する変化に重み付けする低減器によって定められる。各々の重みづけ係数はここで通常0%から100%の間である。 The embodiment of the device is defined by two of the first, second and third comparison results indicating a corresponding angle that is less than or equal to the corresponding threshold, and a reducer that weights the corresponding change. Each weighting factor here is usually between 0% and 100%.
装置の実施の形態は、ゼロに等しくない第1、第2及び第3の変化の1つか又は2つによって定められる。この場合には、ユーザは、1D(一次元)の又は2Dの回転を実行しているか又は実行した。 Device embodiments are defined by one or two of the first, second and third changes not equal to zero. In this case, the user is or has performed a 1D (one-dimensional) or 2D rotation.
装置の実施の形態は、タイムインターバルごとの変化である第1、第2及び第3の変化のそれぞれによって定められる。大部分の位置測定システムは、タイムインターバルごと若しくはフレームごとの位置情報、又は時間にわたる変化を提供する。 The device embodiment is defined by each of the first, second and third changes which are changes at each time interval. Most position measurement systems provide position information for each time interval or frame, or change over time.
装置の実施の形態は、X軸である3D空間の第1の軸、Y軸である3D空間の第2の軸及びZ軸である3D空間の第3の軸によって定められる。通常、X軸及びY軸は、位置測定システムの正面に対して平行である実質的に水平及び実質的に垂直の軸であり、Z軸は、位置測定システムのこの正面に実質的に直交する軸であるが、任意の他の座標軸が用いられることができる。 The device embodiment is defined by a first axis in 3D space that is the X axis, a second axis in 3D space that is the Y axis, and a third axis in 3D space that is the Z axis. Typically, the X and Y axes are substantially horizontal and substantially vertical axes that are parallel to the front of the position measurement system, and the Z axis is substantially perpendicular to this front of the position measurement system. Although it is an axis, any other coordinate axis can be used.
装置の実施の形態は、第1の絶対又は相対3D座標を含むユーザの第1の手と関連がある第1の3D位置情報、第2の絶対又は相対3D座標を含むユーザの第2の手と関連がある第2の3D位置情報及び両方の3D座標を通過する手の軸によって定められる。 Embodiments of the apparatus include first 3D position information associated with a user's first hand that includes a first absolute or relative 3D coordinate, and a user's second hand that includes a second absolute or relative 3D coordinate. Second 3D position information related to and the axis of the hand passing through both 3D coordinates.
第2の態様によれば、前記装置を有し、さらに、第1及び第2の位置情報を提供するための位置測定システム並びに/又はスクリーンを有するデバイスが提供される。 According to a second aspect, there is provided a device comprising the apparatus and further comprising a position measuring system and / or a screen for providing first and second position information.
第3の態様によれば、スクリーン上のオブジェクトを回転させるための方法が提供され、当該方法は、
- ユーザの第1の手と関連がある第1の3D位置情報に応じて、及びユーザの第2の手と関連がある第2の3D位置情報に応じて、手の軸を定めるステップ、
- 3D空間の軸に対する手の軸の変更された方向を検出するステップ、
- 検出結果に応じてスクリーン上のオブジェクトの回転を計算するステップ、を有する。
According to a third aspect, there is provided a method for rotating an object on a screen, the method comprising:
-Determining the axis of the hand according to the first 3D position information associated with the user's first hand and according to the second 3D position information associated with the user's second hand;
-Detecting the changed direction of the hand axis relative to the axis in 3D space,
-Calculating the rotation of the object on the screen according to the detection result;
第4の態様によれば、前記方法のステップを実行するコンピュータ・プログラムが提供される。 According to a fourth aspect, there is provided a computer program for executing the method steps.
第5の態様によれば、前記コンピュータ・プログラムを記録して保持するための媒体が提供される。 According to a fifth aspect, there is provided a medium for recording and holding the computer program.
方法の実施の形態は装置の実施の形態に対応する。 The method embodiment corresponds to the device embodiment.
スクリーン上のオブジェクトを回転させるために、オブジェクトの仮想のコピーが、ユーザによって保持される仮想のボール内にあると考えられることができ、その仮想のボールが回転される。基本的なアイデアは、ユーザの手の間の手の軸が定められ、手の軸の変更された方向が検出されて、応じて、スクリーン上のオブジェクトの回転が計算されるということである。 In order to rotate an object on the screen, a virtual copy of the object can be considered to be in a virtual ball held by the user, and the virtual ball is rotated. The basic idea is that the hand axis between the user's hands is defined, the changed direction of the hand axis is detected, and accordingly the rotation of the object on the screen is calculated.
比較的単純な装置を提供するという問題は解決された。更なる利点は、そのような比較的単純な装置は、例えば、より高速で、より安価であり、より頑丈で、より信頼性が高く、そしてより安全であることである。 The problem of providing a relatively simple device has been solved. A further advantage is that such a relatively simple device is, for example, faster, cheaper, more rugged, more reliable and safer.
本発明のこれらの及び他の態様は、以下に記載される実施の形態から明らかであり、それらを参照して説明される。 These and other aspects of the invention are apparent from and will be elucidated with reference to the embodiments described hereinafter.
図1において、装置を有するデバイスが示される。装置10は、ユーザの第1の手と関連がある第1の3D(三次元)位置情報及びユーザの第2の手と関連がある第2の3D位置情報を提供するための位置測定システム8、装置1並びにスクリーン9を含む。スクリーン9上のオブジェクトを回転させるための装置1は、第1の3D位置情報に応じて及び第2の3D位置情報に応じて、手の軸を定めるための定義ユニット2を含む。装置1は、3D空間の軸に対する手の軸の変更された方向を検出する検出ユニット3、及び、検出ユニット3からの検出結果に応じてスクリーン9に示されるオブジェクトの回転を計算する計算ユニット4を更に備える。
In FIG. 1, a device having an apparatus is shown. The
位置測定システム8は、3Dカメラ若しくは2台の2D(二次元)カメラ、GPS(Global Positioning System)検出器、ローカル・ポジショニング・システム検出器、電磁場の乱れを検出する検出器、又は、レーダー若しくはソナー技術に基づく検出器などを有することができる。装置1は、1つ以上のプロセッサ及び/又は1つ以上のコンピュータなどのような任意の種類の定義/検出/計算システムを有することができる。スクリーン9は、ディスプレイ、プロジェクタ又は従来のテレビなどのような任意の種類のスクリーンを有することができる。
The position measurement system 8 can be a 3D camera or two 2D (two-dimensional) cameras, a GPS (Global Positioning System) detector, a local positioning system detector, a detector that detects disturbances in the electromagnetic field, or a radar or sonar. It can have a detector or the like based on technology. The device 1 may have any kind of definition / detection / calculation system such as one or more processors and / or one or more computers. The
図2において、2つの手の間の手の軸が3D空間中に示される。ユーザの第1の手21と第2の手22との間の手の軸20は、3D空間の第1の軸31(例えばX軸)と第1の角度を成し、3D空間の第2の軸31(例えばY軸)と第2の角度を成し、3D空間の第3の軸31(例えばZ軸)と第3の角度を成す。オブジェクト40を示すスクリーン9及びここでは3Dカメラの形の位置測定システム8がさらに図2に示される。手21及び22は、スクリーン9に示されるオブジェクト40の仮想のコピーを含む仮想のボール41を仮想現実的に保持している。ユーザが1度以上3D空間中の仮想のボール41を回転させるために手21及び22を動かすと、手の軸20は(1度以上の回転の結果として)方向が変更され、第1、第2及び第3の角度のうちの1つ以上が変化する。仮想のボール41の代わりに、他の任意の形状のアイテムが用いられることができる。この手の軸20は、例えば、3D位置情報によって示されるように、手21, 22の中央を通過するか、手21, 22の特定の指先を通過するか、又は、手21, 22によって保持されるアイテムを通過するなどである。
In FIG. 2, the hand axis between two hands is shown in 3D space. The
好ましくは、手の軸20の変更された方向は、手の軸20と3D空間の第1の軸31との間の第1の角度の第1の変化、手の軸20と3D空間の第2の軸32との間の第2の角度の第2の変化及び手の軸20と3D空間の第3の軸33との間の第3の角度の第3の変化を有する場合がある。
Preferably, the changed direction of the
ユーザが3D回転を実行しているか又は実行した場合、第1、第2及び第3の変化の各々はゼロに等しくない。その場合、特定の状況の下で、3D回転は時折不安定になり、それによって、例えば、手の軸20と3D空間の第1、第2及び第3の軸31, 32, 33のうちの1つとの間の角度における比較的小さな変化が、結果としてスクリーン9上での比較的大きい変化になる可能性がある。この問題を解決するために、図1に示されるように、検出ユニット3は、第1、第2及び第3の角度を検出するための角度検出器5、第1、第2及び第3の角度それぞれを第1、第2及び第3の閾値それぞれと比較するための比較器6、並びに、第1、第2及び第3の比較結果それぞれに応じて、第1、第2及び第3の変化それぞれの1つ以上を低減するための低減器を備えることができる。
If the user is performing or has performed a 3D rotation, each of the first, second and third changes is not equal to zero. In that case, under certain circumstances, the 3D rotation sometimes becomes unstable, so that, for example, of the
例えば、第1、第2及び第3の比較結果のうちの1つが、対応する角度が対応する閾値以下であることを示す場合、低減器7は、対応する変化をゼロに向けて低減することができる。このケースは、3D空間の第1、第2及び第3の軸31, 32, 33のうちの特定の1つの軸を無効にすることに対応し、手の軸20と3D空間のこの特定の1つの軸との間の角度変化を無視することに対応する。
For example, if one of the first, second, and third comparison results indicates that the corresponding angle is less than or equal to the corresponding threshold, the reducer 7 reduces the corresponding change toward zero. Can do. This case corresponds to disabling a particular one of the first, second and
例えば、第1、第2及び第3の比較結果のうちの1つが、対応する角度が対応する閾値以下であることを示す場合、低減器7は対応する変化に重み付けすることができる。このケースは、3D空間の第1、第2及び第3の軸31, 32, 33のうちの特定の1つの角度からの影響を低減することに対応し、そして手の軸20と3D空間のこの特定の1つの軸との間の角度変化を低減することに対応する。重み付けの量及び低減の量は、対応する角度のサイズに依存してもよいし、依存しなくてもよい。対応する閾値は、一定の値を有してもよいし、あるいは、回転速度、ユーザの安定性、ユーザの経験、他の角度のサイズ、他の閾値及び更なる特徴などに依存することができる。同様に、前記重み付けは、この種の特徴などに依存することができる。
For example, if one of the first, second and third comparison results indicates that the corresponding angle is less than or equal to the corresponding threshold, the reducer 7 can weight the corresponding change. This case corresponds to reducing the influence from a particular one of the first, second and
例えば、第1、第2及び第3の比較結果のうちの2つが、対応する角度が対応する閾値以下であることを示す場合、低減器7は、対応する変化に重み付けすることができる。このケースは、3D空間の第1、第2及び第3の軸31, 32, 33の2つの特定の軸からの影響を低減することに対応し、手の軸20と3D空間のこれらの2つの特定の軸との間の角度変化を低減することに対応する。重み付けの量及び低減の量は、対応する角度のサイズに依存してもよいし、依存しなくてもよい。対応する閾値は、一定の値を有してもよいし、あるいは、回転速度、ユーザの安定性、ユーザの経験、他の角度のサイズ、他の閾値及び更なる特徴などに依存してもよい。同様に、前記重みづけは、この種の特徴などに依存することができる。
For example, if two of the first, second and third comparison results indicate that the corresponding angle is less than or equal to the corresponding threshold, the reducer 7 can weight the corresponding change. This case corresponds to reducing the influence from two specific axes, the first, second and
ユーザが1D(一次元)又は2Dの回転を実行しているか又は実行した場合には、第1、第2及び第3の変化のうちの1つ又は2つがゼロに等しくない。その場合、通常、1D又は2Dの回転は不安定にならない。 If the user is performing or has performed a 1D (one-dimensional) or 2D rotation, one or two of the first, second and third changes are not equal to zero. In that case, usually 1D or 2D rotation does not become unstable.
好ましくは、第1、第2及び第3の変化のそれぞれ1つは、タイムインターバルごとの変化であることができる。大部分の位置測定システムは、タイムインターバルごと若しくはフレームごとの位置情報、又は時間にわたる変化を提供する。 Preferably, each one of the first, second and third changes may be a change for each time interval. Most position measurement systems provide position information for each time interval or frame, or change over time.
好ましくは、ユーザの第1の手21と関連がある第1の3D位置情報は、第1の絶対又は相対3D座標を有することができ、ユーザの第2の手22と関連がある第2の3D位置情報は、第2の絶対又は相対3D座標を有することができ、手の軸20は、両方の3D座標を通過することができる。
Preferably, the first 3D position information associated with the user's
要約すると、スクリーン9上のオブジェクト40を回転させるための装置1は、ユーザの手21, 22と関連する3D位置情報に応じて手の軸20を定め、3D空間に対する手の軸20の変更された方向を検出して、前記に検出に応じて、スクリーン9上のオブジェクト40の回転を計算する。このように、スクリーン9上のオブジェクト40を回転させるために、オブジェクト40の仮想のコピーが、ユーザによって保持される仮想のボール41内にあると考えられて、この仮想のボール41が回転される。手の軸20の変更された方向は、手の軸20と3D空間の軸31, 32, 33との間の角度における変化を含む。前記変化のそれぞれがゼロに等しくない場合における安定性を改善するために、装置1はさらに、角度を検出して、それぞれの角度をそれぞれの閾値と比較して、それぞれの比較結果に応じてそれぞれの変化を低減するか又は重み付けする。
In summary, the device 1 for rotating the object 40 on the
本発明が、図面及び上記の記載において詳細に説明されたが、そのような説明は例示であって、制限的なものではなく、本発明は、開示された実施の形態に限られない。図面、開示及び添付の請求の範囲の検討から、開示された実施の形態に対する他のバリエーションは、請求された発明を実施する際に、当業者によって理解され、遂行されることができる。請求の範囲において、「有する」「含む」等の用語は、他の要素又はステップを除外せず、単数表現は複数を除外しない。単に特定の手段が相互に異なる従属請求項中に列挙されているからといって、これらの手段の組み合わせが有効に用いられることができないことを意味しない。請求の範囲におけるいかなる参照符号も、その範囲を制限するものとして解釈されるべきでない。 While the invention has been described in detail in the drawings and foregoing description, such description is exemplary and not restrictive and the invention is not limited to the disclosed embodiments. From a review of the drawings, the disclosure and the appended claims, other variations to the disclosed embodiments can be understood and carried out by those skilled in the art in practicing the claimed invention. In the claims, terms such as “comprising” do not exclude other elements or steps, and the singular expression does not exclude a plurality. The mere fact that certain measures are recited in mutually different dependent claims does not indicate that a combination of these measures cannot be used effectively. Any reference signs in the claims should not be construed as limiting the scope.
Claims (14)
ユーザの第1の手と関連がある第1の3D位置情報に応じて、及び、ユーザの第2の手と関連がある第2の3D位置情報に応じて、手の軸を定めるための定義ユニット、
3D空間の軸に対する前記手の軸の変化を検出するための検出ユニット、及び
前記検出ユニットからの検出結果に応じて、スクリーン上のオブジェクトの回転を計算する計算ユニット、
を有し、
前記手の軸の長さに対応して前記オブジェクトがズームアウト又はズームインされ、
前記手の軸の変化は、前記手の軸と3D空間の第1の軸との間の第1の角度の変化と、前記手の軸と3D空間の第2の軸との間の第2の角度の変化と、前記手の軸と3D空間の第3の軸との間の第3の角度の変化とを含み、
前記検出ユニットが、前記第1、第2及び第3の角度の変化それぞれを第1、第2及び第3の閾値それぞれと比較するための比較器、第1、第2及び第3の比較結果それぞれに応じて、前記第1、第2及び第3の角度の変化の1つ以上を低減するための低減器を有する、
装置。 A device for rotating an object on a screen,
Definition to determine the axis of the hand according to the first 3D position information related to the user's first hand and according to the second 3D position information related to the user's second hand unit,
A detection unit for detecting a change in the axis of the hand relative to an axis in 3D space, and a calculation unit for calculating the rotation of the object on the screen according to the detection result from the detection unit;
Have
The object is zoomed out or zoomed in corresponding to the length of the hand axis ,
The change in the hand axis includes a change in a first angle between the hand axis and a first axis in 3D space, and a second change between the hand axis and a second axis in 3D space. And a third angle change between the hand axis and a third axis in 3D space,
A comparator for the detection unit to compare the first, second and third angle changes with the first, second and third thresholds, respectively, first, second and third comparison results; Responsively with a reducer to reduce one or more of the first, second and third angle changes,
apparatus.
ユーザの第1の手と関連がある第1の3D位置情報に応じて、及びユーザの第2の手と関連がある第2の3D位置情報に応じて、手の軸を定めるステップ、
3D空間の軸に対する前記手の軸の変化を検出するステップ、及び
検出結果に応じてスクリーン上のオブジェクトの回転を計算するステップ、
を有し、
前記手の軸の長さに対応して前記オブジェクトがズームアウト又はズームインされ、
前記手の軸の変化は、前記手の軸と3D空間の第1の軸との間の第1の角度の変化と、前記手の軸と3D空間の第2の軸との間の第2の角度の変化と、前記手の軸と3D空間の第3の軸との間の第3の角度の変化とを含み、
前記第1、第2及び第3の角度の変化それぞれを第1、第2及び第3の閾値それぞれと比較するステップ、第1、第2及び第3の比較結果それぞれに応じて、前記第1、第2及び第3の角度の変化の1つ以上を低減するステップをさらに有する、
方法。 A method for rotating an object on a screen,
Determining an axis of the hand according to the first 3D position information associated with the user's first hand and according to the second 3D position information associated with the user's second hand;
Detecting a change in the axis of the hand relative to an axis in 3D space, and calculating a rotation of the object on the screen according to the detection result;
Have
The object is zoomed out or zoomed in corresponding to the length of the hand axis ,
The change in the hand axis includes a change in a first angle between the hand axis and a first axis in 3D space, and a second change between the hand axis and a second axis in 3D space. And a third angle change between the hand axis and a third axis in 3D space,
The first, second, and third angle changes are compared with the first, second, and third threshold values, respectively, and the first, second, and third comparison results are respectively determined according to the first, second, and third comparison results. Reducing one or more of the second and third angle changes;
Method.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP11165263 | 2011-05-09 | ||
EP11165263.2 | 2011-05-09 | ||
PCT/IB2012/052186 WO2012153233A1 (en) | 2011-05-09 | 2012-05-02 | Rotating an object on a screen |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014513371A JP2014513371A (en) | 2014-05-29 |
JP6207023B2 true JP6207023B2 (en) | 2017-10-04 |
Family
ID=46085676
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014509861A Active JP6207023B2 (en) | 2011-05-09 | 2012-05-02 | Rotate objects on the screen |
Country Status (7)
Country | Link |
---|---|
US (1) | US10102612B2 (en) |
EP (1) | EP2712436B1 (en) |
JP (1) | JP6207023B2 (en) |
CN (1) | CN103502912B (en) |
BR (1) | BR112013028559A2 (en) |
RU (1) | RU2611977C2 (en) |
WO (1) | WO2012153233A1 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101653146B1 (en) | 2015-09-04 | 2016-09-01 | 홍유정 | Drone controller |
KR101921376B1 (en) * | 2016-02-24 | 2018-11-22 | 홍유정 | Object controller |
CN108268148A (en) * | 2017-12-28 | 2018-07-10 | 网云(武汉)三维科技股份有限公司 | A kind of position-switching device of 3D objects |
Family Cites Families (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5687307A (en) | 1993-09-21 | 1997-11-11 | Canon Kabushiki Kaisha | Computer graphic animation in which texture animation is independently performed on a plurality of objects in three-dimensional space |
JPH07239750A (en) | 1993-12-28 | 1995-09-12 | Canon Inc | Method and device for modeling |
US20020036617A1 (en) * | 1998-08-21 | 2002-03-28 | Timothy R. Pryor | Novel man machine interfaces and applications |
US8479122B2 (en) * | 2004-07-30 | 2013-07-02 | Apple Inc. | Gestures for touch sensitive input devices |
KR100595926B1 (en) * | 1998-01-26 | 2006-07-05 | 웨인 웨스터만 | Method and apparatus for integrating manual input |
DE69936620T2 (en) * | 1998-09-28 | 2008-05-21 | Matsushita Electric Industrial Co., Ltd., Kadoma | Method and device for segmenting hand gestures |
RU2199716C2 (en) * | 2001-01-31 | 2003-02-27 | "А4 Визион Са" | Method for controlling linear dimensions of spatial objects |
CN1462929A (en) * | 2002-05-20 | 2003-12-24 | 许旻 | Input system of computers |
JP4763695B2 (en) | 2004-07-30 | 2011-08-31 | アップル インコーポレイテッド | Mode-based graphical user interface for touch-sensitive input devices |
US7662113B2 (en) * | 2004-11-05 | 2010-02-16 | California Institute Of Technology | Fingertip tracker |
CN101068605B (en) * | 2004-12-03 | 2011-07-13 | 新世代株式会社 | Boxing game processing method, display control method, position detection method, cursor control method, energy consumption calculating method and exercise system |
EP1731099A1 (en) | 2005-06-06 | 2006-12-13 | Paul Scherrer Institut | Interferometer for quantitative phase contrast imaging and tomography with an incoherent polychromatic x-ray source |
US9075441B2 (en) * | 2006-02-08 | 2015-07-07 | Oblong Industries, Inc. | Gesture based control using three-dimensional information extracted over an extended depth of field |
WO2007135835A1 (en) * | 2006-05-19 | 2007-11-29 | Panasonic Corporation | Image operating device, image operating method and image operating program |
US8086971B2 (en) * | 2006-06-28 | 2011-12-27 | Nokia Corporation | Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications |
US20080125224A1 (en) | 2006-09-26 | 2008-05-29 | Pollatsek David | Method and apparatus for controlling simulated in flight realistic and non realistic object effects by sensing rotation of a hand-held controller |
US8462109B2 (en) | 2007-01-05 | 2013-06-11 | Invensense, Inc. | Controlling and accessing content using motion processing on mobile devices |
US8141424B2 (en) * | 2008-09-12 | 2012-03-27 | Invensense, Inc. | Low inertia frame for detecting coriolis acceleration |
US20090262074A1 (en) | 2007-01-05 | 2009-10-22 | Invensense Inc. | Controlling and accessing content using motion processing on mobile devices |
EP2017756A1 (en) | 2007-07-20 | 2009-01-21 | BrainLAB AG | Method for displaying and/or processing or manipulating image data for medical purposes with gesture recognition |
US9772689B2 (en) | 2008-03-04 | 2017-09-26 | Qualcomm Incorporated | Enhanced gesture-based image manipulation |
JP2009265709A (en) | 2008-04-22 | 2009-11-12 | Hitachi Ltd | Input device |
US8723795B2 (en) * | 2008-04-24 | 2014-05-13 | Oblong Industries, Inc. | Detecting, representing, and interpreting three-space input: gestural continuum subsuming freespace, proximal, and surface-contact modes |
CN101344816B (en) * | 2008-08-15 | 2010-08-11 | 华南理工大学 | Human-machine interaction method and device based on sight tracing and gesture discriminating |
KR101185589B1 (en) * | 2008-11-14 | 2012-09-24 | (주)마이크로인피니티 | Method and Device for inputing user's commands based on motion sensing |
US9564075B2 (en) * | 2009-12-30 | 2017-02-07 | Cyweemotion Hk Limited | Electronic control apparatus and method for responsively controlling media content displayed on portable electronic device |
US8659658B2 (en) * | 2010-02-09 | 2014-02-25 | Microsoft Corporation | Physical interaction zone for gesture-based user interfaces |
US8457353B2 (en) * | 2010-05-18 | 2013-06-04 | Microsoft Corporation | Gestures and gesture modifiers for manipulating a user-interface |
JP5664036B2 (en) * | 2010-09-07 | 2015-02-04 | ソニー株式会社 | Information processing apparatus, program, and control method |
US8860805B2 (en) * | 2011-04-12 | 2014-10-14 | Lg Electronics Inc. | Electronic device and method of controlling the same |
-
2012
- 2012-05-02 WO PCT/IB2012/052186 patent/WO2012153233A1/en active Application Filing
- 2012-05-02 CN CN201280022306.6A patent/CN103502912B/en active Active
- 2012-05-02 JP JP2014509861A patent/JP6207023B2/en active Active
- 2012-05-02 RU RU2013154430A patent/RU2611977C2/en not_active IP Right Cessation
- 2012-05-02 EP EP12721363.5A patent/EP2712436B1/en active Active
- 2012-05-02 BR BR112013028559A patent/BR112013028559A2/en not_active IP Right Cessation
- 2012-05-02 US US14/111,293 patent/US10102612B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20140062870A1 (en) | 2014-03-06 |
WO2012153233A1 (en) | 2012-11-15 |
RU2013154430A (en) | 2015-06-20 |
EP2712436B1 (en) | 2019-04-10 |
US10102612B2 (en) | 2018-10-16 |
CN103502912B (en) | 2017-11-07 |
RU2611977C2 (en) | 2017-03-01 |
BR112013028559A2 (en) | 2017-01-17 |
JP2014513371A (en) | 2014-05-29 |
EP2712436A1 (en) | 2014-04-02 |
CN103502912A (en) | 2014-01-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10379733B2 (en) | Causing display of a three dimensional graphical user interface with dynamic selectability of items | |
US8933882B2 (en) | User centric interface for interaction with visual display that recognizes user intentions | |
US10600150B2 (en) | Utilizing an inertial measurement device to adjust orientation of panorama digital images | |
US20120054690A1 (en) | Apparatus and method for displaying three-dimensional (3d) object | |
US9646571B1 (en) | Panoramic video augmented reality | |
JP6534974B2 (en) | System and method for providing an efficient interface for screen control | |
US9395910B2 (en) | Invoking zoom on touch-screen devices | |
JP2017195552A5 (en) | ||
JP2018133019A5 (en) | ||
CN103412720A (en) | Method and device for processing touch-control input signals | |
US9891713B2 (en) | User input processing method and apparatus using vision sensor | |
JP2015064724A (en) | Information processor | |
WO2019019372A1 (en) | Picture operation and control method and device for mobile terminal, mobile terminal, and medium | |
JP6207023B2 (en) | Rotate objects on the screen | |
US9122346B2 (en) | Methods for input-output calibration and image rendering | |
US9483143B2 (en) | Method and system providing viewing-angle sensitive graphics interface selection compensation | |
WO2015062176A1 (en) | Multipoint touch-control multimedia spherical-screen demonstration instrument and multipoint touch-control method therefor | |
EP2779116B1 (en) | Smooth manipulation of three-dimensional objects | |
JP6141290B2 (en) | Interaction by acceleration of multi-pointer indirect input device | |
CN105094459B (en) | A kind of optics multi-point touch locating method | |
US20220335676A1 (en) | Interfacing method and apparatus for 3d sketch | |
TW201303745A (en) | Motion detection method and display device | |
US20160054900A1 (en) | Computer Implemented System and Method for Producing 360 Degree Perspective Images | |
JP2019168252A (en) | Processing device, three-dimensional model division method, and program | |
Bérci et al. | Real-time multi-finger tracking in 3D for a mouseless desktop |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150423 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160704 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20160906 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20170214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170706 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170901 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6207023 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |