JP7026267B2 - アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム - Google Patents
アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム Download PDFInfo
- Publication number
- JP7026267B2 JP7026267B2 JP2020572602A JP2020572602A JP7026267B2 JP 7026267 B2 JP7026267 B2 JP 7026267B2 JP 2020572602 A JP2020572602 A JP 2020572602A JP 2020572602 A JP2020572602 A JP 2020572602A JP 7026267 B2 JP7026267 B2 JP 7026267B2
- Authority
- JP
- Japan
- Prior art keywords
- interactive
- face
- target face
- target
- frame image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
- A63F13/655—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition by importing photos, e.g. of the player
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/90—Constructional details or arrangements of video game devices not provided for in groups A63F13/20 or A63F13/25, e.g. housing, wiring, connections or cabinets
- A63F13/92—Video game devices specially adapted to be hand-held while playing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
Description
モバイル端末が実行するアプリケーションシーンのインタラクティブ方法であって、
カメラを介して目標の顔をリアルタイムで撮影することにより、それぞれ撮影された前後隣接する2フレームの画像である第1フレーム画像および第2フレーム画像を取得するステップと、
前記第1フレーム画像と前記第2フレーム画像とを比較することにより、前記目標の顔の動作および前記目標の顔の動作に対応する幅を取得するステップと、
前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、シミュレーション対象およびインタラクティブ可能な物体が表示されているインタラクティブ型アプリケーションシーンにおける前記シミュレーション対象の制御指令を生成するステップと、
前記制御指令に従い、前記インタラクティブ型アプリケーションシーンにおける前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するステップと、を含むアプリケーションシーンにおけるインタラクティブ方法を提供する。
カメラを介して目標の顔をリアルタイムで撮影することにより、それぞれ撮影することにより取得した前後隣接する2フレームの画像である第1フレーム画像および第2フレーム画像を取得する撮影モジュールと、
前記第1フレーム画像と前記第2フレーム画像とを比較することにより、前記目標の顔の動作および前記目標の顔の動作に対応する幅を取得する比較モジュールと、
前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、シミュレーション対象およびインタラクティブ可能な物体が表示されているインタラクティブ型アプリケーションシーンにおける前記シミュレーション対象の制御指令を生成する指令生成モジュールと、
前記制御指令に従い、前記インタラクティブ型アプリケーションシーンにおいて前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するインタラクティブモジュールと、を含む、モバイル端末をさらに提供する。
モバイル端末は、モバイル端末のタッチ画面にタッチ入力が生じたか否かを検出するステップと、
タッチ画面にタッチ入力が生じていなければ、モバイル端末は、モバイル端末に備えられるカメラを介して目標の顔をリアルタイムで撮影するステップを実行するようにトリガーするステップと、をさらに含む。
顔位置決め点が第1フレーム画像に現れる第1画素位置、および、顔位置決め点が第2フレーム画像に現れる第2画素位置を特定するステップと、
第1画素位置と第2画素位置とを比較することにより、第1画素位置と第2画素位置との相対変位を取得するステップと、
第1画素位置と第2画素位置との相対変位に基づいて、目標の顔の動作および対応する幅を特定するステップと、を含む。
モバイル端末は、制御指令に従い、焦点がインタラクティブ可能な物体の範囲内で安定して維持される時間が予め設定された時間に達したか否かを判定し、焦点は、目標の顔がインタラクティブ型アプリケーションシーンにマッピングされる基準点であるステップと、
シミュレーション対象がインタラクティブ可能な物体の範囲内で安定して維持される時間が予め設定された時間に達していれば、モバイル端末は、インタラクティブ可能な物体の範囲内からインタラクティブ可能な物体をロックするステップと、をさらに含む。
焦点とインタラクティブ可能な物体との距離をリアルタイムで算出し、焦点は、目標の顔がインタラクティブ型アプリケーションシーンにマッピングされる基準点であるステップと、
リアルタイムで算出された距離に基づいて、焦点がインタラクティブ可能な物体の範囲内であるか否かを判定するステップと、
焦点がインタラクティブ可能な物体の範囲内であれば、リアルタイムで算出された距離に基づいて、焦点に対応する変位速度を更新するステップと、
更新後の変位速度に基づいて制御指令を更新し、更新後の制御指令を用いて、インタラクティブ可能な物体とインタラクトするようにシミュレーション対象を制御するステップと、を含む。
焦点とインタラクティブ可能な物体との距離が小さくなると、焦点の移動方向に変位速度を減少させてから変位速度を増加させること、或いは、
焦点とインタラクティブ可能な物体との距離が大きくなると、まず焦点の移動方向に変位速度を減少させ、その後、移動方向の反対方向に変位速度を増加させること、を含む。
S11:前記モバイル端末に備えられるカメラを介して目標の顔をリアルタイムで撮影し、それぞれ撮影された前後隣接する2フレームの画像である第1フレーム画像および第2フレーム画像を取得するステップと、
S12:前記第1フレーム画像と前記第2フレーム画像とを比較して、前記目標の顔の動作および前記目標の顔の動作に対応する幅を取得するステップと、
S13:前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、シミュレーション対象およびインタラクティブ可能な物体が表示されているインタラクティブ型アプリケーションシーンにおける前記シミュレーション対象の制御指令を生成するステップと、
S14:前記制御指令に従い、前記インタラクティブ型アプリケーションシーンにおいて前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するステップと、
をコンピュータに実行させてもよい。
顔位置決め点が前記第1フレーム画像に現れる第1画素位置、および、前記顔位置決め点が前記第2フレーム画像に現れる第2画素位置を特定する画素位置特定ユニット10021と、
前記第1画素位置と前記第2画素位置とを比較して、前記第1画素位置と前記第2画素位置との相対変位を取得する変位特定ユニット10022と、
前記第1画素位置と前記第2画素位置との相対変位に基づいて、前記目標の顔の動作および前記目標の顔の動作に対応する幅を特定する動作特定ユニット10023と、を含む。
前記撮影モジュール1001がモバイル端末に備えられるカメラを介して目標の顔をリアルタイムで撮影する前に、モバイル端末のタッチ画面にタッチ入力が生じたか否かを検出し、前記タッチ画面にタッチ入力が生じていなければ、前記撮影モジュールの実行をトリガーするタッチ検出モジュール1005をさらに含む。
前記指令生成モジュール1003が前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、インタラクティブ型アプリケーションシーンにおけるシミュレーション対象の制御指令を生成した後、前記制御指令に基づいて、前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点がインタラクティブ可能な物体の範囲内で安定して維持される時間が、予め設定された時間に達したか否かを検出する焦点検出モジュール1006と、
前記焦点が前記インタラクティブ可能な物体の範囲内で安定して維持される時間が予め設定された時間に達していれば、前記インタラクティブ可能な物体の範囲内からインタラクティブ可能な物体をロックする物体ロックモジュール1007と、をさらに含む。
前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点と前記インタラクティブ可能な物体との距離をリアルタイムで算出する距離算出ユニット10041と、
リアルタイムで算出された前記距離に基づいて、前記焦点がインタラクティブ可能な物体の範囲内であるか否かを判定する範囲判定ユニット10042と、
前記焦点が前記インタラクティブ可能な物体の範囲内であれば、リアルタイムで算出された前記距離に基づいて、前記焦点に対応する変位速度を更新する速度更新ユニット10043と、
更新後の前記変位速度に基づいて前記制御指令を更新し、更新後の制御指令を用いて、前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するインタラクティブユニット10044と、を含む。
リアルタイムで取得した各フレームの画像での複数の顔キーポイントのピクセル座標を特定するキーポイント取得モジュール1008と、
前記複数の顔キーポイントのピクセル座標に基づいて、前記目標の顔が焦点を失ったか否かを判断するデフォーカス判定モジュール1009と、
前記目標の顔が焦点を失っていれば、前記目標の顔の合焦補正を行う合焦モジュール1010と、をさらに含む。
Claims (16)
- モバイル端末が実行するアプリケーションシーンのインタラクティブ方法であって、
カメラを介して目標の顔をリアルタイムで撮影することにより、第1フレーム画像および第2フレーム画像を取得するステップであって、前記第1フレーム画像および前記第2フレーム画像はそれぞれ撮影により取得された前後隣接する2フレームの画像である、ステップと、
前記第1フレーム画像と前記第2フレーム画像とを比較することにより、前記目標の顔の動作および前記目標の顔の動作に対応する幅を取得するステップと、
前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、インタラクティブ型アプリケーションシーンにおけるシミュレーション対象の制御指令を生成するステップであって、前記インタラクティブ型アプリケーションシーンに前記シミュレーション対象およびインタラクティブ可能な物体が含まれる、ステップと、
前記制御指令に従い、前記インタラクティブ型アプリケーションシーンにおける前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するステップであって、前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点が、前記インタラクティブ可能な物体の範囲内にある場合に、前記焦点と前記物体との間の距離に基づいて、前記焦点に対応する変位速度を更新し、更新後の前記変位速度に基づいて前記制御指令を更新し、更新後の制御指令を用いて、前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するステップと、
を含むアプリケーションシーンにおけるインタラクティブ方法。 - 前記第1フレーム画像と前記第2フレーム画像とを比較することにより、前記目標の顔の動作および前記目標の顔の動作に対応する幅を取得する前記ステップは、
顔位置決め点が前記第1フレーム画像に現れる第1画素位置、および、前記顔位置決め点が前記第2フレーム画像に現れる第2画素位置を特定するステップと、
前記第1画素位置と前記第2画素位置とを比較することにより、前記第1画素位置と前記第2画素位置との相対変位を取得するステップと、
前記第1画素位置と前記第2画素位置との相対変位に基づいて、前記目標の顔の動作および前記目標の顔の動作に対応する幅を特定するステップと、を含む、請求項1に記載の方法。 - 前記カメラを介して目標の顔をリアルタイムで撮影する前に、
前記モバイル端末のタッチ画面にタッチ入力が生じたか否かを検出するステップと、
前記タッチ画面にタッチ入力が生じていなければ、前記カメラを介して目標の顔をリアルタイムで撮影するステップを実行するようにトリガーするステップと、をさらに含む、請求項1に記載の方法。 - 前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、インタラクティブ型アプリケーションシーンにおけるシミュレーション対象の制御指令を生成した後、
前記制御指令に基づいて、焦点がインタラクティブ可能な物体の範囲内で安定して維持される時間が、予め設定された時間に達したか否かを判定するステップであって、前記焦点は前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である、ステップと、
前記焦点が前記インタラクティブ可能な物体の範囲内で安定して維持される時間が、予め設定された時間に達していれば、前記インタラクティブ可能な物体の範囲内からインタラクティブ可能な物体をロックするステップと、をさらに含む、請求項1に記載の方法。 - 前記制御指令に従い、前記インタラクティブ型アプリケーションシーンにおいて前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御する前記ステップは、
前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点と、前記インタラクティブ可能な物体との距離をリアルタイムで算出するステップと、
リアルタイムで算出された前記距離に基づいて、前記焦点がインタラクティブ可能な物体の範囲内であるか否かを判定するステップと、
を含む、請求項1に記載の方法。 - 前記リアルタイムで算出された前記距離に基づいて、前記焦点に対応する変位速度を更新する前記ステップは、
前記焦点と前記インタラクティブ可能な物体との距離が小さくなると、前記焦点の移動方向に前記変位速度を減少させてから前記変位速度を増加させるステップ、或いは、
前記焦点と前記インタラクティブ可能な物体との距離が大きくなると、前記焦点の移動方向に前記変位速度を減少させてから、前記移動方向の反対方向に前記変位速度を増加させるステップ、を含む、請求項5に記載の方法。 - リアルタイムで取得した各フレームの画像での複数の顔キーポイントのピクセル座標を特定するステップと、
前記複数の顔キーポイントのピクセル座標に基づいて、前記目標の顔が焦点を失ったか否かを判断するステップと、
前記目標の顔が焦点を失った場合、前記目標の顔の合焦補正を行うステップと、をさらに含む、
請求項4乃至6の何れか一項に記載の方法。 - 1つ又は複数のプロセッサと、プログラムユニットを記憶する1つ又は複数のメモリとを備え、前記プログラムユニットは、前記プロセッサによって実行され、前記プログラムユニットは、
カメラを介して目標の顔をリアルタイムで撮影することにより、第1フレーム画像および第2フレーム画像を取得する撮影モジュールであって、前記第1フレーム画像および前記第2フレーム画像はそれぞれ撮影により取得された前後隣接する2フレームの画像である、撮影モジュールと、
前記第1フレーム画像と前記第2フレーム画像とを比較することにより、前記目標の顔の動作および前記目標の顔の動作に対応する幅を取得する比較モジュールと、
前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、インタラクティブ型アプリケーションシーンにおけるシミュレーション対象の制御指令を生成する指令生成モジュールであって、前記インタラクティブ型アプリケーションシーンに前記シミュレーション対象およびインタラクティブ可能な物体が含まれる、指令生成モジュールと、
前記制御指令に従い、前記インタラクティブ型アプリケーションシーンにおける前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するインタラクティブモジュールであって、前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点が、前記インタラクティブ可能な物体の範囲内である場合に、前記焦点と前記物体との間の距離に基づいて、前記焦点に対応する変位速度を更新する速度更新ユニットと、更新後の前記変位速度に基づいて前記制御指令を更新し、更新後の制御指令を用いて、前記インタラクティブ可能な物体とインタラクトするように前記シミュレーション対象を制御するインタラクティブユニットとを含むインタラクティブモジュールと、を含む、モバイル端末。 - 前記比較モジュールは、
顔位置決め点が前記第1フレーム画像に現れる第1画素位置、および、前記顔位置決め点が前記第2フレーム画像に現れる第2画素位置を特定する画素位置特定ユニットと、
前記第1画素位置と前記第2画素位置とを比較することにより、前記第1画素位置と前記第2画素位置との相対変位を取得する変位特定ユニットと、
前記第1画素位置と前記第2画素位置との相対変位に基づいて、前記目標の顔の動作および前記目標の顔の動作に対応する幅を特定する動作特定ユニットと、を含む、請求項8に記載のモバイル端末。 - 前記プログラムユニットは、
前記撮影モジュールが前記カメラを介して目標の顔をリアルタイムで撮影する前に、前記モバイル端末のタッチ画面にタッチ入力が生じたか否かを検出し、前記タッチ画面にタッチ入力が生じていなければ、前記撮影モジュールの実行をトリガーするタッチ検出モジュールをさらに含む、請求項8に記載のモバイル端末。 - 前記プログラムユニットは、
前記指令生成モジュールが前記目標の顔の動作および前記目標の顔の動作に対応する幅に基づいて、インタラクティブ型アプリケーションシーンにおけるシミュレーション対象の制御指令を生成した後、前記制御指令に基づいて、前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点がインタラクティブ可能な物体の範囲内で安定して維持される時間が、予め設定された時間に達したか否かを判定する焦点検出モジュールと、
前記焦点が前記インタラクティブ可能な物体の範囲内で安定して維持される時間が、予め設定された時間に達していれば、前記インタラクティブ可能な物体の範囲内からインタラクティブ可能な物体をロックする物体ロックモジュールと、をさらに含む、請求項8に記載のモバイル端末。 - 前記インタラクティブモジュールは、
前記目標の顔が前記インタラクティブ型アプリケーションシーンにマッピングされる基準点である焦点と、前記インタラクティブ可能な物体との距離をリアルタイムで算出する距離算出ユニットと、
リアルタイムで算出された前記距離に基づいて、前記焦点がインタラクティブ可能な物体の範囲内であるか否かを判定する範囲判定ユニットと、
を含む、請求項8に記載のモバイル端末。 - 前記速度更新ユニットは、具体的には、前記焦点と前記インタラクティブ可能な物体との距離が小さくなると、前記焦点の移動方向に前記変位速度を減少させてから前記変位速度を増加させるか、或いは、前記焦点と前記インタラクティブ可能な物体との距離が大きくなると、まず前記焦点の移動方向に前記変位速度を減少させ、その後、前記移動方向の反対方向に前記変位速度を増加させる、請求項12に記載のモバイル端末。
- 前記プログラムユニットは、
リアルタイムで取得した各フレームの画像での複数の顔キーポイントのピクセル座標を特定するキーポイント取得モジュールと、
前記複数の顔キーポイントのピクセル座標に基づいて、前記目標の顔が焦点を失ったか否かを判断するデフォーカス判定モジュールと、
前記目標の顔が焦点を失った場合、前記目標の顔の合焦補正を行う合焦モジュールと、をさらに含む、請求項11乃至13の何れか一項に記載のモバイル端末。 - コンピュータで実行されると、コンピュータに請求項1乃至7の何れか一項に記載の方法を実行させるプログラム。
- 指令を記憶するメモリと、
前記メモリにおける前記指令を実行して、請求項1乃至7の何れか一項に記載の方法を実行するプロセッサと、
を備えるモバイル端末。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810989371.5A CN109224437A (zh) | 2018-08-28 | 2018-08-28 | 一种应用场景的交互方法和终端以及存储介质 |
CN201810989371.5 | 2018-08-28 | ||
PCT/CN2019/091402 WO2020042727A1 (zh) | 2018-08-28 | 2019-06-14 | 一种应用场景的交互方法和移动终端以及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021516836A JP2021516836A (ja) | 2021-07-08 |
JP7026267B2 true JP7026267B2 (ja) | 2022-02-25 |
Family
ID=65068815
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020572602A Active JP7026267B2 (ja) | 2018-08-28 | 2019-06-14 | アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US11383166B2 (ja) |
EP (1) | EP3845282A4 (ja) |
JP (1) | JP7026267B2 (ja) |
CN (1) | CN109224437A (ja) |
WO (1) | WO2020042727A1 (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109224437A (zh) | 2018-08-28 | 2019-01-18 | 腾讯科技(深圳)有限公司 | 一种应用场景的交互方法和终端以及存储介质 |
CN110244775A (zh) * | 2019-04-29 | 2019-09-17 | 广州市景沃电子有限公司 | 基于移动设备夹持云台的自动跟踪方法及装置 |
CN110197171A (zh) * | 2019-06-06 | 2019-09-03 | 深圳市汇顶科技股份有限公司 | 基于用户的动作信息的交互方法、装置和电子设备 |
CN110705510B (zh) * | 2019-10-16 | 2023-09-05 | 杭州优频科技有限公司 | 一种动作确定方法、装置、服务器和存储介质 |
CN111013135A (zh) * | 2019-11-12 | 2020-04-17 | 北京字节跳动网络技术有限公司 | 一种交互方法、装置、介质和电子设备 |
CN111068308A (zh) * | 2019-11-12 | 2020-04-28 | 北京字节跳动网络技术有限公司 | 基于嘴部动作的数据处理方法、装置、介质和电子设备 |
CN113744373A (zh) * | 2020-05-15 | 2021-12-03 | 完美世界(北京)软件科技发展有限公司 | 一种动画生成方法、装置、设备 |
CN112843693B (zh) * | 2020-12-31 | 2023-12-29 | 上海米哈游天命科技有限公司 | 拍摄图像的方法、装置、电子设备及存储介质 |
CN113209622A (zh) * | 2021-05-28 | 2021-08-06 | 北京字节跳动网络技术有限公司 | 动作的确定方法、装置、可读介质和电子设备 |
CN114415929A (zh) * | 2022-01-24 | 2022-04-29 | 维沃移动通信有限公司 | 电子设备的控制方法、装置、电子设备和可读存储介质 |
CN114779937A (zh) * | 2022-04-28 | 2022-07-22 | 脑陆(重庆)智能科技研究院有限公司 | 多媒体互动成像方法、装置、存储介质和计算机程序产品 |
CN115185381A (zh) * | 2022-09-15 | 2022-10-14 | 北京航天奥祥通风科技股份有限公司 | 基于头部的运动轨迹控制终端的方法和装置 |
CN115830518B (zh) * | 2023-02-15 | 2023-05-09 | 南京瀚元科技有限公司 | 一种红外场景下电力巡检视频智能抽帧的方法 |
CN117528254B (zh) * | 2023-11-06 | 2024-05-31 | 北京中数文化科技有限公司 | 一种基于ai智能终端的交互场景照片制作*** |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010541398A (ja) | 2007-09-24 | 2010-12-24 | ジェスチャー テック,インコーポレイテッド | 音声及びビデオ通信のための機能向上したインタフェース |
US20130023337A1 (en) | 2009-05-13 | 2013-01-24 | Wms Gaming, Inc. | Player head tracking for wagering game control |
JP2013039231A (ja) | 2011-08-16 | 2013-02-28 | Konami Digital Entertainment Co Ltd | ゲーム装置、ゲーム装置の制御方法、ならびに、プログラム |
JP2014044729A (ja) | 2013-09-24 | 2014-03-13 | Nec Corp | 画面表示制御方法、画面表示制御方式、電子機器及びプログラム |
CN105307737A (zh) | 2013-06-14 | 2016-02-03 | 洲际大品牌有限责任公司 | 互动视频游戏 |
JP2016057947A (ja) | 2014-09-11 | 2016-04-21 | 株式会社パスコ | 仮想空間表示装置、仮想空間表示方法及びプログラム |
CN108255304A (zh) | 2018-01-26 | 2018-07-06 | 腾讯科技(深圳)有限公司 | 基于增强现实的视频数据处理方法、装置和存储介质 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4553346B2 (ja) * | 2003-10-22 | 2010-09-29 | キヤノン株式会社 | 焦点調節装置及び焦点調節方法 |
CN101393599B (zh) * | 2007-09-19 | 2012-02-08 | 中国科学院自动化研究所 | 一种基于人脸表情的游戏角色控制方法 |
US10223838B2 (en) * | 2013-03-15 | 2019-03-05 | Derek A. Devries | Method and system of mobile-device control with a plurality of fixed-gradient focused digital cameras |
US9857591B2 (en) * | 2014-05-30 | 2018-01-02 | Magic Leap, Inc. | Methods and system for creating focal planes in virtual and augmented reality |
CN104656893B (zh) * | 2015-02-06 | 2017-10-13 | 西北工业大学 | 一种信息物理空间的远程交互式操控***及方法 |
CN105630169A (zh) * | 2015-12-25 | 2016-06-01 | 北京像素软件科技股份有限公司 | 一种体感输入方法及装置 |
CN106249882B (zh) | 2016-07-26 | 2022-07-12 | 华为技术有限公司 | 一种应用于vr设备的手势操控方法与装置 |
CN106951069A (zh) * | 2017-02-23 | 2017-07-14 | 深圳市金立通信设备有限公司 | 一种虚拟现实界面的控制方法及虚拟现实设备 |
CN108153422B (zh) * | 2018-01-08 | 2023-02-17 | 维沃移动通信有限公司 | 一种显示对象控制方法和移动终端 |
US10761649B2 (en) * | 2018-02-27 | 2020-09-01 | Perfect Shiny Technology (Shenzhen) Limited | Touch input method and handheld apparatus using the method |
CN109224437A (zh) * | 2018-08-28 | 2019-01-18 | 腾讯科技(深圳)有限公司 | 一种应用场景的交互方法和终端以及存储介质 |
-
2018
- 2018-08-28 CN CN201810989371.5A patent/CN109224437A/zh active Pending
-
2019
- 2019-06-14 EP EP19854820.8A patent/EP3845282A4/en active Pending
- 2019-06-14 JP JP2020572602A patent/JP7026267B2/ja active Active
- 2019-06-14 WO PCT/CN2019/091402 patent/WO2020042727A1/zh unknown
-
2020
- 2020-09-21 US US17/027,038 patent/US11383166B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010541398A (ja) | 2007-09-24 | 2010-12-24 | ジェスチャー テック,インコーポレイテッド | 音声及びビデオ通信のための機能向上したインタフェース |
US20130023337A1 (en) | 2009-05-13 | 2013-01-24 | Wms Gaming, Inc. | Player head tracking for wagering game control |
JP2013039231A (ja) | 2011-08-16 | 2013-02-28 | Konami Digital Entertainment Co Ltd | ゲーム装置、ゲーム装置の制御方法、ならびに、プログラム |
CN105307737A (zh) | 2013-06-14 | 2016-02-03 | 洲际大品牌有限责任公司 | 互动视频游戏 |
JP2014044729A (ja) | 2013-09-24 | 2014-03-13 | Nec Corp | 画面表示制御方法、画面表示制御方式、電子機器及びプログラム |
JP2016057947A (ja) | 2014-09-11 | 2016-04-21 | 株式会社パスコ | 仮想空間表示装置、仮想空間表示方法及びプログラム |
CN108255304A (zh) | 2018-01-26 | 2018-07-06 | 腾讯科技(深圳)有限公司 | 基于增强现实的视频数据处理方法、装置和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US11383166B2 (en) | 2022-07-12 |
EP3845282A1 (en) | 2021-07-07 |
EP3845282A4 (en) | 2021-10-27 |
WO2020042727A1 (zh) | 2020-03-05 |
CN109224437A (zh) | 2019-01-18 |
US20210001228A1 (en) | 2021-01-07 |
JP2021516836A (ja) | 2021-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7026267B2 (ja) | アプリケーションシーンにおけるインタラクティブ方法並びにその方法を実行するモバイル端末及びコンピュータプログラム | |
US10318011B2 (en) | Gesture-controlled augmented reality experience using a mobile communications device | |
CN111182205B (zh) | 拍摄方法、电子设备及介质 | |
US11689649B2 (en) | Shooting method and terminal | |
US11715224B2 (en) | Three-dimensional object reconstruction method and apparatus | |
EP3742743A1 (en) | Method and apparatus for displaying additional object, computer device, and storage medium | |
CN110505408B (zh) | 终端拍摄方法、装置、移动终端及可读存储介质 | |
CN108712603B (zh) | 一种图像处理方法及移动终端 | |
KR102565711B1 (ko) | 관점 회전 방법 및 장치, 디바이스 및 저장 매체 | |
WO2020020134A1 (zh) | 拍摄方法及移动终端 | |
CN111045511B (zh) | 基于手势的操控方法及终端设备 | |
WO2019109778A1 (zh) | 游戏对局结果的展示方法、装置及终端 | |
US10678327B2 (en) | Split control focus during a sustained user interaction | |
CN110049221B (zh) | 拍摄方法及移动终端 | |
CN111416935B (zh) | 一种拍摄方法及电子设备 | |
CN111182211B (zh) | 拍摄方法、图像处理方法及电子设备 | |
CN111064896A (zh) | 设备控制方法及电子设备 | |
US10270963B2 (en) | Angle switching method and apparatus for image captured in electronic terminal | |
US10503278B2 (en) | Information processing apparatus and information processing method that controls position of displayed object corresponding to a pointing object based on positional relationship between a user and a display region | |
CN111626924B (zh) | 图像的虚化处理方法、装置、电子设备及可读存储介质 | |
CN112037338A (zh) | Ar形象的创建方法、终端设备以及可读存储介质 | |
JP6481360B2 (ja) | 入力方法、入力プログラムおよび入力装置 | |
CN111208903B (zh) | 信息传输方法、穿戴式设备及介质 | |
CN113849142B (zh) | 图像展示方法、装置、电子设备及计算机可读存储介质 | |
WO2019028757A1 (zh) | 一种自拍引导的方法及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201016 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200916 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211026 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20211028 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220119 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220214 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7026267 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |