JP7270761B2 - 画像処理方法及び装置、電子機器並びにコンピュータプログラム - Google Patents
画像処理方法及び装置、電子機器並びにコンピュータプログラム Download PDFInfo
- Publication number
- JP7270761B2 JP7270761B2 JP2021555830A JP2021555830A JP7270761B2 JP 7270761 B2 JP7270761 B2 JP 7270761B2 JP 2021555830 A JP2021555830 A JP 2021555830A JP 2021555830 A JP2021555830 A JP 2021555830A JP 7270761 B2 JP7270761 B2 JP 7270761B2
- Authority
- JP
- Japan
- Prior art keywords
- target
- frame
- image
- coordinate system
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/75—Determining position or orientation of objects or cameras using feature-based methods involving models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/12—Bounding box
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2004—Aligning objects, relative positioning of parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2016—Rotation, translation, scaling
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Business, Economics & Management (AREA)
- Architecture (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Development Economics (AREA)
- Accounting & Taxation (AREA)
- Evolutionary Computation (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Molecular Biology (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Artificial Intelligence (AREA)
- Biomedical Technology (AREA)
- Biophysics (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Entrepreneurship & Innovation (AREA)
- General Business, Economics & Management (AREA)
- Game Theory and Decision Science (AREA)
- Economics (AREA)
- Marketing (AREA)
- Geometry (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Description
101、102、103 端末機器
104 ネットワーク
105 サーバ
200 コンピュータシステム
201 中央処理ユニット(CPU)
202 読み取り専用メモリ(ROM)
203 ランダムアクセスメモリ(RAM)
204 通信バス
205 入力/出力(I/O)インターフェース
207 出力部
208 記憶部
209 通信部
210 ドライバ
211 リムーバブル媒体
1700 画像処理装置
1710 処理ビデオ取得モジュール
1720 三次元モデル配置モジュール
1730 第1座標特定モジュール
1740 第1位置姿勢特定モジュール
1750 第2位置姿勢特定モジュール
1760 目標ビデオ生成モジュール
Claims (11)
- 電子機器が実行する、画像処理方法であって、
処理対象ビデオを取得するステップであって、前記処理対象ビデオはmフレームの画像を含み、mは2以上の正整数であるステップと、
前記処理対象ビデオの第1フレームの画像の目標平面に目標三次元モデルを配置するステップであって、前記目標三次元モデルの目標面の複数の特徴点は前記目標平面上にあるステップと、
前記目標面の複数の特徴点の、世界座標系における三次元座標及び前記第1フレームの画像における画素座標を特定するステップと、
前記目標面の複数の特徴点の、前記世界座標系における三次元座標及び前記第1フレームの画像における画素座標に基づき、前記世界座標系に対する前記第1フレームの画像のカメラ座標系の位置姿勢を特定するステップと、
前記目標平面、前記目標面の複数の特徴点の、前記世界座標系における三次元座標及び前記第1フレームの画像における画素座標に基づき、前記世界座標系に対する前記処理対象ビデオの第2フレームの画像~第mフレームの画像のカメラ座標系の位置姿勢を特定するステップであって、前記第1フレームの画像における目標平面に対する前記処理対象ビデオの第jフレームの画像における目標平面のホモグラフィ行列を、前記第jフレームの画像のホモグラフィ行列として特定するステップであって、jは2以上且つm以下の正整数であるステップを含み、各フレーム毎、1個前のフレームの最適化されたホモグラフィ行列を次フレームのホモグラフィ行列の初期値として使用し、次フレームのホモグラフィ行列を最適化するように構成された、ステップと、
前記目標三次元モデルを目標リンク表示モデルに置き換えて前記世界座標系に配置し、前記世界座標系に対する前記処理対象ビデオの各フレームの画像のカメラ座標系の位置姿勢に基づき、前記目標リンク表示モデルを含む目標ビデオを生成するステップと、を含むことを特徴とする画像処理方法。 - 前記目標平面、前記目標面の複数の特徴点の、前記世界座標系における三次元座標及び前記第1フレームの画像における画素座標に基づき、前記世界座標系に対する前記処理対象ビデオの第2フレームの画像~第mフレームの画像のカメラ座標系の位置姿勢を特定するステップは、
前記第jフレームの画像のホモグラフィ行列と前記目標面の複数の特徴点の前記第1フレームにおける画素座標とに基づき、前記目標面の複数の特徴点の前記第jフレームの画像における画素座標を特定するステップと、
前記処理対象ビデオのカメラ内部パラメータと、前記目標面の複数の特徴点の、前記世界座標系における三次元座標及び前記第jフレームの画像における画素座標とに基づき、前記世界座標系に対する前記処理対象ビデオの第jフレームの画像のカメラ座標系の位置姿勢を特定するステップと、を含むことを特徴とする
請求項1に記載の方法。 - 前記目標三次元モデルを目標リンク表示モデルに置き換えて前記世界座標系に配置し、前記世界座標系に対する前記処理対象ビデオの各フレームの画像のカメラ座標系の位置姿勢に基づき、前記目標リンク表示モデルを含む目標ビデオを生成するステップは、
前記世界座標系に対する前記処理対象ビデオの第2フレームの画像~第mフレームの画像のカメラ座標系の位置姿勢に基づき、前記目標三次元モデルを前記処理対象ビデオの第2フレームの画像~第mフレームの画像にそれぞれ投影するステップと、
前記目標三次元モデルを前記目標リンク表示モデルに置き換えて、前記処理対象ビデオの各フレームの画像の前記世界座標系に配置するステップと、
前記世界座標系に対する前記処理対象ビデオの各フレームの画像のカメラ座標系の位置姿勢に基づき、前記目標リンク表示モデルを前記処理対象ビデオの各フレームの画像に投影するステップと、
前記処理対象ビデオの各フレームの画像を合成し、前記目標リンク表示モデルを含む目標ビデオを生成するステップと、を含むことを特徴とする
請求項1に記載の方法。 - 前記処理対象ビデオの第1フレームの画像の目標平面に目標三次元モデルを配置するステップであって、前記目標三次元モデルの目標面の複数の特徴点は前記目標平面上にあるステップは、
前記第1フレームの画像に前記目標三次元モデルを追加する追加命令に応答して、前記目標三次元モデルを前記第1フレームの画像に追加するステップと、
前記目標三次元モデルの目標面及びその複数の特徴点を特定するステップと、
前記目標面の複数の特徴点が前記目標平面上にあるように、前記目標三次元モデルの位置姿勢を調整するステップと、を含むことを特徴とする
請求項1から3のいずれか1項に記載の方法。 - 前記目標面の複数の特徴点が前記目標平面上にあるように、前記目標三次元モデルの位置姿勢を調整するステップは、
前記目標面の複数の特徴点が前記目標平面上にあるように、前記目標三次元モデルの複数の特徴点を調整するステップ、又は
前記目標面の複数の特徴点が前記目標平面上にあるように、前記目標三次元モデルを回転するステップ、を含むことを特徴とする
請求項4に記載の方法。 - 前記目標面の複数の特徴点の、世界座標系における三次元座標及び前記第1フレームの画像における画素座標を特定するステップは、
前記目標三次元モデルに基づき、前記世界座標系を確立するステップと、
前記目標面の複数の特徴点の前記世界座標系における三次元座標を特定するステップと、
前記目標面の複数の特徴点が前記目標平面上にあるとき、前記目標面の複数の特徴点の前記第1フレームの画像における画素座標を記録するステップと、を含むことを特徴とする
請求項1から3のいずれか1項に記載の方法。 - 前記目標三次元モデルは所定の辺長を有する立方体であり、前記目標三次元モデルに基づき、前記世界座標系を確立するステップは、
前記立方体の最左上の特徴点を原点とするステップと、
前記最左上の特徴点と交わる前記立方体の3つの辺を座標軸とし、前記世界座標系を確立するステップと、を含むことを特徴とする
請求項6に記載の方法。 - ニューラルネットワークモデルによって前記第1フレームの画像を処理し、前記第1フレームの画像における少なくとも1つの平面を得るステップと、
前記第1フレームの画像に対する平面選択命令に応答して、前記少なくとも1つの平面から前記目標平面を特定するステップと、をさらに含むことを特徴とする
請求項1から3のいずれか1項に記載の方法。 - 処理対象ビデオを取得するように構成される処理ビデオ取得モジュールであって、前記処理対象ビデオはmフレームの画像を含み、mは2以上の正整数である処理ビデオ取得モジュールと、
前記処理対象ビデオの第1フレームの画像の目標平面に目標三次元モデルを配置するように構成される三次元モデル配置モジュールであって、前記目標三次元モデルの目標面の複数の特徴点は前記目標平面上にある三次元モデル配置モジュールと、
前記目標面の複数の特徴点の、世界座標系における三次元座標及び前記第1フレームの画像における画素座標を特定するように構成される第1座標特定モジュールと、
前記目標面の複数の特徴点の、前記世界座標系における三次元座標及び前記第1フレームの画像における画素座標に基づき、前記世界座標系に対する前記第1フレームの画像のカメラ座標系の位置姿勢を特定するように構成される第1位置姿勢特定モジュールと、
前記目標平面、前記目標面の複数の特徴点の、前記世界座標系における三次元座標及び前記第1フレームの画像における画素座標に基づき、前記世界座標系に対する前記処理対象ビデオの第2フレームの画像~第mフレームの画像のカメラ座標系の位置姿勢を特定するように構成される第2位置姿勢特定モジュールであって、前記第1フレームの画像における目標平面に対する前記処理対象ビデオの第jフレームの画像における目標平面のホモグラフィ行列を、前記第jフレームの画像のホモグラフィ行列として特定し、jは2以上且つm以下の正整数であり、各フレーム毎、1個前のフレームの最適化されたホモグラフィ行列を次フレームのホモグラフィ行列の初期値として使用し、次フレームのホモグラフィ行列を最適化するように構成された、第2位置姿勢特定モジュールと、
前記目標三次元モデルを目標リンク表示モデルに置き換えて前記世界座標系に配置し、前記世界座標系に対する前記処理対象ビデオの各フレームの画像のカメラ座標系の位置姿勢に基づき、前記目標リンク表示モデルを含む目標ビデオを生成するように構成される目標ビデオ生成モジュールと、を含むことを特徴とする画像処理装置。 - 1つ又は複数のプロセッサと、
前記1つ又は複数のプロセッサによって実行されると、前記1つ又は複数のプロセッサに請求項1から8のいずれか1項に記載の画像処理方法を実現させる1つ又は複数のプログラムを記憶するように構成される記憶装置と、を含むことを特徴とする電子機器。 - プロセッサに、請求項1から8のいずれか1項に記載の画像処理方法を実行させることを特徴とするコンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910854877.XA CN110599605B (zh) | 2019-09-10 | 2019-09-10 | 图像处理方法及装置、电子设备和计算机可读存储介质 |
CN201910854877.X | 2019-09-10 | ||
PCT/CN2020/111638 WO2021047396A1 (zh) | 2019-09-10 | 2020-08-27 | 图像处理方法及装置、电子设备和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022524891A JP2022524891A (ja) | 2022-05-10 |
JP7270761B2 true JP7270761B2 (ja) | 2023-05-10 |
Family
ID=68858713
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021555830A Active JP7270761B2 (ja) | 2019-09-10 | 2020-08-27 | 画像処理方法及び装置、電子機器並びにコンピュータプログラム |
Country Status (5)
Country | Link |
---|---|
US (2) | US11538229B2 (ja) |
EP (1) | EP3923248A4 (ja) |
JP (1) | JP7270761B2 (ja) |
CN (1) | CN110599605B (ja) |
WO (1) | WO2021047396A1 (ja) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019231462A1 (en) * | 2018-06-01 | 2019-12-05 | Hewlett-Packard Development Company, L.P. | Substantially real-time correction of perspective distortion |
CN110599605B (zh) * | 2019-09-10 | 2021-07-13 | 腾讯科技(深圳)有限公司 | 图像处理方法及装置、电子设备和计算机可读存储介质 |
CN111242952B (zh) * | 2020-01-15 | 2023-06-30 | 腾讯科技(深圳)有限公司 | 图像分割模型训练方法、图像分割方法、装置及计算设备 |
CN111311654B (zh) * | 2020-02-13 | 2023-11-24 | 北京百度网讯科技有限公司 | 一种相机位置的配准方法、装置、电子设备及存储介质 |
CN111599005B (zh) * | 2020-05-19 | 2024-01-05 | 湖南飞戈数字科技有限公司 | 一种三维模型植入方法、装置、电子设备及存储介质 |
CN111612851B (zh) * | 2020-05-20 | 2023-04-07 | 阿波罗智联(北京)科技有限公司 | 用于标定相机的方法、装置、设备以及存储介质 |
CN111652831B (zh) * | 2020-06-28 | 2022-04-19 | 腾讯科技(深圳)有限公司 | 对象融合方法、装置、计算机可读存储介质及电子设备 |
CN111768454B (zh) * | 2020-08-05 | 2023-12-22 | 腾讯科技(深圳)有限公司 | 位姿确定方法、装置、设备及存储介质 |
CN111986133B (zh) * | 2020-08-20 | 2024-05-03 | 叠境数字科技(上海)有限公司 | 一种应用于子弹时间的虚拟广告植入方法 |
CN112528094B (zh) * | 2020-12-04 | 2022-08-16 | 国网山东省电力公司信息通信公司 | 一种基于分层映射的多字段范围tcam编码方法及*** |
CN112822418B (zh) * | 2020-12-31 | 2022-12-06 | 北京字节跳动网络技术有限公司 | 视频处理方法和装置、存储介质和电子设备 |
CN112887793B (zh) * | 2021-01-25 | 2023-06-13 | 脸萌有限公司 | 视频处理方法、显示设备和存储介质 |
CN112837424B (zh) * | 2021-02-04 | 2024-02-06 | 脸萌有限公司 | 图像处理方法、装置、设备和计算机可读存储介质 |
CN113819890B (zh) * | 2021-06-04 | 2023-04-14 | 腾讯科技(深圳)有限公司 | 测距方法、装置、电子设备及存储介质 |
CN113345022B (zh) * | 2021-07-05 | 2023-02-17 | 湖南快乐阳光互动娱乐传媒有限公司 | 动态三维广告植入方法、装置、电子设备及存储介质 |
CN113689467B (zh) * | 2021-07-30 | 2022-07-12 | 稿定(厦门)科技有限公司 | 一种适用于平面跟踪的特征点优化方法、*** |
CN113689466B (zh) * | 2021-07-30 | 2022-07-12 | 稿定(厦门)科技有限公司 | 一种基于特征点的平面跟踪方法、*** |
CN113689321B (zh) * | 2021-08-23 | 2023-12-22 | 深圳普汇智为科技有限公司 | 基于立体投影加密的图像信息传输方法及装置 |
CN113923493B (zh) * | 2021-09-29 | 2023-06-16 | 北京奇艺世纪科技有限公司 | 一种视频处理方法、装置、电子设备以及存储介质 |
CN113850745A (zh) * | 2021-10-14 | 2021-12-28 | 中国人民解放***箭军工程大学 | 视频图像增强处理方法及装置 |
CN114898084B (zh) * | 2022-04-18 | 2023-08-25 | 荣耀终端有限公司 | 视觉定位方法、设备和存储介质 |
CN114963025B (zh) * | 2022-04-19 | 2024-03-26 | 深圳市城市公共安全技术研究院有限公司 | 泄漏点定位方法、装置、电子设备及可读存储介质 |
CN116091711B (zh) * | 2023-04-12 | 2023-09-08 | 荣耀终端有限公司 | 一种三维重建方法及电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017130889A (ja) | 2016-01-22 | 2017-07-27 | Kddi株式会社 | カメラのキャリブレーション装置、方法及びプログラム |
US20190197709A1 (en) | 2017-12-21 | 2019-06-27 | Microsoft Technology Licensing, Llc | Graphical coordinate system transform for video frames |
JP2019220032A (ja) | 2018-06-21 | 2019-12-26 | Kddi株式会社 | 原画像を目標画像に基づいて変形した表示画像を生成するプログラム、装置及び方法 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030028432A1 (en) * | 2001-08-01 | 2003-02-06 | Vidius Inc. | Method for the customization of commercial product placement advertisements in digital media |
WO2008010203A2 (en) * | 2006-07-16 | 2008-01-24 | Seambi Ltd. | System and method for virtual content placement |
CN103024480B (zh) * | 2012-12-28 | 2016-06-01 | 杭州泰一指尚科技有限公司 | 一种在视频中嵌入广告的方法 |
CN103544852B (zh) * | 2013-10-18 | 2015-08-05 | 中国民用航空总局第二研究所 | 一种在机场场面监视视频中实现飞机自动挂标牌的方法 |
US10192133B2 (en) * | 2015-06-22 | 2019-01-29 | Seiko Epson Corporation | Marker, method of detecting position and pose of marker, and computer program |
US9852550B2 (en) * | 2015-08-05 | 2017-12-26 | Civic Resource Group International Inc. | System and method of markerless injection of ads in AR |
CN106097457A (zh) | 2016-06-12 | 2016-11-09 | 上海大学 | 基于stl缺损模型的切割修整方法 |
CN107665506B (zh) * | 2016-07-29 | 2021-06-01 | 成都理想境界科技有限公司 | 实现增强现实的方法及*** |
CN107016704A (zh) * | 2017-03-09 | 2017-08-04 | 杭州电子科技大学 | 一种基于增强现实的虚拟现实实现方法 |
CN108629843B (zh) * | 2017-03-24 | 2021-07-13 | 成都理想境界科技有限公司 | 一种实现增强现实的方法及设备 |
JP6989276B2 (ja) * | 2017-04-05 | 2022-01-05 | 株式会社Soken | 位置計測装置 |
CN109410680A (zh) * | 2018-11-19 | 2019-03-01 | 叶哲伟 | 一种基于混合现实的虚拟手术训练方法及*** |
CN110213629B (zh) * | 2019-06-27 | 2022-02-11 | 腾讯科技(深圳)有限公司 | 一种信息植入方法、装置、服务器及存储介质 |
CN110599605B (zh) * | 2019-09-10 | 2021-07-13 | 腾讯科技(深圳)有限公司 | 图像处理方法及装置、电子设备和计算机可读存储介质 |
-
2019
- 2019-09-10 CN CN201910854877.XA patent/CN110599605B/zh active Active
-
2020
- 2020-08-27 WO PCT/CN2020/111638 patent/WO2021047396A1/zh unknown
- 2020-08-27 EP EP20863666.2A patent/EP3923248A4/en active Pending
- 2020-08-27 JP JP2021555830A patent/JP7270761B2/ja active Active
-
2021
- 2021-02-25 US US17/185,393 patent/US11538229B2/en active Active
-
2022
- 2022-11-14 US US17/986,322 patent/US20230075270A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017130889A (ja) | 2016-01-22 | 2017-07-27 | Kddi株式会社 | カメラのキャリブレーション装置、方法及びプログラム |
US20190197709A1 (en) | 2017-12-21 | 2019-06-27 | Microsoft Technology Licensing, Llc | Graphical coordinate system transform for video frames |
JP2019220032A (ja) | 2018-06-21 | 2019-12-26 | Kddi株式会社 | 原画像を目標画像に基づいて変形した表示画像を生成するプログラム、装置及び方法 |
Also Published As
Publication number | Publication date |
---|---|
US11538229B2 (en) | 2022-12-27 |
EP3923248A4 (en) | 2022-06-08 |
WO2021047396A1 (zh) | 2021-03-18 |
CN110599605A (zh) | 2019-12-20 |
CN110599605B (zh) | 2021-07-13 |
US20230075270A1 (en) | 2023-03-09 |
US20210183165A1 (en) | 2021-06-17 |
EP3923248A1 (en) | 2021-12-15 |
JP2022524891A (ja) | 2022-05-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7270761B2 (ja) | 画像処理方法及び装置、電子機器並びにコンピュータプログラム | |
US11748934B2 (en) | Three-dimensional expression base generation method and apparatus, speech interaction method and apparatus, and medium | |
US11704806B2 (en) | Scalable three-dimensional object recognition in a cross reality system | |
WO2021213067A1 (zh) | 物品显示方法、装置、设备及存储介质 | |
US20220343603A1 (en) | Three-dimensional reconstruction method, three-dimensional reconstruction apparatus, device and storage medium | |
US20220358675A1 (en) | Method for training model, method for processing video, device and storage medium | |
CN111142967B (zh) | 一种增强现实显示的方法、装置、电子设备和存储介质 | |
Chen et al. | Face swapping: realistic image synthesis based on facial landmarks alignment | |
CN112085835B (zh) | 三维卡通人脸生成方法、装置、电子设备及存储介质 | |
Li et al. | Animation of virtual medical system under the background of virtual reality technology | |
CN110458924B (zh) | 一种三维脸部模型建立方法、装置和电子设备 | |
CN111754622B (zh) | 脸部三维图像生成方法及相关设备 | |
CN110490959A (zh) | 三维图像处理方法及装置、虚拟形象生成方法以及电子设备 | |
CN116097316A (zh) | 用于非模态中心预测的对象识别神经网络 | |
Michael et al. | Model-based generation of personalized full-body 3D avatars from uncalibrated multi-view photographs | |
Cheng et al. | Quad‐fisheye Image Stitching for Monoscopic Panorama Reconstruction | |
CN113223137B (zh) | 透视投影人脸点云图的生成方法、装置及电子设备 | |
KR102176805B1 (ko) | 뷰 방향이 표시되는 vr 컨텐츠 제공 시스템 및 방법 | |
CN109816791B (zh) | 用于生成信息的方法和装置 | |
Niu et al. | [Retracted] Application of Artificial Intelligence Combined with Three‐Dimensional Digital Technology in the Design of Complex Works of Art | |
US20240062495A1 (en) | Deformable neural radiance field for editing facial pose and facial expression in neural 3d scenes | |
CN111739134B (zh) | 虚拟角色的模型处理方法、装置及可读存储介质 | |
Liu et al. | A study of digital exhibition visual design led by digital twin and VR technology | |
Zheng et al. | [Retracted] Rendering and Optimization Algorithm of Digital City’s 3D Artistic Landscape Based on Virtual Reality | |
CN116433852B (zh) | 数据处理方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210915 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210915 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221017 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230417 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230425 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7270761 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |