JP2022518773A - 3d小惑星ダイナミックマップの生成方法及びポータブル型端末 - Google Patents
3d小惑星ダイナミックマップの生成方法及びポータブル型端末 Download PDFInfo
- Publication number
- JP2022518773A JP2022518773A JP2021542464A JP2021542464A JP2022518773A JP 2022518773 A JP2022518773 A JP 2022518773A JP 2021542464 A JP2021542464 A JP 2021542464A JP 2021542464 A JP2021542464 A JP 2021542464A JP 2022518773 A JP2022518773 A JP 2022518773A
- Authority
- JP
- Japan
- Prior art keywords
- asteroid
- area
- image
- dynamic map
- generate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 3
- 238000009877 rendering Methods 0.000 claims abstract 3
- 238000004590 computer program Methods 0.000 claims description 7
- 239000011800 void material Substances 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 8
- 238000010586 diagram Methods 0.000 abstract description 3
- 238000013507 mapping Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/64—Three-dimensional objects
- G06V20/647—Three-dimensional objects by matching two-dimensional images to three-dimensional objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
- H04N13/268—Image signal generators with monoscopic-to-stereoscopic image conversion based on depth image-based rendering [DIBR]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
【選択図】図1
Description
図1を参照して、本発明の実施例1によって提供される3D小惑星ダイナミックマップの生成方法は以下のステップを含む。
本発明の実施例2は、プロセッサによって実行されると、本発明の実施例1に提供される3D小惑星ダイナミックマップの生成方法のステップを実現するコンピュータプログラムを記憶したコンピュータ読み取り可能な記憶媒体を提供する。
図5は、本発明の実施例3に提供されるポータブル型端末の特定の構造ブロック図を示している。ポータブル型端末100は、1つ又は複数のプロセッサ101と、メモリ102と、1つ又は複数のコンピュータプログラムと、を含み、前記プロセッサ101と前記メモリ102とは、バスによって接続され、前記1つ又は複数のコンピュータプログラムは、前記メモリ102に格納され、前記1つ又は複数のプロセッサ101によって実行されると、本発明の実施例1に提供される3D小惑星ダイナミックマップの生成方法のステップを実現するように構成される。
Claims (9)
- 3D小惑星ダイナミックマップの生成方法であって、
パノラマ画像を取得するステップと、
パノラマ画像を認識して、空領域、人物領域、地面領域に分割するステップと、
空領域、人物領域および地面領域に対してパノラマ深度マップをそれぞれに計算するステップと、
パノラマ画像及びパノラマ深度マップを、それぞれ小惑星画像及び小惑星深度マップに変換して生成するステップと、
仮想視点での小惑星ビューを生成するステップと、
複数枚の仮想視点での小惑星ビューをレンダリングして、3D小惑星ダイナミックマップを生成するステップと、を含む、
ことを特徴とする3D小惑星ダイナミックマップの生成方法。 - 前記パノラマ画像を認識して、空領域、人物領域、地面領域に分割することは、
パノラマ画像における空領域と人物領域を認識し、パノラマ画像から空領域と人物領域とが分割され、残りの部分を地面領域とすることである、
ことを特徴とする請求項1に記載の3D小惑星ダイナミックマップの生成方法。 - 3Dワーピングアルゴリズムにより仮想視点での小惑星ビューを生成することにおいて、元の小惑星画像において物体の前後のオクルージョンによって生成された画素情報のないボイド領域は、隣接する画素で埋められる、
ことを特徴とする請求項4に記載の3D小惑星ダイナミックマップの生成方法。 - 前記複数枚の仮想視点での小惑星ビューをレンダリングして、3D小惑星ダイナミックマップを生成することは、
単位円軌道上のn個の仮想視点によって生成されたn枚の仮想視点での小惑星ビューを順番で合成およびレンダリングして、3D小惑星ダイナミックマップを生成することであり、nは正の整数である
ことを特徴とする請求項1に記載の3D小惑星ダイナミックマップの生成方法。 - コンピュータ読み取り可能な記憶媒体であって、プロセッサによって実行されると、請求項1~7のいずれか1項に記載の3D小惑星ダイナミックマップの生成方法のステップを実現するコンピュータプログラムを記憶した、
ことを特徴とするコンピュータ読み取り可能な記憶媒体。 - ポータブル型端末であって、
1つ又は複数のプロセッサと、
メモリと、
メモリに格納され、前記1つ又は複数のプロセッサによって実行されると、請求項1~7のいずれか1項に記載の3D小惑星ダイナミックマップの生成方法のステップを実現するように構成される1つ又は複数のコンピュータプログラムと、を含む
ポータブル型端末。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910057169.3A CN109769110B (zh) | 2019-01-22 | 2019-01-22 | 一种3d小行星动态图的生成方法、装置及便携式终端 |
CN201910057169.3 | 2019-01-22 | ||
PCT/CN2019/112246 WO2020151268A1 (zh) | 2019-01-22 | 2019-10-21 | 一种3d小行星动态图的生成方法及便携式终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2022518773A true JP2022518773A (ja) | 2022-03-16 |
Family
ID=66454929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021542464A Pending JP2022518773A (ja) | 2019-01-22 | 2019-10-21 | 3d小惑星ダイナミックマップの生成方法及びポータブル型端末 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11995793B2 (ja) |
EP (1) | EP3905673A4 (ja) |
JP (1) | JP2022518773A (ja) |
CN (1) | CN109769110B (ja) |
WO (1) | WO2020151268A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024101776A1 (ko) * | 2022-11-09 | 2024-05-16 | 네이버랩스 주식회사 | 3차원 빌딩 모델 및 도로 모델을 이용한 3차원 거리뷰 모델 생성 방법 및 시스템 |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109769110B (zh) * | 2019-01-22 | 2020-07-14 | 影石创新科技股份有限公司 | 一种3d小行星动态图的生成方法、装置及便携式终端 |
CN113112412B (zh) * | 2020-01-13 | 2024-03-19 | 株式会社理光 | 垂直校正矩阵的生成方法、装置及计算机可读存储介质 |
CN111536982B (zh) * | 2020-05-06 | 2023-09-19 | 北京工业大学 | 一种光照不良条件下小行星探测器光学导航图像生成方法 |
CN114283195B (zh) * | 2022-03-03 | 2022-07-26 | 荣耀终端有限公司 | 生成动态图像的方法、电子设备及可读存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006053694A (ja) * | 2004-08-10 | 2006-02-23 | Riyuukoku Univ | 空間シミュレータ、空間シミュレート方法、空間シミュレートプログラム、記録媒体 |
US20120041722A1 (en) * | 2009-02-06 | 2012-02-16 | The Hong Kong University Of Science And Technology | Generating three-dimensional models from images |
JP2014007715A (ja) * | 2012-06-27 | 2014-01-16 | Jvc Kenwood Corp | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8659592B2 (en) * | 2009-09-24 | 2014-02-25 | Shenzhen Tcl New Technology Ltd | 2D to 3D video conversion |
JP5250598B2 (ja) * | 2010-10-05 | 2013-07-31 | 株式会社ソニー・コンピュータエンタテインメント | 画像表示装置および画像表示方法 |
KR101862543B1 (ko) * | 2011-09-08 | 2018-07-06 | 삼성전자 주식회사 | 깊이정보 생성장치, 깊이정보 생성방법 및 그 저장매체 |
CN103020900B (zh) * | 2012-11-15 | 2015-06-24 | 小米科技有限责任公司 | 一种图像处理方法及装置 |
KR20140122054A (ko) * | 2013-04-09 | 2014-10-17 | 삼성전자주식회사 | 2차원 이미지를 3차원 이미지로 변환하는 3차원 이미지 변환 장치 및 그 제어 방법 |
CA2820305A1 (en) * | 2013-07-04 | 2015-01-04 | University Of New Brunswick | Systems and methods for generating and displaying stereoscopic image pairs of geographical areas |
KR102249831B1 (ko) * | 2014-09-26 | 2021-05-10 | 삼성전자주식회사 | 3d 파노라마 이미지 생성을 위한 영상 생성 장치 및 방법 |
US10074161B2 (en) * | 2016-04-08 | 2018-09-11 | Adobe Systems Incorporated | Sky editing based on image composition |
CN105959665B (zh) * | 2016-05-05 | 2018-08-07 | 清华大学深圳研究生院 | 一种针对于虚拟现实设备的全景3d视频生成方法 |
CN106056139A (zh) * | 2016-05-26 | 2016-10-26 | 东华大学 | 一种基于图像分割的森林火灾烟雾检测方法 |
CN106162203B (zh) * | 2016-07-05 | 2019-10-25 | 实野信息科技(上海)有限公司 | 全景视频播放方法、播放器与头戴式虚拟现实设备 |
CN108377407B (zh) * | 2016-11-04 | 2021-03-12 | 株式会社理光 | 全景视频的处理方法、装置及电子设备 |
US20210144283A1 (en) * | 2017-02-23 | 2021-05-13 | Kshitij Marwah | An apparatus, method, and system for capturing 360/virtual reality video using a mobile phone add-on |
US10373362B2 (en) * | 2017-07-06 | 2019-08-06 | Humaneyes Technologies Ltd. | Systems and methods for adaptive stitching of digital images |
GB2564642A (en) * | 2017-07-10 | 2019-01-23 | Nokia Technologies Oy | Methods and apparatuses for panoramic image processing |
CN107590850A (zh) * | 2017-08-11 | 2018-01-16 | 深圳依偎控股有限公司 | 一种利用球形全景图的3d场景构建方法及*** |
CN110278366B (zh) * | 2018-03-14 | 2020-12-01 | 虹软科技股份有限公司 | 一种全景图像虚化方法、终端及计算机可读存储介质 |
CN109003237A (zh) | 2018-07-03 | 2018-12-14 | 深圳岚锋创视网络科技有限公司 | 全景图像的天空滤镜方法、装置及便携式终端 |
CN109769110B (zh) * | 2019-01-22 | 2020-07-14 | 影石创新科技股份有限公司 | 一种3d小行星动态图的生成方法、装置及便携式终端 |
KR20210078813A (ko) * | 2019-12-19 | 2021-06-29 | 엘지전자 주식회사 | 이미지를 합성하는 인공 지능 장치 및 그 방법 |
TW202133118A (zh) * | 2020-02-21 | 2021-09-01 | 四葉草娛樂有限公司 | 實境模擬全景系統及其方法 |
-
2019
- 2019-01-22 CN CN201910057169.3A patent/CN109769110B/zh active Active
- 2019-10-21 JP JP2021542464A patent/JP2022518773A/ja active Pending
- 2019-10-21 WO PCT/CN2019/112246 patent/WO2020151268A1/zh unknown
- 2019-10-21 US US17/424,802 patent/US11995793B2/en active Active
- 2019-10-21 EP EP19912004.9A patent/EP3905673A4/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006053694A (ja) * | 2004-08-10 | 2006-02-23 | Riyuukoku Univ | 空間シミュレータ、空間シミュレート方法、空間シミュレートプログラム、記録媒体 |
US20120041722A1 (en) * | 2009-02-06 | 2012-02-16 | The Hong Kong University Of Science And Technology | Generating three-dimensional models from images |
JP2014007715A (ja) * | 2012-06-27 | 2014-01-16 | Jvc Kenwood Corp | 奥行き情報生成装置、奥行き情報生成方法、奥行き情報生成プログラム、擬似立体画像生成装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024101776A1 (ko) * | 2022-11-09 | 2024-05-16 | 네이버랩스 주식회사 | 3차원 빌딩 모델 및 도로 모델을 이용한 3차원 거리뷰 모델 생성 방법 및 시스템 |
Also Published As
Publication number | Publication date |
---|---|
EP3905673A1 (en) | 2021-11-03 |
WO2020151268A1 (zh) | 2020-07-30 |
US20220092734A1 (en) | 2022-03-24 |
EP3905673A4 (en) | 2022-09-28 |
CN109769110A (zh) | 2019-05-17 |
CN109769110B (zh) | 2020-07-14 |
US11995793B2 (en) | 2024-05-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2022518773A (ja) | 3d小惑星ダイナミックマップの生成方法及びポータブル型端末 | |
US10839591B2 (en) | Stereoscopic rendering using raymarching and a virtual view broadcaster for such rendering | |
JP5011168B2 (ja) | 仮想視点画像生成方法、仮想視点画像生成装置、仮想視点画像生成プログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
US9407904B2 (en) | Method for creating 3D virtual reality from 2D images | |
JP6201476B2 (ja) | 自由視点画像撮像装置およびその方法 | |
JP7112128B2 (ja) | 2次元画像を3次元画像に変換する方法、装置、画像処理機器、記憶媒体及び3次元イメージングシステム | |
CN106254854B (zh) | 三维图像的获得方法、装置及*** | |
JP4489610B2 (ja) | 立体視可能な表示装置および方法 | |
US20100085423A1 (en) | Stereoscopic imaging | |
US20120182403A1 (en) | Stereoscopic imaging | |
US20060152507A1 (en) | Depth image-based modeling method and apparatus | |
JP2006053694A (ja) | 空間シミュレータ、空間シミュレート方法、空間シミュレートプログラム、記録媒体 | |
WO2015196791A1 (zh) | 双目三维图形渲染方法及相关*** | |
CN112233165B (zh) | 一种基于多平面图像学习视角合成的基线扩展实现方法 | |
US20110128286A1 (en) | Image restoration apparatus and method thereof | |
JP7505481B2 (ja) | 画像処理装置および画像処理方法 | |
CN113253845A (zh) | 一种基于人眼追踪视图显示方法、装置、介质及电子设备 | |
JP2007507945A (ja) | 立体映像化 | |
Knorr et al. | An image-based rendering (ibr) approach for realistic stereo view synthesis of tv broadcast based on structure from motion | |
JP2012128884A (ja) | 仮想視点画像生成方法,仮想視点画像生成装置および仮想視点画像生成プログラム | |
TWI536832B (zh) | 用於嵌入立體影像的系統、方法及其軟體產品 | |
CN109961395B (zh) | 深度图像的生成及显示方法、装置、***、可读介质 | |
Knorr et al. | From 2D-to stereo-to multi-view video | |
JP2004258775A (ja) | 光線空間データ処理方法、空間データ処理装置 | |
Andersen et al. | An AR-guided system for fast image-based modeling of indoor scenes |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210804 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220822 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221222 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230328 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20230726 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20240401 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20240619 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240712 |