JP7392105B2 - 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 - Google Patents
没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 Download PDFInfo
- Publication number
- JP7392105B2 JP7392105B2 JP2022505610A JP2022505610A JP7392105B2 JP 7392105 B2 JP7392105 B2 JP 7392105B2 JP 2022505610 A JP2022505610 A JP 2022505610A JP 2022505610 A JP2022505610 A JP 2022505610A JP 7392105 B2 JP7392105 B2 JP 7392105B2
- Authority
- JP
- Japan
- Prior art keywords
- video content
- content item
- mesh
- foveated
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 88
- 238000009877 rendering Methods 0.000 title description 24
- 230000004044 response Effects 0.000 claims description 44
- 230000003068 static effect Effects 0.000 claims description 22
- 230000033001 locomotion Effects 0.000 claims description 19
- 230000006870 function Effects 0.000 claims description 14
- 230000006872 improvement Effects 0.000 claims description 14
- 230000002093 peripheral effect Effects 0.000 claims description 14
- 230000008569 process Effects 0.000 description 50
- 238000004891 communication Methods 0.000 description 28
- 230000007246 mechanism Effects 0.000 description 21
- 210000003128 head Anatomy 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000006641 stabilisation Effects 0.000 description 3
- 238000011105 stabilization Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/344—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] with head-mounted left-right displays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
- H04N13/279—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals the virtual viewpoint locations being selected by the viewers or determined by tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0088—Synthesising a monoscopic image signal from stereoscopic images, e.g. synthesising a panoramic or high resolution monoscopic image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Graphics (AREA)
- Library & Information Science (AREA)
- Computing Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
- Image Generation (AREA)
Description
本出願は、ここに参照によりその全体が本明細書に組み込まれている、2019年7月28日に出願した米国特許仮出願第62/879,529号の利益を主張するものである。
clamped_coord = clamp(0.0, 1.0, normalized_coord)
foveated_coord = 0.5 + atan(sqrt(foveation_ratio) * tan((clamped_coord - 0.5) * π)) / π
clamped_coord = clamp(0.0, 1.0, normalized_coord)
unfoveated_coord = atan(tan((clamped_coord - 0.5) * π)) / sqrt(foveation_ratio)) / π + 0.5
200 例示的な例、プロセス
300 例示的な例、ハードウェア
302 コンテンツサーバ、デバイス
304 通信ネットワーク
306 ユーザデバイス
308 ユーザデバイス
310 ユーザデバイス
312 通信リンク
314 通信リンク
400 ハードウェア
402 ハードウェアプロセッサ、コンポーネント
404 メモリおよび/またはストレージ、コンポーネント
406 入力デバイスコントローラ、コンポーネント
408 入力デバイス
410 ディスプレイ/オーディオドライバ、コンポーネント
412 ディスプレイおよびオーディオ出力回路、ディスプレイ/オーディオ出力デバイス
414 通信インターフェース、コンポーネント
416 アンテナ
418 バス
Claims (19)
- 没入型ビデオコンテンツを生成するための方法であって、
ビデオコンテンツアイテムを受信するステップと、
ハードウェアプロセッサを使用して、前記ビデオコンテンツアイテムが少なくとも1つの基準を満たすかどうかを判定するステップと、
前記ビデオコンテンツアイテムが前記少なくとも1つの基準を満たすとの判定に応答して、前記ハードウェアプロセッサを使用して、前記ビデオコンテンツアイテムのフレームがその上に投影されることになるフォービエイテッドメッシュを、フォービエイション比パラメータに従って生成するステップであって、前記フォービエイテッドメッシュが、前記ビデオコンテンツアイテムの各フレームの中心部分内の画素密度を前記ビデオコンテンツアイテムの各フレームの周辺部分と比べて高める非一様なポジションマップを有する、ステップと、
前記ビデオコンテンツアイテムを、前記生成されたフォービエイテッドメッシュを含むファイル形式で記憶するステップと
を含み、前記没入型ビデオコンテンツが、前記ビデオコンテンツアイテムをテクスチャとして、前記生成されたフォービエイテッドメッシュに貼り付けることによってレンダリングされる、方法。 - 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが特定のファイル形式に関連するかどうかを判定することを含む、請求項1に記載の方法。
- 前記特定のファイル形式が、視野180度の方向性立体視投影を使用するVR180ファイル形式を含む、請求項2に記載の方法。
- 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが立体視コンテンツを含むか、それとも平面視コンテンツを含むかを判定することを含み、前記方法が、前記受信したビデオコンテンツアイテムが立体視コンテンツを含むとの判定に応答して前記フォービエイテッドメッシュを生成するステップをさらに含む、請求項1に記載の方法。
- 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが静的ビデオであるか、それとも動的ビデオであるかを判定することを含み、前記静的ビデオが、ビデオコンテンツが捕捉されたときにカメラが実質的に移動しなかったビデオコンテンツを含み、前記動的ビデオが、カメラモーションメタデータトラックを含み、前記方法が、前記受信したビデオコンテンツアイテムが前記静的ビデオであるとの判定に応答して前記フォービエイテッドメッシュを生成するステップをさらに含む、請求項1に記載の方法。
- 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが特定のタイプの入力メッシュに関連付けられているかどうかを判定することを含み、前記方法が、前記受信したビデオコンテンツアイテムが切出しエクイレクタングラーメッシュに関連付けられているとの判定に応答して前記フォービエイテッドメッシュを生成するステップをさらに含む、請求項1に記載の方法。
- 前記フォービエイテッドメッシュが、前記切出しエクイレクタングラーメッシュの2次元UVマップを、多項式フィッティング関数を使用して変形することによって生成される、請求項6に記載の方法。
- 前記受信したビデオコンテンツアイテムが第1の画素解像度から第2の画素解像度にダウンサンプリング比だけダウンサンプリングされているとの判定に応答して、前記フォービエイテッドメッシュが生成され、前記ビデオコンテンツアイテムの各フレームの前記中心部分における改善比が、前記ダウンサンプリング比と一致する、請求項1に記載の方法。
- 前記ビデオコンテンツアイテムおよび前記生成されたフォービエイテッドメッシュをユーザデバイスに、前記ユーザデバイスから前記ビデオコンテンツアイテムを求める要求を受信したことに応答して送信するステップをさらに含む、請求項1に記載の方法。
- 没入型ビデオコンテンツを生成するためのシステムであって、
メモリと、
ハードウェアプロセッサと
を備え、前記ハードウェアプロセッサが、前記メモリ内に記憶されたコンピュータ実行可能命令を実行すると、
ビデオコンテンツアイテムを受信することと、
前記ビデオコンテンツアイテムが少なくとも1つの基準を満たすかどうかを判定することと、
前記ビデオコンテンツアイテムが前記少なくとも1つの基準を満たすとの判定に応答して、前記ビデオコンテンツアイテムのフレームがその上に投影されることになるフォービエイテッドメッシュを、フォービエイション比パラメータに従って生成することであって、前記フォービエイテッドメッシュが、前記ビデオコンテンツアイテムの各フレームの中心部分内の画素密度を前記ビデオコンテンツアイテムの各フレームの周辺部分と比べて高める非一様なポジションマップを有する、生成することと、
前記ビデオコンテンツアイテムを、前記生成されたフォービエイテッドメッシュを含むファイル形式で記憶することと
を行うように構成され、前記没入型ビデオコンテンツが、前記ビデオコンテンツアイテムをテクスチャとして、前記生成されたフォービエイテッドメッシュに貼り付けることによってレンダリングされる、システム。 - 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが特定のファイル形式に関連するかどうかを判定することを含む、請求項10に記載のシステム。
- 前記特定のファイル形式が、視野180度の方向性立体視投影を使用するVR180ファイル形式を含む、請求項11に記載のシステム。
- 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが立体視コンテンツを含むか、それとも平面視コンテンツを含むかを判定することを含み、前記ハードウェアプロセッサが、前記受信したビデオコンテンツアイテムが立体視コンテンツを含むとの判定に応答して前記フォービエイテッドメッシュを生成することを行うようにさらに構成される、請求項10に記載のシステム。
- 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが静的ビデオであるか、それとも動的ビデオであるかを判定することを含み、前記静的ビデオが、ビデオコンテンツが捕捉されたときにカメラが実質的に移動しなかったビデオコンテンツを含み、前記動的ビデオが、カメラモーションメタデータトラックを含み、前記ハードウェアプロセッサが、前記受信したビデオコンテンツアイテムが前記静的ビデオであるとの判定に応答して前記フォービエイテッドメッシュを生成することを行うようにさらに構成される、請求項10に記載のシステム。
- 前記少なくとも1つの基準を満たすか否かの判定が、前記受信したビデオコンテンツアイテムが特定のタイプの入力メッシュに関連付けられているかどうかを判定することを含み、前記ハードウェアプロセッサが、前記受信したビデオコンテンツアイテムが切出しエクイレクタングラーメッシュに関連付けられているとの判定に応答して前記フォービエイテッドメッシュを生成することを行うようにさらに構成される、請求項10に記載のシステム。
- 前記フォービエイテッドメッシュが、前記切出しエクイレクタングラーメッシュの2次元UVマップを、多項式フィッティング関数を使用して変形することによって生成される、請求項15に記載のシステム。
- 前記受信したビデオコンテンツアイテムが第1の画素解像度から第2の画素解像度にダウンサンプリング比だけダウンサンプリングされているとの判定に応答して、前記フォービエイテッドメッシュが生成され、前記ビデオコンテンツアイテムの各フレームの前記中心部分における改善比が、前記ダウンサンプリング比と一致する、請求項10に記載のシステム。
- 前記ハードウェアプロセッサが、前記ビデオコンテンツアイテムおよび前記生成されたフォービエイテッドメッシュをユーザデバイスに、前記ユーザデバイスから前記ビデオコンテンツアイテムを求める要求を受信したことに応答して送信することを行うようにさらに構成される、請求項10に記載のシステム。
- プロセッサによって実行されると前記プロセッサに没入型ビデオコンテンツを生成するための方法を実施させるコンピュータ実行可能命令を収容した、コンピュータ可読記憶媒体であって、前記方法が、
ビデオコンテンツアイテムを受信するステップと、
ハードウェアプロセッサを使用して、前記ビデオコンテンツアイテムが少なくとも1つの基準を満たすかどうかを判定するステップと、
前記ビデオコンテンツアイテムが前記少なくとも1つの基準を満たすとの判定に応答して、前記ハードウェアプロセッサを使用して、前記ビデオコンテンツアイテムのフレームがその上に投影されることになるフォービエイテッドメッシュを、フォービエイション比パラメータに従って生成するステップであって、前記フォービエイテッドメッシュが、前記ビデオコンテンツアイテムの各フレームの中心部分内の画素密度を前記ビデオコンテンツアイテムの各フレームの周辺部分と比べて高める非一様なポジションマップを有する、ステップと、
前記ビデオコンテンツアイテムを、前記生成されたフォービエイテッドメッシュを含むファイル形式で記憶するステップと
を含み、前記没入型ビデオコンテンツが、前記ビデオコンテンツアイテムをテクスチャとして、前記生成されたフォービエイテッドメッシュに貼り付けることによってレンダリングされる、コンピュータ可読記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023198226A JP2024026151A (ja) | 2019-07-28 | 2023-11-22 | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201962879529P | 2019-07-28 | 2019-07-28 | |
US62/879,529 | 2019-07-28 | ||
PCT/US2019/065417 WO2021021235A1 (en) | 2019-07-28 | 2019-12-10 | Methods, systems, and media for rendering immersive video content with foveated meshes |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023198226A Division JP2024026151A (ja) | 2019-07-28 | 2023-11-22 | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022542510A JP2022542510A (ja) | 2022-10-04 |
JP7392105B2 true JP7392105B2 (ja) | 2023-12-05 |
Family
ID=69160283
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022505610A Active JP7392105B2 (ja) | 2019-07-28 | 2019-12-10 | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 |
JP2023198226A Pending JP2024026151A (ja) | 2019-07-28 | 2023-11-22 | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023198226A Pending JP2024026151A (ja) | 2019-07-28 | 2023-11-22 | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 |
Country Status (7)
Country | Link |
---|---|
US (2) | US11375170B2 (ja) |
EP (1) | EP4005201A1 (ja) |
JP (2) | JP7392105B2 (ja) |
KR (2) | KR102582407B1 (ja) |
CN (1) | CN114175630A (ja) |
BR (1) | BR112022001434A2 (ja) |
WO (1) | WO2021021235A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114175630A (zh) * | 2019-07-28 | 2022-03-11 | 谷歌有限责任公司 | 利用注视点网格渲染沉浸式视频内容的方法、***和介质 |
CN113808231B (zh) * | 2021-09-18 | 2023-04-11 | 北京百度网讯科技有限公司 | 信息处理方法及装置、图像渲染方法及装置、电子设备 |
CN114627221B (zh) * | 2021-12-08 | 2023-11-10 | 北京蓝亚盒子科技有限公司 | 一种场景渲染方法、装置及运行器、可读存储介质 |
KR102586644B1 (ko) * | 2021-12-13 | 2023-10-10 | 한국전자기술연구원 | 포비티드 홀로그램의 파라미터 결정을 위한 주변시 영상 품질 변화에 대한 인지 실험 방법 |
WO2024085654A1 (en) * | 2022-10-19 | 2024-04-25 | Samsung Electronics Co., Ltd. | Packing of displacements data in video frames for dynamic mesh coding |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005348382A (ja) | 2004-05-06 | 2005-12-15 | Olympus Corp | 頭部装着型表示装置 |
JP2016515246A (ja) | 2013-03-15 | 2016-05-26 | インテル・コーポレーション | 可変解像度デプス表現 |
JP2018511971A (ja) | 2015-02-17 | 2018-04-26 | ネクストブイアール・インコーポレイテッド | 解像度低下画像を生成および使用するならびに/またはそのような画像を再生デバイスまたはコンテンツ配布デバイスに通信するための方法および装置 |
WO2018227100A1 (en) | 2017-06-09 | 2018-12-13 | Sony Interactive Entertainment Inc. | Optimized shadows and adaptive mesh skinning in a foveated rendering system |
WO2018226676A1 (en) | 2017-06-05 | 2018-12-13 | Google Llc | Smoothly varying foveated rendering |
Family Cites Families (236)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5422653A (en) * | 1993-01-07 | 1995-06-06 | Maguire, Jr.; Francis J. | Passive virtual reality |
US5748199A (en) * | 1995-12-20 | 1998-05-05 | Synthonics Incorporated | Method and apparatus for converting a two dimensional motion picture into a three dimensional motion picture |
US6252989B1 (en) * | 1997-01-07 | 2001-06-26 | Board Of The Regents, The University Of Texas System | Foveated image coding system and method for image bandwidth reduction |
US6455831B1 (en) * | 1998-09-11 | 2002-09-24 | The Research Foundation Of Suny At Buffalo | CMOS foveal image sensor chip |
US6781585B2 (en) * | 2000-01-11 | 2004-08-24 | Sun Microsystems, Inc. | Graphics system having a super-sampled sample buffer and having single sample per pixel support |
US6664955B1 (en) * | 2000-03-15 | 2003-12-16 | Sun Microsystems, Inc. | Graphics system configured to interpolate pixel values |
US6426755B1 (en) * | 2000-05-16 | 2002-07-30 | Sun Microsystems, Inc. | Graphics system using sample tags for blur |
US6829391B2 (en) * | 2000-09-08 | 2004-12-07 | Siemens Corporate Research, Inc. | Adaptive resolution system and method for providing efficient low bit rate transmission of image data for distributed applications |
WO2002065443A1 (en) * | 2001-02-15 | 2002-08-22 | Tveye Inc. | Method and apparatus for low bandwidth transmission of data utilizing of the human eye anatomy |
DE10150428A1 (de) * | 2001-10-11 | 2003-04-30 | Siemens Ag | Verfahren zur Erzeugung dreidimensionaler, mehrfachaufgelöster Volumenbilder eines Untersuchungsobjekts |
US7408572B2 (en) * | 2002-07-06 | 2008-08-05 | Nova Research, Inc. | Method and apparatus for an on-chip variable acuity imager array incorporating roll, pitch and yaw angle rates measurement |
US7495638B2 (en) * | 2003-05-13 | 2009-02-24 | Research Triangle Institute | Visual display with increased field of view |
US20050018911A1 (en) * | 2003-07-24 | 2005-01-27 | Eastman Kodak Company | Foveated video coding system and method |
WO2006078802A1 (en) * | 2005-01-21 | 2006-07-27 | Massachusetts Institute Of Technology | Methods and apparatus for optical coherence tomography scanning |
US8956396B1 (en) * | 2005-10-24 | 2015-02-17 | Lockheed Martin Corporation | Eye-tracking visual prosthetic and method |
JP4013989B2 (ja) * | 2006-02-20 | 2007-11-28 | 松下電工株式会社 | 映像信号処理装置、仮想現実感生成システム |
US8401246B2 (en) * | 2007-11-08 | 2013-03-19 | Topcon Medical Systems, Inc. | Mapping of retinal parameters from combined fundus image and three-dimensional optical coherence tomography |
US8081808B2 (en) * | 2007-11-08 | 2011-12-20 | Topcon Medical Systems, Inc. | Retinal thickness measurement by combined fundus image and three-dimensional optical coherence tomography |
US8155479B2 (en) * | 2008-03-28 | 2012-04-10 | Intuitive Surgical Operations Inc. | Automated panning and digital zooming for robotic surgical systems |
US8808164B2 (en) * | 2008-03-28 | 2014-08-19 | Intuitive Surgical Operations, Inc. | Controlling a robotic surgical tool with a display monitor |
US8588921B2 (en) * | 2010-11-12 | 2013-11-19 | Second Sight Medical Products, Inc. | Visual prosthesis with an improved electrode array adapted for foveal stimulation |
US20120142415A1 (en) * | 2010-12-03 | 2012-06-07 | Lindsay L Jon | Video Show Combining Real Reality and Virtual Reality |
US9030583B2 (en) * | 2011-09-21 | 2015-05-12 | Semiconductor Components Industries, Llc | Imaging system with foveated imaging capabilites |
JP5936254B2 (ja) * | 2012-02-29 | 2016-06-22 | 国立大学法人京都大学 | 眼底観察装置及び眼底画像解析装置 |
WO2013165614A1 (en) * | 2012-05-04 | 2013-11-07 | University Of Iowa Research Foundation | Automated assessment of glaucoma loss from optical coherence tomography |
US11714487B2 (en) * | 2013-03-04 | 2023-08-01 | Tobii Ab | Gaze and smooth pursuit based continuous foveal adjustment |
US20150019130A1 (en) * | 2013-07-09 | 2015-01-15 | Rosemount Aerospace Inc. | Dual Function Focal Plane Array Seeker |
US10438312B2 (en) * | 2014-04-05 | 2019-10-08 | Sony Interactive Entertainment LLC | Method for efficient re-rendering objects to vary viewports and under varying rendering and rasterization parameters |
US9895057B2 (en) * | 2014-04-24 | 2018-02-20 | Carl Zeiss Meditec, Inc. | Functional vision testing using light field displays |
EP2958074A1 (en) * | 2014-06-17 | 2015-12-23 | Thomson Licensing | A method and a display device with pixel repartition optimization |
US11049269B2 (en) * | 2014-06-27 | 2021-06-29 | Samsung Electronics Co., Ltd. | Motion based adaptive rendering |
US9418472B2 (en) * | 2014-07-17 | 2016-08-16 | Google Inc. | Blending between street view and earth view |
US10397539B2 (en) * | 2014-08-25 | 2019-08-27 | Schepens Eye Research Institute | Compensating 3D stereoscopic imagery |
US10419737B2 (en) * | 2015-04-15 | 2019-09-17 | Google Llc | Data structures and delivery methods for expediting virtual reality playback |
US10094713B2 (en) * | 2015-04-22 | 2018-10-09 | The Boeing Company | Hyperspectral demixing using foveated compressive projections |
US10037620B2 (en) * | 2015-05-29 | 2018-07-31 | Nvidia Corporation | Piecewise linear irregular rasterization |
DE112016002904T5 (de) * | 2015-06-23 | 2018-03-08 | Google Llc | Am Kopf befestigtes Anzeigegerät mit gekrümmten Dualanzeigen |
US10210844B2 (en) * | 2015-06-29 | 2019-02-19 | Microsoft Technology Licensing, Llc | Holographic near-eye display |
US9607428B2 (en) * | 2015-06-30 | 2017-03-28 | Ariadne's Thread (Usa), Inc. | Variable resolution virtual reality display system |
US10429648B2 (en) * | 2015-09-03 | 2019-10-01 | Lawrence Sverdrup | Augmented reality head worn device |
US9916682B2 (en) * | 2015-10-28 | 2018-03-13 | Intel Corporation | Variable precision shading |
US10726619B2 (en) * | 2015-10-29 | 2020-07-28 | Sony Interactive Entertainment Inc. | Foveated geometry tessellation |
AU2016359149B2 (en) * | 2015-11-25 | 2018-08-23 | Google Llc | Prism-based eye tracking |
IL242895B (en) * | 2015-12-03 | 2021-04-29 | Eyeway Vision Ltd | Image projection system |
US11010956B2 (en) * | 2015-12-09 | 2021-05-18 | Imagination Technologies Limited | Foveated rendering |
US20170178395A1 (en) * | 2015-12-16 | 2017-06-22 | Google Inc. | Light field rendering of an image using variable computational complexity |
WO2017112958A1 (en) * | 2015-12-24 | 2017-06-29 | Meta Company | Optical engine for creating wide-field of view fovea-based display |
US9846808B2 (en) * | 2015-12-31 | 2017-12-19 | Adaptive Computation, Llc | Image integration search based on human visual pathway model |
AU2017205338B2 (en) * | 2016-01-07 | 2021-10-28 | Magic Leap, Inc. | Dynamic fresnel projector |
US10643381B2 (en) * | 2016-01-12 | 2020-05-05 | Qualcomm Incorporated | Systems and methods for rendering multiple levels of detail |
US10643296B2 (en) * | 2016-01-12 | 2020-05-05 | Qualcomm Incorporated | Systems and methods for rendering multiple levels of detail |
US11308704B2 (en) * | 2016-01-18 | 2022-04-19 | Lg Electronics Inc. | Mobile terminal for controlling VR image and control method therefor |
KR102524641B1 (ko) * | 2016-01-22 | 2023-04-21 | 삼성전자주식회사 | Hmd 디바이스 및 그 제어 방법 |
US10157448B2 (en) * | 2016-02-12 | 2018-12-18 | Qualcomm Incorporated | Foveated video rendering |
US10475370B2 (en) * | 2016-02-17 | 2019-11-12 | Google Llc | Foveally-rendered display |
US10438400B2 (en) * | 2016-03-08 | 2019-10-08 | Nvidia Corporation | Perceptually-based foveated rendering using a contrast-enhancing filter |
US10099122B2 (en) * | 2016-03-30 | 2018-10-16 | Sony Interactive Entertainment Inc. | Head-mounted display tracking |
US10401952B2 (en) * | 2016-03-31 | 2019-09-03 | Sony Interactive Entertainment Inc. | Reducing rendering computation and power consumption by detecting saccades and blinks |
US10169846B2 (en) * | 2016-03-31 | 2019-01-01 | Sony Interactive Entertainment Inc. | Selective peripheral vision filtering in a foveated rendering system |
US10192528B2 (en) * | 2016-03-31 | 2019-01-29 | Sony Interactive Entertainment Inc. | Real-time user adaptive foveated rendering |
US10372205B2 (en) * | 2016-03-31 | 2019-08-06 | Sony Interactive Entertainment Inc. | Reducing rendering computation and power consumption by detecting saccades and blinks |
US10394029B2 (en) * | 2016-04-04 | 2019-08-27 | Akonia Holographics, Llc | Field of view enhancement |
US10275928B2 (en) * | 2016-04-05 | 2019-04-30 | Qualcomm Incorporated | Dual fisheye image stitching for spherical image content |
US10192280B2 (en) * | 2016-04-08 | 2019-01-29 | Qualcomm Incorporated | Per-vertex variable rate shading |
GB2553744B (en) * | 2016-04-29 | 2018-09-05 | Advanced Risc Mach Ltd | Graphics processing systems |
US9721393B1 (en) * | 2016-04-29 | 2017-08-01 | Immersive Enterprises, LLC | Method for processing and delivering virtual reality content to a user |
US10460501B2 (en) * | 2016-07-04 | 2019-10-29 | Liquid Cinema Inc., Canada | System and method for processing digital video |
US10373592B2 (en) * | 2016-08-01 | 2019-08-06 | Facebook Technologies, Llc | Adaptive parameters in image regions based on eye tracking information |
US10410313B2 (en) * | 2016-08-05 | 2019-09-10 | Qualcomm Incorporated | Dynamic foveation adjustment |
US10438318B2 (en) * | 2016-08-30 | 2019-10-08 | Intel IP Corporation | Blind spot rendering optimizations for eye tracking head mounted displays |
US20180082464A1 (en) * | 2016-09-16 | 2018-03-22 | Tomas G. Akenine-Moller | Apparatus and method for an efficient 3d graphics pipeline |
US10719447B2 (en) * | 2016-09-26 | 2020-07-21 | Intel Corporation | Cache and compression interoperability in a graphics processor pipeline |
US9779478B1 (en) * | 2016-10-04 | 2017-10-03 | Oculus Vr, Llc | Rendering composite content on a head-mounted display including a high resolution inset |
KR102650215B1 (ko) * | 2016-10-18 | 2024-03-21 | 삼성전자주식회사 | 영상 처리 방법 및 장치 |
US10186067B2 (en) * | 2016-10-25 | 2019-01-22 | Aspeed Technology Inc. | Method and apparatus for generating panoramic image with rotation, translation and warping process |
US10262387B2 (en) * | 2016-11-14 | 2019-04-16 | Google Llc | Early sub-pixel rendering |
US20180137602A1 (en) * | 2016-11-14 | 2018-05-17 | Google Inc. | Low resolution rgb rendering for efficient transmission |
US10564715B2 (en) * | 2016-11-14 | 2020-02-18 | Google Llc | Dual-path foveated graphics pipeline |
JP6858007B2 (ja) * | 2016-11-28 | 2021-04-14 | キヤノン株式会社 | 画像処理システム、画像処理方法 |
US10082672B2 (en) * | 2016-12-01 | 2018-09-25 | Varjo Technologies Oy | Display apparatus and method of displaying using electromechanical faceplate |
US20180157381A1 (en) * | 2016-12-02 | 2018-06-07 | Facebook, Inc. | Systems and methods for media item selection within a grid-based content feed |
US10482648B2 (en) * | 2016-12-13 | 2019-11-19 | Qualcomm Incorporated | Scene-based foveated rendering of graphics content |
US10200683B2 (en) * | 2016-12-21 | 2019-02-05 | Microvision, Inc. | Devices and methods for providing foveated scanning laser image projection with depth mapping |
US11222397B2 (en) * | 2016-12-23 | 2022-01-11 | Qualcomm Incorporated | Foveated rendering in tiled architectures |
US10490157B2 (en) * | 2017-01-03 | 2019-11-26 | Screenovate Technologies Ltd. | Compression of distorted images for head-mounted display |
US10616551B2 (en) * | 2017-01-27 | 2020-04-07 | OrbViu Inc. | Method and system for constructing view from multiple video streams |
US10560680B2 (en) * | 2017-01-28 | 2020-02-11 | Microsoft Technology Licensing, Llc | Virtual reality with interactive streaming video and likelihood-based foveation |
US10425643B2 (en) * | 2017-02-04 | 2019-09-24 | OrbViu Inc. | Method and system for view optimization of a 360 degrees video |
US10104288B2 (en) * | 2017-02-08 | 2018-10-16 | Aspeed Technology Inc. | Method and apparatus for generating panoramic image with stitching process |
US10628994B2 (en) * | 2017-03-07 | 2020-04-21 | Google Llc | Reducing visually induced motion sickness in head mounted display systems |
US20180262758A1 (en) * | 2017-03-08 | 2018-09-13 | Ostendo Technologies, Inc. | Compression Methods and Systems for Near-Eye Displays |
US20180269266A1 (en) * | 2017-03-16 | 2018-09-20 | Intel Corporation | Foveated displays for virtual and augmented reality |
CN110679147B (zh) * | 2017-03-22 | 2022-03-08 | 奇跃公司 | 用于显示***的基于深度的凹式渲染 |
US10417739B2 (en) * | 2017-03-23 | 2019-09-17 | Google Llc | Phase aligned foveated rendering |
US10546365B2 (en) * | 2017-03-27 | 2020-01-28 | Advanced Micro Devices, Inc. | Single pass flexible screen/scale rasterization |
US10152822B2 (en) * | 2017-04-01 | 2018-12-11 | Intel Corporation | Motion biased foveated renderer |
US10649524B2 (en) * | 2017-04-07 | 2020-05-12 | Intel Corporation | Apparatus and method for foveated rendering, bin comparison and TBIMR memory-backed storage for virtual reality implementations |
US20180300951A1 (en) * | 2017-04-17 | 2018-10-18 | Intel Corporation | Adaptive tessellation for foveated rendering |
WO2018201048A1 (en) * | 2017-04-27 | 2018-11-01 | Google Llc | Synthetic stereoscopic content capture |
CN110574375B (zh) * | 2017-04-28 | 2023-06-02 | 苹果公司 | 视频流水线 |
US10775884B2 (en) * | 2017-05-18 | 2020-09-15 | Tectus Corporation | Gaze calibration via motion detection for eye mounted displays |
WO2018217253A1 (en) * | 2017-05-26 | 2018-11-29 | Google Llc | Near-eye display with sparse sampling super-resolution |
JP6909874B2 (ja) * | 2017-05-29 | 2021-07-28 | アイウェイ ビジョン リミテッドEyeWay Vision Ltd. | 画像投影システム |
US10885607B2 (en) * | 2017-06-01 | 2021-01-05 | Qualcomm Incorporated | Storage for foveated rendering |
US10572764B1 (en) * | 2017-06-05 | 2020-02-25 | Google Llc | Adaptive stereo rendering to reduce motion sickness |
US10650544B2 (en) * | 2017-06-09 | 2020-05-12 | Sony Interactive Entertainment Inc. | Optimized shadows in a foveated rendering system |
US10515466B2 (en) * | 2017-06-09 | 2019-12-24 | Sony Interactive Entertainment Inc. | Optimized deferred lighting in a foveated rendering system |
US10621767B2 (en) * | 2017-06-12 | 2020-04-14 | Qualcomm Incorporated | Fisheye image stitching for movable cameras |
KR102111501B1 (ko) * | 2017-06-19 | 2020-05-15 | 주식회사 케이티 | 가상 현실 체험 서비스를 제공하는 서버, 사용자 단말 및 방법 |
US20190005709A1 (en) * | 2017-06-30 | 2019-01-03 | Apple Inc. | Techniques for Correction of Visual Artifacts in Multi-View Images |
US10319114B2 (en) * | 2017-07-13 | 2019-06-11 | Google Llc | Foveated compression of display streams |
US10397481B2 (en) * | 2017-07-13 | 2019-08-27 | Qualcomm Incorporated | Stabilization and rolling shutter correction for omnidirectional image content |
US10992916B2 (en) * | 2017-07-26 | 2021-04-27 | Google Llc | Depth data adjustment based on non-visual pose data |
US20190035049A1 (en) * | 2017-07-31 | 2019-01-31 | Qualcomm Incorporated | Dithered variable rate shading |
US10403032B2 (en) * | 2017-08-22 | 2019-09-03 | Qualcomm Incorporated | Rendering an image from computer graphics using two rendering computing devices |
US10948740B2 (en) * | 2017-09-19 | 2021-03-16 | Intel Corporation | Head-mounted displays having curved lens arrays and generating elemental images for displaying |
JP6940349B2 (ja) * | 2017-09-21 | 2021-09-29 | 株式会社トプコン | 眼科装置 |
US10755383B2 (en) * | 2017-09-29 | 2020-08-25 | Apple Inc. | Multi-space rendering with configurable transformation parameters |
US10922878B2 (en) * | 2017-10-04 | 2021-02-16 | Google Llc | Lighting for inserted content |
US10511842B2 (en) * | 2017-10-06 | 2019-12-17 | Qualcomm Incorporated | System and method for foveated compression of image frames in a system on a chip |
US10388641B2 (en) * | 2017-10-19 | 2019-08-20 | Tectus Corporation | Ultra-dense LED projector |
US10657695B2 (en) * | 2017-10-30 | 2020-05-19 | Snap Inc. | Animated chat presence |
US10678049B2 (en) * | 2017-10-31 | 2020-06-09 | Google Llc | Near-eye display having lenslet array with reduced off-axis optical aberrations |
US10643307B2 (en) * | 2017-11-10 | 2020-05-05 | Intel Corporation | Super-resolution based foveated rendering |
US10553016B2 (en) * | 2017-11-15 | 2020-02-04 | Google Llc | Phase aligned foveated rendering |
US10169843B1 (en) * | 2017-11-20 | 2019-01-01 | Advanced Micro Devices, Inc. | Temporal foveated rendering using motion estimation |
WO2019100290A1 (en) * | 2017-11-23 | 2019-05-31 | Intel Corporation | Adaptive foveated encoder and global motion predictor |
KR102028997B1 (ko) * | 2017-11-29 | 2019-10-07 | 엘지디스플레이 주식회사 | 헤드 마운트 디스플레이 장치 |
US11012676B2 (en) * | 2017-12-13 | 2021-05-18 | Google Llc | Methods, systems, and media for generating and rendering immersive video content |
US10217488B1 (en) * | 2017-12-15 | 2019-02-26 | Snap Inc. | Spherical video editing |
WO2019122493A1 (en) * | 2017-12-19 | 2019-06-27 | Nokia Technologies Oy | Gaze dependent foveated rendering apparatus, method, computer program and system |
US10650791B2 (en) * | 2017-12-28 | 2020-05-12 | Texas Instruments Incorporated | Display system |
US10949947B2 (en) * | 2017-12-29 | 2021-03-16 | Intel Corporation | Foveated image rendering for head-mounted display devices |
US10522113B2 (en) * | 2017-12-29 | 2019-12-31 | Intel Corporation | Light field displays having synergistic data formatting, re-projection, foveation, tile binning and image warping technology |
KR102532972B1 (ko) * | 2017-12-29 | 2023-05-16 | 엘지디스플레이 주식회사 | 표시장치의 보상 방법 및 보상값 저장부를 포함하는 표시장치 |
US10720124B2 (en) * | 2018-01-15 | 2020-07-21 | Microsoft Technology Licensing, Llc | Variable pixel rate display interfaces |
US10694170B2 (en) * | 2018-03-05 | 2020-06-23 | Valve Corporation | Controlling image display via real-time compression in peripheral image regions |
JP2021105749A (ja) * | 2018-03-20 | 2021-07-26 | ソニーグループ株式会社 | 情報処理装置、情報処理方法およびプログラム |
US10713997B2 (en) * | 2018-03-23 | 2020-07-14 | Valve Corporation | Controlling image display via mapping of pixel values to pixels |
US20190302881A1 (en) * | 2018-03-29 | 2019-10-03 | Omnivision Technologies, Inc. | Display device and methods of operation |
KR20230051309A (ko) * | 2018-04-11 | 2023-04-17 | 알카크루즈 인코포레이티드 | 디지털 미디어 시스템 |
US10997951B2 (en) * | 2018-04-13 | 2021-05-04 | Qualcomm Incorporated | Preserving sample data in foveated rendering of graphics content |
US11048082B1 (en) * | 2018-04-13 | 2021-06-29 | Apple Inc. | Wireless bandwidth reduction with display data interleaving |
US10529117B2 (en) * | 2018-04-16 | 2020-01-07 | Facebook Technologies, Llc | Systems and methods for rendering optical distortion effects |
US11435577B2 (en) * | 2018-04-25 | 2022-09-06 | Dhanushan Balachandreswaran | Foveated projection system to produce ocular resolution near-eye displays |
US11836885B2 (en) * | 2018-05-07 | 2023-12-05 | Apple Inc. | Dynamic foveated pipeline |
GB2573543B (en) * | 2018-05-09 | 2021-10-27 | Advanced Risc Mach Ltd | Graphics Processing |
US10580334B2 (en) * | 2018-05-17 | 2020-03-03 | Tectus Corporation | Peripheral femtoprojector optical systems |
JP7341166B2 (ja) * | 2018-05-22 | 2023-09-08 | マジック リープ, インコーポレイテッド | ウェアラブルシステムのためのトランスモード入力融合 |
US11064387B1 (en) * | 2018-05-23 | 2021-07-13 | Apple Inc. | Adaptive wireless transmission schemes |
US11250819B2 (en) * | 2018-05-24 | 2022-02-15 | Lockheed Martin Corporation | Foveated imaging system |
US10453828B1 (en) * | 2018-06-12 | 2019-10-22 | Facebook Technologies, Llc | Foveated rendering display devices and methods of making the same |
US11194389B2 (en) * | 2018-06-21 | 2021-12-07 | Qualcomm Incorporated | Foveated rendering of graphics content using a rendering command and subsequently received eye position data |
US10764547B2 (en) * | 2018-06-28 | 2020-09-01 | Sony Interactive Entertainment Inc. | Foveated near to eye display system using a computational freeform lens via spatial light modulation of a laser projected image onto an emissive film |
EP3815368A1 (en) * | 2018-06-28 | 2021-05-05 | Apple Inc. | Video encoding system |
CN116016955A (zh) * | 2018-06-28 | 2023-04-25 | 苹果公司 | 基于优先级的视频编码和传输 |
KR102541392B1 (ko) * | 2018-06-28 | 2023-06-13 | 애플 인크. | 저 레이턴시 비디오 인코딩 및 송신을 위한 레이트 제어 |
US11962819B2 (en) * | 2018-07-17 | 2024-04-16 | Dolby Laboratories Licensing Corporation | Foviation and HDR |
WO2020141344A2 (en) * | 2018-07-20 | 2020-07-09 | Tobii Ab | Distributed foveated rendering based on user gaze |
US10916040B2 (en) * | 2018-07-24 | 2021-02-09 | Apical Ltd. | Processing image data using different data reduction rates |
US10565689B1 (en) * | 2018-08-07 | 2020-02-18 | Qualcomm Incorporated | Dynamic rendering for foveated rendering |
US11037271B2 (en) * | 2018-08-07 | 2021-06-15 | Qualcomm Incorporated | Dynamic rendering for foveated rendering |
US20200049946A1 (en) * | 2018-08-10 | 2020-02-13 | Varjo Technologies Oy | Display apparatus and method of displaying using gaze prediction and image steering |
US10650568B2 (en) * | 2018-09-13 | 2020-05-12 | Qualcomm Incorporated | In-flight adaptive foveated rendering |
US10775617B2 (en) * | 2018-10-24 | 2020-09-15 | Google Llc | Eye tracked lens for increased screen resolution |
US11195319B1 (en) * | 2018-10-31 | 2021-12-07 | Facebook Technologies, Llc. | Computing ray trajectories for pixels and color sampling using interpolation |
US10950305B1 (en) * | 2018-11-02 | 2021-03-16 | Facebook Technologies, Llc | Selective pixel output |
US11244492B2 (en) * | 2018-11-02 | 2022-02-08 | Facebook Technologies, Llc. | Parallel texture sampling |
US11403810B2 (en) * | 2018-11-02 | 2022-08-02 | Facebook Technologies, Llc. | Display engine for post-rendering processing |
US11138747B1 (en) * | 2018-11-02 | 2021-10-05 | Facebook Technologies, Llc | Interpolation optimizations for a display engine for post-rendering processing |
GB2578769B (en) * | 2018-11-07 | 2022-07-20 | Advanced Risc Mach Ltd | Data processing systems |
US10825131B2 (en) * | 2018-11-13 | 2020-11-03 | Intel Corporation | Circular fisheye camera array rectification |
US10791282B2 (en) * | 2018-12-13 | 2020-09-29 | Fenwick & West LLP | High dynamic range camera assembly with augmented pixels |
KR102166158B1 (ko) * | 2018-12-19 | 2020-10-15 | (주)이머시브캐스트 | 입체 영상 생성 장치, 입체 영상 복원 장치와 이를 포함하는 입체 영상 재생 시스템 |
US11683464B2 (en) * | 2018-12-28 | 2023-06-20 | Canon Kabushiki Kaisha | Electronic device, control method, and non-transitorycomputer readable medium |
US10937217B2 (en) * | 2018-12-28 | 2021-03-02 | Canon Kabushiki Kaisha | Electronic device and control method thereof for generating edited VR content |
US10831266B2 (en) * | 2019-01-03 | 2020-11-10 | International Business Machines Corporation | Personalized adaptation of virtual reality content based on eye strain context |
CN111506188A (zh) * | 2019-01-30 | 2020-08-07 | 托比股份公司 | 用于动态地调整hud的方法和hmd |
EP3693061A1 (en) * | 2019-02-05 | 2020-08-12 | Gensight Biologics | Method for controlling an optogenetic device using filtering and associated devices |
GB2583061B (en) * | 2019-02-12 | 2023-03-15 | Advanced Risc Mach Ltd | Data processing systems |
US11461907B2 (en) * | 2019-02-15 | 2022-10-04 | EchoPixel, Inc. | Glasses-free determination of absolute motion |
US10930244B2 (en) * | 2019-02-19 | 2021-02-23 | Apical Limited | Data processing systems |
WO2020173414A1 (zh) * | 2019-02-25 | 2020-09-03 | 昀光微电子(上海)有限公司 | 一种基于人眼视觉特征的近眼显示方法和装置 |
US10810700B2 (en) * | 2019-03-05 | 2020-10-20 | Aspeed Technology Inc. | Method of adjusting texture coordinates based on control regions in a panoramic image |
US11068052B2 (en) * | 2019-03-15 | 2021-07-20 | Microsoft Technology Licensing, Llc | Holographic image generated based on eye position |
US20200275071A1 (en) * | 2019-03-20 | 2020-08-27 | Anton Zavoyskikh | Electronic visual headset |
US20200341273A1 (en) * | 2019-04-29 | 2020-10-29 | Tecgyver Innovations Oy | Method, System and Apparatus for Augmented Reality |
US20200349751A1 (en) * | 2019-04-30 | 2020-11-05 | Number 9, LLC | Presentation interface and immersion platform |
US11508109B2 (en) * | 2019-06-10 | 2022-11-22 | Qualcomm Incorporated | Methods and apparatus for machine learning rendering |
US10997773B2 (en) * | 2019-06-13 | 2021-05-04 | Facebook Technologies, Llc | Dynamic tiling for foveated rendering |
US11606540B2 (en) * | 2019-07-22 | 2023-03-14 | Maradin Ltd. | System, method and computer program product for laser projection |
US10997954B2 (en) * | 2019-07-24 | 2021-05-04 | Qualcomm Incorporated | Foveated rendering using variable framerates |
US10936059B2 (en) * | 2019-07-26 | 2021-03-02 | Cajal Corporation | Systems and methods for gaze tracking |
CN114175630A (zh) * | 2019-07-28 | 2022-03-11 | 谷歌有限责任公司 | 利用注视点网格渲染沉浸式视频内容的方法、***和介质 |
US11100899B2 (en) * | 2019-08-13 | 2021-08-24 | Facebook Technologies, Llc | Systems and methods for foveated rendering |
WO2021034238A1 (en) * | 2019-08-19 | 2021-02-25 | Telefonaktiebolaget Lm Ericsson (Publ) | Methods and devices for handling media data streams |
US11336887B2 (en) * | 2019-09-03 | 2022-05-17 | Facebook Technologies, Llc | Adaptive shading and reprojection |
US11307655B2 (en) * | 2019-09-19 | 2022-04-19 | Ati Technologies Ulc | Multi-stream foveal display transport |
GB2587230B (en) * | 2019-09-20 | 2022-09-28 | Sony Interactive Entertainment Inc | Graphical rendering method and apparatus |
US11824072B2 (en) * | 2019-09-26 | 2023-11-21 | Apple Inc. | Digital optical cross-talk compensation systems and methods |
US11435821B2 (en) * | 2019-09-26 | 2022-09-06 | Apple Inc. | Gaze-independent dithering for dynamically foveated displays |
US11792420B2 (en) * | 2019-11-04 | 2023-10-17 | Qualcomm Incorporated | Methods and apparatus for foveated compression |
US11537854B2 (en) * | 2019-11-08 | 2022-12-27 | Meta Platforms Technologies, Llc | Pipeline with processor including neural network for rendering artificial reality |
EP3938833A1 (en) * | 2019-11-22 | 2022-01-19 | Apple Inc. | Display systems having multiple light paths for performing foveation |
GB2589325B (en) * | 2019-11-26 | 2021-12-22 | Sony Interactive Entertainment Inc | Image rendering method and apparatus |
US11176637B2 (en) * | 2019-12-03 | 2021-11-16 | Facebook Technologies, Llc | Foveated rendering using eye motion |
WO2021112823A1 (en) * | 2019-12-03 | 2021-06-10 | Discovery Communications, Llc | Non-intrusive 360 view without camera at the viewpoint |
US11132056B2 (en) * | 2019-12-04 | 2021-09-28 | Facebook Technologies, Llc | Predictive eye tracking systems and methods for foveated rendering for electronic displays |
US11073906B1 (en) * | 2020-01-27 | 2021-07-27 | Valve Corporation | Eye tracking system for head-mounted display devices |
KR20210096449A (ko) * | 2020-01-28 | 2021-08-05 | 삼성전자주식회사 | Hud 시스템에서 영상을 재생하는 방법 및 그 hud 시스템 |
US11244660B2 (en) * | 2020-03-13 | 2022-02-08 | Apple Inc. | Recovery from eye-tracking loss in foveated displays |
US20210319533A1 (en) * | 2020-04-08 | 2021-10-14 | Electronics And Telecommunications Research Institute | Apparatus, method and system for generating a foveated image |
US20200294209A1 (en) * | 2020-05-30 | 2020-09-17 | Intel Corporation | Camera feature removal from stereoscopic content |
US11210840B1 (en) * | 2020-08-27 | 2021-12-28 | Aspeed Technology Inc. | Transform method for rendering post-rotation panoramic images |
US20220103907A1 (en) * | 2020-09-25 | 2022-03-31 | Advanced Micro Devices, Inc. | Combined codec buffer management |
GB2600944B (en) * | 2020-11-11 | 2023-03-01 | Sony Interactive Entertainment Inc | Image rendering method and apparatus |
US11616909B2 (en) * | 2020-12-08 | 2023-03-28 | Aspeed Technology Inc. | Method of compensating for color differences between adjacent lens images in a panoramic image |
US20220201271A1 (en) * | 2020-12-23 | 2022-06-23 | Facebook Technologies, Llc | Temporal foveated rendering |
US11748842B2 (en) * | 2021-04-13 | 2023-09-05 | Qualcomm Incorporated | Methods and apparatus for content shifting in foveated rendering |
US11308920B1 (en) * | 2021-05-07 | 2022-04-19 | Facebook Technologies, Llc. | Display artifact reduction |
KR20220160800A (ko) * | 2021-05-28 | 2022-12-06 | 엘지디스플레이 주식회사 | 표시장치와 이를 이용한 개인 몰입형 시스템 및 모바일 단말 시스템 |
US11875473B2 (en) * | 2021-06-15 | 2024-01-16 | Aspeed Technology Inc. | Method for generating projection image with scaling adjustment and seam cut stitching |
US20220400243A1 (en) * | 2021-06-15 | 2022-12-15 | Canon Kabushiki Kaisha | Image processing apparatus and image processing method |
US20220366820A1 (en) * | 2021-08-02 | 2022-11-17 | Meta Platforms Technologies, Llc | Viewport visual effect correction |
US11743600B2 (en) * | 2021-08-12 | 2023-08-29 | Aspeed Technology Inc. | Multiple-processor system for multiple-lens camera and method thereof |
US11568783B1 (en) * | 2021-08-17 | 2023-01-31 | Varjo Technologies Oy | Display drivers, apparatuses and methods for improving image quality in foveated images |
US11568574B1 (en) * | 2021-08-18 | 2023-01-31 | Varjo Technologies Oy | Foveation-based image encoding and decoding |
US11748956B2 (en) * | 2021-10-13 | 2023-09-05 | Synaptics Incorporated | Device and method for foveated rendering |
US11595574B1 (en) * | 2021-12-29 | 2023-02-28 | Aspeed Technology Inc. | Image processing system and method thereof for generating projection images based on inward or outward multiple-lens camera |
US11917011B2 (en) * | 2022-01-10 | 2024-02-27 | Meta Platforms Technologies, Llc | Resilient rendering for augmented-reality devices |
WO2023141460A1 (en) * | 2022-01-21 | 2023-07-27 | Dragonfly Optics Llc | Methods, apparatus, and articles to enhance brain function via presentation of visual effects in far and/or ultra-far peripheral field |
US20230245260A1 (en) * | 2022-02-02 | 2023-08-03 | Meta Platforms Technologies, Llc | Techniques for Reducing Visual Artifacts in Foveated Rendering |
US20230300338A1 (en) * | 2022-03-16 | 2023-09-21 | Apple Inc. | Resolution-based video encoding |
US11955054B1 (en) * | 2022-09-20 | 2024-04-09 | Apple Inc. | Foveated display burn-in statistics and burn-in compensation systems and methods |
US20240095879A1 (en) * | 2022-09-20 | 2024-03-21 | Apple Inc. | Image Generation with Resolution Constraints |
US11735147B1 (en) * | 2022-09-20 | 2023-08-22 | Apple Inc. | Foveated display burn-in statistics and burn-in compensation systems and methods |
-
2019
- 2019-12-10 CN CN201980098968.3A patent/CN114175630A/zh active Pending
- 2019-12-10 EP EP19836258.4A patent/EP4005201A1/en active Pending
- 2019-12-10 JP JP2022505610A patent/JP7392105B2/ja active Active
- 2019-12-10 WO PCT/US2019/065417 patent/WO2021021235A1/en unknown
- 2019-12-10 KR KR1020227006176A patent/KR102582407B1/ko active IP Right Grant
- 2019-12-10 KR KR1020237032225A patent/KR20230144093A/ko active Application Filing
- 2019-12-10 BR BR112022001434A patent/BR112022001434A2/pt unknown
-
2020
- 2020-07-28 US US16/940,717 patent/US11375170B2/en active Active
-
2022
- 2022-06-24 US US17/848,861 patent/US20220321858A1/en active Pending
-
2023
- 2023-11-22 JP JP2023198226A patent/JP2024026151A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005348382A (ja) | 2004-05-06 | 2005-12-15 | Olympus Corp | 頭部装着型表示装置 |
JP2016515246A (ja) | 2013-03-15 | 2016-05-26 | インテル・コーポレーション | 可変解像度デプス表現 |
JP2018511971A (ja) | 2015-02-17 | 2018-04-26 | ネクストブイアール・インコーポレイテッド | 解像度低下画像を生成および使用するならびに/またはそのような画像を再生デバイスまたはコンテンツ配布デバイスに通信するための方法および装置 |
WO2018226676A1 (en) | 2017-06-05 | 2018-12-13 | Google Llc | Smoothly varying foveated rendering |
WO2018227100A1 (en) | 2017-06-09 | 2018-12-13 | Sony Interactive Entertainment Inc. | Optimized shadows and adaptive mesh skinning in a foveated rendering system |
Also Published As
Publication number | Publication date |
---|---|
BR112022001434A2 (pt) | 2022-06-07 |
CN114175630A (zh) | 2022-03-11 |
US20210029340A1 (en) | 2021-01-28 |
EP4005201A1 (en) | 2022-06-01 |
US11375170B2 (en) | 2022-06-28 |
JP2024026151A (ja) | 2024-02-28 |
US20220321858A1 (en) | 2022-10-06 |
KR20220036974A (ko) | 2022-03-23 |
JP2022542510A (ja) | 2022-10-04 |
KR20230144093A (ko) | 2023-10-13 |
WO2021021235A1 (en) | 2021-02-04 |
KR102582407B1 (ko) | 2023-09-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7392105B2 (ja) | 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体 | |
US11523103B2 (en) | Providing a three-dimensional preview of a three-dimensional reality video | |
CN107636534B (zh) | 用于图像处理的方法和*** | |
CN107590771B (zh) | 具有用于在建模3d空间中投影观看的选项的2d视频 | |
US10725297B2 (en) | Method and system for implementing a virtual representation of a physical environment using a virtual reality environment | |
US10681341B2 (en) | Using a sphere to reorient a location of a user in a three-dimensional virtual reality video | |
US10049490B2 (en) | Generating virtual shadows for displayable elements | |
US10957063B2 (en) | Dynamically modifying virtual and augmented reality content to reduce depth conflict between user interface elements and video content | |
EP3646284A1 (en) | Screen sharing for display in vr | |
US11589027B2 (en) | Methods, systems, and media for generating and rendering immersive video content | |
US11032535B2 (en) | Generating a three-dimensional preview of a three-dimensional video | |
EP3676794A1 (en) | Zooming an omnidirectional image or video | |
US9025007B1 (en) | Configuring stereo cameras | |
CN110709839A (zh) | 用于呈现媒体内容预览的方法、***和介质 | |
EP3367158A1 (en) | Rendering content | |
CN111344744A (zh) | 用于展示三维物体的方法以及相关计算机程序产品、数字存储介质和计算机*** | |
JPWO2015156128A1 (ja) | 表示制御装置、表示制御方法、及び、プログラム | |
CN117478931A (zh) | 信息显示方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220325 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220325 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230508 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230803 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231023 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231122 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7392105 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |