JP2017538140A - リアルタイム3d映像多重画面同期化システム - Google Patents
リアルタイム3d映像多重画面同期化システム Download PDFInfo
- Publication number
- JP2017538140A JP2017538140A JP2017519227A JP2017519227A JP2017538140A JP 2017538140 A JP2017538140 A JP 2017538140A JP 2017519227 A JP2017519227 A JP 2017519227A JP 2017519227 A JP2017519227 A JP 2017519227A JP 2017538140 A JP2017538140 A JP 2017538140A
- Authority
- JP
- Japan
- Prior art keywords
- content
- video
- real
- rendering
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/398—Synchronisation thereof; Control thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Digital Computer Display Output (AREA)
- Processing Or Creating Images (AREA)
Abstract
本発明は、リアルタイム3D映像多重画面同期化システムが開示される。このシステムは、3Dコンテンツを再生する運用サーバと、それぞれが3Dコンテンツの一部のみを表示して、全体を表示する多数のディスプレイと、3Dコンテンツで一部のみをレンダリングして、対応するディスプレイに出力する多数のレンダリングクライアントと、多数のレンダリングクライアントが同期化されて、レンダリングできるように制御する同期化統合制御サーバと、を含む。
Description
本発明は、3D映像画面を具現する技術に係り、特に、多数のディスプレイを通じて1つの超大型3D映像画面を具現する技術に関する。
マルチディスプレイシステムがよく知られている。マルチディスプレイシステムは、1つの映像を多数のディスプレイに分割して表示するシステムである。特許文献1には、このようなマルチディスプレイシステムについて開示されている。
本発明は、3D映像をリアルタイムで複数個のレンダリングクライアントを用いて表示する1つの超大型映像画面を具現するシステムを提供することである。
本発明の一態様によるリアルタイム3D映像多重画面同期化システムは、3Dコンテンツを再生する運用サーバと、それぞれが3Dコンテンツの一部のみを表示して、全体を表示する多数のディスプレイと、3Dコンテンツで一部のみをレンダリングして、対応するディスプレイに出力する多数のレンダリングクライアントと、多数のレンダリングクライアントが同期化されて、レンダリングできるように制御する同期化統合制御サーバと、を含む。
本発明の一態様によれば、リアルタイム3D映像多重画面同期化システムは、多数のレンダリングクライアントと連結されて、レンダリング結果を画面の曲率や立体的な形状に合わせて加工する映像加工サーバをさらに含みうる。
本発明の一態様によれば、リアルタイム3D映像多重画面同期化システムは、運用サーバと連結され、観覧者を感知して、3Dコンテンツを観覧者に反応させるための多数のセンサークライアントをさらに含みうる。
本発明の一態様によれば、多数のレンダリングクライアントは、運用サーバからディスプレイに表示された固定背景映像に動く3D客体のみを受信して、レンダリングした後、背景映像に重畳表示されるように出力することができる。
開示されたシステムは、3D映像をリアルタイムで複数個のレンダリングクライアントを用いて表示する1つの超大型映像画面を具現する。全体画面に対する分割レンダリングを通じて、早い画面処理が可能となり、また、全体画面の一部に対してのみ変化を与える場合にも効果的である。また、分割レンダリングを通じて映像を出力しても、同期化統合制御を通じて同じタイミングに全体映像を表示することを保証することができる。
前述した、そして、追加的な本発明の態様は、添付した図面を参照して説明される望ましい実施形態を通じてより明らかになる。以下、本発明を、このような実施形態を通じて、当業者が容易に理解し、再現できるように詳しく説明する。
図1は、一実施形態によるリアルタイム3D映像多重画面同期化システムのブロック図である。リアルタイム3D映像多重画面同期化システムを成す構成は、ネットワークで連結される。ディスプレイ100は、1つの大型ディスプレイを構成する。すなわち、ディスプレイ100が多様に配列されて、1つの3Dコンテンツを表示する大型画面を構成するものである。20個以上のディスプレイ100が配列され、多様な形態で配列されうる。また、平面状に配列されることだけではなく、多様な形態で配列されうる。例えば、ディスプレイ100は、平面、曲面、傾斜面、天井などに多様な角度で配されて、1つの大型スクリーンを構成することができる。そして、ディスプレイ100は、平面ディスプレイでもあり得るが、多様な形態の配列のために、フレキシブル(flexible)ディスプレイでもあり得る。このようなディスプレイ100は、非常に広い地域に配列されて、観覧者をして、その地域を歩き回りながら観覧可能にする。すなわち、図1に示されたシステムは、一種のテーマパークを具現するためのシステムであり得る。
運用サーバ200は、3Dコンテンツを再生し、この再生コンテンツを遠距離に離れたディスプレイ100で表示させる。それぞれのディスプレイ100は、全体3Dコンテンツのうちから定められた一部のみを表示し、これにより、1つの大きな3Dコンテンツ画面が生成される。3Dコンテンツは、ゲームコンテンツであり、観覧者に対して互いに活動的(interactive)に反応するコンテンツであり得る。このような3Dコンテンツは、三国志戦闘のように非常に膨大な地域にわたって多くのキャラクターが登場するマルチメディアデータを含んでいる。
レンダリングクライアント300は、運用サーバ200によって制御され、多数で構成されるが、ディスプレイ100と一対一対応して構成することができる。それぞれのレンダリングクライアント300は、運用サーバ200から3Dコンテンツのうちから一部データのみ、すなわち、対応するディスプレイ100に表示する部分のみをスイッチハブ400を通じて受信し、該受信された一部データをレンダリングして、対応するディスプレイ100に出力する。すなわち、レンダリングクライアント300のそれぞれは、1つの大きな映像を作るために、自身が担当する領域を割り当てられ、リアルタイムで映像をレンダリングする役割を行う。
同期化統合制御サーバ500は、レンダリングクライアント300と連結され、レンダリングクライアント300が、それぞれ一部データをレンダリングする時に同期化されて、レンダリングできるように制御する。同期化統合制御サーバ500の同期化制御によって、レンダリングクライアント300は、互いに同期化されて、一部データをレンダリングして、対応するディスプレイ100に出力する。これにより、多様な画面が同じタイミングに映像を出力する。一実施形態において、同期化統合制御サーバ500は、運用サーバ200と単一で構成されるサーバであり得る。すなわち、運用サーバ200に同期化制御機能が含まれて具現されるものである。
追加的な態様によれば、リアルタイム3D映像多重画面同期化システムは、映像加工サーバ600をさらに含みうる。映像加工サーバ600は、レンダリングクライアント300と連結される。映像加工サーバ600は、レンダリングクライアント300と連動してレンダリングクライアント300のレンダリング結果を対応するディスプレイ100の画面曲率や立体的な形状に合わせて加工する。フレキシブルディスプレイの場合は、単に平面ではなく、曲がる属性上、画面曲率や立体的な形状に合わせて映像が表示されなければならない。したがって、レンダリングクライアント300は、同期化された映像を映像加工サーバ600と連動して表示する。
追加的な態様によれば、リアルタイム3D映像多重画面同期化システムは、多数のセンサークライアント700をさらに含む。センサークライアント700は、運用サーバ200と連結されるが、示したように、スイッチハブを通じて連結されうる。センサークライアント700は、3Dコンテンツを観覧者に反応させるために構成されたものであって、観覧者の存在を感知し、さらに観覧者のジェスチャを感知することができる装置である。ユーザのジェスチャの感知のために、センサークライアント700は、ジャイロセンサーやカメラなどを含みうる。センサークライアント700の感知イベントは、運用サーバ200に伝達され、運用サーバ200は、感知イベントによって3Dコンテンツを反応させる。敷衍説明すれば、運用サーバ200は、イベント命令を行うが、例えば、雪が降るか、カラスが飛び去るか、夜昼が転換されるように、3Dコンテンツの内容をインタラクティブに変化させるものである。運用サーバ200は、全体画面のうち、変化が必要な領域の3Dデータのみを該当するレンダリングクライアント300に伝達し、レンダリングクライアント300は、それを受信してレンダリングし、対応するディスプレイ100に出力する。
一方、3Dコンテンツは、背景映像と背景映像上で動く3Dキャラクター(3D客体)からなりうる。ここで、背景映像は、固定されたものであり得る。この場合、レンダリングクライアント300は、固定された背景映像に動く3Dキャラクター部分に該当する3Dデータのみを運用サーバ200から受信されて、レンダリングした後、原背景映像に重畳表示することができる。また、センサークライアント700の感知イベントの発生時にも、変化を与えなければならない3Dデータのみを運用サーバ200から受信して、レンダリングした後、原背景映像に重畳表示することもできる。
以上、本発明について、その望ましい実施形態を中心に説明した。当業者ならば、本発明が、本発明の本質的な特性から外れない範囲で変形された形態として具現可能であるということを理解できるであろう。したがって、開示された実施形態は、限定的な観点ではなく、説明的な観点で考慮されなければならない。本発明の範囲は、前述した説明ではなく、特許請求の範囲に示されており、それと同等な範囲内にあるあらゆる差異点は、本発明に含まれたものと解釈しなければならない。
本発明は、リアルタイム3D映像多重画面同期化システム関連の技術分野に適用可能である。
Claims (4)
- 3Dコンテンツを再生する運用サーバと、
それぞれが3Dコンテンツの一部のみを表示して、全体を表示する多数のディスプレイと、
3Dコンテンツで一部のみをレンダリングして、対応するディスプレイに出力する多数のレンダリングクライアントと、
多数のレンダリングクライアントが同期化されて、レンダリングできるように制御する同期化統合制御サーバと、
を含むリアルタイム3D映像多重画面同期化システム。 - 多数のレンダリングクライアントと連結されて、レンダリング結果を画面の曲率や立体的な形状に合わせて加工する映像加工サーバをさらに含む請求項1に記載のリアルタイム3D映像多重画面同期化システム。
- 運用サーバと連結され、観覧者を感知して、3Dコンテンツを観覧者に反応させるための多数のセンサークライアントをさらに含む請求項1に記載のリアルタイム3D映像多重画面同期化システム。
- 多数のレンダリングクライアントは、運用サーバからディスプレイに表示された固定背景映像に動く3D客体のみを受信して、レンダリングした後、背景映像に重畳表示されるように出力する請求項1に記載のリアルタイム3D映像多重画面同期化システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2014-0136080 | 2014-10-08 | ||
KR1020140136080A KR101609368B1 (ko) | 2014-10-08 | 2014-10-08 | 실시간 3d 영상 다중 화면 동기화 시스템 |
PCT/KR2015/009691 WO2016056763A1 (ko) | 2014-10-08 | 2015-09-16 | 실시간 3d 영상 다중 화면 동기화 시스템 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017538140A true JP2017538140A (ja) | 2017-12-21 |
Family
ID=55653332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017519227A Pending JP2017538140A (ja) | 2014-10-08 | 2015-09-16 | リアルタイム3d映像多重画面同期化システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20170301128A1 (ja) |
JP (1) | JP2017538140A (ja) |
KR (1) | KR101609368B1 (ja) |
CN (1) | CN106796735A (ja) |
WO (1) | WO2016056763A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021122452A (ja) * | 2020-02-04 | 2021-08-30 | 株式会社コナミデジタルエンタテインメント | ゲームプレイシステム |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20180066702A (ko) * | 2016-12-09 | 2018-06-19 | 주식회사 비주얼리액터 | 실시간 병렬 렌더링 기반의 인터랙티브 고품질 영상 시스템 |
CN110913200B (zh) * | 2019-10-29 | 2021-09-28 | 北京邮电大学 | 一种多屏拼接同步的多视点图像生成***及方法 |
CN113099212A (zh) * | 2021-06-08 | 2021-07-09 | 卡莱特云科技股份有限公司 | 3d显示方法、装置、计算机设备和存储介质 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001338310A (ja) * | 2000-05-25 | 2001-12-07 | Mitsubishi Electric Corp | マルチディスプレイ三次元グラフィックス表示装置 |
JP2002232912A (ja) * | 2001-02-06 | 2002-08-16 | Kansai Tlo Kk | 画像配信装置、プログラム及び記録媒体 |
JP2003005947A (ja) * | 2001-06-25 | 2003-01-10 | Toshiba Corp | サーバ装置、携帯端末、コンテンツ配信方法、コンテンツ受信方法及びプログラム |
JP2003091272A (ja) * | 2001-09-18 | 2003-03-28 | Cybernetic Art:Kk | 動体感知画像表示システム及び動体感知画像表示方法 |
JP2003337955A (ja) * | 2002-05-20 | 2003-11-28 | Daikin Ind Ltd | データ送受信システムおよび方法、データ送信装置および方法、データ受信装置および方法、並びにプログラム |
JP2005301131A (ja) * | 2004-04-15 | 2005-10-27 | Sony Corp | サーバ装置、表示装置及び表示方法 |
KR20100003652A (ko) * | 2008-07-01 | 2010-01-11 | 삼성전자주식회사 | 멀티 디스플레이 시스템 및 멀티 디스플레이 방법 |
JP2010145442A (ja) * | 2008-12-16 | 2010-07-01 | Panasonic Corp | 画像処理装置 |
KR20120092921A (ko) * | 2011-02-14 | 2012-08-22 | 김영대 | 가상 강의실 강의 방법 및 장치 |
JP2012531668A (ja) * | 2009-06-26 | 2012-12-10 | 株式会社ソニー・コンピュータエンタテインメント | 複数の表示装置を有するネットワーク接続されたコンピュータグラフィックスレンダリングシステム |
JP2013106158A (ja) * | 2011-11-11 | 2013-05-30 | Sharp Corp | 電子装置、電子装置の制御方法、付加機能割当装置、付加機能割当装置の制御方法、電子装置システム、プログラム、コンピュータ読み取り可能な記録媒体 |
JP2014178659A (ja) * | 2012-07-09 | 2014-09-25 | Ricoh Co Ltd | 画面制御システム、画面制御装置、情報処理端末、プログラム及び記録媒体 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6803912B1 (en) * | 2001-08-02 | 2004-10-12 | Mark Resources, Llc | Real time three-dimensional multiple display imaging system |
JP3584229B2 (ja) | 2001-09-28 | 2004-11-04 | キヤノン株式会社 | 映像体験システムおよび情報処理方法 |
US20130318479A1 (en) * | 2012-05-24 | 2013-11-28 | Autodesk, Inc. | Stereoscopic user interface, view, and object manipulation |
KR101467935B1 (ko) * | 2007-12-11 | 2014-12-03 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어방법 |
KR101466122B1 (ko) * | 2008-10-21 | 2014-11-27 | 삼성전자 주식회사 | 디스플레이장치, 멀티디스플레이시스템 및 그 제어방법 |
KR20140054518A (ko) * | 2012-10-29 | 2014-05-09 | 삼성전자주식회사 | 영상처리장치 및 그 제어방법 |
-
2014
- 2014-10-08 KR KR1020140136080A patent/KR101609368B1/ko active IP Right Grant
-
2015
- 2015-09-16 WO PCT/KR2015/009691 patent/WO2016056763A1/ko active Application Filing
- 2015-09-16 JP JP2017519227A patent/JP2017538140A/ja active Pending
- 2015-09-16 US US15/516,612 patent/US20170301128A1/en not_active Abandoned
- 2015-09-16 CN CN201580054783.4A patent/CN106796735A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001338310A (ja) * | 2000-05-25 | 2001-12-07 | Mitsubishi Electric Corp | マルチディスプレイ三次元グラフィックス表示装置 |
JP2002232912A (ja) * | 2001-02-06 | 2002-08-16 | Kansai Tlo Kk | 画像配信装置、プログラム及び記録媒体 |
JP2003005947A (ja) * | 2001-06-25 | 2003-01-10 | Toshiba Corp | サーバ装置、携帯端末、コンテンツ配信方法、コンテンツ受信方法及びプログラム |
JP2003091272A (ja) * | 2001-09-18 | 2003-03-28 | Cybernetic Art:Kk | 動体感知画像表示システム及び動体感知画像表示方法 |
JP2003337955A (ja) * | 2002-05-20 | 2003-11-28 | Daikin Ind Ltd | データ送受信システムおよび方法、データ送信装置および方法、データ受信装置および方法、並びにプログラム |
JP2005301131A (ja) * | 2004-04-15 | 2005-10-27 | Sony Corp | サーバ装置、表示装置及び表示方法 |
KR20100003652A (ko) * | 2008-07-01 | 2010-01-11 | 삼성전자주식회사 | 멀티 디스플레이 시스템 및 멀티 디스플레이 방법 |
JP2010145442A (ja) * | 2008-12-16 | 2010-07-01 | Panasonic Corp | 画像処理装置 |
JP2012531668A (ja) * | 2009-06-26 | 2012-12-10 | 株式会社ソニー・コンピュータエンタテインメント | 複数の表示装置を有するネットワーク接続されたコンピュータグラフィックスレンダリングシステム |
KR20120092921A (ko) * | 2011-02-14 | 2012-08-22 | 김영대 | 가상 강의실 강의 방법 및 장치 |
JP2013106158A (ja) * | 2011-11-11 | 2013-05-30 | Sharp Corp | 電子装置、電子装置の制御方法、付加機能割当装置、付加機能割当装置の制御方法、電子装置システム、プログラム、コンピュータ読み取り可能な記録媒体 |
JP2014178659A (ja) * | 2012-07-09 | 2014-09-25 | Ricoh Co Ltd | 画面制御システム、画面制御装置、情報処理端末、プログラム及び記録媒体 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021122452A (ja) * | 2020-02-04 | 2021-08-30 | 株式会社コナミデジタルエンタテインメント | ゲームプレイシステム |
Also Published As
Publication number | Publication date |
---|---|
KR101609368B1 (ko) | 2016-04-05 |
US20170301128A1 (en) | 2017-10-19 |
WO2016056763A1 (ko) | 2016-04-14 |
CN106796735A (zh) | 2017-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10078917B1 (en) | Augmented reality simulation | |
RU2621644C2 (ru) | Мир массового одновременного удаленного цифрового присутствия | |
US10547902B2 (en) | Information processing apparatus and method, display control apparatus and method, reproducing apparatus and method, and information processing system | |
WO2018165041A8 (en) | MIXED REALITY VISUALIZER SYSTEM AND METHOD | |
JP6845111B2 (ja) | 情報処理装置および画像表示方法 | |
JP2017097122A (ja) | 情報処理装置および画像生成方法 | |
JP6084728B1 (ja) | 表示制御方法及び当該表示制御方法をコンピュータに実行させるためのプログラム | |
JPWO2019234879A1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
US11094107B2 (en) | Information processing device and image generation method | |
JP2017538140A (ja) | リアルタイム3d映像多重画面同期化システム | |
US11589027B2 (en) | Methods, systems, and media for generating and rendering immersive video content | |
WO2020084951A1 (ja) | 画像処理装置および画像処理方法 | |
US20200110262A1 (en) | Dynamic objects in virtual reality environments | |
JP2021034885A (ja) | 画像生成装置、画像表示装置および画像処理方法 | |
JP6963399B2 (ja) | プログラム、記録媒体、画像生成装置、画像生成方法 | |
US10803652B2 (en) | Image generating apparatus, image generating method, and program for displaying fixation point objects in a virtual space | |
WO2018178229A1 (en) | Dynamic objects in virtual reality environments | |
JP2007004427A (ja) | 画像表示システムおよび画像表示装置ならびにプログラム | |
US20220030210A1 (en) | Information processing system, information processing method, and computer program | |
US11475637B2 (en) | Multi-instance multi-user augmented reality environment | |
KR20180000012A (ko) | 가상현실기술을 활용한 움직이는 미술작품 | |
JP2015170232A (ja) | 情報処理装置、その制御方法、及びプログラム | |
CN111149356A (zh) | 用于投影沉浸式视听内容的方法 | |
KR101315398B1 (ko) | 3차원 증강 현실 표시 장치 및 방법 | |
CN206023911U (zh) | 虚拟现实*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180130 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180420 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20181002 |