JP2017538140A - リアルタイム3d映像多重画面同期化システム - Google Patents

リアルタイム3d映像多重画面同期化システム Download PDF

Info

Publication number
JP2017538140A
JP2017538140A JP2017519227A JP2017519227A JP2017538140A JP 2017538140 A JP2017538140 A JP 2017538140A JP 2017519227 A JP2017519227 A JP 2017519227A JP 2017519227 A JP2017519227 A JP 2017519227A JP 2017538140 A JP2017538140 A JP 2017538140A
Authority
JP
Japan
Prior art keywords
content
video
real
rendering
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017519227A
Other languages
English (en)
Inventor
チョ,ウン−レイ
キム,グン−スー
キム,ス−ジン
Original Assignee
ザ マッキス カンパニー インコーポレイテッド
ザ マッキス カンパニー インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ザ マッキス カンパニー インコーポレイテッド, ザ マッキス カンパニー インコーポレイテッド filed Critical ザ マッキス カンパニー インコーポレイテッド
Publication of JP2017538140A publication Critical patent/JP2017538140A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/398Synchronisation thereof; Control thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Digital Computer Display Output (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本発明は、リアルタイム3D映像多重画面同期化システムが開示される。このシステムは、3Dコンテンツを再生する運用サーバと、それぞれが3Dコンテンツの一部のみを表示して、全体を表示する多数のディスプレイと、3Dコンテンツで一部のみをレンダリングして、対応するディスプレイに出力する多数のレンダリングクライアントと、多数のレンダリングクライアントが同期化されて、レンダリングできるように制御する同期化統合制御サーバと、を含む。

Description

本発明は、3D映像画面を具現する技術に係り、特に、多数のディスプレイを通じて1つの超大型3D映像画面を具現する技術に関する。
マルチディスプレイシステムがよく知られている。マルチディスプレイシステムは、1つの映像を多数のディスプレイに分割して表示するシステムである。特許文献1には、このようなマルチディスプレイシステムについて開示されている。
韓国公開特許第10−2010−0003652号公報
本発明は、3D映像をリアルタイムで複数個のレンダリングクライアントを用いて表示する1つの超大型映像画面を具現するシステムを提供することである。
本発明の一態様によるリアルタイム3D映像多重画面同期化システムは、3Dコンテンツを再生する運用サーバと、それぞれが3Dコンテンツの一部のみを表示して、全体を表示する多数のディスプレイと、3Dコンテンツで一部のみをレンダリングして、対応するディスプレイに出力する多数のレンダリングクライアントと、多数のレンダリングクライアントが同期化されて、レンダリングできるように制御する同期化統合制御サーバと、を含む。
本発明の一態様によれば、リアルタイム3D映像多重画面同期化システムは、多数のレンダリングクライアントと連結されて、レンダリング結果を画面の曲率や立体的な形状に合わせて加工する映像加工サーバをさらに含みうる。
本発明の一態様によれば、リアルタイム3D映像多重画面同期化システムは、運用サーバと連結され、観覧者を感知して、3Dコンテンツを観覧者に反応させるための多数のセンサークライアントをさらに含みうる。
本発明の一態様によれば、多数のレンダリングクライアントは、運用サーバからディスプレイに表示された固定背景映像に動く3D客体のみを受信して、レンダリングした後、背景映像に重畳表示されるように出力することができる。
開示されたシステムは、3D映像をリアルタイムで複数個のレンダリングクライアントを用いて表示する1つの超大型映像画面を具現する。全体画面に対する分割レンダリングを通じて、早い画面処理が可能となり、また、全体画面の一部に対してのみ変化を与える場合にも効果的である。また、分割レンダリングを通じて映像を出力しても、同期化統合制御を通じて同じタイミングに全体映像を表示することを保証することができる。
一実施形態によるリアルタイム3D映像多重画面同期化システムのブロック図である。
前述した、そして、追加的な本発明の態様は、添付した図面を参照して説明される望ましい実施形態を通じてより明らかになる。以下、本発明を、このような実施形態を通じて、当業者が容易に理解し、再現できるように詳しく説明する。
図1は、一実施形態によるリアルタイム3D映像多重画面同期化システムのブロック図である。リアルタイム3D映像多重画面同期化システムを成す構成は、ネットワークで連結される。ディスプレイ100は、1つの大型ディスプレイを構成する。すなわち、ディスプレイ100が多様に配列されて、1つの3Dコンテンツを表示する大型画面を構成するものである。20個以上のディスプレイ100が配列され、多様な形態で配列されうる。また、平面状に配列されることだけではなく、多様な形態で配列されうる。例えば、ディスプレイ100は、平面、曲面、傾斜面、天井などに多様な角度で配されて、1つの大型スクリーンを構成することができる。そして、ディスプレイ100は、平面ディスプレイでもあり得るが、多様な形態の配列のために、フレキシブル(flexible)ディスプレイでもあり得る。このようなディスプレイ100は、非常に広い地域に配列されて、観覧者をして、その地域を歩き回りながら観覧可能にする。すなわち、図1に示されたシステムは、一種のテーマパークを具現するためのシステムであり得る。
運用サーバ200は、3Dコンテンツを再生し、この再生コンテンツを遠距離に離れたディスプレイ100で表示させる。それぞれのディスプレイ100は、全体3Dコンテンツのうちから定められた一部のみを表示し、これにより、1つの大きな3Dコンテンツ画面が生成される。3Dコンテンツは、ゲームコンテンツであり、観覧者に対して互いに活動的(interactive)に反応するコンテンツであり得る。このような3Dコンテンツは、三国志戦闘のように非常に膨大な地域にわたって多くのキャラクターが登場するマルチメディアデータを含んでいる。
レンダリングクライアント300は、運用サーバ200によって制御され、多数で構成されるが、ディスプレイ100と一対一対応して構成することができる。それぞれのレンダリングクライアント300は、運用サーバ200から3Dコンテンツのうちから一部データのみ、すなわち、対応するディスプレイ100に表示する部分のみをスイッチハブ400を通じて受信し、該受信された一部データをレンダリングして、対応するディスプレイ100に出力する。すなわち、レンダリングクライアント300のそれぞれは、1つの大きな映像を作るために、自身が担当する領域を割り当てられ、リアルタイムで映像をレンダリングする役割を行う。
同期化統合制御サーバ500は、レンダリングクライアント300と連結され、レンダリングクライアント300が、それぞれ一部データをレンダリングする時に同期化されて、レンダリングできるように制御する。同期化統合制御サーバ500の同期化制御によって、レンダリングクライアント300は、互いに同期化されて、一部データをレンダリングして、対応するディスプレイ100に出力する。これにより、多様な画面が同じタイミングに映像を出力する。一実施形態において、同期化統合制御サーバ500は、運用サーバ200と単一で構成されるサーバであり得る。すなわち、運用サーバ200に同期化制御機能が含まれて具現されるものである。
追加的な態様によれば、リアルタイム3D映像多重画面同期化システムは、映像加工サーバ600をさらに含みうる。映像加工サーバ600は、レンダリングクライアント300と連結される。映像加工サーバ600は、レンダリングクライアント300と連動してレンダリングクライアント300のレンダリング結果を対応するディスプレイ100の画面曲率や立体的な形状に合わせて加工する。フレキシブルディスプレイの場合は、単に平面ではなく、曲がる属性上、画面曲率や立体的な形状に合わせて映像が表示されなければならない。したがって、レンダリングクライアント300は、同期化された映像を映像加工サーバ600と連動して表示する。
追加的な態様によれば、リアルタイム3D映像多重画面同期化システムは、多数のセンサークライアント700をさらに含む。センサークライアント700は、運用サーバ200と連結されるが、示したように、スイッチハブを通じて連結されうる。センサークライアント700は、3Dコンテンツを観覧者に反応させるために構成されたものであって、観覧者の存在を感知し、さらに観覧者のジェスチャを感知することができる装置である。ユーザのジェスチャの感知のために、センサークライアント700は、ジャイロセンサーやカメラなどを含みうる。センサークライアント700の感知イベントは、運用サーバ200に伝達され、運用サーバ200は、感知イベントによって3Dコンテンツを反応させる。敷衍説明すれば、運用サーバ200は、イベント命令を行うが、例えば、雪が降るか、カラスが飛び去るか、夜昼が転換されるように、3Dコンテンツの内容をインタラクティブに変化させるものである。運用サーバ200は、全体画面のうち、変化が必要な領域の3Dデータのみを該当するレンダリングクライアント300に伝達し、レンダリングクライアント300は、それを受信してレンダリングし、対応するディスプレイ100に出力する。
一方、3Dコンテンツは、背景映像と背景映像上で動く3Dキャラクター(3D客体)からなりうる。ここで、背景映像は、固定されたものであり得る。この場合、レンダリングクライアント300は、固定された背景映像に動く3Dキャラクター部分に該当する3Dデータのみを運用サーバ200から受信されて、レンダリングした後、原背景映像に重畳表示することができる。また、センサークライアント700の感知イベントの発生時にも、変化を与えなければならない3Dデータのみを運用サーバ200から受信して、レンダリングした後、原背景映像に重畳表示することもできる。
以上、本発明について、その望ましい実施形態を中心に説明した。当業者ならば、本発明が、本発明の本質的な特性から外れない範囲で変形された形態として具現可能であるということを理解できるであろう。したがって、開示された実施形態は、限定的な観点ではなく、説明的な観点で考慮されなければならない。本発明の範囲は、前述した説明ではなく、特許請求の範囲に示されており、それと同等な範囲内にあるあらゆる差異点は、本発明に含まれたものと解釈しなければならない。
本発明は、リアルタイム3D映像多重画面同期化システム関連の技術分野に適用可能である。

Claims (4)

  1. 3Dコンテンツを再生する運用サーバと、
    それぞれが3Dコンテンツの一部のみを表示して、全体を表示する多数のディスプレイと、
    3Dコンテンツで一部のみをレンダリングして、対応するディスプレイに出力する多数のレンダリングクライアントと、
    多数のレンダリングクライアントが同期化されて、レンダリングできるように制御する同期化統合制御サーバと、
    を含むリアルタイム3D映像多重画面同期化システム。
  2. 多数のレンダリングクライアントと連結されて、レンダリング結果を画面の曲率や立体的な形状に合わせて加工する映像加工サーバをさらに含む請求項1に記載のリアルタイム3D映像多重画面同期化システム。
  3. 運用サーバと連結され、観覧者を感知して、3Dコンテンツを観覧者に反応させるための多数のセンサークライアントをさらに含む請求項1に記載のリアルタイム3D映像多重画面同期化システム。
  4. 多数のレンダリングクライアントは、運用サーバからディスプレイに表示された固定背景映像に動く3D客体のみを受信して、レンダリングした後、背景映像に重畳表示されるように出力する請求項1に記載のリアルタイム3D映像多重画面同期化システム。
JP2017519227A 2014-10-08 2015-09-16 リアルタイム3d映像多重画面同期化システム Pending JP2017538140A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2014-0136080 2014-10-08
KR1020140136080A KR101609368B1 (ko) 2014-10-08 2014-10-08 실시간 3d 영상 다중 화면 동기화 시스템
PCT/KR2015/009691 WO2016056763A1 (ko) 2014-10-08 2015-09-16 실시간 3d 영상 다중 화면 동기화 시스템

Publications (1)

Publication Number Publication Date
JP2017538140A true JP2017538140A (ja) 2017-12-21

Family

ID=55653332

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017519227A Pending JP2017538140A (ja) 2014-10-08 2015-09-16 リアルタイム3d映像多重画面同期化システム

Country Status (5)

Country Link
US (1) US20170301128A1 (ja)
JP (1) JP2017538140A (ja)
KR (1) KR101609368B1 (ja)
CN (1) CN106796735A (ja)
WO (1) WO2016056763A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021122452A (ja) * 2020-02-04 2021-08-30 株式会社コナミデジタルエンタテインメント ゲームプレイシステム

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180066702A (ko) * 2016-12-09 2018-06-19 주식회사 비주얼리액터 실시간 병렬 렌더링 기반의 인터랙티브 고품질 영상 시스템
CN110913200B (zh) * 2019-10-29 2021-09-28 北京邮电大学 一种多屏拼接同步的多视点图像生成***及方法
CN113099212A (zh) * 2021-06-08 2021-07-09 卡莱特云科技股份有限公司 3d显示方法、装置、计算机设备和存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001338310A (ja) * 2000-05-25 2001-12-07 Mitsubishi Electric Corp マルチディスプレイ三次元グラフィックス表示装置
JP2002232912A (ja) * 2001-02-06 2002-08-16 Kansai Tlo Kk 画像配信装置、プログラム及び記録媒体
JP2003005947A (ja) * 2001-06-25 2003-01-10 Toshiba Corp サーバ装置、携帯端末、コンテンツ配信方法、コンテンツ受信方法及びプログラム
JP2003091272A (ja) * 2001-09-18 2003-03-28 Cybernetic Art:Kk 動体感知画像表示システム及び動体感知画像表示方法
JP2003337955A (ja) * 2002-05-20 2003-11-28 Daikin Ind Ltd データ送受信システムおよび方法、データ送信装置および方法、データ受信装置および方法、並びにプログラム
JP2005301131A (ja) * 2004-04-15 2005-10-27 Sony Corp サーバ装置、表示装置及び表示方法
KR20100003652A (ko) * 2008-07-01 2010-01-11 삼성전자주식회사 멀티 디스플레이 시스템 및 멀티 디스플레이 방법
JP2010145442A (ja) * 2008-12-16 2010-07-01 Panasonic Corp 画像処理装置
KR20120092921A (ko) * 2011-02-14 2012-08-22 김영대 가상 강의실 강의 방법 및 장치
JP2012531668A (ja) * 2009-06-26 2012-12-10 株式会社ソニー・コンピュータエンタテインメント 複数の表示装置を有するネットワーク接続されたコンピュータグラフィックスレンダリングシステム
JP2013106158A (ja) * 2011-11-11 2013-05-30 Sharp Corp 電子装置、電子装置の制御方法、付加機能割当装置、付加機能割当装置の制御方法、電子装置システム、プログラム、コンピュータ読み取り可能な記録媒体
JP2014178659A (ja) * 2012-07-09 2014-09-25 Ricoh Co Ltd 画面制御システム、画面制御装置、情報処理端末、プログラム及び記録媒体

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6803912B1 (en) * 2001-08-02 2004-10-12 Mark Resources, Llc Real time three-dimensional multiple display imaging system
JP3584229B2 (ja) 2001-09-28 2004-11-04 キヤノン株式会社 映像体験システムおよび情報処理方法
US20130318479A1 (en) * 2012-05-24 2013-11-28 Autodesk, Inc. Stereoscopic user interface, view, and object manipulation
KR101467935B1 (ko) * 2007-12-11 2014-12-03 삼성전자주식회사 디스플레이 장치 및 그 제어방법
KR101466122B1 (ko) * 2008-10-21 2014-11-27 삼성전자 주식회사 디스플레이장치, 멀티디스플레이시스템 및 그 제어방법
KR20140054518A (ko) * 2012-10-29 2014-05-09 삼성전자주식회사 영상처리장치 및 그 제어방법

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001338310A (ja) * 2000-05-25 2001-12-07 Mitsubishi Electric Corp マルチディスプレイ三次元グラフィックス表示装置
JP2002232912A (ja) * 2001-02-06 2002-08-16 Kansai Tlo Kk 画像配信装置、プログラム及び記録媒体
JP2003005947A (ja) * 2001-06-25 2003-01-10 Toshiba Corp サーバ装置、携帯端末、コンテンツ配信方法、コンテンツ受信方法及びプログラム
JP2003091272A (ja) * 2001-09-18 2003-03-28 Cybernetic Art:Kk 動体感知画像表示システム及び動体感知画像表示方法
JP2003337955A (ja) * 2002-05-20 2003-11-28 Daikin Ind Ltd データ送受信システムおよび方法、データ送信装置および方法、データ受信装置および方法、並びにプログラム
JP2005301131A (ja) * 2004-04-15 2005-10-27 Sony Corp サーバ装置、表示装置及び表示方法
KR20100003652A (ko) * 2008-07-01 2010-01-11 삼성전자주식회사 멀티 디스플레이 시스템 및 멀티 디스플레이 방법
JP2010145442A (ja) * 2008-12-16 2010-07-01 Panasonic Corp 画像処理装置
JP2012531668A (ja) * 2009-06-26 2012-12-10 株式会社ソニー・コンピュータエンタテインメント 複数の表示装置を有するネットワーク接続されたコンピュータグラフィックスレンダリングシステム
KR20120092921A (ko) * 2011-02-14 2012-08-22 김영대 가상 강의실 강의 방법 및 장치
JP2013106158A (ja) * 2011-11-11 2013-05-30 Sharp Corp 電子装置、電子装置の制御方法、付加機能割当装置、付加機能割当装置の制御方法、電子装置システム、プログラム、コンピュータ読み取り可能な記録媒体
JP2014178659A (ja) * 2012-07-09 2014-09-25 Ricoh Co Ltd 画面制御システム、画面制御装置、情報処理端末、プログラム及び記録媒体

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021122452A (ja) * 2020-02-04 2021-08-30 株式会社コナミデジタルエンタテインメント ゲームプレイシステム

Also Published As

Publication number Publication date
KR101609368B1 (ko) 2016-04-05
US20170301128A1 (en) 2017-10-19
WO2016056763A1 (ko) 2016-04-14
CN106796735A (zh) 2017-05-31

Similar Documents

Publication Publication Date Title
US10078917B1 (en) Augmented reality simulation
RU2621644C2 (ru) Мир массового одновременного удаленного цифрового присутствия
US10547902B2 (en) Information processing apparatus and method, display control apparatus and method, reproducing apparatus and method, and information processing system
WO2018165041A8 (en) MIXED REALITY VISUALIZER SYSTEM AND METHOD
JP6845111B2 (ja) 情報処理装置および画像表示方法
JP2017097122A (ja) 情報処理装置および画像生成方法
JP6084728B1 (ja) 表示制御方法及び当該表示制御方法をコンピュータに実行させるためのプログラム
JPWO2019234879A1 (ja) 情報処理システム、情報処理方法およびコンピュータプログラム
US11094107B2 (en) Information processing device and image generation method
JP2017538140A (ja) リアルタイム3d映像多重画面同期化システム
US11589027B2 (en) Methods, systems, and media for generating and rendering immersive video content
WO2020084951A1 (ja) 画像処理装置および画像処理方法
US20200110262A1 (en) Dynamic objects in virtual reality environments
JP2021034885A (ja) 画像生成装置、画像表示装置および画像処理方法
JP6963399B2 (ja) プログラム、記録媒体、画像生成装置、画像生成方法
US10803652B2 (en) Image generating apparatus, image generating method, and program for displaying fixation point objects in a virtual space
WO2018178229A1 (en) Dynamic objects in virtual reality environments
JP2007004427A (ja) 画像表示システムおよび画像表示装置ならびにプログラム
US20220030210A1 (en) Information processing system, information processing method, and computer program
US11475637B2 (en) Multi-instance multi-user augmented reality environment
KR20180000012A (ko) 가상현실기술을 활용한 움직이는 미술작품
JP2015170232A (ja) 情報処理装置、その制御方法、及びプログラム
CN111149356A (zh) 用于投影沉浸式视听内容的方法
KR101315398B1 (ko) 3차원 증강 현실 표시 장치 및 방법
CN206023911U (zh) 虚拟现实***

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180130

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180420

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20181002