JP2020010300A - 映像生成装置、映像生成装置の制御方法及びプログラム - Google Patents
映像生成装置、映像生成装置の制御方法及びプログラム Download PDFInfo
- Publication number
- JP2020010300A JP2020010300A JP2018132638A JP2018132638A JP2020010300A JP 2020010300 A JP2020010300 A JP 2020010300A JP 2018132638 A JP2018132638 A JP 2018132638A JP 2018132638 A JP2018132638 A JP 2018132638A JP 2020010300 A JP2020010300 A JP 2020010300A
- Authority
- JP
- Japan
- Prior art keywords
- image
- virtual viewpoint
- content
- generated
- normal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/243—Image signal generators using stereoscopic image cameras using three or more 2D image sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/205—3D [Three Dimensional] animation driven by audio data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/275—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals
- H04N13/279—Image signal generators from 3D object models, e.g. computer-generated stereoscopic image signals the virtual viewpoint locations being selected by the viewers or determined by tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
- H04N25/683—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects by defect estimation performed on the scene signal, e.g. real time or on the fly detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Generation (AREA)
Abstract
【課題】ユーザにとって違和感が少ない仮想視点コンテンツを提供する。【解決手段】複数のカメラにより撮影された画像群に基づいて動画仮想視点コンテンツを生成可能な映像生成装置であって、複数のカメラにより撮影された画像群の各画像と関連付けられた各データに基づいて、各画像に異常があるか否かを判定する判定部と、異常の有無に基づいて、動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべき種類のコンテンツを判定する手法判定部とを備える。【選択図】 図2
Description
本発明は、映像生成装置、映像生成装置の制御方法及びプログラムに関するものである。
近年、複数のカメラを異なる位置に設置して同期撮影し、当該撮影により得られた複数視点画像を用いて仮想視点コンテンツを生成する技術が注目されている。この技術によれば、例えば、サッカーやバスケットボールのハイライトシーンを様々な視点から視聴することができるため、ユーザに高臨場感を与えることができる。
特許文献1では、ユーザからの要求に応じて画像コンテンツの生成方法を切り替える技術が開示されている。例えば、自由操作要求、ライブリプレイ映像の配信要求に応じて、自由視点映像(仮想視点コンテンツ)を生成したり、ライブリプレイ映像(撮影直後のリアルタイム映像及び過去に撮影されたリプレイ映像)を生成したりしている。
ここで、仮想視点コンテンツをライブ配信する場合、複数視点の同期撮影と同時に仮想視点コンテンツの生成が実施される。特に、動画の仮想視点コンテンツをライブ配信する場合は、複数視点の同期撮影と仮想視点コンテンツの生成とを同時に実施するため、撮影画像は、仮想視点コンテンツ生成を実施する機器が必要とする時刻に到着している必要がある。
しかしながら、特許文献1に記載の技術では、伝送路の破綻や機器の故障による様々な障害により、仮想視点コンテンツを生成する時刻に必要な画像が到着しない場合や、画像の欠損が生じる場合がある。その結果、ユーザに配信する画像コンテンツが生成できない時刻が生じるため、画像の連続性を保つことができず、ユーザに違和感のある画像が提供されてしまうという課題がある。
本発明は、上記の課題に鑑みてなされたものであり、ユーザにとって違和感が少ない仮想視点コンテンツを提供するための技術を提供する。
上記の目的を達成する本発明に係る映像生成装置は、
複数のカメラにより撮影された画像群に基づいて動画仮想視点コンテンツを生成可能な映像生成装置であって、
前記複数のカメラにより撮影された前記画像群の各画像と関連付けられた各データに基づいて、各画像に異常があるか否かを判定する判定手段と、
前記異常の有無に基づいて、前記動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべき種類のコンテンツを判定する手法判定手段と、
を備えることを特徴とする。
複数のカメラにより撮影された画像群に基づいて動画仮想視点コンテンツを生成可能な映像生成装置であって、
前記複数のカメラにより撮影された前記画像群の各画像と関連付けられた各データに基づいて、各画像に異常があるか否かを判定する判定手段と、
前記異常の有無に基づいて、前記動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべき種類のコンテンツを判定する手法判定手段と、
を備えることを特徴とする。
本発明によれば、ユーザにとって違和感が少ない仮想視点コンテンツを提供することが可能となる。
以下、図面を参照しながら実施形態を説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。
[概要]
本実施形態では、複数のカメラが撮影した各画像についてデータ欠損や冗長及び時刻不整合の障害(データ異常)を確認し、データ異常の有無に応じて動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべきコンテンツを判定する例を説明する。
本実施形態では、複数のカメラが撮影した各画像についてデータ欠損や冗長及び時刻不整合の障害(データ異常)を確認し、データ異常の有無に応じて動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべきコンテンツを判定する例を説明する。
本実施形態では、5つの種別の画像生成手法を設ける。それは、動画仮想視点コンテンツ生成、静止画仮想視点コンテンツ生成、通常画像生成、静止画像生成、スロー再生画像生成である。動画仮想視点コンテンツ生成は、動画仮想視点コンテンツを生成する手法である。動画仮想視点コンテンツとは、複数のカメラが一定の期間に撮影した画像から、時刻毎に仮想視点座標及び仮想視点画像の両方を切り替えて生成する仮想視点コンテンツである。静止画仮想視点コンテンツ生成は、静止画仮想視点コンテンツを生成する手法である。静止画仮想視点コンテンツとは、複数のカメラが一時刻に撮影した画像を用いて、仮想カメラパスに沿って仮想視点画像を切り替えて生成する仮想視点コンテンツである。また、通常画像生成は、複数のカメラのうち1つのカメラを選択し、該選択したカメラの動画像を生成する手法である。静止画像生成は、仮想視点での一時刻の静止画像を生成する手法である。本実施形態における静止画像とは、複数のカメラが一時刻に撮影した画像から生成した1つの仮想視点画像である。
なお、静止画仮想視点コンテンツは、特定の時刻における、仮想カメラパスを構成する各仮想視点の仮想視点画像を、時間の経過と共に視点ごとに切り替えて表示するコンテンツである。特定時刻の仮想視点画像を、時間経過と共にカメラパスを移動しながら視点ごとに切り替えて表示することで、動画のようなコンテンツを生成することができるため、ユーザに違和感の少ない画像を提供することができる。これに対して、静止画像は、特定の時刻における、1つの仮想視点での仮想視点画像を時間経過と共に表示し続けるコンテンツである。
そして、スロー再生画像生成は、動画仮想視点コンテンツを通常の速度より遅い速度で再生する手法である。具体的には、生成したコンテンツを、次のコンテンツを生成する時刻まで連続して再生する手法である。
[システム構成及び装置構成]
図1は、本発明の一実施形態に係る映像生成システムの構成例を示す図である。である。映像生成システムは、カメラ群100、映像生成装置100、カメラ群101、映像配信装置102を含む。
図1は、本発明の一実施形態に係る映像生成システムの構成例を示す図である。である。映像生成システムは、カメラ群100、映像生成装置100、カメラ群101、映像配信装置102を含む。
映像生成装置100は、カメラ群101が同期撮影した複数視点の画像群を連続して受け取り、仮想視点座標に基づいて仮想視点コンテンツや静止画像を生成して映像配信装置102に送信する。カメラ群101は、複数のカメラから構成されており、複数視点の画像に、タイムコードやデータ欠損及び冗長、誤りに関する情報、カメラ番号を含むメタデータを紐付けて映像生成装置100に送信する。
次に、映像生成装置100の内部にある機能ブロックの動作を説明する。映像生成装置100は、カメラ画像受信部110、カメラ画像蓄積部111、メタデータ取得部112、カメラ画像取得部113、仮想視点生成部114、生成手法判定部115、生成手法選択部116、コンテンツ生成部117、及び出力部123を備える。各処理部の動作は、不図示のCPUが不図示のメモリに格納されたコンピュータプログラムを読み出して実行することにより制御される。
カメラ画像受信部110、カメラ画像蓄積部111、及びカメラ画像取得部113は、画像を取得及び伝送する。また、メタデータ取得部112、仮想視点生成部114、及び生成手法判定部115は、画像に紐付く(関連付けられた)情報を処理する。そして、生成手法選択部116、コンテンツ生成部117、及び出力部123は、画像と、画像に紐付く情報との両方を処理する。
コンテンツ生成部117は、動画仮想視点コンテンツ生成部118、静止画仮想視点コンテンツ生成部119、通常画像生成部120、静止画像生成部121、及びスロー再生画像生成部122を備える。
カメラ画像受信部110は、カメラ群101から時刻毎の撮影された画像及び該画像に紐付く情報を受け取り、カメラ画像蓄積部111に伝送する。
カメラ画像蓄積部111は、カメラ画像受信部110から画像及び該画像に紐付く情報を受け取り、カメラ画像蓄積部111の内部にある記憶装置に記憶する。そして、カメラ画像取得部113の要求に応じて画像及び該画像に紐付く情報を伝送する。カメラ画像取得部113が要求する画像の時刻情報と、記憶装置に記憶する時刻とが近接している場合は、該記憶装置に記憶せずに伝送するか、該記憶装置に記憶すると同時にカメラ画像取得部113に伝送してもよい。
カメラ画像取得部113は、カメラ画像蓄積部111に対して、必要な画像を要求して取得する。また、画像と共に、該画像に紐付く情報を取得する。必要な画像を要求するための情報は、仮想視点生成部114から受け取る仮想視点座標に紐付く時刻情報である。つまり、該時刻の画像を全て受け取る。但し、使用する画像が決定している場合は、該当する画像のみを受け取っても良い。そして、画像と該画像に紐付く情報とを分離した後、画像を生成手法選択部116に伝送し、該画像に紐付く情報をメタデータ取得部112に伝送する。
メタデータ取得部112は、カメラ画像取得部113から取得した情報から、画像が正常か異常かを判断する。カメラ画像取得部113から取得した情報とは、画像の時刻情報、データ異常かどうかを示す情報、仮想視点座標を含む。データ異常は、データ欠損、冗長、及び誤りを含む。時刻不整合を含めてデータ異常としてもよい。上記、データ異常かどうかを示す情報から画像が正しいかどうかの判断を行い、その判断結果を生成手法判定部115に伝送する。
仮想視点生成部114は、映像生成装置100の操作者の要求に基づいて、仮想視点座標を生成する。仮想視点座標とは、カメラ群101を設置する位置に関係なく操作者が要求する視点座標である。また、仮想視点座標は時刻毎に存在するが、座標は前の時刻と同じであってもよい。そして、生成した仮想視点座標を、生成手法判定部115及びカメラ画像取得部113に伝送する。なお、カメラ画像取得部113へは、生成手法判定部115から伝送してもよい。
生成手法判定部115は、仮想視点生成部114から取得した仮想視点座標と、メタデータ取得部112から取得した画像に紐付く情報とに基づいて、仮想視点コンテンツの生成手法を判定する。そして、該判定結果を、生成手法選択部116に伝送する。生成手法の判定手法については後述する。
生成手法選択部116は、カメラ画像取得部113から画像を受け取り、生成手法判定部115から仮想視点コンテンツの生成手法に関する判定結果と画像に紐付く情報とを受け取る。そして、コンテンツ生成部117を構成する各生成部のうち何れかを動作するように制御する。なお、カメラ画像取得部113から画像を受け取るのではなく、生成手法判定部115から画像を受け取るように構成してもよい。
コンテンツ生成部117は、生成手法選択部116から画像、該画像に紐付く情報、及びコンテンツの生成手法に関する判定結果を取得し、コンテンツの生成を行う。そして、生成したコンテンツを出力部123に伝送する。
動画仮想視点コンテンツ生成部118は、生成手法選択部116からの動作指示に基づいて、動画仮想視点コンテンツの生成を行う。静止画仮想視点コンテンツ生成部119は、生成手法選択部116からの動作指示に基づいて、静止画仮想視点コンテンツの生成を行う。
通常画像生成部120は、生成手法選択部116からの動作指示に基づいて、選択した画像の出力を行う。画像の選択手法については後述する。静止画像生成部121は、生成手法選択部116からの動作指示に基づいて、前の時刻に出力した画像を伝送する。スロー再生画像生成部122は、生成手法選択部116から動作指示を受け、前の時刻に出力した仮想視点コンテンツまたは現時刻に生成した仮想視点コンテンツの何れかを出力する。
出力部123は、コンテンツ生成部117が生成したコンテンツを受け取り、映像配信装置102に出力する。ユーザは映像配信装置102を介して表示される映像を視聴することができる。
[処理]
続いて、図2のフローチャートを参照して、本発明の一実施形態に係る映像生成装置が実施する処理の手順を説明する。以下では処理の全体の流れを先に説明し、各種類のコンテンツの具体的な生成例については各実施例において詳述する。
続いて、図2のフローチャートを参照して、本発明の一実施形態に係る映像生成装置が実施する処理の手順を説明する。以下では処理の全体の流れを先に説明し、各種類のコンテンツの具体的な生成例については各実施例において詳述する。
ステップS200において、生成手法判定部115は、仮想視点生成部114から仮想視点座標を取得する。ステップS201において、生成手法判定部115は、メタデータ取得部112から時刻情報と、画像に紐づく情報を取得する。ステップS202において、生成手法判定部115は、メタデータ取得部112から取得した画像に紐づく情報に基づいて、画像のデータ異常(例えばデータ欠損、冗長、誤り等)を確認する。
ステップS203において、生成手法判定部115は、ステップS202での確認結果に基づいて、画像にデータ異常があるか否かを判定する。データ異常がある場合は、ステップS205へ進む。一方、画像にデータ異常が無い場合は、ステップS204へ進む。
ステップS204において、生成手法判定部115は、コンテンツ生成部117が有する動画仮想視点コンテンツ生成部118を用いてコンテンツを生成すると判定する。そして、ステップS218へ進む。
ステップS205において、生成手法判定部115は、操作者の設定に基づいて、動画仮想視点コンテンツを生成するために必要な画像を特定するか否かを判定する。操作者は、画像にデータ異常がある場合に動画仮想視点コンテンツを生成するために必要な画像を特定するか否かを処理開始前に予め設定しておく。或いは、このタイミングで操作者から設定の入力を受け付け、受け付けた設定に基づいて判定するようにしてもよい。また、別のタイミングであってもよい。操作者は不図示の操作部を操作して映像生成装置100に指示を入力することができる。或いは、映像配信装置102などの他の装置を介して設定の指示を入力し、その情報を映像生成装置100へ送信して設定を反映するように構成してもよい。以降、他の操作者の設定についても同様である。画像を特定する場合、ステップS206へ進む。一方、画像を特定しない場合、ステップS214へ進む。
ステップS206において、生成手法判定部115は、動画仮想視点コンテンツ生成に必要な画像を特定する。画像の特定は、ステップS200で取得された仮想視点座標を用いて行う。
ステップS207において、生成手法判定部115は、ステップS206で特定された画像が、ステップS202で確認されたデータ異常に該当するかを確認する。すなわち、対象とする画像が正常であるか否かを判定する。対象とする画像が正常である場合、ステップS204へ進む。一方、対象とする画像が正常ではない場合、ステップS208へ進む。
ステップS208において、生成手法判定部115は、操作者の設定に基づいて、データ異常に該当する画像に対して他のデータ異常に該当しない画像を用いて代替画像を生成するか否かを判定する。すなわち、対象とする画像以外の画像を用いるか否かを判定する。操作者は、データ異常に該当する画像に対して他のデータ異常に該当しない画像を用いて代替画像を生成するか否かを処理開始前に予め設定しておく。或いは、このタイミングで操作者から設定の入力を受け付け、受け付けた設定に基づいて判定するようにしてもよい。また、別のタイミングであってもよい。代替画像を生成する場合、すなわち対象とする画像以外の画像を用いる場合、ステップS209へ進む。一方、代替画像を生成しない場合、すなわち対象とする画像以外の画像を用いない場合、ステップS214へ進む。
ステップS209において、生成手法判定部115は、ステップS207でデータ異常に該当した画像の代替画像を他のデータ異常に該当しない画像から生成できるか否かを判定する。すなわち、対象ではない画像を用いて代替可能か否かを判定する。生成手法判定部115は、カメラの外部パラメータ及び内部パラメータに含まれる座標や画角、フォーカス情報に基づいて当該判定を行う。代替画像を生成可能である場合、ステップS204へ進む。一方、代替画像を生成可能ではない場合、ステップS210へ進む。
ステップS210において、生成手法判定部115は、現時刻の1つ前の時刻の画像におけるデータ異常を確認する。すなわち、生成手法判定部115は、対象とする画像の前時刻の画像が正常であるか否かを判定する。前時刻の画像が正常である場合、ステップS211へ進む。一方、前時刻の画像が正常ではない場合、ステップS214へ進む。
ステップS211において、生成手法判定部115は、現時刻の1つ後の時刻の画像におけるデータ異常を確認する。すなわち、生成手法判定部115は、対象とする画像の次時刻の画像が正常であるか否かを判定する。次時刻の画像が正常である場合、ステップS213へ進む。一方、次時刻の画像が正常ではない場合、ステップS212へ進む。なお、ステップS211の処理では、カメラ群101の撮影時刻と、仮想視点生成部114が生成する仮想視点座標に紐付くタイムコードとが近接する場合は、一意的にステップS212へ進むように判定してもよい。
ステップS212において、生成手法判定部115は、コンテンツ生成部117が有する静止画仮想視点コンテンツ生成部119を用いてコンテンツを生成すると判定する。そして、ステップS218へ進む。ステップS213において、生成手法判定部115は、コンテンツ生成部117が有するスロー再生画像生成部122を用いてコンテンツを生成すると判定する。そして、ステップS218へ進む。
ステップS214において、生成手法判定部115は、通常画像に切り替えるか否かを判定する。例えば、操作者の設定に基づいて判定してもよいし、データ異常の頻度に基づいて判定してもよい。操作者は、通常画像に切り替えるか否かを予め設定しておく。或いは、操作者から設定の入力を受け付け、受け付けた設定に基づいて判定するようにしてもよい。通常画像に切り替える場合、ステップS215へ進む。一方、通常画像に切り替えない場合、ステップS216へ進む。
ステップS215において、生成手法判定部115は、通常画像を生成すると判定する。そして、ステップS217へ進む。ステップS216において、生成手法判定部115は、静止画像を生成すると判定する。そして、ステップS218へ進む。
ステップS217において、生成手法判定部115は、使用するカメラを1つ選択する。選択基準は、例えば仮想視点座標に一番近い座標を撮影するカメラとする。また、他の選択基準であってもよい。そして、ステップS218へ進む。
ステップS218において、生成手法判定部115は、ステップS204、S212、S213、S215、S216の何れかの判定結果と、仮想視点生成部114から取得した仮想視点座標とを、生成手法選択部116に伝送する。なお、ステップS215で通常画像生成と判定された場合には、当該判定結果、仮想視点生成部114から取得した仮想視点座標、及び選択したカメラ情報を伝送する。また、ステップS216で静止画像生成と判定された場合には、当該判定結果、仮想視点生成部114から取得した仮想視点座標、及び1つ前の時刻に伝送した画像を現時刻も伝送するように伝える情報を伝送する。以上で図2の一連の処理が終了する。
以上説明したように、本実施形態によれば、同期撮影する複数視点の画像を確認する。これにより、画像にデータ異常が生じても、動画仮想視点コンテンツの生成に不要な画像のデータ異常であれば動画仮想視点コンテンツを生成することができる。あるいは、動画仮想視点コンテンツの生成に必要な画像にデータ異常があっても、代替画像を利用可能であれば、仮想視点画像を補間することで動画仮想視点コンテンツの生成が可能になる。
また、画像にデータ異常が生じても、動画仮想視点コンテンツに代わる代替の仮想視点コンテンツ手法(静止画仮想視点コンテンツ生成、スロー再生画像生成、通常画像生成、静止画像生成)を選択できる。そのため、データ異常が生じてもユーザに違和感の少ない画像を提供することが可能となる。
<実施例1>
[動画仮想コンテンツ視点生成の処理の流れ]
ここで、図2のフローチャートにおいて、ステップS203でデータ異常が無い場合は、図4を参照して後述するようにステップS204で動画仮想視点コンテンツを生成すると判定される。或いは、データ異常がある場合でも、動画仮想視点コンテンツ生成に必要な画像を仮想視点座標から特定し、対象とする画像が正常である場合には、ステップS204で動画仮想視点コンテンツを生成すると判定される。そして、対象とする画像が正常でなくても代替画像で代用可能である場合にはステップS204で動画仮想視点コンテンツを生成すると判定される。なお、動画仮想視点コンテンツ生成に必要な画像を仮想視点座標から特定するかどうかは操作者の設定に基づいて決定すればよい。
[動画仮想コンテンツ視点生成の処理の流れ]
ここで、図2のフローチャートにおいて、ステップS203でデータ異常が無い場合は、図4を参照して後述するようにステップS204で動画仮想視点コンテンツを生成すると判定される。或いは、データ異常がある場合でも、動画仮想視点コンテンツ生成に必要な画像を仮想視点座標から特定し、対象とする画像が正常である場合には、ステップS204で動画仮想視点コンテンツを生成すると判定される。そして、対象とする画像が正常でなくても代替画像で代用可能である場合にはステップS204で動画仮想視点コンテンツを生成すると判定される。なお、動画仮想視点コンテンツ生成に必要な画像を仮想視点座標から特定するかどうかは操作者の設定に基づいて決定すればよい。
[動画仮想コンテンツ視点生成の処理結果]
ここで、図4は、データ異常が無く、動画仮想視点コンテンツを生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
ここで、図4は、データ異常が無く、動画仮想視点コンテンツを生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
横軸は時刻を示す。時刻はTを頭文字とし、T0〜TL〜TM〜TNと進む。仮想カメラパスはCPを頭文字とし、CP0〜CPL〜CPM〜CPNと進む。画像のタイムコードはTCを頭文字とし、TC0〜TCL〜TCM〜TCNと進む。
図示の例はデータ異常が無しの場合であり、時刻T0〜TNにおいて、全ての判定結果が動画仮想視点コンテンツ生成であるため、仮想カメラパスは、画像のタイムコードに紐付いた仮想視点座標から構成する。例えば、時刻TL−2からTL−1において、仮想視点座標CPL−2と同じ時刻の画像のタイムコードはTCL−2である。
例えば、TL−2〜TL−1において、仮想カメラパスCPL−2におけるタイムコードTCL−2の画像が表示される。そして、TL−2〜TLにおいて、仮想カメラパスCPL−21におけるタイムコードTCL−1の画像が表示される。その他も同様であり、仮想カメラパスを時間経過と共に移動しながら各時刻の動画像が表示される。
なお、データ異常が有る場合であっても、動画仮想視点コンテンツの生成に必要が無いカメラの画像にデータ異常があり、必要な画像にデータ異常がない場合にも、図4と同様に全期間を通じて動画仮想視点コンテンツが生成される。さらに、複数視点画像の伝送遅れが生じていても、既に保持している画像から動画仮想視点コンテンツを生成できる場合がある。
また、動画仮想視点コンテンツの生成に必要なカメラの画像にデータ異常があるものの、代替画像で代用可能である場合にも、図4と同様に全期間を通じて動画仮想視点コンテンツが生成される。
以上説明したように、本実施例によれば、複数視点画像の伝送遅れやデータ欠損による障害が起きた場合でも、動画仮想視点コンテンツを生成できる可能性があるため、ユーザに違和感が少ない画像を提供できる可能性が高くなる。
<第二の実施例>
第二の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、静止画仮想視点コンテンツを生成する動作について説明する。
第二の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、静止画仮想視点コンテンツを生成する動作について説明する。
[カメラ設置例、及び、仮想視点座標による仮想カメラパス]
ここで、図3は、本発明の一実施形態に係る競技場でのカメラの設置例である。競技場300は、スタンド301、フィールド302、及び実況室303を含む。また、カメラ310〜327はスタンド301に設置するカメラであり、カメラ群101はカメラ310〜327から構成されている。カメラ330は仮想視点座標の始点であり、カメラ331は仮想視点座標の終点である。仮想カメラパス332は、競技場300での始点から終点までの仮想カメラパスの一例を示す。
ここで、図3は、本発明の一実施形態に係る競技場でのカメラの設置例である。競技場300は、スタンド301、フィールド302、及び実況室303を含む。また、カメラ310〜327はスタンド301に設置するカメラであり、カメラ群101はカメラ310〜327から構成されている。カメラ330は仮想視点座標の始点であり、カメラ331は仮想視点座標の終点である。仮想カメラパス332は、競技場300での始点から終点までの仮想カメラパスの一例を示す。
[静止画仮想視点コンテンツの処理の流れ]
図2のフローチャートを参照して説明したステップS207の動作で、使用するカメラ画像を特定する場合について、仮想カメラパス332の仮想視点座標の始点であるカメラ330を用いて説明する。カメラ330の仮想視点座標を生成する仮想視点コンテンツは、カメラ314、カメラ315、カメラ316、カメラ317の画像を用いて生成する。その場合、カメラ326の画像にデータ異常を検出した場合であっても、カメラ326の画像は生成するために必要な画像ではないため、対象画像は正常と判定され、ステップS204へ進む。
図2のフローチャートを参照して説明したステップS207の動作で、使用するカメラ画像を特定する場合について、仮想カメラパス332の仮想視点座標の始点であるカメラ330を用いて説明する。カメラ330の仮想視点座標を生成する仮想視点コンテンツは、カメラ314、カメラ315、カメラ316、カメラ317の画像を用いて生成する。その場合、カメラ326の画像にデータ異常を検出した場合であっても、カメラ326の画像は生成するために必要な画像ではないため、対象画像は正常と判定され、ステップS204へ進む。
一方、カメラ315の画像にデータ異常を検出した場合は、対象画像は正常ではないと判定され、ステップS208へ進む。さらに、対象外画像から代替画像を生成できない場合には(ステップS208でYes、S209でNo)、対象画像の前時刻の画像を用いて静止画仮想視点コンテンツを生成する(ステップS210〜S212)。
[静止画仮想視点コンテンツ生成の処理結果]
図5は、静止画仮想視点コンテンツを生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図5は、静止画仮想視点コンテンツを生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図示の例では、時刻TL〜TMにおいて、上記で説明した動作に基づき静止画仮想視点コンテンツ生成と判定している。その結果、仮想カメラパスはデータ異常が無い時と同一のデータを使用するが、画像のタイムコードは時刻TL−1〜TLで使用したものと同一である。TL〜TL+1において、仮想カメラパスCPLの仮想視点での仮想視点画像(タイムコードTCL−1に対応する画像)が表示される。そして、TL+1〜TL+2において、仮想カメラパスCPL+1の仮想視点での仮想視点画像(タイムコードTCL−1に対応する画像)が表示される。以降同様である。
その結果、同じ時刻に撮影した画像を用いて仮想視点座標を更新するため、動画のような静止画仮想視点コンテンツが生成される。そして、時刻TM〜TNにおいて、データ異常から正常な状態に移行し、画像のタイムコードは時刻に同期したものが使用される。
以上説明したように、本実施形態では、動画仮想視点コンテンツを生成中にデータ異常を発見した時刻において、該時刻の1つ前の時刻の画像が正常であれば、当該1つ前の時刻から連続して動画のような静止画仮想視点コンテンツを生成するように切り替える。これにより、ユーザに違和感の少ない画像を提供することが可能となる。
<第三の実施例>
第三の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、スロー再生画像を生成する動作について説明する。
第三の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、スロー再生画像を生成する動作について説明する。
[スロー再生画像生成の処理の流れ]
図2のステップS210までは第二の実施例で説明した静止画仮想視点コンテンツの処理の流れと同様である。対象外画像から代替画像を生成できない場合には(ステップS208でYes、S209でNo)、対象画像の前時刻の画像及び次時刻の画像を用いてスロー再生画像を生成する(ステップS210、S211でYes、S213)。
図2のステップS210までは第二の実施例で説明した静止画仮想視点コンテンツの処理の流れと同様である。対象外画像から代替画像を生成できない場合には(ステップS208でYes、S209でNo)、対象画像の前時刻の画像及び次時刻の画像を用いてスロー再生画像を生成する(ステップS210、S211でYes、S213)。
[スロー再生画像生成の処理結果]
図6は、スロー再生画像を生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図6は、スロー再生画像を生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図示の例では、時刻TL〜TMにおいて、時刻TL〜TLA、TLB〜TLC、TLE〜TMでデータ異常を確認したため、現時刻の前後の時刻における画像にデータ異常があるかを確認してスロー再生画像生成と判定している。
スロー再生画像生成の処理では、仮想視点座標の更新速度と、使用する画像のタイムコードを更新する時刻とが異なる場合がある。例えば、時刻TL〜TLA及び時刻TLB〜TLCの動作が該当する。また、仮想視点座標の更新速度と、使用する画像のタイムコードを更新する時刻とは同期しているが、時刻毎に更新しない場合がある。例えば、時刻TLC〜TLEの動作が該当する。
また、スロー再生画像生成と判定し移行した後は、データ異常が無い時刻が一定以上連続することを条件に他のコンテンツ生成に移行する。このように構成する理由は、スロー再生画像への移行は、データ異常が散発的に生じる場合であること、データ異常が収束したことを確認する期間を必要とすること、スロー再生は一時刻では構成できないこと等が挙げられる。
以上説明したように、本実施形態によれば、動画仮想視点コンテンツを生成中にデータ異常を発見した時刻において、該時刻の前後の時刻におけるデータ異常も考慮しながら、ユーザに連続した画像を提供することができる。これにより、ユーザは違和感の少ない画像を閲覧することが可能となる。
<第四の実施例>
第四の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、通常画像(複数のカメラのうち1つのカメラによる動画像)を生成する動作について説明する。
第四の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、通常画像(複数のカメラのうち1つのカメラによる動画像)を生成する動作について説明する。
[通常画像生成の処理の流れ]
図2のフローチャートにおいて、ステップS205で動画仮想視点コンテンツを生成するのに必要な対象画像を特定しないと判定された場合、ステップS214へ進む。また、ステップS208で対象外画像を用いないと判定された場合、ステップS214へ進む。或いは、ステップS210で対象画像の前時刻の画像が正常ではないと判定された場合、ステップS214へ進む。そして、ステップS214において仮想視点画像ではない任意のカメラによる通常画像に切り替えるか否かを操作者の設定に基づいて判定し、切り替える場合にはステップS215で通常画像を生成すると判定する。さらに、ステップS217で対象となるカメラを1つ選択する。カメラは、仮想視点から最も近い位置のカメラとしてもよいし、仮想視点の映像と方向が最も近い方向を向いたカメラ(仮想視点の映像と最も近い構図を撮影するカメラ)としてもよい。これにより、違和感を低減した画像をユーザに提供することができる。
図2のフローチャートにおいて、ステップS205で動画仮想視点コンテンツを生成するのに必要な対象画像を特定しないと判定された場合、ステップS214へ進む。また、ステップS208で対象外画像を用いないと判定された場合、ステップS214へ進む。或いは、ステップS210で対象画像の前時刻の画像が正常ではないと判定された場合、ステップS214へ進む。そして、ステップS214において仮想視点画像ではない任意のカメラによる通常画像に切り替えるか否かを操作者の設定に基づいて判定し、切り替える場合にはステップS215で通常画像を生成すると判定する。さらに、ステップS217で対象となるカメラを1つ選択する。カメラは、仮想視点から最も近い位置のカメラとしてもよいし、仮想視点の映像と方向が最も近い方向を向いたカメラ(仮想視点の映像と最も近い構図を撮影するカメラ)としてもよい。これにより、違和感を低減した画像をユーザに提供することができる。
[通常画像生成の処理結果]
図7は、通常画像を生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図7は、通常画像を生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図示の例では、時刻TL〜TMにおいて画像のデータ異常を確認し、通常画像生成と判定している。その場合、タイムコードはデータ異常が無い場合と同一であるが、仮想カメラパスは使用しない。代替の情報として選択したカメラの情報を使用する。カメラの情報はIDでもよいし、座標でもよい。その結果、時刻TL〜TMにおいては選択したカメラの画像を伝送する。
以上説明したように、本実施形態によれば、仮想視点コンテンツを生成しない場合に、特定のカメラ(例えば、これまで画像生成していた仮想視点に最も近い位置にあるカメラ、仮想視点の映像と最も近い構図を撮影するカメラ)の画像に切り替える。これにより、ユーザは違和感の少ない画像を閲覧することが可能となる。
<第五の実施例>
第五の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、静止画像(ある時刻における1つの仮想視点での静止画像)を生成する動作について説明する。
第五の実施例では、複数のカメラが撮影した画像にデータ欠損や冗長及び時刻不整合の障害が生じた場合に画像生成手法の判定を行い、静止画像(ある時刻における1つの仮想視点での静止画像)を生成する動作について説明する。
[静止画像生成の処理の流れ]
図2のステップS214までは第四の実施例で説明した通常画像の処理の流れと同様である。通常画像に切り替えない場合には(ステップS214でNo)、ステップS216で静止画像を生成すると判定される。
図2のステップS214までは第四の実施例で説明した通常画像の処理の流れと同様である。通常画像に切り替えない場合には(ステップS214でNo)、ステップS216で静止画像を生成すると判定される。
[静止画像生成の処理結果]
図8は、静止画像を生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図8は、静止画像を生成する場合の判定結果、仮想カメラパス、画像のタイムコードを時刻毎に記したグラフの一例である。
図示の例では、時刻TL〜TMにおいて画像のデータ異常を確認し、静止画像生成と判定している。その場合、画像のタイムコード及び仮想カメラパスは1つ前の時刻と同一の仮想視点を使用し、且つ、1つ前の時刻の画像を伝送し続けるため、静止画像が出力される。
以上説明したように、本実施形態によれば、ユーザは違和感の少ない画像を閲覧することが可能となる。
(その他の実施形態)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
100:映像生成装置、101:カメラ、102:映像配信装置、110:カメラ画像受信部、111:カメラ画像蓄積部、112:メタデータ取得部、113:カメラ画像取得部、114:仮想視点生成部、115:生成手法判定部、116:生成手法選択部、117:コンテンツ生成部、118:動画仮想視点コンテンツ生成部、119:静止画仮想視点コンテンツ生成部、120:通常画像生成部、121:静止画像生成部、122:スロー再生画像生成部、123:出力部
Claims (11)
- 複数のカメラにより撮影された画像群に基づいて動画仮想視点コンテンツを生成可能な映像生成装置であって、
前記複数のカメラにより撮影された前記画像群の各画像と関連付けられた各データに基づいて、各画像に異常があるか否かを判定する判定手段と、
前記異常の有無に基づいて、前記動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべき種類のコンテンツを判定する手法判定手段と、
を備えることを特徴とする映像生成装置。 - 仮想視点座標を取得する取得手段と、
前記仮想視点座標に基づいて、前記動画仮想視点コンテンツを生成するために必要な画像を特定する特定手段と、をさらに備え、
前記判定手段は、前記特定手段により特定された対象となる画像が正常であるか否かを判定し、
前記手法判定手段は、前記対象となる画像が正常である場合、前記動画仮想視点コンテンツを生成すると判定することを特徴とする請求項1に記載の映像生成装置。 - 前記手法判定手段は、前記対象となる画像が正常ではない場合、前記対象となる画像が前記対象ではない画像を用いて代替可能かをさらに判定し、代替可能である場合に前記動画仮想視点コンテンツを生成すると判定することを特徴とする請求項2に記載の映像生成装置。
- 前記手法判定手段は、前記対象となる画像が前記対象ではない画像を用いて代替可能ではない場合、前記対象とする画像の前時刻の画像が正常であるか否かをさらに判定し、前記前時刻の画像が正常である場合に前記対象とする画像の次時刻の画像が正常であるか否かをさらに判定し、前記次時刻の画像が正常である場合に仮想視点でのスロー再生画像を生成すると判定することを特徴とする請求項3に記載の映像生成装置。
- 前記手法判定手段は、前記次時刻の画像が正常ではない場合、静止画仮想視点コンテンツを生成すると判定することを特徴とする請求項4に記載の映像生成装置。
- 前記手法判定手段は、前記判定手段により異常がある画像が存在すると判定された場合であって且つ前記動画仮想視点コンテンツを生成するために必要な画像を特定しない場合、操作者の設定に基づいて、前記複数のカメラのうちの1つのカメラによる動画像を生成すると判定し、或いは、一時刻における1つの仮想視点での静止画像を生成すると判定することをと特徴とする請求項1乃至5の何れか1項に記載の映像生成装置。
- 前記異常とは、データの欠損、冗長、及び誤りを含むことを特徴とする請求項1乃至6の何れか1項に記載の映像生成装置。
- 前記判定された種類のコンテンツの生成手法によりコンテンツを生成する生成手段をさらに備えることを特徴とする請求項1乃至7の何れか1項に記載の映像生成装置。
- 前記生成手段により生成された前記コンテンツを映像配信装置へ出力する出力手段をさらに備えることを特徴とする請求項8に記載の映像生成装置。
- 複数のカメラにより撮影された画像群に基づいて動画仮想視点コンテンツを生成可能な映像生成装置の制御方法であって、
前記複数のカメラにより撮影された前記画像群の各画像と関連付けられた各データに基づいて、各画像に異常があるか否かを判定する工程と、
前記異常の有無に基づいて、前記動画仮想視点コンテンツを含む複数種類のコンテンツのうち、生成すべき種類のコンテンツを判定する工程と、
を有することを特徴とする映像生成装置の制御方法。 - コンピュータを、請求項1乃至9の何れか1項に記載の映像生成装置の各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018132638A JP2020010300A (ja) | 2018-07-12 | 2018-07-12 | 映像生成装置、映像生成装置の制御方法及びプログラム |
US16/502,208 US10848742B2 (en) | 2018-07-12 | 2019-07-03 | Content generation device, method for controlling content generation device, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018132638A JP2020010300A (ja) | 2018-07-12 | 2018-07-12 | 映像生成装置、映像生成装置の制御方法及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2020010300A true JP2020010300A (ja) | 2020-01-16 |
Family
ID=69139308
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018132638A Pending JP2020010300A (ja) | 2018-07-12 | 2018-07-12 | 映像生成装置、映像生成装置の制御方法及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10848742B2 (ja) |
JP (1) | JP2020010300A (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7467130B2 (ja) | 2020-01-21 | 2024-04-15 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021117482A1 (ja) * | 2019-12-09 | 2021-06-17 | ソニーグループ株式会社 | 情報処理装置および方法、プログラム、並びに、情報処理システム |
JP7322191B2 (ja) * | 2020-01-22 | 2023-08-07 | 富士フイルム株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP2022182119A (ja) * | 2021-05-27 | 2022-12-08 | キヤノン株式会社 | 画像処理装置およびその制御方法、プログラム |
CN113535993A (zh) * | 2021-07-30 | 2021-10-22 | 北京字跳网络技术有限公司 | 作品封面显示方法、装置、介质和电子设备 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6385139B2 (ja) | 2014-05-28 | 2018-09-05 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP6894687B2 (ja) * | 2016-10-11 | 2021-06-30 | キヤノン株式会社 | 画像処理システム、画像処理装置、制御方法、及び、プログラム |
JP6871801B2 (ja) * | 2017-05-11 | 2021-05-12 | キヤノン株式会社 | 画像処理装置、画像処理方法、情報処理装置、撮像装置および画像処理システム |
JP6957215B2 (ja) * | 2017-06-06 | 2021-11-02 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP6924079B2 (ja) * | 2017-06-12 | 2021-08-25 | キヤノン株式会社 | 情報処理装置及び方法及びプログラム |
JP2019191915A (ja) * | 2018-04-25 | 2019-10-31 | キヤノン株式会社 | 映像生成装置、映像生成装置の制御方法及びプログラム |
-
2018
- 2018-07-12 JP JP2018132638A patent/JP2020010300A/ja active Pending
-
2019
- 2019-07-03 US US16/502,208 patent/US10848742B2/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7467130B2 (ja) | 2020-01-21 | 2024-04-15 | キヤノン株式会社 | 情報処理装置、情報処理方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US10848742B2 (en) | 2020-11-24 |
US20200021761A1 (en) | 2020-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2020010300A (ja) | 映像生成装置、映像生成装置の制御方法及びプログラム | |
JP6957215B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6894687B2 (ja) | 画像処理システム、画像処理装置、制御方法、及び、プログラム | |
JP2019191915A (ja) | 映像生成装置、映像生成装置の制御方法及びプログラム | |
US11240403B2 (en) | Compensation for delay in PTZ camera system | |
CN110688254B (zh) | 一种数据同步方法、装置、电子设备及存储介质 | |
JP5835932B2 (ja) | 画像処理装置、及びその制御方法 | |
US11463624B2 (en) | Imaging device, imaging method, display device, and display method that capture a particular capturing region corresponding to a selected cutout image | |
JP2005012415A (ja) | 監視映像モニタリングシステム、監視映像生成方法、および監視映像モニタリングサーバ | |
GB2585183A (en) | Synchronising data streams | |
EP3857898B1 (en) | Apparatus and method for generating and rendering a video stream | |
JP2014007662A (ja) | カメラ制御装置及びカメラ制御方法 | |
JP5520146B2 (ja) | 映像受信装置、及びその制御方法 | |
US20220385876A1 (en) | Image processing apparatus, control method thereof, and storage medium | |
JP2012004991A (ja) | 放送受信装置及びその制御方法 | |
US20220075986A1 (en) | Digital microscope system, method for operating the same and computer program | |
JP2021090155A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6979092B2 (ja) | コンテンツ出力システムおよび方法 | |
KR20190114276A (ko) | 합성 동영상 처리 방법 및 장치 | |
JP2022012893A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
JP6359870B2 (ja) | 情報処理装置および動画データ再生方法 | |
US20220057619A1 (en) | Digital microscope system, method for operating the same and computer program | |
JP7134636B2 (ja) | 制御装置、制御方法及びプログラム | |
JP2022136866A (ja) | 撮像装置およびその制御方法 | |
JP5990309B2 (ja) | 画像処理装置、及びその制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |