JP2011182160A - 映像処理装置及び映像処理方法 - Google Patents
映像処理装置及び映像処理方法 Download PDFInfo
- Publication number
- JP2011182160A JP2011182160A JP2010043967A JP2010043967A JP2011182160A JP 2011182160 A JP2011182160 A JP 2011182160A JP 2010043967 A JP2010043967 A JP 2010043967A JP 2010043967 A JP2010043967 A JP 2010043967A JP 2011182160 A JP2011182160 A JP 2011182160A
- Authority
- JP
- Japan
- Prior art keywords
- video
- subject
- video data
- screen
- range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
【解決手段】映像表示装置100は、多視点映像を選択して受信するIPインターフェース部101と、撮影範囲の異なる複数の映像ソースから1つを選択するためにIPインターフェース部101に指示を送る多視点映像選択指示部104を備える。被写体抽出部109は映像データから、指定された被写体を検出して被写体の画像データを抽出する。画面切り出し範囲決定部110は、被写体像を含むように画面切り出し範囲を決定する。制御部107は映像データに基づいて、移動する被写体像を画面に表示可能な時間を算出して当該時間が最長となるように映像データの選択制御を行い、被写体を追尾して表示部113に表示させる。
【選択図】 図1
Description
そこで装置側で自動的に表示範囲を選択するために、視聴者が指定した特定の被写体を追尾して常に画面中央に表示する機能をもつ映像処理装置が考えられる。該装置が被写体を検出して、その被写体像を画面中央に捉えるように映像ソースを選択し、表示範囲を選択すれば、視聴者は操作なしに所望の映像を視聴できる。今後、次世代のデジタル放送サービスとして多視点映像サービスがさらに普及し、上記機能を備えた装置の台頭が予想される。
そこで本発明は、映像ソースの切り替えを最小限に抑えてユーザの利便性を向上させることを目的とする。
図1は本発明の第1実施形態に係るシステムの構成例を示すブロック図である。本例では、デジタル放送局の配信装置としてのIP(Internet Protocol)放送サーバ(以下、単にサーバという)と、映像処理装置としての映像表示装置を示す。
まず多視点映像データをサーバ200から取得するブロックについて説明する。映像表示装置100は、そのIPインターフェース部101がデジタル放送局の多視点映像データを提供するサーバ200に対し、TCP/IPプロトコルを使ってインターネット経由で接続される。図1にはサーバ200が配信する多視点映像データのうち、3つの視点映像データを代表して示す。IPインターフェース部101はサーバ200からデータを受信して復号化し、IP・TS(トランスポートストリーム)処理部102に出力する。またIPインターフェース部101はサーバ200への要求を出力する。
図3のS309又はS310の後、S311に進む。ここで制御部107は多視点映像の選択指示部104を介してIPインターフェース部101に対し、前記ステップS309又はS310で選択した映像ソースへの切り替えを指示する。IPインターフェース部101は当該映像ソースの映像に切り替える。
第1実施形態によれば、映像ソースの切り替え回数を最小限に抑えつつ、所望の被写体を追尾できる。
次に本発明の第2実施形態を説明する。なお第2実施形態に係る装置の構成は第1実施形態の場合と同様であるため、以下では相違点を主に説明する。
図7は、カメラA乃至Cとは反対側にカメラD(符号205参照)を配置した場合の映像ソース選択処理を説明する図である。図中の撮影範囲901はカメラD205が撮影する範囲を示す。
次に本発明の第3実施形態を説明する。本実施形態では、映像データの供給元である送信装置から受信装置に対し、選択すべき映像ソースを指定する処理例を示す。なお第3実施形態に係る装置の構成は第1実施形態の場合と同様であるため、以下では相違点を主に説明する。本実施形態においても映像ソースの選択基準については前記実施形態の場合と同じであるが、判断主体が映像表示装置100の制御部107ではなく、配信装置の制御部である点で相違する。図1にて映像表示装置100はユーザ操作に従って選択された被写体の情報をサーバ200に通知する。サーバ200のシステム制御部210は、使用すべき映像ソースの映像データ及び表示範囲に対応する画面切り出し範囲の指示情報を映像表示装置100に送信する際の送信制御機能を有する。映像表示装置100はそれらの情報に基づいて映像ソースの切り替えと表示を行う。
次に図9のフローチャートを用いて映像表示装置100の処理例を説明する。なお、以下の処理は制御部107によって解釈及び実行されるプログラムに従って実現される。
前記S1101での映像表示装置100への指示に従い、制御部107は映像ソースの選択を制御する(S1201)。次にユーザの操作指示を受けて被写体の選択処理が行われる(S1202)。被写体の選択方法は第1実施形態の場合と同様である。制御部107は、選択された被写体を示す被写体情報をサーバ200に通知する制御を行う(S1203)。前記S1103での指示に従って、範囲決定部110は画面切り出し範囲を決定し、表示部113は当該範囲の映像を表示する(S1204)。
第3実施形態では、配信装置にて被写体の追尾を行い、映像ソースの選択指示及び画面切り出し範囲の指示を映像表示装置に送る。これにより映像表示装置にて画面切り替えの頻度を最小限に抑えつつ、被写体像を常に画面中央に表示し続けることができる。
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
101:IPインターフェース部
104:多視点映像の選択指示部
107:制御部
108:被写体選択部
109:被写体抽出部
111:出力映像生成部
Claims (5)
- 撮影範囲の異なる複数の映像データを処理して、指定された被写体を追尾する映像処理装置であって、
前記映像データから前記指定された被写体の画像データを抽出する抽出手段と、
前記指定された被写体の移動を検出して動き予測処理を行い、前記複数の映像データのそれぞれの撮影範囲内に当該移動する被写体が含まれる時間を算出し、算出した時間に基づいて当該被写体を画面に表示すべく前記複数の映像データから1つの映像データを選択する制御を行う制御手段と、を備えることを特徴とする映像処理装置。 - 前記制御手段は、前記移動する被写体の座標情報及び動きベクトルに基づいて、前記複数の映像データのそれぞれの撮影範囲内に当該移動する被写体が含まれる時間を算出することを特徴とする、請求項1記載の映像処理装置。
- 前記制御手段は、前記複数の映像データのうち、撮影範囲内に前記移動する被写体が含まれる時間が最も長い映像データを選択することを特徴とする、請求項1又は請求項2記載の映像処理装置。
- 前記制御手段は、前記映像データの撮影範囲の外に前記指定された被写体が移動する場合、当該移動する被写体の画像の移動方向が変化しないように、前記複数の映像データから1つの映像データを選択することを特徴とする、請求項1から請求項3のいずれか1項記載の映像処理装置。
- 撮影範囲の異なる複数の映像データを処理して、指定された被写体を追尾する映像処理方法であって、
前記映像データから前記指定された被写体の画像データを抽出する抽出ステップと、
前記指定された被写体の移動を検出して動き予測処理を行い、前記複数の映像データのそれぞれの撮影範囲内に当該移動する被写体が含まれる時間を算出する算出ステップと、
前記算出ステップで算出した時間に基づいて前記移動する被写体を画面に表示すべく前記複数の映像データから1つの映像データを選択する選択ステップとを有することを特徴とする映像処理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010043967A JP5495855B2 (ja) | 2010-03-01 | 2010-03-01 | 映像処理装置及び映像処理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010043967A JP5495855B2 (ja) | 2010-03-01 | 2010-03-01 | 映像処理装置及び映像処理方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2011182160A true JP2011182160A (ja) | 2011-09-15 |
JP2011182160A5 JP2011182160A5 (ja) | 2013-04-11 |
JP5495855B2 JP5495855B2 (ja) | 2014-05-21 |
Family
ID=44693208
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010043967A Expired - Fee Related JP5495855B2 (ja) | 2010-03-01 | 2010-03-01 | 映像処理装置及び映像処理方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5495855B2 (ja) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014147016A (ja) * | 2013-01-30 | 2014-08-14 | Casio Comput Co Ltd | 画像選択装置、画像選択方法、画像配信システム及びプログラム |
JP2014155006A (ja) * | 2013-02-07 | 2014-08-25 | Nippon Telegr & Teleph Corp <Ntt> | 映像配信システム及び映像配信方法 |
JP2015056711A (ja) * | 2013-09-11 | 2015-03-23 | 日本電信電話株式会社 | 画像配信システム及び画像配信方法 |
JP2015185965A (ja) * | 2014-03-20 | 2015-10-22 | 大日本印刷株式会社 | 撮像システム、撮像方法、画像再生装置及びプログラム |
JP2017139725A (ja) * | 2016-02-03 | 2017-08-10 | パナソニックIpマネジメント株式会社 | 映像表示方法及び映像表示装置 |
JP2017208702A (ja) * | 2016-05-18 | 2017-11-24 | キヤノン株式会社 | 情報処理装置及びその制御方法、撮影システム |
JP2017212536A (ja) * | 2016-05-24 | 2017-11-30 | 日本電信電話株式会社 | 映像編集方法、映像編集装置及び映像編集プログラム |
JP6241802B1 (ja) * | 2017-01-20 | 2017-12-06 | パナソニックIpマネジメント株式会社 | 映像配信システム、ユーザ端末装置および映像配信方法 |
JP2018502488A (ja) * | 2014-11-18 | 2018-01-25 | ジェイ. ブラフ,アーレン | 視覚的画像アレイに関する、装置、方法およびシステム |
JP2018026603A (ja) * | 2016-08-08 | 2018-02-15 | キヤノン株式会社 | 画像配信装置 |
KR20180070234A (ko) * | 2016-12-16 | 2018-06-26 | 주식회사 케이티 | 타임 슬라이스 영상을 제공하는 장치 및 사용자 단말 |
KR20190019407A (ko) * | 2017-08-17 | 2019-02-27 | 주식회사 케이티 | 타임 슬라이스 영상을 제공하는 서버, 방법 및 사용자 단말 |
CN111757141A (zh) * | 2020-07-22 | 2020-10-09 | 四川新视创伟超高清科技有限公司 | 一种云端流媒体切画方法 |
JP2020532903A (ja) * | 2017-09-05 | 2020-11-12 | フェイスブック,インク. | 撮像装置によって以前キャプチャされた動画データに基づく、撮像装置による動画データキャプチャの修正 |
US11228790B2 (en) | 2018-11-30 | 2022-01-18 | Kt Corporation | Providing time slice video |
US11558543B2 (en) | 2017-09-05 | 2023-01-17 | Meta Platforms, Inc. | Modifying capture of video data by an image capture device based on video data previously captured by the image capture device |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05130528A (ja) * | 1991-11-05 | 1993-05-25 | Oki Electric Ind Co Ltd | 視点可変テレビジヨンシステム |
JPH09322051A (ja) * | 1996-05-24 | 1997-12-12 | Nippon Hoso Kyokai <Nhk> | 自動撮影カメラシステム |
JP2000032435A (ja) * | 1998-07-10 | 2000-01-28 | Mega Chips Corp | 監視システム |
JP2001036891A (ja) * | 1999-06-10 | 2001-02-09 | Internatl Business Mach Corp <Ibm> | ブロードキャスト環境の視野を個別化するシステム、方法及び媒体。 |
WO2007119355A1 (ja) * | 2006-03-15 | 2007-10-25 | Omron Corporation | 追尾装置、追尾方法、追尾装置の制御プログラム、およびコンピュータ読み取り可能な記録媒体 |
-
2010
- 2010-03-01 JP JP2010043967A patent/JP5495855B2/ja not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05130528A (ja) * | 1991-11-05 | 1993-05-25 | Oki Electric Ind Co Ltd | 視点可変テレビジヨンシステム |
JPH09322051A (ja) * | 1996-05-24 | 1997-12-12 | Nippon Hoso Kyokai <Nhk> | 自動撮影カメラシステム |
JP2000032435A (ja) * | 1998-07-10 | 2000-01-28 | Mega Chips Corp | 監視システム |
JP2001036891A (ja) * | 1999-06-10 | 2001-02-09 | Internatl Business Mach Corp <Ibm> | ブロードキャスト環境の視野を個別化するシステム、方法及び媒体。 |
WO2007119355A1 (ja) * | 2006-03-15 | 2007-10-25 | Omron Corporation | 追尾装置、追尾方法、追尾装置の制御プログラム、およびコンピュータ読み取り可能な記録媒体 |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014147016A (ja) * | 2013-01-30 | 2014-08-14 | Casio Comput Co Ltd | 画像選択装置、画像選択方法、画像配信システム及びプログラム |
JP2014155006A (ja) * | 2013-02-07 | 2014-08-25 | Nippon Telegr & Teleph Corp <Ntt> | 映像配信システム及び映像配信方法 |
JP2015056711A (ja) * | 2013-09-11 | 2015-03-23 | 日本電信電話株式会社 | 画像配信システム及び画像配信方法 |
JP2015185965A (ja) * | 2014-03-20 | 2015-10-22 | 大日本印刷株式会社 | 撮像システム、撮像方法、画像再生装置及びプログラム |
JP2018502488A (ja) * | 2014-11-18 | 2018-01-25 | ジェイ. ブラフ,アーレン | 視覚的画像アレイに関する、装置、方法およびシステム |
JP2017139725A (ja) * | 2016-02-03 | 2017-08-10 | パナソニックIpマネジメント株式会社 | 映像表示方法及び映像表示装置 |
JP2017208702A (ja) * | 2016-05-18 | 2017-11-24 | キヤノン株式会社 | 情報処理装置及びその制御方法、撮影システム |
JP2017212536A (ja) * | 2016-05-24 | 2017-11-30 | 日本電信電話株式会社 | 映像編集方法、映像編集装置及び映像編集プログラム |
JP2018026603A (ja) * | 2016-08-08 | 2018-02-15 | キヤノン株式会社 | 画像配信装置 |
KR20180070234A (ko) * | 2016-12-16 | 2018-06-26 | 주식회사 케이티 | 타임 슬라이스 영상을 제공하는 장치 및 사용자 단말 |
KR102139106B1 (ko) * | 2016-12-16 | 2020-07-29 | 주식회사 케이티 | 타임 슬라이스 영상을 제공하는 장치 및 사용자 단말 |
JP6241802B1 (ja) * | 2017-01-20 | 2017-12-06 | パナソニックIpマネジメント株式会社 | 映像配信システム、ユーザ端末装置および映像配信方法 |
WO2018135210A1 (ja) * | 2017-01-20 | 2018-07-26 | パナソニックIpマネジメント株式会社 | 映像配信システム、ユーザ端末装置および映像配信方法 |
JP2018117312A (ja) * | 2017-01-20 | 2018-07-26 | パナソニックIpマネジメント株式会社 | 映像配信システム、ユーザ端末装置および映像配信方法 |
KR20190019407A (ko) * | 2017-08-17 | 2019-02-27 | 주식회사 케이티 | 타임 슬라이스 영상을 제공하는 서버, 방법 및 사용자 단말 |
KR102105510B1 (ko) * | 2017-08-17 | 2020-04-28 | 주식회사 케이티 | 타임 슬라이스 영상을 제공하는 서버, 방법 및 사용자 단말 |
JP2020532903A (ja) * | 2017-09-05 | 2020-11-12 | フェイスブック,インク. | 撮像装置によって以前キャプチャされた動画データに基づく、撮像装置による動画データキャプチャの修正 |
US11558543B2 (en) | 2017-09-05 | 2023-01-17 | Meta Platforms, Inc. | Modifying capture of video data by an image capture device based on video data previously captured by the image capture device |
JP7258857B2 (ja) | 2017-09-05 | 2023-04-17 | メタ プラットフォームズ, インク. | 撮像装置によって以前キャプチャされた動画データに基づく、撮像装置による動画データキャプチャの修正 |
US11228790B2 (en) | 2018-11-30 | 2022-01-18 | Kt Corporation | Providing time slice video |
CN111757141A (zh) * | 2020-07-22 | 2020-10-09 | 四川新视创伟超高清科技有限公司 | 一种云端流媒体切画方法 |
CN111757141B (zh) * | 2020-07-22 | 2022-03-11 | 四川新视创伟超高清科技有限公司 | 一种云端流媒体切画方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5495855B2 (ja) | 2014-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5495855B2 (ja) | 映像処理装置及び映像処理方法 | |
US11006089B2 (en) | Information processing apparatus and information processing method | |
US10686985B2 (en) | Moving picture reproducing device, moving picture reproducing method, moving picture reproducing program, moving picture reproducing system, and moving picture transmission device | |
EP3522542B1 (en) | Switching between multidirectional and limited viewport video content | |
JP6385139B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
US11417062B2 (en) | Information processing device, information processing method, and program | |
EP3479257A1 (en) | Apparatus and method for gaze tracking | |
JP2015204512A (ja) | 情報処理装置、情報処理方法、カメラ、受信装置、受信方法 | |
JP5835932B2 (ja) | 画像処理装置、及びその制御方法 | |
CN105359504B (zh) | 利用摄像机位置顺位的图像信息处理方法和设备 | |
CN105939497B (zh) | 媒体串流***及媒体串流方法 | |
US11317073B2 (en) | Information processing apparatus, method of controlling information processing apparatus, and storage medium | |
JP2012142860A (ja) | 任意視点映像処理装置及びその制御方法、及びプログラム | |
JP5348114B2 (ja) | 情報表示システム、装置、方法及びプログラム | |
JP2020042407A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP5520146B2 (ja) | 映像受信装置、及びその制御方法 | |
JP2012151688A (ja) | 映像再生装置及びその制御方法、プログラム並びに記憶媒体 | |
WO2018004933A1 (en) | Apparatus and method for gaze tracking | |
JP2012034083A (ja) | 映像処理装置およびその制御方法 | |
JP6261191B2 (ja) | 表示制御装置、表示制御方法、プログラム | |
JP2012004991A (ja) | 放送受信装置及びその制御方法 | |
JP2019118136A (ja) | 情報処理装置、情報処理方法、カメラ、受信装置、受信方法 | |
JP2009296536A (ja) | 動画像中継配信装置、動画像中継配信方法及びプログラム | |
EP3635958B1 (en) | Image processing device and system | |
JPH11243508A (ja) | 画像表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130227 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130227 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20131114 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20131119 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131216 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140304 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5495855 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |