JP7080208B2 - 複数のメディアストリームの処理 - Google Patents
複数のメディアストリームの処理 Download PDFInfo
- Publication number
- JP7080208B2 JP7080208B2 JP2019206869A JP2019206869A JP7080208B2 JP 7080208 B2 JP7080208 B2 JP 7080208B2 JP 2019206869 A JP2019206869 A JP 2019206869A JP 2019206869 A JP2019206869 A JP 2019206869A JP 7080208 B2 JP7080208 B2 JP 7080208B2
- Authority
- JP
- Japan
- Prior art keywords
- media
- processor
- data
- event
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title description 31
- 230000015654 memory Effects 0.000 claims description 25
- 238000010586 diagram Methods 0.000 claims description 8
- 230000006399 behavior Effects 0.000 claims 1
- 230000033001 locomotion Effects 0.000 description 31
- 238000004891 communication Methods 0.000 description 30
- 238000003860 storage Methods 0.000 description 16
- 238000000034 method Methods 0.000 description 15
- 238000005259 measurement Methods 0.000 description 14
- 238000013480 data collection Methods 0.000 description 8
- 238000012937 correction Methods 0.000 description 7
- 230000007246 mechanism Effects 0.000 description 7
- 230000036772 blood pressure Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 206010011469 Crying Diseases 0.000 description 3
- 241000699670 Mus sp. Species 0.000 description 3
- 238000009434 installation Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000010344 pupil dilation Effects 0.000 description 2
- 230000006641 stabilisation Effects 0.000 description 2
- 238000011105 stabilization Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 1
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000002964 excitative effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003754 machining Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 235000021178 picnic Nutrition 0.000 description 1
- 230000035485 pulse pressure Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000010257 thawing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4383—Accessing a communication channel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
- H04N21/4667—Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/482—End-user interface for program selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Social Psychology (AREA)
- General Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Neurosurgery (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Biophysics (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- Biodiversity & Conservation Biology (AREA)
- Ecology (AREA)
- Emergency Management (AREA)
- Environmental & Geological Engineering (AREA)
- Environmental Sciences (AREA)
- Remote Sensing (AREA)
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Signal Processing For Recording (AREA)
- Studio Circuits (AREA)
Description
本出願は、2015年12月4日に出願された米国仮特許出願62/263,080号(整理番号P2015-09-16(01031-0066P)に基づく優先権と全ての利益を主張する。
)1つ以上のそれぞれのメディア装置から1つ以上のメディア入力アイテムを受信することと、iii)少なくとも前記イベントの種類の一連の規則に基づいて、前記イベントの進
捗を追跡することと、iv)前記イベントの前記進捗及び前記イベントの種類の前記一連の規則に基づいて、後続の出来事を予測することと、v)前記後続の出来事の前に、前記メ
ディア入力アイテムのうちの1つ以上を含む集約されたメディアアイテムを生成することであって、前記集約されたメディアアイテムは、前記1つ以上のメディア入力アイテムを共通の表示のために結合したものであり、前記集約されたメディアアイテムは、前記予測された後続の出来事の眺望が前記1つ以上のそれぞれのメディア装置に提供されるであろうかどうかの1つ以上のそれぞれの示唆を含む、ことと、vi)メディア出力アイテムに含める、前記集約されたメディアアイテムに含まれた前記メディア入力アイテムのうちの少なくとも1つ、を特定する1つ以上のコマンドを受信することと、vii)前記受信された
1つ以上のメディア入力アイテムに少なくとも部分的に基づき、かつ、記録される前記イベントの種類を表わすデータと、前記1つ以上のそれぞれのメディア装置の1つ以上の各位置とに少なくとも部分的に更に基づいて、前記メディア出力アイテムを生成することと、viii)少なくとも、記録される前記イベントの種類に基づいて、前記イベント中に前記1つ以上のそれぞれのメディア装置を配置するための、一連の1つ以上のそれぞれの推奨される固定位置の図を生成することと、を行うようにプログラムされるように、前記プロセッサにより実行可能な命令を前記メモリが格納する。
メディアスタジオを含むメディア処理システムは、ユーザがスタジオを実演中のイベントに持っていくことができるようにする。メディアスタジオは、複数のメディア入力情報(メディア入力アイテム;media inputitem)(本明細書では、集約されたメディア情報
(集約されたメディアアイテム)と称する)の同時プレビューなどのプレビュー、複数のメディア入力情報に基づいたメディア出力情報(メディア出力アイテム)の生成、メディア出力情報の共有、および、将来の視聴のためのメディア出力情報の格納の全てを、離れたオペレータコンソールを介して行うことを可能にする。メディアスタジオは、予め決められた規則に基づいて、メディア出力情報のための推奨を生成するように、および/または、メディア出力情報を直接生成するようにプログラムされ得る。なお、本明細書中における「メディア入力情報」、「メディア情報」、「メディア出力情報」という語句は、それぞれ「メディア入力アイテム」、「メディアアイテム」、「メディア出力アイテム」と同じ意味である。
ここで、図1をさらに詳しく参照すると、メディア処理システム10は、メディアスタジオ12、1つ以上のメディア装置16、1つ以上のデータ収集装置17を含む。1つ以上のメディア装置16は、オペレータコンソール18を含み、さらに1つ以上のカメラ2
0、1つ以上のビューア22、および、1つ以上のメディア記憶装置23を含んでもよい。メディア装置16およびデータ収集装置17は、メディアスタジオ12から離れていてもよく、また、メディアスタジオ12にローカル接続されていてもよい。メディア装置16およびデータ収集装置17は、ネットワーク14及び有線もしくは無線の直接接続82の内の少なくとも1つを介してメディアスタジオ12に接続されていてもよい。
ーザディスプレイ上で実質的に同時に表示されるように配置された一まとまりの2つ以上のメディア入力情報である。メディア入力情報は、ユーザのディスプレイ中で、サイド・バイ・サイド形式、並べた状態(in row)、ピクチャー・イン・ピクチャー形式などで見えるように配置され得る。さらに、集約されたメディア入力情報は、例えば、ユーザのディスプレイに表示され、ユーザからの入力を受け付けるグラフィカル・ユーザインタフェースを含み得る。後述するように、メディアスタジオ12は、集約されたメディア情報を、それをオペレータコンソール18へ提供する前に圧縮できる。
ファイバーなど)、および/または、無線通信メカニズム(セル方式、無線、衛星、マイクロ波、および、無線周波数)、ならびに、任意のネットワークトポロジ(あるいは、複数の通信メカニズムが使用される場合は、複数のトポロジ)の任意の望ましい組み合わせを含む。例示的な通信ネットワークは、無線通信ネットワーク、WiFiネットワークもしくは、イーサネット(登録商標)などのローカルエリアネットワーク(LAN)、および/または、インターネットのような広域ネットワーク(WAN)を含む。
られている一連の規格を指す。H.264は、国際電気通信連合(InternationalTelecommunications Union、ITU)によって広められている規格を指す。従って、限定とはな
らない例として、メディアコンテンツは、MPEG-1、MPEG-2、もしくは、H.264/MPEG-4アドバンスト・ビデオコーディング規格(AVC)(現在のところ、H.264およびMPEG-4は一貫性がある)、または、その他の1つ以上の規格に従った形式などの形式で提供され得る。例えば、メディアコンテンツは、MPEG2オーディオレイヤIII(MP3)、アドバンスト・オーディオコーディング(AAC)などの規格に従ってフォーマット化された音声データであり得る。さらに、前述の規格は、一般にメタデータを含めて提供する。
。
k=nは安定度である)。CQkは、k番目の種類の画像品質測定の相対的な重要性に対する重み因子であり、PQkは、k番目の種類の画像品質測定についてのスケーリングされた値である。重み因子CQkは、システム設計者かまたはユーザによって設定され得る。PQk値は、異なる種類の画像品質測定kの釣り合いが取れるようにスケーリングされ得る。
と通信可能に接続され得る。
・インタフェース(HDMI)などを含み得る。
ロセッサ41は、これらの操作で得られた結果をメディアスタジオ12に提供し得る。
(ISP)へのリンクを含み得る。リンクは、例えば、衛星通信もしくはケーブルネットワークなど、インターネット・サービス・プロバイダに接続して通信するためのメカニズムである。リンクは、衛星通信(例えば、Ka帯(18.3~30GHz)での通信)のための送受信器とアンテナを含み得る。ISPへのリンクは、ネットワーク14を介して、メディア装置16およびデータ収集装置17などからのインターネットプロトコル(IP)通信を受信し得る。
データカードにデータを格納し、マイクロSDデータカードからデータを取得するための既知のマイクロSDインタフェースを含み得る。さらに、補助装置インタフェース68は、メディア装置16への無線接続のための例えば、Bluetoothインタフェースを含み得る。補助装置インタフェース68は、データ収集装置17との接続にも使用され得る。
ィアスタジオ12のプロセッサ62によって行われうる様々な処理を以下で説明する。
〔1つ以上の入力メディア情報からの出力メディア情報の生成〕
一般に、メディアスタジオ12のプロセッサ62は、1つ以上のメディア入力情報を1つ以上のメディア装置16の各々から受信するようにプログラムされる。メディア入力情報は、前述のように、例えば、ネットワーク14を介して、もしくは、直接接続82を介して、受信され得る。メディア入力情報は、圧縮されたデータであっても良く、または、圧縮されていないデータであっても良い。データの圧縮に使用され得る圧縮規格の例は、H.264/MPEG4、MPEG1、MPEG2、および、アドバンスト・オーディオコーディング(AAC)を含む。さらに、様々な解像形式がデータに使用され得る。例えば、フル高解像度データは、1920×1080の解像度を提供し得る。他の解像度もまた、メディアスタジオ12で処理され得る。
メディアスタジオ12のプロセッサ62は、メディア入力情報に関連付けられている興奮レベルに基づいて、メディア出力情報に含めるためのメディア入力情報を選択しても良
い。興奮レベルは、データ収集装置17から受信した1つ以上の種類のデータに基づいて決定され得る。
信して、例えば、音量および/または他の既知の音声認識技術に従って、コースのうちのメディア装置16によって記録されている領域で、レースが刺激的になっていると決定できる。
メディアスタジオ12のプロセッサ62は、ブランクであるメディア入力情報、もしくは、偶発的に録画されたように見えるメディア入力情報を特定するようにプログラムされ得る。例えば、カメラのオペレータは、カメラ20が録画中であることを忘れて画像取得装置を地面、太陽などに向ける可能性がある。プロセッサ62は、例えば、カメラ20上のデータ収集装置17から、カメラ20が地面に向けられていることを示すデータを受信し得る。追加的もしくは代替的に、プロセッサ62は、地面の画像を認識でき、地面の画像は録画されているイベントに関連しないと判定でき、地面の画像をメディア出力情報から除去することができる。
メディアスタジオ12のプロセッサ62は、規則およびイベントに関連した競技場の種類に基づいて、1つ以上のメディア入力情報からメディア出力情報を作ることができる。規則に基づいて、プロセッサ62は、次の動作が行われうる場所を予測できても良い。プ
ロセッサ62は、ユーザからの入力に基づいて、競技場に関連する1つ以上のメディア装置16の位置、および、個々のメディア装置16によって録画されている競技場の領域を、さらに認識できる。プロセッサ62は、次の動作が予測されている競技場の領域からのメディア入力情報を表示することを選択しうる。
メディアスタジオ12のプロセッサ62は、特定のイベントに対して、そのイベントを取得するカメラ20の好ましい配置を推奨することができる。推奨は、例えば、使用可能なカメラ20の数、競技場の形、取得されるイベントについての知識などに基づいて生成され得る。
録画したいことを示し得る。例示的な競技場80を図6Aに示す。競技場80は、グローバル・ポジショニング・データが使用可能な屋外競技場80であっても良い。ユーザは、例えば、南北軸84と東西軸85に対して、競技場80に対する座標を設定しても良く、競技場80の最西の隅81を座標(0,0)に定義しても良い。
メディアスタジオ12プロセッサ62は、イベントの特定の参加者を追跡するようにプログラムされても良く、また、特定の対象物を追跡するようにプログラムされても良い。例えば、親はスポーツイベントの録画の際に、彼らの子供の参加を重視することを望む可能性がある。他の例では、プロセッサ62は、例えば、ボールの周辺での動作が録画されるように、バスケットボールの試合で使用されているバスケットボールを追跡するようにプログラムされ得る。
例えば、スポーツイベントなどのイベントを観戦している間に、視聴者が表示を一時停止することを選択しうる。視聴者がイベントの視聴を再開する準備ができたときに、視聴者は、一時停止していた間に起こった刺激的な瞬間についての最新の知識を取得することを希望しうる。ビューア22、他のメディア装置16、メディアスタジオ12、サーバ28などに関連付けられていても良いコンピュータ装置は、イベントの興奮度が少ない時期を飛ばしながら、刺激的な瞬間を特定して表示するようにプログラムされ得る。
ンピュータ装置は個々のセグメントについての興奮レベルを特定するデータを受信しうる。興奮レベルを決定すると考えられうるデータの非限定的なリストは、1人以上のカメラのオペレータに関連付けられるバイオメトリックデータ、観客が喝采したり叫んだりしているときの音声レベルデータ、速い動きもしくは試合で得点されたことなどを示す画像データ、画像データ中の観客の興奮した顔の表情、カメラ20が試合の動きを追っていることを示すカメラ20の速い動き、刺激的な瞬間の間のカメラオペレータからの入力(例えば、ハイライトボタンの押下)、イベントに関連するソーシャルメディアでの活動の増加を含む。データに基づいて、イベントの個々のセグメントに関連付けられた興奮レベルを決定するために1つ以上の規則が構成される。
メディアスタジオ12のプロセッサ62は、イベントを録画している間、ハイライトメディア出力情報を生成するようにプログラムされ得る。ハイライトメディア出力情報は、例えば、イベント中の刺激的なセグメントのみを含み得る。ハイライトメディア出力情報は、その後の使用のために、例えば、記憶装置23に記憶され得、または、サーバ28に送信され得る。
とに注意されたい。例えば、ハイライトメディア出力情報は、特定のプレーヤーを含む光景を特徴付け得る。
メディアスタジオ12のプロセッサ62は、イベントの録画中にイベント中に発生したピークの瞬間を特定するようにプログラムされ得る。ピークの瞬間は、興奮レベルがある予め決められた閾値を超えたイベント中の期間であり得る。興奮レベルは前述の通りに決定され得る。
本明細書で用いられるように、副詞“実質的に”は、形状、構造、寸法、品質、時間等が、材料、機械加工、製造の不完全性に起因して、正確に記述された幾何学的形状、距離、寸法、品質、時間等から外れ得ることを意味する。
のその他の物理的媒体、RAM、PROM、EPROM、フラッシュEEPOM、任意のその他のメモリチップ若しくはカートリッジ、又はコンピュータが読み取り得る任意のその他の媒体を含む。
Claims (10)
- プロセッサとメモリとを含むメディアスタジオを備えたシステムであって、
前記プロセッサが、
記録されるイベントの種類を表わすデータを受信することであって、前記イベントの種類は規則に関連付けられている、ことと、
1つ以上のそれぞれのメディア装置から1つ以上のメディア入力アイテムを受信することであって、前記メディア装置の各々は前記イベントに関連するそれぞれの位置にある、ことと、
前記イベントの進捗を追跡することと、前記イベントの種類に関連付けられた前記規則とに基づいて、次の動作が行われる場所を予測することと、
前記次の動作の前に、前記メディア入力アイテムのうちの1つ以上を含む集約されたメディアアイテムを生成することであって、前記集約されたメディアアイテムは、前記1つ以上のメディア入力アイテムを共通の表示のために結合したものであり、前記集約されたメディアアイテムは、前記予測される次の動作の眺望が提供されるであろう前記メディア装置の少なくとも1つのそれぞれから前記メディア入力アイテムの少なくとも1つが得られるという1つ以上のそれぞれの示唆を含む、ことと、
前記1つ以上のそれぞれの示唆に少なくとも部分的に基づき、前記メディア入力アイテムの前記少なくとも1つを含むようにメディア出力アイテムを生成することと、
を行うようにプログラムされるように、前記プロセッサにより実行可能な命令を前記メモリが格納する、システム。 - 前記プロセッサは、少なくとも、記録される前記イベントの種類に基づいて、前記イベント中に前記1つ以上のそれぞれのメディア装置を配置するための、一連の1つ以上のそれぞれの推奨される固定位置の図を生成するよう、更にプログラムされる、請求項1に記載のシステム。
- 前記プロセッサは、少なくとも、記録される前記イベントの種類に基づいて、前記1つ以上のそれぞれのメディア装置のための一連の1つ以上のそれぞれの好ましい位置を生成するよう、更にプログラムされる、請求項1又は2に記載のシステム。
- 前記プロセッサは、前記イベントの種類に関連付けられた前記規則に基づいて前記メディア出力アイテムを生成するよう、更にプログラムされる、請求項1乃至3のいずれか1項に記載のシステム。
- 前記プロセッサは、少なくとも、ユーザ入力を受信することに基づいて、前記イベントの前記進捗を追跡するよう、更にプログラムされる、請求項1乃至4のいずれか1項に記載のシステム。
- 前記プロセッサは、前記予測される次の動作の眺望が提供されるであろう前記メディア装置の前記少なくとも1つに関連付けられた前記それぞれの位置に基づいて前記メディア出力アイテムを生成するよう、更にプログラムされる、請求項1乃至5のいずれか1項に記載のシステム。
- 前記プロセッサは、少なくともそれぞれのメディア装置の数に基づいて、前記1つ以上のそれぞれのメディア装置についての前記一連の1つ以上のそれぞれの推奨される固定位置を生成するよう、更にプログラムされる、請求項2に記載のシステム。
- 前記プロセッサは、前記イベントの日時及び天候予報のうちの少なくとも一方に基づいて、前記1つ以上のそれぞれのメディア装置についての前記一連の1つ以上のそれぞれの推奨される固定位置を生成するよう、更にプログラムされる、請求項2に記載のシステム。
- 前記プロセッサは、少なくとも前記1つ以上のメディア装置の特性に基づいて、前記1つ以上のそれぞれのメディア装置についての前記一連の1つ以上のそれぞれの推奨される固定位置を生成するよう、更にプログラムされる、請求項2に記載のシステム。
- 前記プロセッサは、前記イベントの場の向き及び絶対的な位置のうちの少なくとも一方に基づいて、前記1つ以上のそれぞれのメディア装置についての前記一連の1つ以上のそれぞれの推奨される固定位置を生成するよう、更にプログラムされる、請求項2に記載のシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201562263080P | 2015-12-04 | 2015-12-04 | |
US62/263,080 | 2015-12-04 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018528960A Division JP6713537B2 (ja) | 2015-12-04 | 2016-12-02 | 複数のメディアストリームの処理 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020043584A JP2020043584A (ja) | 2020-03-19 |
JP7080208B2 true JP7080208B2 (ja) | 2022-06-03 |
Family
ID=57680524
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018528960A Active JP6713537B2 (ja) | 2015-12-04 | 2016-12-02 | 複数のメディアストリームの処理 |
JP2019206869A Active JP7080208B2 (ja) | 2015-12-04 | 2019-11-15 | 複数のメディアストリームの処理 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018528960A Active JP6713537B2 (ja) | 2015-12-04 | 2016-12-02 | 複数のメディアストリームの処理 |
Country Status (5)
Country | Link |
---|---|
US (4) | US10432981B2 (ja) |
EP (1) | EP3384495B1 (ja) |
JP (2) | JP6713537B2 (ja) |
CA (1) | CA3007361C (ja) |
WO (1) | WO2017096271A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10269133B2 (en) | 2017-01-03 | 2019-04-23 | Qualcomm Incorporated | Capturing images of a game by an unmanned autonomous vehicle |
WO2019106658A1 (en) * | 2017-11-29 | 2019-06-06 | Agt Global Media Gmbh | System and method of generating media content and related data structures |
US10595101B2 (en) | 2018-03-15 | 2020-03-17 | International Business Machines Corporation | Auto-curation and personalization of sports highlights |
US10728443B1 (en) | 2019-03-27 | 2020-07-28 | On Time Staffing Inc. | Automatic camera angle switching to create combined audiovisual file |
US10963841B2 (en) | 2019-03-27 | 2021-03-30 | On Time Staffing Inc. | Employment candidate empathy scoring system |
US11127232B2 (en) | 2019-11-26 | 2021-09-21 | On Time Staffing Inc. | Multi-camera, multi-sensor panel data extraction system and method |
US11023735B1 (en) | 2020-04-02 | 2021-06-01 | On Time Staffing, Inc. | Automatic versioning of video presentations |
CN111447460B (zh) * | 2020-05-15 | 2022-02-18 | 杭州当虹科技股份有限公司 | 一种将低延时网络应用于导播台的实现方法 |
US11144882B1 (en) | 2020-09-18 | 2021-10-12 | On Time Staffing Inc. | Systems and methods for evaluating actions over a computer network and establishing live network connections |
US11843808B2 (en) * | 2020-12-31 | 2023-12-12 | Comcast Cable Communications, Llc | Methods and systems for content management |
US11727040B2 (en) | 2021-08-06 | 2023-08-15 | On Time Staffing, Inc. | Monitoring third-party forum contributions to improve searching through time-to-live data assignments |
US11423071B1 (en) | 2021-08-31 | 2022-08-23 | On Time Staffing, Inc. | Candidate data ranking method using previously selected candidate data |
US11907652B2 (en) | 2022-06-02 | 2024-02-20 | On Time Staffing, Inc. | User interface and systems for document creation |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004343761A (ja) | 2003-05-16 | 2004-12-02 | Seiko Epson Corp | 制作コンテンツをビデオ会議の受動的参加者に配信するための方法及びシステム |
JP2015162117A (ja) | 2014-02-27 | 2015-09-07 | ブラザー工業株式会社 | サーバ装置、プログラム、及び情報処理方法 |
WO2015167739A1 (en) | 2014-04-30 | 2015-11-05 | Replay Technologies Inc. | System for and method of generating user-selectable novel views on a viewing device |
Family Cites Families (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6934461B1 (en) | 1999-01-05 | 2005-08-23 | Interval Research Corporation | Low attention recording, with particular application to social recording |
WO2002095600A1 (en) * | 2001-05-24 | 2002-11-28 | Electronic Advertising Solutions Innovators, Inc. Dba Easi, Inc. | System and method for managing in-theater display advertisements |
US7143354B2 (en) * | 2001-06-04 | 2006-11-28 | Sharp Laboratories Of America, Inc. | Summarization of baseball video content |
US7233684B2 (en) * | 2002-11-25 | 2007-06-19 | Eastman Kodak Company | Imaging method and system using affective information |
US20080177994A1 (en) | 2003-01-12 | 2008-07-24 | Yaron Mayer | System and method for improving the efficiency, comfort, and/or reliability in Operating Systems, such as for example Windows |
JP4641389B2 (ja) * | 2004-06-03 | 2011-03-02 | キヤノン株式会社 | 情報処理方法、情報処理装置 |
JP2007243573A (ja) * | 2006-03-08 | 2007-09-20 | Toshiba Corp | サーバ装置 |
US20080019669A1 (en) | 2006-07-18 | 2008-01-24 | Sahra Reza Girshick | Automatically editing video data |
US8333255B2 (en) * | 2007-03-03 | 2012-12-18 | Longyear Tm, Inc. | High productivity core drilling system |
EP2206114A4 (en) | 2007-09-28 | 2012-07-11 | Gracenote Inc | SYNTHETIZING A PRESENTATION OF A MULTIMEDIA EVENT |
JP5339737B2 (ja) * | 2008-02-08 | 2013-11-13 | 三菱電機株式会社 | 映像音声再生方法 |
JP2009267621A (ja) * | 2008-04-23 | 2009-11-12 | Yamaha Corp | 通信装置 |
US9185361B2 (en) | 2008-07-29 | 2015-11-10 | Gerald Curry | Camera-based tracking and position determination for sporting events using event information and intelligence data extracted in real-time from position information |
US9141859B2 (en) * | 2008-11-17 | 2015-09-22 | Liveclips Llc | Method and system for segmenting and transmitting on-demand live-action video in real-time |
US20100156906A1 (en) | 2008-12-19 | 2010-06-24 | David Montgomery | Shot generation from previsualization of a physical environment |
US9502073B2 (en) * | 2010-03-08 | 2016-11-22 | Magisto Ltd. | System and method for semi-automatic video editing |
WO2011123753A2 (en) * | 2010-04-01 | 2011-10-06 | Bruno Lowinger | Malignancy removal with tissue adhesive secured structure |
EP2403236B1 (en) | 2010-06-29 | 2013-12-11 | Stockholms Universitet Holding AB | Mobile video mixing system |
AT511294B1 (de) * | 2011-04-11 | 2013-06-15 | Blum Gmbh Julius | Schubladenausziehführung |
GB2493498A (en) * | 2011-07-18 | 2013-02-13 | Nds Ltd | Fast channel change using an aggregated video service |
US8636516B2 (en) * | 2011-07-28 | 2014-01-28 | Nicolaos Batsikouras | Apparatus and system for weighing food items |
US8789081B2 (en) * | 2011-09-02 | 2014-07-22 | Verizon Patent And Licensing Inc. | Video quality scoring |
US8412772B1 (en) | 2011-09-21 | 2013-04-02 | Color Labs, Inc. | Content sharing via social networking |
US20150000936A1 (en) * | 2011-12-13 | 2015-01-01 | Schlumberger Technology Corporation | Energization of an element with a thermally expandable material |
US20130205314A1 (en) * | 2012-02-07 | 2013-08-08 | Arun Ramaswamy | Methods and apparatus to select media based on engagement levels |
US20130259446A1 (en) | 2012-03-28 | 2013-10-03 | Nokia Corporation | Method and apparatus for user directed video editing |
US20130268955A1 (en) | 2012-04-06 | 2013-10-10 | Microsoft Corporation | Highlighting or augmenting a media program |
US20160071550A1 (en) * | 2014-09-04 | 2016-03-10 | Vixs Systems, Inc. | Video system for embedding excitement data and methods for use therewith |
GB2502063A (en) | 2012-05-14 | 2013-11-20 | Sony Corp | Video cueing system and method for sporting event |
US9659595B2 (en) | 2012-05-31 | 2017-05-23 | Nokia Technologies Oy | Video remixing system |
US9226227B2 (en) * | 2012-06-29 | 2015-12-29 | Marvell World Trade Ltd. | Group based beacons |
EP2929456A4 (en) | 2012-12-05 | 2016-10-12 | Vyclone Inc | METHOD AND DEVICE FOR AUTOMATIC PROCESSING |
WO2014209279A1 (en) | 2013-06-25 | 2014-12-31 | Intel Corporation | Management and access of media with media capture device operator perception data |
JP7210127B2 (ja) * | 2013-07-17 | 2023-01-23 | ヴィジブル ワールド リミテッド ライアビリティ カンパニー | コンテンツ提示管理のためのシステム及び方法 |
JP2015082692A (ja) * | 2013-10-21 | 2015-04-27 | 日本電信電話株式会社 | 映像編集装置、映像編集方法、および、映像編集プログラム |
US20150156529A1 (en) | 2013-12-04 | 2015-06-04 | United Video Properties, Inc. | Systems and methods for selectively transmitting user interaction information based on biometric information |
US20150178915A1 (en) * | 2013-12-19 | 2015-06-25 | Microsoft Corporation | Tagging Images With Emotional State Information |
AU2015206198B2 (en) | 2014-01-20 | 2017-06-29 | H4 Engineering, Inc. | Neural network for video editing |
US9510030B2 (en) * | 2014-02-13 | 2016-11-29 | Piksel, Inc. | Delivering media content to a content consuming user |
US20160142625A1 (en) | 2014-11-13 | 2016-05-19 | Lenovo (Singapore) Pte. Ltd. | Method and system for determining image composition attribute adjustments |
US20160225410A1 (en) * | 2015-02-03 | 2016-08-04 | Garmin Switzerland Gmbh | Action camera content management system |
US11006160B2 (en) * | 2015-08-24 | 2021-05-11 | Microsoft Technology Licensing, Llc | Event prediction enhancements |
US10674205B2 (en) | 2015-11-17 | 2020-06-02 | Rovi Guides, Inc. | Methods and systems for selecting a preferred viewpoint for media assets |
US9590941B1 (en) * | 2015-12-01 | 2017-03-07 | International Business Machines Corporation | Message handling |
-
2016
- 2016-12-02 CA CA3007361A patent/CA3007361C/en active Active
- 2016-12-02 WO PCT/US2016/064780 patent/WO2017096271A1/en active Application Filing
- 2016-12-02 JP JP2018528960A patent/JP6713537B2/ja active Active
- 2016-12-02 US US15/367,741 patent/US10432981B2/en active Active
- 2016-12-02 US US15/367,745 patent/US10440404B2/en active Active
- 2016-12-02 US US15/367,738 patent/US10425664B2/en active Active
- 2016-12-02 EP EP16819760.6A patent/EP3384495B1/en active Active
-
2019
- 2019-08-28 US US16/554,196 patent/US10848790B2/en active Active
- 2019-11-15 JP JP2019206869A patent/JP7080208B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004343761A (ja) | 2003-05-16 | 2004-12-02 | Seiko Epson Corp | 制作コンテンツをビデオ会議の受動的参加者に配信するための方法及びシステム |
JP2015162117A (ja) | 2014-02-27 | 2015-09-07 | ブラザー工業株式会社 | サーバ装置、プログラム、及び情報処理方法 |
WO2015167739A1 (en) | 2014-04-30 | 2015-11-05 | Replay Technologies Inc. | System for and method of generating user-selectable novel views on a viewing device |
Also Published As
Publication number | Publication date |
---|---|
CA3007361C (en) | 2021-09-07 |
US20170164014A1 (en) | 2017-06-08 |
JP2019505111A (ja) | 2019-02-21 |
JP6713537B2 (ja) | 2020-06-24 |
EP3384495B1 (en) | 2021-06-23 |
US10440404B2 (en) | 2019-10-08 |
US10848790B2 (en) | 2020-11-24 |
CA3007361A1 (en) | 2017-06-08 |
WO2017096271A1 (en) | 2017-06-08 |
EP3384495A1 (en) | 2018-10-10 |
JP2020043584A (ja) | 2020-03-19 |
US10432981B2 (en) | 2019-10-01 |
US20200068228A1 (en) | 2020-02-27 |
US20170164015A1 (en) | 2017-06-08 |
US20170164013A1 (en) | 2017-06-08 |
US10425664B2 (en) | 2019-09-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7080208B2 (ja) | 複数のメディアストリームの処理 | |
JP6948624B2 (ja) | 映像配信方法及びサーバ | |
US11283983B2 (en) | System and method for providing virtual pan-tilt-zoom, PTZ, video functionality to a plurality of users over a data network | |
US11343594B2 (en) | Methods and systems for an augmented film crew using purpose | |
US20160192009A1 (en) | Video delivery method for delivering videos captured from a plurality of viewpoints, video reception method, server, and terminal device | |
US11748870B2 (en) | Video quality measurement for virtual cameras in volumetric immersive media | |
US10873777B2 (en) | Information processing device and information processing method to calculate score for evaluation of action | |
CN105580013A (zh) | 通过搜索多个用户评论并将其覆盖到内容中来浏览视频 | |
US11398254B2 (en) | Methods and systems for an augmented film crew using storyboards | |
CN113315980B (zh) | 智能直播方法及直播物联网*** | |
US10453496B2 (en) | Methods and systems for an augmented film crew using sweet spots | |
US20150304571A1 (en) | Automated filming process for sport events | |
WO2020017354A1 (ja) | 情報処理装置、情報処理方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191115 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210126 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210331 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20210331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210831 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220426 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220524 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7080208 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |