JP2008244820A - 映像表示システム及び映像出力装置 - Google Patents
映像表示システム及び映像出力装置 Download PDFInfo
- Publication number
- JP2008244820A JP2008244820A JP2007082192A JP2007082192A JP2008244820A JP 2008244820 A JP2008244820 A JP 2008244820A JP 2007082192 A JP2007082192 A JP 2007082192A JP 2007082192 A JP2007082192 A JP 2007082192A JP 2008244820 A JP2008244820 A JP 2008244820A
- Authority
- JP
- Japan
- Prior art keywords
- video
- frame information
- output device
- interpolation frame
- display system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Systems (AREA)
Abstract
【課題】映像出力装置と映像再生装置間における通信状態などに基づいて、フレーム補間処理の負荷を分散できる映像表示システムを提供する。
【解決手段】映像表示システムは、映像信号を出力する映像出力装置2と、映像出力装置2からの映像信号を再生する映像再生装置3とがネットワークを介して接続される。映像出力装置2及び前記映像再生装置3は、映像信号の隣接する2つのフレームに基づいて補間フレーム情報を生成する補間フレーム情報生成部22a,32cを備え、映像出力装置2は、映像出力装置2と映像再生装置3間の通信状態を監視する通信状態監視部22dと、装置間の通信状態に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する条件判定部22cとを備える。
【選択図】図3
【解決手段】映像表示システムは、映像信号を出力する映像出力装置2と、映像出力装置2からの映像信号を再生する映像再生装置3とがネットワークを介して接続される。映像出力装置2及び前記映像再生装置3は、映像信号の隣接する2つのフレームに基づいて補間フレーム情報を生成する補間フレーム情報生成部22a,32cを備え、映像出力装置2は、映像出力装置2と映像再生装置3間の通信状態を監視する通信状態監視部22dと、装置間の通信状態に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する条件判定部22cとを備える。
【選択図】図3
Description
本発明は、フレーム補間された映像を表示する映像表示システム及び映像出力装置に関し、より詳細には、映像出力装置と映像再生装置との間でフレーム補間処理の負荷を分散可能な映像表示システム及び映像出力装置に関する。
最近、携帯端末などチューナ機能の無い映像再生装置と、チューナ機能とインターネット接続機能を備えた映像出力装置とを無線LANやインターネットを介して接続し、映像出力装置から映像再生装置へ映像信号を転送することで、映像再生装置でリアルタイムでテレビ視聴できるようにしたテレビ視聴システムが知られている。このテレビ視聴システムは、ロケーションフリー(登録商標)と呼ばれ、一般家庭への普及が進んでいる。
このテレビ視聴システムにおいて、映像出力装置はテレビ放送等の映像信号をリアルタイムでMPEG−4あるいはMPEG−2に変換してIPパケットとして映像再生装置に送信する。MPEG−4は、主として携帯端末向けの動画像符号化方式であるため、MPEG−2と比べて、ビットレートが低く、解像度が悪い。そこで、MPEG−4の動画像をより高画質で視聴しようとした場合、フレーム補間を行い、フレーム数を上げるなどの方法が考えられる。
一般に、フレーム補間の方法は、複数フレームからなる動画像信号に対して、隣接する2つのフレーム間に補間フレームを補間して、時間あたりの表示フレーム数を増大させることを目的としている。これにより、時間分解能が向上するため、液晶ディスプレイ(LCD: Liquid Crystal Display)などの表示装置における動画質を良くすることができる。
上記において、補間フレームを生成するためには、隣接する2つの原フレーム間の差分情報などである補間フレーム情報が必要となるが、通常の場合、特許文献1のように、映像再生装置がこの補間フレーム情報を生成している。
すなわち、映像再生装置は、映像出力装置が受信した映像信号の隣接する2つの原フレームから補間フレーム情報を生成し、この補間フレーム情報と2つの原フレームに基づいて、補間フレームを生成する。そして、2つの現フレームの間に補間フレームを挿入して映像表示させる。
図21は、従来の映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理を説明するための図で、図中、200は映像出力装置、300は映像再生装置を示す。
図22は、図21に示す従来の映像表示システムの構成を示すブロック図である。映像出力装置200は、映像受信部201,通信部202を備え、映像再生装置300は、通信部301,補間フレーム情報生成部302,表示部303,及び補間フレーム生成部304を備える。
図22は、図21に示す従来の映像表示システムの構成を示すブロック図である。映像出力装置200は、映像受信部201,通信部202を備え、映像再生装置300は、通信部301,補間フレーム情報生成部302,表示部303,及び補間フレーム生成部304を備える。
図21及び図22において、映像出力装置200は、映像受信部201が映像信号を受信すると、図示しない制御部が映像信号をデコードして複数の原フレーム1011,1012,…を抽出する。そして、通信部202がこれらの原フレーム1011,1012,…を映像再生装置300に送信する。
映像再生装置300は、通信部301が映像出力装置200から送信された原フレーム1011,1012,…を受信すると、補間フレーム情報生成部302が隣接する2つの原フレーム1011,1012から、補間フレームを生成するために必要な差分情報などの補間フレーム情報102を生成する。補間フレーム生成部304は、補間フレーム情報102と2つのフレーム1011,1012に基づいて、補間フレーム103を生成する。そして、表示部303は、2つのフレーム1011,1012と補間フレーム103からなる映像100を表示出力する。
特開2006−33219号公報
図21及び図22に示した従来システムにおいて、フレーム補間処理を実行した場合、映像再生装置側で必ず補間フレーム情報が生成され、この補間フレーム情報に基づいて補間フレームが生成される。しかし、映像出力装置と映像再生装置との間の通信状態が良好な場合や、映像再生装置の処理能力(例えばCPUの性能)が低い場合、映像再生装置のバッテリ残量が少ない場合などに、映像再生装置側で補間フレーム情報を生成することは必ずしも効率的とはいえない。
例えば、映像再生装置が携帯端末であれば、通常の場合、携帯端末の処理能力よりも映像出力装置の処理能力のほうが高いと考えられる。従って、両者の通信状態が良好であれば、処理能力の高い映像出力装置で補間フレーム情報を生成したほうが効率がよい。また、逆に、両者の通信状態が悪い場合、映像出力装置からのデータ送信量をできるだけ減らした方が好ましいため、映像再生装置で補間フレーム情報を生成したほうが効率的な場合がある。
このように、映像出力装置と映像再生装置において、装置間の通信状態などに応じてフレーム補間処理の負荷を分散させることは、効率的な処理を行うために有効であるが、このような技術思想はこれまで実現されていなかった。
本発明は、上述のごとき実情に鑑みてなされたものであり、映像出力装置と映像再生装置を備えた映像表示システムにおいて、装置間における通信状態や、映像再生装置の処理能力、バッテリ残量などに基づいて、フレーム補間処理の負荷を分散できる映像表示システム及び映像出力装置を提供すること、を目的とする。
上記課題を解決するために、本発明の第1の技術手段は、映像信号を出力する映像出力装置と、映像出力装置からの映像信号を再生する映像再生装置とがネットワークを介して接続された映像表示システムであって、映像出力装置及び映像再生装置は、映像信号に基づいて補間フレーム情報を生成する補間フレーム情報生成部を備え、映像出力装置及び/又は映像再生装置は、映像再生装置に係る所定の条件に基づいて、映像出力装置と映像再生装置のいずれで補間フレーム情報を生成するか判定する条件判定部を備えることを特徴としたものである。
第2の技術手段は、第1の技術手段において、条件判定部は、映像出力装置と映像再生装置間の通信状態を監視する通信状態監視部を備え、通信状態監視部により監視される映像出力装置と映像再生装置間の通信状態に基づいて、映像出力装置と映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴としたものである。
第3の技術手段は、第2の技術手段において、条件判定部は、通信状態が良好である場合、映像出力装置側で補間フレーム情報を生成すると判定し、通信状態が悪い場合、映像再生装置側で補間フレーム情報を生成すると判定することを特徴としたものである。
第4の技術手段は、第3の技術手段において、映像出力装置は、通信状態が悪い場合、映像信号のフレーム数を削減することを特徴としたものである。
第5の技術手段は、第1の技術手段において、条件判定部は、映像再生装置の処理能力に関わる情報を取得する能力情報取得部を備え、能力情報取得部により取得される映像再生装置の処理能力に基づいて、映像出力装置と映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴としたものである。
第6の技術手段は、第5の技術手段において、条件判定部は、映像再生装置の処理能力が所定レベル以上の場合、映像再生装置側で補間フレーム情報を生成すると判定し、映像再生装置の処理能力が所定レベル未満の場合、映像出力装置側で補間フレーム情報を生成すると判定することを特徴としたものである。
第7の技術手段は、第6の技術手段において、映像出力装置は、映像再生装置の処理能力が所定レベル以上の場合、映像信号のフレーム数を削減することを特徴としたものである。
第8の技術手段は、第1の技術手段において、条件判定部は、映像再生装置がバッテリを内蔵する場合、映像再生装置のバッテリ残量を監視するバッテリ残量監視部を備え、バッテリ残量監視部により監視される映像再生装置のバッテリ残量に基づいて、映像出力装置と映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴としたものである。
第9の技術手段は、第8の技術手段において、条件判定部は、映像再生装置のバッテリ残量が所定レベル以上の場合、映像再生装置側で補間フレーム情報を生成すると判定し、映像再生装置のバッテリ残量が所定レベル未満の場合、映像出力装置側で補間フレーム情報を生成すると判定することを特徴としたものである。
第10の技術手段は、第9の技術手段において、映像出力装置は、映像再生装置のバッテリ残量が所定レベル以上の場合、映像信号のフレーム数を削減することを特徴としたものである。
第11の技術手段は、第4,7,10のいずれかの技術手段において、映像出力装置は、映像信号から削減したフレームを生成するための補間フレーム情報を、映像信号の残りのフレームから生成することを特徴としたものである。
第12の技術手段は、第1乃至11のいずれかの技術手段において、映像再生装置は、映像出力装置に対して補間フレームの生成数を入力・指定する入力部を備え、
映像出力装置の補間フレーム情報生成部は、入力部から指定された補間フレーム数に対応する補間フレーム情報を生成することを特徴としたものである。
映像出力装置の補間フレーム情報生成部は、入力部から指定された補間フレーム数に対応する補間フレーム情報を生成することを特徴としたものである。
第13の技術手段は、第1乃至11のいずれかの技術手段において、補間フレーム情報生成部は、映像信号の隣接する2つのフレームに基づいて補間フレーム情報を生成することを特徴としたものである。
第14の技術手段は、第13の技術手段において、映像再生装置は、隣接する2つのフレームと、映像出力装置あるいは映像再生装置で生成された補間フレーム情報とに基づいて、隣接する2つのフレーム間に挿入するための補間フレームを生成する補間フレーム生成部を備えることを特徴としたものである。
第15の技術手段は、第1乃至11のいずれかの技術手段において、映像再生装置は、条件判定部により判定される条件をユーザが入力・指定する入力部を備え、条件判定部は、入力部から指定された判定条件に基づいて、映像出力装置と映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴としたものである。
第16の技術手段は、第1の技術手段において、映像出力装置と映像再生装置の両方で補間フレーム情報を生成する場合、映像出力装置の補間フレーム情報生成部が映像信号の一部のフレームから補間フレーム情報を生成し、映像再生装置の補間フレーム情報生成部が映像信号の残りのフレームから補間フレーム情報を生成することを特徴としたものである。
第17の技術手段は、映像信号に基づいて補間フレーム情報を生成可能な映像再生装置とネットワークを介して接続される映像出力装置であって、映像信号に基づいて補間フレーム情報を生成する補間フレーム情報生成部と、映像再生装置に係る所定の条件に基づいて、映像出力装置と映像再生装置のいずれで補間フレーム情報を生成するか判定する条件判定部とを備えることを特徴としたものである。
本発明によれば、映像出力装置と映像再生装置を備えた映像表示システムにおいて、装置間における通信状態や、映像再生装置の処理能力、バッテリ残量などに基づいて、フレーム補間処理の負荷を分散できるため、装置の状況に応じてフレーム補間処理を効率的に実行することができる。
以下、添付図面を参照しながら、本発明の映像表示システム及び映像出力装置の好適な実施の形態について説明する。なお、図面において同じ機能を有する部分については同じ符号を付し、繰り返しの説明は省略する。なお、本発明が適用されるフレーム信号は、互いに類似の関係にあるフィールド信号を含むものとする。
図1は、本発明の一実施形態に係る映像表示システムの構成例を示す図で、図中、1はテレビ装置、2は映像出力装置、3は映像再生装置、4はネットワークを示す。本発明の映像表示システムは、映像出力装置2と映像再生装置3とがネットワーク4を介して接続され、映像再生装置3に係る所定の条件として、例えば、装置間の通信状態や、映像再生装置3の処理能力、バッテリ残量などに基づいて、フレーム補間処理の負荷を分散させる。具体的には、映像出力装置2と映像再生装置3の両方で補間フレーム情報を生成可能としておき、装置間の通信状態などに基づいて、補間フレーム情報を生成させる装置を適応的に決定する。
図1において、映像表示システムは、例えば、ネットワーク4がインターネット、映像出力装置2がレコーダ、映像再生装置3が携帯端末(携帯電話機,PDAなど)である。本発明を適用可能な視聴形態は、例えば、家庭内に設置されたレコーダがテレビ放送などの映像信号を受信し、この映像信号をインターネット経由で携帯端末にリアルタイム転送する。そして、ユーザは携帯端末を用いて、レコーダから転送された映像信号を再生・視聴する。あるいは、レコーダのハードディスク等に映像信号を録画した後に、ユーザ所望のタイミングでこの録画映像をレコーダから携帯端末に転送し、携帯端末で再生・視聴するケースにも適用できる。
映像出力装置2と映像再生装置3で扱うデータ形式が異なる場合、例えば、映像出力装置2がMPEG−2対応で、映像再生装置3がMPEG−4対応である場合には、映像出力装置2が映像再生装置3で再生可能なデータ形式に映像信号を変換するようにしてもよい。また、映像出力装置2が1セグチューナ等を備えて映像再生装置3で再生可能な映像信号を受信するようにしてもよい。また、映像再生装置3が自身で再生可能なデータ形式に映像信号を変換するようにしてもよい。
なお、映像出力装置2が映像信号を取り込む際の入力ソースは、例えば、アナログチューナ,デジタルチューナに限定されず、内蔵ハードディスク,DVD等の外部記録媒体などを対象としてもよい。
(第1の実施形態)
図2は、本発明の第1の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、映像出力装置2が映像再生装置3との通信状態を監視する。
図2は、本発明の第1の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、映像出力装置2が映像再生装置3との通信状態を監視する。
図2(A)に示すように、装置間の通信状態が悪い場合、映像出力装置2からのデータ送信量は出来るだけ減らした方が通信負荷を軽減できるため、映像出力装置2で補間フレーム情報を生成せずに、隣接フレームである原フレーム101のみを映像再生装置3に送信する。映像再生装置3は、原フレーム101を受信すると、原フレーム101から補間フレーム情報を生成し、この補間フレーム情報と原フレーム101とに基づいて補間フレームを生成する。
一方、図2(B)に示すように、装置間の通信状態が良好である場合、映像出力装置2で補間フレーム情報102を生成し、この補間フレーム情報102と原フレーム101を映像再生装置3に送信する。映像再生装置3は、原フレーム101と補間フレーム情報102を受信すると、原フレーム101と補間フレーム情報102に基づいて補間フレームを生成する。
図3は、図2に示す映像表示システムの構成例を示すブロック図である。映像出力装置2は、テレビジョン放送信号(映像信号)を受信するチューナ(映像受信部)21と、装置の動作を制御するCPUなどで構成される制御部22と、テレビ番組等の映像データを記録するためのHDD(ハードディスクドライブ)23と、装置の動作を制御するための制御プログラム等を記憶するメモリ24と、ネットワーク4を介して映像再生装置3と接続するための通信部25とを備える。さらに制御部22は、チューナ21で受信した映像信号をデコードし、デコードした映像信号から補間フレーム情報を生成する補間フレーム情報生成部22aと、デコードした映像信号を再エンコードするエンコーダ22bと、映像再生装置3に係る所定の条件に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する条件判定部22cとを備える。
補間フレーム情報生成部22aは、例えば、映像信号の隣接する2つのフレームから補間フレーム情報を生成することが考えられるが、補間フレーム情報の生成に必要なフレームは隣接する2フレームに限らず、複数フレームであればよく、さらには、1つのフレームから補間フレームを生成可能な画像フォーマットであれば、必ずしも複数フレームでなくてもよい。
なお、映像出力装置2は、補間フレーム情報生成部22aでデコードした原フレームを映像再生装置3に送信する際に、原フレームのまま送信してもよいし、エンコーダ22bで再エンコードして送信するようにしてもよい。原フレームのまま送信する場合、エンコードする必要がないため、エンコーダ22bを構成から削除してもよい。
本実施形態の場合、条件判定部22cは、映像再生装置3との間の通信状態を監視する通信状態監視部22dを備える。条件判定部22cは、通信状態監視部22dにより監視される映像出力装置2と映像再生装置3間の通信状態に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
より具体的には、条件判定部22cは、通信状態監視部22dにより監視される通信状態が良好である場合、映像出力装置2で補間フレーム情報を生成すると判定し、通信状態が悪い場合、映像再生装置3で補間フレーム情報を生成すると判定する。
なお、条件判定部22cは、映像再生装置3側に備えてもよく、あるいは、映像出力装置2と映像再生装置3の両方に備えるようにしてもよい。この条件判定部22cを映像再生装置3に備える構成とした場合、この判定結果を映像再生装置3から映像出力装置2に通知するようにする。
ここで、通信状態の監視・判定方法の一例について説明する。映像再生装置3が映像出力装置2に対して、受信データの受信レート(1秒当りの受信データサイズ)を定期的あるいは所望のタイミングで通知する。受信レートが閾値以上の場合に通信状態が良好と判定し、受信レートが閾値未満の場合に通信状態が悪いと判定する。この閾値は予め決めておいてもよいし、ユーザが任意に設定できるようにしてもよい。
映像再生装置3は、ネットワーク4を介して映像出力装置2と接続するための通信部31と、装置の動作を制御するCPUなどで構成される制御部32と、映像データ等を記録するためのHDD(ハードディスクドライブ)33と、装置の動作を制御するための制御プログラム等を記憶するメモリ34と、映像データを表示出力する表示部35とを備える。さらに制御部32は、映像出力装置2からの映像信号をデコードするデコーダ32aと、映像信号の2つの原フレームと補間フレーム情報とに基づいて、2つの原フレーム間に挿入するための補間フレームを生成する補間フレーム生成部32bと、映像信号に基づいて補間フレーム情報を生成する補間フレーム情報生成部32cを備え、表示部35は、LCDなどで構成されるディスプレイ35aと、ディスプレイ35aに表示する画面データを格納するためのビデオRAM35bとを備える。
補間フレーム情報生成部32cは、前述の補間フレーム情報生成部22aと同様に、例えば、映像信号の隣接する2つのフレームから補間フレーム情報を生成することが考えられるが、補間フレーム情報の生成に必要なフレームは隣接する2フレームに限らず、複数フレームであればよく、さらには、1つのフレームから補間フレームを生成可能な画像フォーマットであれば、必ずしも複数フレームでなくてもよい。
デコーダ32aは、映像出力装置2で再エンコードされた原フレームを受信した場合、これをデコードするために必要となるが、再エンコードされていない原フレームを受信する場合、デコードする必要がないため、デコーダ32aを構成から削除してもよい。
図4は、本発明の第1の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するためのフロー図である。まず、映像出力装置2は、通信状態監視部22dが映像再生装置3との間の通信状態を監視し(ステップS1)、条件判定部22cが、前述の通信状態の判定方法に従って、通信状態が良好かどうかを判定する(ステップS2)。
映像出力装置2は、ステップS2において、通信状態が悪いと判定された場合(NOの場合)、出来る限りデータ送信量を減らす方が望ましいため、通信部25が原フレームのみを映像再生装置3に送信する(ステップS3)。この場合、補間フレーム情報生成部22aは補間フレーム情報を生成しないため、映像再生装置3側で補間フレーム情報が生成される。
映像再生装置3は、通信部31が映像出力装置2から原フレームを受信すると(ステップS4)、補間フレーム情報生成部32cが、隣接する2つの原フレームに基づいて補間フレーム情報を生成する(ステップS5)。そして、補間フレーム生成部32bが、隣接する2つの原フレームと補間フレーム情報とを用いて、原フレーム間に挿入する補間フレームを生成する(ステップS6)。そして、表示部35が、原フレームと補間フレームからなる映像を表示する(ステップS7)。
また、映像出力装置2は、ステップS2において、通信状態が良好と判定された場合(YESの場合)、映像出力装置2側で補間フレーム情報を生成したほうが効率的であるため、補間フレーム情報生成部22aが、隣接する2つの原フレームに基づいて補間フレーム情報を生成し(ステップS8)、通信部25が原フレームと補間フレーム情報を映像再生装置3に送信する(ステップS9)。
映像再生装置3は、通信部31が映像出力装置2からの原フレームと補間フレーム情報を受信すると(ステップS10)、ステップS6に移行して、補間フレーム生成部32bが、隣接する2つの原フレームと補間フレーム情報とを用いて、原フレーム間に挿入する補間フレームを生成し、表示部35が原フレームと補間フレームからなる映像を表示する。
図5、図6は、本発明に係るフレーム補間方法の一例を説明するための図である。本発明に適用可能なフレーム補間方法は特に限定されるものではなく、動き補間や線形補間など公知の方法を用いることができる。このフレーム補間方法は、補間フレーム情報生成部22a(または補間フレーム情報生成部32c)及び補間フレーム生成部32bにより実行される。
図5において、フレームTが、フレーム1とフレーム2の間に挿入される補間フレームである。このフレームTを生成するために、例えば、図6に示す差分情報による方法を用いることができる。
図5において、フレームTが、フレーム1とフレーム2の間に挿入される補間フレームである。このフレームTを生成するために、例えば、図6に示す差分情報による方法を用いることができる。
図6において、フレーム1における任意の画素(x,y)のフレーム情報をF1(x,y)とし、フレーム2における画素(x,y)のフレーム情報をF2(x+dx,y+dy)とする。このフレーム情報F2のdx,dyは情報の変化量を示す。そして、補間フレームTにおける画素(x,y)のフレーム情報は、Ft(x+1/2dx,y+1/2dy)となる。これより、フレーム1,2のフレーム情報F1,F2と、フレーム1,2の変化量である差分情報(すなわち補間フレーム情報)があれば、フレーム情報Ftが求まり、補間フレームTを生成することができる。
図7は、映像出力装置による補間フレーム情報生成処理の一例を説明するためのフロー図である。まず、映像出力装置2は、映像受信部21により受信映像を取得すると(ステップS11)、補間フレーム情報生成部22aが映像を復号(デコード)する(ステップS12)。そして、補間フレーム情報生成部22aが、復号した映像の隣接2フレーム(原フレーム)から補間フレーム情報を作成し(ステップS13)、通信部25に原フレームと補間フレーム情報を渡す(ステップS14)。
図8は、本発明の第1の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の変形例を説明するためのフロー図である。本例では、装置間の通信状態が悪い場合に、ビットレートを落とさずに、フレームレートを落として通信負荷を軽減し、映像再生装置側で補間して再生する場合について説明する。すなわち、本発明は、前述の図4に示したように、原フレームに補間フレームを追加してフレーム数を増やすケースだけでなく、本例に示すように、原フレームから間引かれた分の補間フレームを生成するケースにも適用可能である。
まず、映像出力装置2は、通信状態監視部22dが映像再生装置3との間の通信状態を監視し(ステップS21)、条件判定部22cが、前述の通信状態の判定方法に従って、通信状態が良好かどうかを判定する(ステップS22)。
映像出力装置2は、ステップS22において、通信状態が良好と判定された場合(YESの場合)、通信部25が原フレームを映像再生装置3に送信する(ステップS23)。
映像再生装置3は、通信部31が映像出力装置2から原フレームを受信すると(ステップS24)、表示部35が原フレームからなる映像を表示する(ステップS25)。
映像再生装置3は、通信部31が映像出力装置2から原フレームを受信すると(ステップS24)、表示部35が原フレームからなる映像を表示する(ステップS25)。
また、映像出力装置2は、ステップS22において、通信状態が悪いと判定された場合(NOの場合)、通信負荷を軽減するために、制御部22が原フレームを一部間引き(ステップS26)、通信部25が残りの原フレームを映像再生装置3に送信する(ステップS27)。この場合、補間フレーム情報生成部22aは補間フレーム情報を生成しないため、映像再生装置3側で補間フレーム情報が生成される。
映像再生装置3は、通信部31が映像出力装置2から残りの原フレームを受信すると(ステップS28)、補間フレーム情報生成部32cが、隣接する2つの原フレームに基づいて補間フレーム情報を生成する(ステップS29)。そして、補間フレーム生成部32bが、隣接する2つの原フレームと補間フレーム情報とを用いて、原フレーム間に挿入する補間フレームを生成する(ステップS30)。そして、表示部35が、原フレームと補間フレームからなる映像を表示する(ステップS31)。
本例の場合、原フレームから間引かれた分のフレームが補間フレームとして挿入されるため、映像再生装置3で再生されるフレーム数は原フレームと同じフレーム数となる。なお、映像再生装置3において、原フレームから間引かれた分の補間フレームを用いて、さらに補間フレームを生成するようにしてもよい。この場合、原フレームよりフレーム数が増加するため、動画質の向上を図ることができる。
また、上記変形例において、補間フレーム情報は原フレームほどデータ量が大きくないため、映像出力装置2で単純に間引くだけではなく、間引いた後、間引かなかった残りのフレームより補間フレーム情報を生成してもよい。この場合、映像出力装置2は、残りのフレームと補間フレーム情報を映像再生装置3に送信する。これによれば、映像出力装置2が補間フレーム情報を生成するため、映像再生装置3で補間フレーム情報を生成する負荷を軽減することができる。
このように、本実施形態によれば、映像出力装置と映像再生装置を備えた映像表示システムにおいて、装置間における通信状態に基づいて、フレーム補間処理の負荷を分散できるため、フレーム補間処理を効率的に実行することができる。
(第2の実施形態)
図9は、本発明の第2の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、映像出力装置2が映像再生装置3の処理能力に関わる情報(スペック情報)を取得する。
図9は、本発明の第2の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、映像出力装置2が映像再生装置3の処理能力に関わる情報(スペック情報)を取得する。
図9(A)に示すように、映像再生装置3のスペックが高い場合、映像再生装置3で補間フレーム情報を生成した方が通信負荷を軽減できるため、映像出力装置2で補間フレーム情報を生成せずに、隣接フレームである原フレーム101のみを映像再生装置3に送信する。映像再生装置3は、原フレーム101を受信すると、原フレーム101から補間フレーム情報を生成し、この補間フレーム情報と原フレーム101とに基づいて補間フレームを生成する。
一方、図9(B)に示すように、映像再生装置3のスペックが低い場合、映像出力装置2側で補間フレーム情報を生成した方が映像再生装置3の処理負荷を軽減できるため、映像出力装置2が補間フレーム情報102を生成し、この補間フレーム情報102と原フレーム101を映像再生装置3に送信する。映像再生装置3は、原フレーム101と補間フレーム情報102を受信すると、原フレーム101と補間フレーム情報102に基づいて補間フレームを生成する。
図10は、図9に示す映像表示システムの構成例を示すブロック図である。映像出力装置2は、図3に示した構成と同様に、チューナ(映像受信部)21,制御部22,HDD23,メモリ24,及び通信部25を備え、さらに制御部22は、補間フレーム情報生成部22a,エンコーダ22b,及び条件判定部22cを備える。
本実施形態の場合、条件判定部22cは、映像再生装置3の処理能力に係る情報を取得する本発明の能力情報取得部に相当するスペック情報取得部22eを備える。条件判定部22cは、スペック情報取得部22eにより取得される映像再生装置3の処理能力に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
より具体的には、条件判定部22cは、映像再生装置3のスペックが所定レベル以上(例えば「高」以上)の場合、映像再生装置3で補間フレーム情報を生成すると判定し、映像再生装置3のスペックが所定レベル未満(例えば「高」未満)の場合、映像出力装置2で補間フレーム情報を生成すると判定する。
なお、第1の実施形態と同様に、条件判定部22cは、映像再生装置3側に備えてもよく、あるいは、映像出力装置2と映像再生装置3の両方に備えるようにしてもよい。この条件判定部22cを映像再生装置3に備える構成とした場合、この判定結果を映像再生装置3から映像出力装置2に通知するようにする。
ここで、スペック情報の取得方法の一例について説明する。スペック情報取得部22eは、映像再生装置3のスペック情報を、映像出力装置2と映像再生装置3間での通信開始時や、装置間で定期的に通信することで取得する。スペック情報の具体例としてはCPUクロックなどが挙げられる。CPUクロックの場合、映像出力装置2は、例えば、クロック200MHz以下ではスペック「低」、クロック200〜500MHzではスペック「中」、クロック500MHz以上ではスペック「高」といったように、クロック周波数とスペックレベルとを関連付けたテーブルをメモリ24に予め保持しておいてもよい。条件判定部22cは、スペック情報取得部22eにより映像再生装置3のCPUクロック情報を取得すると、メモリ24を参照し、映像再生装置3のCPUクロックに対応するスペックレベルに基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
または、映像再生装置3が上記テーブルをメモリ34に保持してもよい。この場合、映像再生装置3は、映像出力装置2からスペック情報の取得要求があった際に、メモリ34を参照し、自身のスペックレベルを映像出力装置2に送信する。映像出力装置2の条件判定部22cは、スペック情報取得部22eにより映像再生装置3のスペックレベルを取得すると、このスペックレベルに基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
映像再生装置3は、図3に示した構成と同様に、通信部31,制御部32,HDD33,メモリ34,及び表示部35を備える。さらに制御部32は、デコーダ32a,補間フレーム生成部32b,及び補間フレーム情報生成部32cを備え、表示部35は、ディスプレイ35a,ビデオRAM35bを備える。
また、第2の実施形態の変形例として、映像再生装置3のスペックが高い場合、映像出力装置2でフレームレートを落として送信し、映像再生装置3でフレーム補間して再生するようにしてもよい。これにより、映像出力装置2からはフレーム数を落として送信することができるため、通信負荷を軽減することができる。
また、上記変形例において、補間フレーム情報は原フレームほどデータ量が大きくないため、映像出力装置2で単純に間引く(フレームレートを落とす)だけではなく、間引いた後、間引かなかった残りのフレームより補間フレーム情報を生成してもよい。この場合、映像出力装置2は、残りのフレームと補間フレーム情報を映像再生装置3に送信する。これによれば、映像出力装置2が補間フレーム情報を生成するため、映像再生装置3で補間フレーム情報を生成する負荷を軽減することができる。
このように、本実施形態によれば、映像出力装置と映像再生装置を備えた映像表示システムにおいて、映像再生装置のスペックに基づいて、フレーム補間処理の負荷を分散できるため、フレーム補間処理を効率的に実行することができる。
(第3の実施形態)
図11は、本発明の第3の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、映像再生装置3がバッテリを備え、映像出力装置2が映像再生装置3のバッテリ残量を監視する。
図11は、本発明の第3の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、映像再生装置3がバッテリを備え、映像出力装置2が映像再生装置3のバッテリ残量を監視する。
図11(A)に示すように、映像再生装置3のバッテリ残量が多い場合、映像再生装置3で補間フレーム情報を生成した方が通信負荷を軽減できるため、映像出力装置2で補間フレーム情報を生成せずに、隣接フレームである原フレーム101のみを映像再生装置3に送信する。映像再生装置3は、原フレーム101を受信すると、原フレーム101から補間フレーム情報を生成し、この補間フレーム情報と原フレーム101とに基づいて補間フレームを生成する。
一方、図11(B)に示すように、映像再生装置3のバッテリ残量が少ない場合、映像出力装置2側で補間フレーム情報を生成した方がバッテリを長持ちさせることができるため、映像出力装置2が補間フレーム情報102を生成し、この補間フレーム情報102と原フレーム101を映像再生装置3に送信する。映像再生装置3は、原フレーム101と補間フレーム情報102を受信すると、原フレーム101と補間フレーム情報102に基づいて補間フレームを生成する。
図12は、図11に示す映像表示システムの構成例を示すブロック図である。映像出力装置2は、図3に示した構成と同様に、チューナ(映像受信部)21,制御部22,HDD23,メモリ24,及び通信部25を備え、さらに制御部22は、補間フレーム情報生成部22a,エンコーダ22b,及び条件判定部22cを備える。
本実施形態の場合、条件判定部22cは、映像再生装置3のバッテリ残量を監視するバッテリ残量監視部22fを備える。条件判定部22cは、バッテリ残量監視部22fにより監視される映像再生装置3のバッテリ残量に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
より具体的には、条件判定部22cは、映像再生装置3のバッテリ残量が所定レベル以上(例えば「中」以上)の場合、映像再生装置3で補間フレーム情報を生成すると判定し、映像再生装置3のバッテリ残量が所定レベル未満(例えば「中」未満)の場合、映像出力装置2で補間フレーム情報を生成すると判定する。
なお、第1,第2の実施形態と同様に、条件判定部22cは、映像再生装置3側に備えてもよく、あるいは、映像出力装置2と映像再生装置3の両方に備えるようにしてもよい。この条件判定部22cを映像再生装置3に備える構成とした場合、この判定結果を映像再生装置3から映像出力装置2に通知するようにする。
ここで、バッテリ残量の監視・判定方法の一例について説明する。バッテリ残量監視部22fは、映像再生装置3のバッテリ残量を、映像出力装置2と映像再生装置3間での通信開始時や、装置間で定期的に通信することで取得する。バッテリ残量の場合、映像出力装置2は、例えば、バッテリ電圧1V以下では残量「少」、バッテリ電圧1〜2.5Vでは残量「中」、バッテリ電圧2.5V以上では残量「多」といったように、バッテリ電圧と残量レベルとを関連付けたテーブルをメモリ24に予め保持しておいてもよい。条件判定部22cは、バッテリ残量監視部22fにより映像再生装置3のバッテリ電圧を取得すると、メモリ24を参照し、映像再生装置3のバッテリ電圧に対応する残量レベルに基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
または、映像再生装置3が上記テーブルをメモリ34に保持してもよい。この場合、映像再生装置3は、映像出力装置2からバッテリ残量の取得要求があった際に、メモリ34を参照し、自身の残量レベルを映像出力装置2に送信する。映像出力装置2の条件判定部22cは、バッテリ残量監視部22fにより映像再生装置3の残量レベルを取得すると、この残量レベルに基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。
映像再生装置3は、図3に示した構成と同様に、通信部31,制御部32,HDD33,メモリ34,表示部35を備え、さらにバッテリ36を備える。制御部32は、デコーダ32a,補間フレーム生成部32b,及び補間フレーム情報生成部32cを備え、表示部35は、ディスプレイ35a,ビデオRAM35bを備える。
また、第3の実施形態の変形例として、映像再生装置3のバッテリ残量が多い場合、映像出力装置2でフレームレートを落として送信し、映像再生装置3でフレーム補間して再生するようにしてもよい。これにより、映像出力装置2からはフレーム数を落として送信することができるため、通信負荷を軽減することができる。
また、上記変形例において、補間フレーム情報は原フレームほどデータ量が大きくないため、映像出力装置2で単純に間引く(フレームレートを落とす)だけではなく、間引いた後、間引かなかった残りのフレームより補間フレーム情報を生成してもよい。この場合、映像出力装置2は、残りのフレームと補間フレーム情報を映像再生装置3に送信する。これによれば、映像出力装置2が補間フレーム情報を生成するため、映像再生装置3で補間フレーム情報を生成する負荷を軽減することができる。
また、映像再生装置3のバッテリ残量が少ない場合、映像再生装置3の処理能力(CPUクロックなど)を落として、消費電力を低減するように制御してもよい。CPUによっては処理能力を制御できるものがあり、例えば、200MHzで動作するモード、500MHzで動作するモードを持つものがある。通常、処理能力を上げると消費電力は大きくなる。
従って、バッテリ残量が少ない場合、できるだけバッテリを長持ちさせるために、映像再生装置3を処理能力の小さい200MHzで動作させ、映像出力装置2側で補間フレーム情報を生成する。一方、バッテリ残量が多い場合、通信負荷を軽減するために、映像再生装置3を処理能力の大きい500MHzで動作させ、映像再生装置3側で補間フレーム情報を生成するようにしてもよい。
このように、本実施形態によれば、映像出力装置と映像再生装置を備えた映像表示システムにおいて、映像再生装置のバッテリ残量に基づいて、フレーム補間処理の負荷を分散できるため、フレーム補間処理を効率的に実行することができる。
以上に説明した第1〜第3の実施形態においては、条件判定部22cが、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定したが、映像出力装置2と映像再生装置3の両方で補間フレーム情報を生成するようにしてもよい。この場合、映像出力装置2の補間フレーム情報生成部22aが映像信号の一部のフレームから補間フレーム情報を生成し、映像再生装置3の補間フレーム情報生成部32cが映像信号の残りのフレームから補間フレーム情報を生成する。
例えば、15フレームの映像信号を30フレームにフレーム補間する場合、1−2,2−3,…,7−8フレーム間の補間フレーム情報を映像出力装置2で生成し、残りの8−9,9−10,…,14−15フレーム間の補間フレーム情報を映像再生装置3で生成する。この補間フレーム情報生成処理を2つの装置で同時に行うことで、効率的に負荷の分散を図ることができる。なお、2つの装置間の負荷の割合(すなわち、映像出力装置2と映像再生装置3それぞれに何フレームずつ割り当てるか)は、原フレーム数に応じて予め設定しておいてもよく、ユーザが任意に設定できるようにしてもよい。
また、条件判定部22cが判定する条件、すなわち、装置間の通信状態や、映像再生装置3の処理能力、バッテリ残量などに基づいて、2つの装置間の負荷の割合を決定するようにしてもよい。例えば、通信状態が良好であれば、映像再生装置3の処理負荷を軽減するために、映像出力装置2の負荷の割合を多くして補間フレーム情報を生成し、一方、通信状態が悪い場合、通信負荷を軽減するために、映像再生装置3の負荷の割合を多くして補間フレーム情報を生成する。
(第4の実施形態)
図13は、本発明の第4の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、前述の第1〜第3の実施形態のいずれかにおいて、補間フレームの生成数を任意に変更可能とする。
図13は、本発明の第4の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、前述の第1〜第3の実施形態のいずれかにおいて、補間フレームの生成数を任意に変更可能とする。
図13(A)に示すように、映像再生装置3から低画質(普通)モードが設定された場合、補間フレームを追加しないため、映像出力装置2は原フレーム1011,1012のみを映像再生装置3に送信し、映像再生装置3はこれらの原フレーム1011,1012からなる映像100を表示出力する。
また、図13(B)に示すように、映像再生装置3から中画質モードが設定された場合、補間フレームを例えば1つ追加するため、映像出力装置2は原フレーム1011,1012と補間フレーム情報102を映像再生装置3に送信し、映像再生装置3はこれらの原フレーム1011,1012と補間フレーム情報102に基づいて、補間フレーム103を生成し、原フレーム1011,1012と補間フレーム103からなる映像100を表示出力する。
また、図13(C)に示すように、映像再生装置3から高画質モードが設定された場合、補間フレームを例えば3つ追加するため、映像出力装置2は原フレーム1011,1012と補間フレーム情報1021,1022,1023を映像再生装置3に送信し、映像再生装置3はこれらの原フレーム1011,1012と補間フレーム情報1021,1022,1023に基づいて、補間フレーム1031,1032,1033を生成し、原フレーム1011,1012と補間フレーム1031,1032,1033からなる映像100を表示出力する。この場合、映像出力装置2において、まず、原フレーム1011,1012から補間フレーム情報1021を生成し、この補間フレーム情報1021から補間フレーム103を生成し、さらに、原フレーム1011,1012と補間フレーム103から補間フレーム情報1022,1023を生成する。
図14は、図13に示す映像表示システムの構成例を示すブロック図である。映像出力装置2は、図3に示した構成と同様に、チューナ(映像受信部)21,制御部22,HDD23,メモリ24,及び通信部25を備え、さらに制御部22は、補間フレーム情報生成部22a,エンコーダ22b,及び条件判定部22cを備える。
また、映像再生装置3は、図3に示した構成と同様に、通信部31,制御部32,HDD33,メモリ34,表示部35を備え、さらに入力部37を備える。制御部32は、デコーダ32a,補間フレーム生成部32b,及び補間フレーム情報生成部32cを備え、表示部35は、ディスプレイ35a,ビデオRAM35bを備える。
本実施形態の場合、映像再生装置3は、映像出力装置2に対して補間フレームの生成数を入力・指定する入力部37を備える。この入力部37は、ユーザ操作に従って、図15に示す画質モード指定画面を表示させる。本例の画質モード指定画面は、「高画質」,「中画質」,「普通」の3段階で構成され、ユーザが所望の画質モードを選択し、送信ボタンを押下すると、選択された画質モードが映像出力装置2へ送信される。
映像出力装置2の補間フレーム情報生成部22aは、図13に示したように、映像再生装置3からの画質モードに応じた補間フレーム数に対応する補間フレーム情報を生成する。画質モードと補間フレーム数との対応関係を示すテーブルの例を後述の図17に示す。なお、図17に示すテーブルはメモリ24に予め記憶しておいてもよい。
図16は、本発明の第4の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するためのフロー図である。まず、映像出力装置2は、映像再生装置3の入力部37から受け付けた画質モード情報に基づいて画質モードを決定し(ステップS41)、図17に示すテーブルに基づいて、画質モードから補間フレーム数を決定する(ステップS42)。そして、映像出力装置2は、補間フレーム情報生成部22aが補間フレーム数に基づいて補間フレーム情報を生成し(ステップS43)、通信部25が原フレームと補間フレーム情報を映像再生装置3に送信する(ステップS44)。
映像再生装置3は、通信部31が原フレームと補間フレーム情報を受信し(ステップS45)、補間フレーム生成部32bが原フレームと補間フレーム情報を用いて、補間フレームを生成する(ステップS46)。そして、表示部35が原フレームと補間フレームからなる映像を表示する(ステップS47)。
また、第4の実施形態の変形例として、映像出力装置2と映像再生装置3を接続する通信回線が高速回線あるいは低速回線に切り換え可能なシステムの場合、映像再生装置3から指定された補間フレーム数に応じて、通信回線を切り換えるようにしてもよい。例えば、補間フレーム数が多い場合、高速回線に切り換え、補間フレーム数が少ない場合、低速回線に切り換えるように制御する。
本実施形態によれば、映像出力装置と映像再生装置を備えた映像表示システムにおいて、装置間の通信状態や、映像再生装置の処理能力、バッテリ残量などに基づいて、フレーム補間処理の負荷を分散できるため、フレーム補間処理を効率的に実行することができ、さらに、ユーザによって補間フレーム数を任意に指定することができるため、番組内容などに応じた最適なフレーム補間処理を行うことが可能となる。例えば、ユーザが視聴する番組が、高画質で見たい番組であれば補間フレーム数を増やし、普通画質でよければ補間しない、といったように補間フレーム数を指定することができる。
また、映像再生装置3が備える入力部37は、条件判定部22cにより判定される条件をユーザが任意に入力・指定するための入力画面を表示するようにしてもよい。条件判定部22cは、入力部37から指定された判定条件に基づいて、映像出力装置2と映像再生装置3のいずれで補間フレーム情報を生成するか判定する。ユーザが指定できる条件は、例えば、装置間の通信状態や、映像再生装置3の処理能力、バッテリ残量などである。
そして、各条件の判定基準に基づく負荷分散のさせ方なども指定できるようにしてもよい。具体例としては、前述したように、通信状態が良好であれば、映像出力装置2側で補間フレーム情報を生成し、通信状態が悪い場合、映像再生装置3側で補間フレーム情報を生成するなど、ユーザ指定の条件に応じて、どのように負荷を分散させるかを任意に指定させてもよい。
(第5の実施形態)
図18は、本発明の第5の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、装置間の通信状態や、映像再生装置3の処理能力やバッテリ残量などに係らず、常に映像出力装置2が補間フレーム情報を生成する。
図18は、本発明の第5の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するための図である。本実施形態では、装置間の通信状態や、映像再生装置3の処理能力やバッテリ残量などに係らず、常に映像出力装置2が補間フレーム情報を生成する。
映像出力装置2が、隣接する2つの原フレーム1011,1012に基づいて、補間フレーム情報102を生成し、この補間フレーム情報102と原フレーム1011,1012を映像再生装置3に送信する。映像再生装置3は、原フレーム1011,1012と補間フレーム情報102を受信すると、原フレーム1011,1012と補間フレーム情報102に基づいて補間フレーム103を生成し、原フレーム1011,1012と補間フレーム103からなる映像100を表示出力する。
図19は、図18に示す映像表示システムの構成例を示すブロック図である。映像出力装置2は、チューナ(映像受信部)21,制御部22,HDD23,メモリ24,及び通信部25を備え、さらに制御部22は、補間フレーム情報生成部22a,及びエンコーダ22bを備える。本例の場合、常に補間フレーム情報生成部22aで補間フレーム情報を生成するため、条件判定部22cを構成に含まないようにしてもよい。
一方、映像再生装置3は、通信部31,制御部32,HDD33,メモリ34,表示部35を備える。制御部32は、デコーダ32a,及び補間フレーム生成部32bを備え、表示部35は、ディスプレイ35a,ビデオRAM35bを備える。本例の場合、常に映像出力装置2の補間フレーム情報生成部22aで補間フレーム情報を生成するため、補間フレーム情報生成部32cを構成に含まないようにしてもよい。
図20は、本発明の第5の実施形態に係る映像表示システムを構成する映像出力装置と映像再生装置によるフレーム補間処理の一例を説明するためのフロー図である。まず、映像出力装置2は、映像受信部21が映像を受信すると(ステップS51)、補間フレーム情報生成部22aが補間フレーム情報を生成し(ステップS52)、通信部25が原フレームと補間フレーム情報を映像再生装置に送信する(ステップS53)。
映像再生装置3は、通信部31が原フレームと補間フレーム情報を受信し(ステップS54)、補間フレーム生成部32bが原フレームと補間フレーム情報を用いて、補間フレームを生成する(ステップS55)。そして、表示部35が原フレームと補間フレームからなる映像を表示する(ステップS56)。
本実施形態によれば、映像出力装置と映像再生装置を備えた映像表示システムにおいて、常に映像出力装置側で補間フレーム情報を生成して送信するため、映像再生装置側のフレーム補間処理の負荷を軽減することができる。
なお、これまで映像再生装置側に補間フレーム生成部を備える構成として説明したが、映像出力装置側に補間フレーム生成部を備え、補間フレームを映像再生装置に送信するようにしてもよい。
1…テレビ装置、2,200…映像出力装置、3,300…映像再生装置、4…ネットワーク、21,201…チューナ(映像受信部)、22,32…制御部、22a,32c,302…補間フレーム情報生成部、22b…エンコーダ、22c…条件判定部、22d…通信状態監視部、22e…スペック情報取得部、22f…バッテリ残量監視部、23,33…HDD、24,34…メモリ、25,31,202,301…通信部、32a…デコーダ、32b,304…補間フレーム生成部、35,303…表示部、35a…ディスプレイ、35b…ビデオRAM、36…バッテリ、37…入力部。
Claims (17)
- 映像信号を出力する映像出力装置と、該映像出力装置からの映像信号を再生する映像再生装置とがネットワークを介して接続された映像表示システムであって、
前記映像出力装置及び前記映像再生装置は、映像信号に基づいて補間フレーム情報を生成する補間フレーム情報生成部を備え、
前記映像出力装置及び/又は前記映像再生装置は、前記映像再生装置に係る所定の条件に基づいて、前記映像出力装置と前記映像再生装置のいずれで補間フレーム情報を生成するか判定する条件判定部を備えることを特徴とする映像表示システム。 - 請求項1に記載の映像表示システムにおいて、前記条件判定部は、前記映像出力装置と前記映像再生装置間の通信状態を監視する通信状態監視部を備え、
前記通信状態監視部により監視される前記映像出力装置と前記映像再生装置間の通信状態に基づいて、前記映像出力装置と前記映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴とする映像表示システム。 - 請求項2に記載の映像表示システムにおいて、前記条件判定部は、前記通信状態が良好である場合、前記映像出力装置側で補間フレーム情報を生成すると判定し、前記通信状態が悪い場合、前記映像再生装置側で補間フレーム情報を生成すると判定することを特徴とする映像表示システム。
- 請求項3に記載の映像表示システムにおいて、前記映像出力装置は、前記通信状態が悪い場合、前記映像信号のフレーム数を削減することを特徴とする映像表示システム。
- 請求項1に記載の映像表示システムにおいて、前記条件判定部は、前記映像再生装置の処理能力に関わる情報を取得する能力情報取得部を備え、
前記能力情報取得部により取得される前記映像再生装置の処理能力に基づいて、前記映像出力装置と前記映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴とする映像表示システム。 - 請求項5に記載の映像表示システムにおいて、前記条件判定部は、前記映像再生装置の処理能力が所定レベル以上の場合、前記映像再生装置側で補間フレーム情報を生成すると判定し、前記映像再生装置の処理能力が所定レベル未満の場合、前記映像出力装置側で補間フレーム情報を生成すると判定することを特徴とする映像表示システム。
- 請求項6に記載の映像表示システムにおいて、前記映像出力装置は、前記映像再生装置の処理能力が所定レベル以上の場合、前記映像信号のフレーム数を削減することを特徴とする映像表示システム。
- 請求項1に記載の映像表示システムにおいて、前記条件判定部は、前記映像再生装置がバッテリを内蔵する場合、該映像再生装置のバッテリ残量を監視するバッテリ残量監視部を備え、
前記バッテリ残量監視部により監視される前記映像再生装置のバッテリ残量に基づいて、前記映像出力装置と前記映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴とする映像表示システム。 - 請求項8に記載の映像表示システムにおいて、前記条件判定部は、前記映像再生装置のバッテリ残量が所定レベル以上の場合、前記映像再生装置側で補間フレーム情報を生成すると判定し、前記映像再生装置のバッテリ残量が所定レベル未満の場合、前記映像出力装置側で補間フレーム情報を生成すると判定することを特徴とする映像表示システム。
- 請求項9に記載の映像表示システムにおいて、前記映像出力装置は、前記映像再生装置のバッテリ残量が所定レベル以上の場合、前記映像信号のフレーム数を削減することを特徴とする映像表示システム。
- 請求項4,7,10のいずれか1項に記載の映像表示システムにおいて、前記映像出力装置は、前記映像信号から削減したフレームを生成するための補間フレーム情報を、前記映像信号の残りのフレームから生成することを特徴とする映像表示システム。
- 請求項1乃至11のいずれか1項に記載の映像表示システムにおいて、前記映像再生装置は、前記映像出力装置に対して補間フレームの生成数を入力・指定する入力部を備え、
前記映像出力装置の前記補間フレーム情報生成部は、前記入力部から指定された補間フレーム数に対応する補間フレーム情報を生成することを特徴とする映像表示システム。 - 請求項1乃至11のいずれか1項に記載の映像表示システムにおいて、前記補間フレーム情報生成部は、前記映像信号の隣接する2つのフレームに基づいて補間フレーム情報を生成することを特徴とする映像表示システム。
- 請求項13に記載の映像表示システムにおいて、前記映像再生装置は、前記隣接する2つのフレームと、前記映像出力装置あるいは前記映像再生装置で生成された補間フレーム情報とに基づいて、前記隣接する2つのフレーム間に挿入するための補間フレームを生成する補間フレーム生成部を備えることを特徴とする映像表示システム。
- 請求項1乃至11のいずれか1項に記載の映像表示システムにおいて、前記映像再生装置は、前記条件判定部により判定される条件をユーザが入力・指定する入力部を備え、
前記条件判定部は、前記入力部から指定された判定条件に基づいて、前記映像出力装置と前記映像再生装置のいずれで補間フレーム情報を生成するか判定することを特徴とする映像表示システム。 - 請求項1に記載の映像表示システムにおいて、前記映像出力装置と前記映像再生装置の両方で補間フレーム情報を生成する場合、前記映像出力装置の前記補間フレーム情報生成部が前記映像信号の一部のフレームから補間フレーム情報を生成し、前記映像再生装置の前記補間フレーム情報生成部が前記映像信号の残りのフレームから補間フレーム情報を生成することを特徴とする映像表示システム。
- 映像信号に基づいて補間フレーム情報を生成可能な映像再生装置とネットワークを介して接続される映像出力装置であって、
映像信号に基づいて補間フレーム情報を生成する補間フレーム情報生成部と、前記映像再生装置に係る所定の条件に基づいて、前記映像出力装置と前記映像再生装置のいずれで補間フレーム情報を生成するか判定する条件判定部とを備えることを特徴とする映像出力装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007082192A JP2008244820A (ja) | 2007-03-27 | 2007-03-27 | 映像表示システム及び映像出力装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007082192A JP2008244820A (ja) | 2007-03-27 | 2007-03-27 | 映像表示システム及び映像出力装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008244820A true JP2008244820A (ja) | 2008-10-09 |
Family
ID=39915612
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007082192A Pending JP2008244820A (ja) | 2007-03-27 | 2007-03-27 | 映像表示システム及び映像出力装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008244820A (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010239389A (ja) * | 2009-03-31 | 2010-10-21 | Kddi R & D Laboratories Inc | 映像伝送システム |
WO2015170410A1 (ja) * | 2014-05-09 | 2015-11-12 | 日立マクセル株式会社 | 映像再生装置、表示装置及び送信装置 |
US9491538B2 (en) | 2009-07-23 | 2016-11-08 | Sling Media Pvt Ltd. | Adaptive gain control for digital audio samples in a media stream |
JP2018088672A (ja) * | 2016-11-21 | 2018-06-07 | パナソニックIpマネジメント株式会社 | 映像伝送システム及びモバイルカメラ機器 |
US11669944B2 (en) | 2019-12-27 | 2023-06-06 | Samsung Electronics Co., Ltd. | Electronic device for video editing with dynamic tone metadata and operation method thereof |
-
2007
- 2007-03-27 JP JP2007082192A patent/JP2008244820A/ja active Pending
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010239389A (ja) * | 2009-03-31 | 2010-10-21 | Kddi R & D Laboratories Inc | 映像伝送システム |
US9491538B2 (en) | 2009-07-23 | 2016-11-08 | Sling Media Pvt Ltd. | Adaptive gain control for digital audio samples in a media stream |
WO2015170410A1 (ja) * | 2014-05-09 | 2015-11-12 | 日立マクセル株式会社 | 映像再生装置、表示装置及び送信装置 |
CN106464970A (zh) * | 2014-05-09 | 2017-02-22 | 日立麦克赛尔株式会社 | 影像再现装置、显示装置和发送装置 |
JPWO2015170410A1 (ja) * | 2014-05-09 | 2017-04-20 | 日立マクセル株式会社 | 映像再生装置、表示装置及び送信装置 |
US10171770B2 (en) | 2014-05-09 | 2019-01-01 | Maxell, Ltd. | Image playback device, display device, and transmission device |
CN106464970B (zh) * | 2014-05-09 | 2019-11-19 | 麦克赛尔株式会社 | 影像再现装置、显示装置和发送装置 |
US10931914B2 (en) | 2014-05-09 | 2021-02-23 | Maxell, Ltd. | Image playback device, display device, and transmission device |
JP2018088672A (ja) * | 2016-11-21 | 2018-06-07 | パナソニックIpマネジメント株式会社 | 映像伝送システム及びモバイルカメラ機器 |
JP7029586B2 (ja) | 2016-11-21 | 2022-03-04 | パナソニックIpマネジメント株式会社 | 映像伝送システム及びモバイルカメラ機器 |
US11669944B2 (en) | 2019-12-27 | 2023-06-06 | Samsung Electronics Co., Ltd. | Electronic device for video editing with dynamic tone metadata and operation method thereof |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4709154B2 (ja) | リムーバブル装置および記録再生端末 | |
CN101094322A (zh) | 图像处理设备、成像设备及其方法 | |
JP5717870B2 (ja) | 通信装置、通信方法及びプログラム | |
JP4636474B2 (ja) | 映像変換装置、映像再生装置、映像変換再生システム及びプログラム | |
JP5592716B2 (ja) | 映像送信装置 | |
JP5183231B2 (ja) | 映像再生装置及び制御方法 | |
WO2014171474A1 (ja) | 情報処理装置、コンテンツ要求方法およびコンピュータプログラム | |
JP2008244820A (ja) | 映像表示システム及び映像出力装置 | |
JP2009111738A (ja) | ネットワーク変換伝送制御装置 | |
JP2010054940A (ja) | 映像表示装置、映像再生装置、映像表示方法および映像再生方法 | |
KR100531583B1 (ko) | 녹화 재생 장치 및 전원 제어 방법 | |
JP2011066577A (ja) | 画像処理プログラム、表示システム、画像処理装置および画像処理方法 | |
US20070040897A1 (en) | Video communication apparatus and video communication method | |
JP2010171670A (ja) | データ送信装置、データ出力装置およびデータ伝送システム | |
JPWO2009011090A1 (ja) | ネットワーク制御装置、画像表示装置、およびネットワーク制御方法 | |
JP2008199368A (ja) | 映像伝送装置および映像伝送システム | |
JP2008103806A (ja) | 通信端末、通信システムおよび通信端末の制御方法 | |
JP2011015243A (ja) | 再生装置および再生方法 | |
WO2013076778A1 (ja) | 映像送信装置、映像受信装置、映像送信方法及び映像受信方法 | |
JP2007053497A (ja) | 映像表示装置及び映像表示方法 | |
KR101392070B1 (ko) | 멀티미디어 데이터 제공 장치와 이를 이용한 디지털멀티미디어 시스템 및 그 동작 방법 | |
JP2007074018A (ja) | 映像表示装置及びアクセス手順選択方法 | |
JP2006270755A (ja) | デコード回路及びデコード方法 | |
KR20070029090A (ko) | 정보 처리 장치 및 방법, 송신 장치 및 방법, 기록 장치 및방법과 프로그램 | |
JP2006094415A (ja) | 映像装置及び映像ストリーミング方法 |