JP5483012B2 - テレビ電話機能付きテレビジョン - Google Patents

テレビ電話機能付きテレビジョン Download PDF

Info

Publication number
JP5483012B2
JP5483012B2 JP2010070384A JP2010070384A JP5483012B2 JP 5483012 B2 JP5483012 B2 JP 5483012B2 JP 2010070384 A JP2010070384 A JP 2010070384A JP 2010070384 A JP2010070384 A JP 2010070384A JP 5483012 B2 JP5483012 B2 JP 5483012B2
Authority
JP
Japan
Prior art keywords
video
camera
videophone
television
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010070384A
Other languages
English (en)
Other versions
JP2011205383A (ja
JP2011205383A5 (ja
Inventor
辰伸 安藤
和也 香月
隆 賀川
洋文 湯地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2010070384A priority Critical patent/JP5483012B2/ja
Priority to US12/932,895 priority patent/US8570404B2/en
Priority to CN201110065550.8A priority patent/CN102202206B/zh
Publication of JP2011205383A publication Critical patent/JP2011205383A/ja
Publication of JP2011205383A5 publication Critical patent/JP2011205383A5/ja
Application granted granted Critical
Publication of JP5483012B2 publication Critical patent/JP5483012B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephone Function (AREA)

Description

本発明は、テレビ電話機能付きテレビジョンに関する。
近年、パソコンを始めとする、様々な電子機器がインターネットに接続可能となってきている。それに伴い、インターネットを利用したテレビ電話も普及してきており、最近では、テレビジョンにまでテレビ電話機能が搭載されるようになってきている(非特許文献1参照)。
http://www.skype.com/intl/ja/allfeatures/tv/
テレビ電話では、音声だけでなく、映像も双方向で通信することが可能である。映像の取得には、一般に、CCD(Charge Coupled Device Image Sensor)イメージセンサまたはCMOS(Complementary Metal Oxide Semiconductor)イメージセンサなどからなる小さなカメラが用いられ、映像の表示には、一般に、液晶パネルまたは有機EL(Electro Luminescence)パネルなどの表示パネルが用いられる。このテレビ電話用のカメラには、通常、画角が狭いものが用いられる。画角が広い場合には、人が表示パネルに小さく映し出されることになってしまい、相手が自分の顔を判断することができなくなってしまう可能性がある。また、部屋全体が映し出され、部屋の散らかり具合まで相手に伝わってしまう可能性もある。従って、テレビ電話用のカメラとしては、例えば、45度程度のものが用いられる。
テレビ電話の普及に伴い、テレビ電話の使い方も多様化してきている。特に、最近では、複数人が同時に1つのテレビ電話を使って相手と通信することが多くなってきている。この場合に、カメラで撮像可能なエリアに全員を配置しようとすると、必然的に全員がカメラからある程度離れた位置にいることが必要となる。また、通話する人が一人であったとしても、その人がカメラの前で動き回りたい場合にも、その人はカメラからある程度離れた位置にいることが必要となる。その結果、人が表示パネルに小さく映し出されることになってしまう。このように、現在のテレビ電話では、カメラ画角の制約から、ユーザビリティがあまり高くないという問題があった。
本発明はかかる問題点に鑑みてなされたものであり、その目的は、カメラ画角に起因するユーザビリティの低下を改善することの可能なテレビ電話機能付きテレビジョンを提供することにある。
本発明のテレビ電話機能付きテレビジョンは、映像を取得するカメラと、カメラで取得した映像の中から顔を検出し、検出した顔を含む部分映像を生成する情報処理部とを備えたものである。このテレビ電話機能付きテレビジョンは、さらに、部分映像をエンコードし、それによって生成されたデータを相手に送信する送信部と、相手から送信されてきたデータを受信し、デコードすることによってテレビ電話映像を生成する第1受信部とを備えている。このテレビ電話機能付きテレビジョンは、さらに、テレビ放送信号を受信し、デコードすることによって放送映像を生成する第2受信部と、映像を表示する表示部と、テレビ電話映像および放送映像の少なくとも1つに基づいて、表示部を駆動する駆動信号を生成し、表示部に出力する駆動部とを備えている。このテレビ電話機能付きテレビジョンにおいて、情報処理部は、カメラで取得した映像の中から複数の顔を検出した場合に、ユーザの指示に応じて、以下の(1),(2)のいずれかを選択する。
(1)全員の顔を含む部分映像を生成すること
(2)個々の顔ごとに当該顔を含む顔映像を生成し、生成した複数の顔映像を合成することにより部分映像を生成すること
本発明のテレビ電話機能付きテレビジョンでは、カメラで取得した映像の中から顔が検出され、検出された顔を含む部分映像が生成される。これにより、その部分映像が相手先の通信装置においてテレビ電話映像として表示部に表示される。つまり、本発明では、カメラの画角そのものが調整されるのではなく、カメラの画角と相関のある映像サイズが、部分映像の生成(元映像からの部分映像の切り出し)によって調整される。
本発明のテレビ電話機能付きテレビジョンにおいて、カメラは、60度以上の画角を有していることが好ましい。
また、本発明のテレビ電話機能付きテレビジョンにおいて、カメラが人感センサとしても機能することが好ましい。例えば、情報処理部が、カメラで取得した映像の中から顔を検出できなかった場合には表示部における映像表示を停止させ、その後、カメラで取得した映像の中から顔を検出した場合には表示部における映像表示の停止を解除するようになっていてもよい。
本発明のテレビ電話機能付きテレビジョンによれば、カメラの画角と相関のある映像サイズを、部分映像の生成(元映像からの部分映像の切り出し)によって調整するようにした。これにより、例えば、複数人が同時に1つのテレビ電話を使って相手と通信したり、ユーザがカメラの前で動き回ったりする場合にも、各人を相手の通信装置の表示パネルに大きく映し出すことができる。従って、カメラ画角に起因するユーザビリティの低下を改善することができる。
本発明の一実施の形態に係るVC(Visual Communication)機器を含むテレビ電話システムの構成例を示すブロック図である。 図1のVC機器の内部構成の一例を示す図である。 部分映像の生成方法の一例について説明するための模式図である。 部分映像の生成方法の他の例について説明するための模式図である。 放送映像とテレビ電話映像を同時に映し出したときの様子の模式図である。 センサ映像の生成方法の一例について説明するための模式図である。
以下、発明を実施するための形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。

1.実施の形態
テレビ電話システムの構成(図1)
VC機器の構成(図2)
テレビ電話機能(図3〜図5)
効果
2.変形例
人感センサ(図6)
<実施の形態>
[テレビ電話システムの構成]
図1は、本発明の一実施の形態に係る複数のVC機器を含むテレビ電話システム100の構成例を示すブロック図である。テレビ電話システム100は、例えば、オープンネットワーク200に接続された2つのVC機器1,2を備えている。オープンネットワーク200とは、テレビ電話で一般的に利用されている通信プロトコルを用いて通信を行うネットワークを指している。オープンネットワーク200では、随時、他のVC機器類が接続可能となっている。なお、本実施の形態において、VC機器1またはVC機器2が本発明の「通信装置」の一具体例に相当する。
図2は、VC機器1の構成例を示すブロック図である。なお、VC機器2は、VC機器1と同一の構成要素を備えているものとする。VC機器1は、例えば、インターネットに接続可能なテレビジョンである。VC機器1は、例えば、アンテナ端子1A、デジタルチューナ1B、デマルチプレクサ1C、デコーダ1D、映像信号処理回路1E、グラフィック生成回路1F、パネル駆動部1G、および表示パネル1Hを有している。VC機器1は、また、例えば、音声信号処理回路1I、音声増幅回路1J、およびスピーカ1Kを有している。VC機器1は、さらに、例えば、内部バス1L、メモリ1M、演算回路1N、ネットワーク・インターフェース1P、ネットワーク端子1Q、カメラ1R、マイク1S、デコーダ1T、エンコーダ1U、リモコン受信回路1V、およびリモコン送信機1Wを有している。なお、図2に示した一点鎖線は、例えば、VC機器1の本体部分(筐体1X)を指しており、リモコン送信機1がVC機器1の本体部分とは別体で設けられていることを示している。
アンテナ端子1Aは、受信アンテナ(図示せず)で受信されたテレビ放送信号を入力する端子である。デジタルチューナ1Bは、例えば、アンテナ端子1Aに入力されたテレビ放送信号を処理して、ユーザの選択チャネルに対応した所定のトランスポートストリームを出力するようになっている。デマルチプレクサ1Cは、例えば、デジタルチューナ1Bで得られたトランスポートストリームから、ユーザの選択チャネルに対応したパーシャルTS(Transport Stream)を抽出するようになっている。
デコーダ1Dは、例えば、デマルチプレクサ1Cで得られたパーシャルTSに含まれる映像PES(Packetized Elementary Stream)パケットに対してデコード処理を行うことにより映像データ(放送映像データ)を得るようになっている。デコーダ1Dは、また、例えば、デマルチプレクサ1Cで得られたパーシャルTSに含まれる音声PESパケットに対してデコード処理を行うことにより音声データを得るようになっている。
映像信号処理回路1Eおよびグラフィック生成回路1Fは、例えば、デコーダ1Dおよびデコーダ1で得られた映像データに対して、必要に応じてマルチ映像処理、グラフィックスデータの重畳処理等を行うようになっている。グラフィック生成回路1Fは、例えば、画面表示の際に使用するUI(User Interface)画面を生成するようになっている。パネル駆動1Gは、例えば、グラフィック生成回路1Fから出力された映像データに基づいて駆動信号を生成し、その駆動信号を用いて表示パネル1Hを駆動するようになっている。
表示パネル1Hは、例えば、LCD(Liquid Crystal Display)、有機EL(Electro Luminescence)表示パネル、またはPDP(Plasma Display Panel)等で構成されている。音声信号処理回路1Iは、例えば、デコーダ1Dおよびデコーダ1で得られた音声データに対してD/A変換等の処理を行うようになっている。音声増幅回路1Jは、例えば、音声信号処理回路1Iから出力された音声信号を増幅してスピーカ1Kに供給するようになっている。
メモリ1Mは、例えば、VC機器1の設定情報の格納、各種ソフトウェアの格納およびデータ管理を行うものである。メモリ1Mは、例えば、VC機器1を制御する制御ソフトウェアと、この制御ソフトウェアの実行に際して使用するデータとを格納するフラッシュROM(Read Only Memory)(図示せず)を含んでいる。メモリ1Mは、また、例えば、各種ソフトウェアのワークエリアを構成するDRAM(Dynamic Random Access Memory) (図示せず)を含んでいる。メモリ1Mは、さらに、例えば、種々のアプリケーションを格納するHDD(Hard Disk Drive)(図示せず)を含んでいる。そのようなアプリケーションとして、例えば、テレビ電話機能を実現するアプリケーション(図示せず)がHDDに標準で格納されている。
演算回路1Nは、VC機器1の各部の動作を制御するものであり、例えば、メモリ1MのHDDから読み出したソフトウェアをメモリ1Mのワークエリアに展開してソフトウェアを起動させ、VC機器1の各部を制御するようになっている。
ネットワーク端子1Qは、例えば、ネットワーク(オープンネットワーク200)に接続される端子であり、ネットワーク・インターフェース1Pに接続されている。ネットワーク・インターフェース1Pは、例えば、LAN(Local Area Network)の規格の一種であるイーサネット(登録商標)に従って他者(VC機器2など)と通信を行うものである。なお、イーサネット(登録商標)は、富士ゼロックス株式会社の登録商標である。ネットワーク・インターフェース1Pは、例えば、演算回路1N、メモリ1M、カメラ1R、マイク1S、デコーダ1Tおよびエンコーダ1Uとともに、内部バス1Lに接続されている。
カメラ1Rは、表示パネル1Hの正面の景色を撮影するものであり、例えば、表示パネル1Hの周縁に配置されている。カメラ1Rは、例えば、CCD(Charge Coupled Device Image Sensor)イメージセンサまたはCMOS(Complementary Metal Oxide Semiconductor)イメージセンサなどの撮像素子を含んで構成されたものである。カメラ1Rは、例えば、その光入射面(図示せず)に広角レンズ(図示せず)を備えている。広角レンズは、例えば画角が60度以上となるような形状となっている。
マイク1Sは、表示パネル1Hの正面およびその近傍の音声を主に取得するものであり、例えば、表示パネル1Hの周縁に配置されている。マイク1Sは、例えば、マイクロフォンなどを含んで構成されている。
デコーダ1Tは、例えば、ネットワーク端子1Qからネットワーク・インターフェース1Pを介して得られたデータに含まれる映像PESパケットに対してデコード処理を行うことにより映像データを得るようになっている。デコーダ1Tは、また、例えば、ネットワーク端子1Qからネットワーク・インターフェース1Pを介して得られたデータに含まれる音声PESパケットに対してデコード処理を行うことにより音声データを得るようになっている。
エンコーダ1Uは、例えば、演算回路1Nから得られた映像データ(テレビ電話映像データ)に対してエンコード処理を行うことにより送信用のデータを得るようになっている。エンコーダ1Uは、また、例えば、マイク1Sから得られた音声データに対してエンコード処理を行うことにより送信用のデータを得るようになっている。
リモコン受信回路1Vは、例えば、リモコン送信機1Wから送信されたリモートコントロール信号を受信し、演算回路1Nに供給するようになっている。演算回路1Nは、例えば、リモートコントロール信号に従ってVC機器1の各部を制御するようになっている。
[テレビ電話機能]
次に、VC機器1におけるテレビ電話機能について説明する。本実施の形態のVC機器1では、例えば、演算回路1Nが、ユーザからの指示に応じて、テレビ電話機能を実現するアプリケーションをDRAMに展開し、起動する。その後、演算回路1Nは、ユーザからの種々の指示に応じて、アプリケーションを実行する。
(送信)
次に、演算回路1Nは、カメラ1Rに対してビデオ撮像を指示するとともに、マイク1Sに対して音声取得を指示する。すると、カメラ1Rはビデオ撮像を開始し、取得した画像データを演算回路1Nに転送するとともに、マイク1Sが音声取得を開始し、取得した音声データを演算回路1Nに転送する。演算回路1Nは、取得した音声データをエンコーダ1Uに入力し、取得した映像データについては、所定の処理(後述の切り取り処理)を行ったのち、処理後の映像データ(後述の部分映像4)をエンコーダ1Uに入力する。すると、エンコーダ1Uは、入力された音声データおよび映像データに対してエンコード処理を行い、エンコード処理後のデータを演算回路1Nに入力する。演算回路1Nは、そのデータをネットワークインターフェース1Pおよびネットワーク端子1Qを介して通信相手のVC機器2に送信する。
(受信)
演算回路1Nは、ネットワークインターフェース1Pおよびネットワーク端子1Qを介して通信相手のVC機器2からデータを取得すると、そのデータをデコーダ1Tに入力する。すると、デコーダ1Tは、入力されたデータに対してデコード処理を行い、データから映像データおよび音声データを生成し、生成した映像データおよび音声データを演算回路1Nに入力する。
演算回路1Nは、取得した映像データに対して、例えばHDMI(High-Definition Multimedia Interface)経由で、映像信号処理回路1Eに入力する。すると、映像信号処理回路1Eは、取得した映像データに対して所定の処理を行った上で、それをグラフィック生成回路1Fに入力する。グラフィック生成回路1Fは、取得した映像データに対して所定の処理を行った上で、それを映像信号としてパネル駆動部1Gへ入力する。パネル駆動部1Gは、映像信号に基づいて表示パネル1Hを駆動し、表示パネル1Hに映像を表示させる。その結果、表示パネル1Hに相手の映像が表示される。
さらに、演算回路1Nは、取得した音声データを、例えばHDMI経由で、音声信号処理回路1Iに入力する。すると、音声信号処理回路1Iは、取得した音声データに対して所定の処理を行った上で、それを、音声増幅回路1Jを介してスピーカ1Kに入力する。その結果、スピーカ1Kから相手の音声が出力される。このようにして、テレビ電話機能を用いた、音声および映像の双方向通信が行われる。
(切り取り処理)
次に、VC装置1,2における切り取り処理について説明する。本実施の形態では、演算回路1Nは、カメラ1Rから取得した映像データに対して、以下に説明する切り取り処理を行う。
カメラ1Rから取得した映像データが、例えば、図3(A)に示したような映像(取得映像3)であったとすると、演算回路1Nは、まず、取得映像3の中から顔f1,f2を検出する。続いて、演算回路1Nは、取得映像3内において、検出した全員の顔f1,f2を含む1つの切り抜き領域3Aを設定し、その切り抜き領域3Aを取得映像3から抜き出し、図3(B)に示したような部分映像4を生成する。このとき、演算回路1Nは、必要に応じて、部分映像4のサイズを調整(縮小または拡大)する。
例えば、カメラ1Rの画素サイズが大きく(例えば、5Mピクセル)、部分映像4のサイズがHDサイズを超えていた場合には、演算回路1Nは、部分映像4のサイズをHDサイズに縮小する。また、例えば、部分映像4のサイズがHDサイズを下回っていた場合には、演算回路1Nは、部分映像4のサイズをHDサイズに拡大する。このようにして、演算回路1Nにおける切り取り処理が行われる。
なお、他の方法を用いて切り取り処理が行われてもよい。例えば、カメラ1Rから取得した映像データが、例えば、図4(A)に示したような映像(取得映像3)であったとすると、演算回路1Nは、まず、取得映像3の中から顔f1,f2を検出する。続いて、演算回路1Nは、取得映像3内において、個々の顔f1,f2ごとに当該顔f1,f2を含む切り抜き領域3B,3Cを設定し、その切り抜き領域3B,3Cを取得映像3から抜き出し、2つの顔映像3D,3Eを生成する(図4(B)参照)。次に、演算回路1Nは、生成した2つの顔映像3D,3Eを合成することにより、図4(B)に示したような部分映像4を生成する。2つの顔映像3D,3Eの合成は、例えば、図4(B)に示したように、2つの顔映像3D,3Eを左右並列に配置したりすることにより行われる。このとき、演算回路1Nは、上記と同様に、必要に応じて、部分映像4のサイズを調整(縮小または拡大)する。このようにして、演算回路1Nにおける切り取り処理が行われてもよい。
なお、演算回路1Nは、ユーザの指示に応じて、上記2つの方法のいずれかを選択するようにしてもよい。
(放送・テレビ電話同時使用)
次に、VC装置1,2における「放送・テレビ電話同時使用」について説明する。本実施の形態では、VC装置1,2は、テレビ電話機能を持ったテレビジョンである。そのため、VC装置1,2では、ユーザの指示に応じて、テレビ電話を行いつつ、放送映像データを表示パネル1Hに表示させることが可能となっている。例えば、演算回路1Nは、図5に示したように、表示パネル1Hに対して、放送映像11と、テレビ電話画像12,13とを同時に表示させる。
テレビ電話画像12は、相手先のVC装置2から取得したデータに基づいて生成された画像であり、テレビ電話画像13は、自身のVC装置1のカメラ1Rから取得したデータに基づいて生成された画像である。なお、演算回路1Nは、ユーザの指示に応じて、表示パネル1Hに対して、テレビ電話画像12,13のいずれかまたは双方を表示するようにしてもよい。
このような同時表示は、VC装置1,2内に、放送用のデコーダ1Dと、テレビ電話用のデコーダ1Tとが設けられていることによって可能となっている。なお、デコーダ1Dと、デコーダ1Tとが互いに別のチップに設けられていてもよいし、互いに同一のチップ内に設けられていてもよい。ただし、デコーダ1Dと、デコーダ1Tとが互いに同一のチップ内に設けられている場合には、例えば、デコーダ1Dが、デコーダ1Tを含むデュアルデコーダとなっており、VC機器2から入力されたデータがネットワークインターフェース1P、メモリ1Mなどを介して、デコーダ1Dに入力されるようになっている。
[効果]
本実施の形態では、VC装置1において、カメラ1Rで取得した取得映像3の中から顔f1,f2が検出され、検出された顔f1,f2を含む部分映像4が生成される。これにより、その部分映像4が相手先のVC装置2においてテレビ電話映像として表示パネル1Hに表示される。つまり、本実施の形態では、カメラ1Rの画角そのものが調整されるのではなく、カメラ1Rの画角と相関のある映像サイズが、部分映像4の生成(元映像からの部分映像の切り出し)によって調整される。これにより、例えば、複数人が同時に1つのVC装置1を使って相手と通信したり、ユーザがカメラ1Rの前で動き回ったりする場合にも、各人を相手のVC装置2の表示パネル1Hに大きく映し出すことができる。従って、カメラ画角に起因するユーザビリティの低下を改善することができる。
<変形例>
上記実施の形態では、表示パネル1Hおよびパネル駆動部1GがVC機器1の本体部分(筐体1X)内に内蔵されている場合が例示されていたが、VC機器1の本体部分(筐体1X)とは別体で設けられていてもよい。この場合には、表示パネル1Hおよびパネル駆動部1Gは、VC機器1にとっては外付け機器となるので、VC機器1は、例えば、有線または無線を介して、外付け機器(表示パネル1Hおよびパネル駆動部1G)の制御を行うようになっている。
また、上記実施の形態では、VC機器1がテレビジョンである場合が例示されていたが、テレビジョンでなくてもよい。ただし、その場合には、VC機器1は、例えば、デジタルチューナ1B、デマルチプレクサ1Cおよびデコーダ1Dなどを含んで構成された電子機器(チューナ)から入力された映像データおよび音声データを利用して、放送映像を表示パネル1Hに表示させるとともに、音声をスピーカ1Kから出力させるようになっている。
また、上記実施の形態では、VC機器1は、テレビ電話として機能する部分が筐体1X内に内蔵されている場合が例示されていたが、VC機器1の本体部分(筐体1X)とは別体で設けられていてもよい。この場合には、テレビ電話として機能する部分は、VC機器1にとっては外付け機器となるので、VC機器1は、例えば、USB(Universal Serial Bus)を介して、外付け機器(テレビ電話として機能する部分)の制御を行うようになっている。
また、上記実施の形態およびその変形例において、カメラ1Rが人感センサとしても機能するようになっていてもよい。このとき、カメラ1Rで取得した取得映像3から部分映像4を切り出す必要はなく、映像のサイズは、カメラ1Rで取得した取得映像3を人感センサの用途で使用する際に十分なサイズとなっていればよい。人感センサの用途で使用する際に十分なサイズが、例えば、VGAサイズであったとした場合には、演算回路1Nは、例えば、カメラ1Rで取得した取得映像3のサイズをVGAサイズに調整し、調整した後の映像データを用いて、以下に挙げた種々の処理のうち少なくとも1つを行う。
(省エネ機能)
例えば、演算回路1Nが、カメラ1Rで取得した映像の中から顔を検出できなかった場合には表示パネル1Hにおける映像表示を停止させ、その後、カメラ1Rで取得した映像の中から顔を検出した場合には表示パネル1Hにおける映像表示の停止を解除するようになっていてもよい。
(接近防止機能)
また、例えば、演算回路1Nは、カメラ1Rで取得した画像の中から顔を検出した場合に、検出した顔の、カメラ1Rからの距離、または、その距離に対応する数値を導出し、上記距離または上記数値が所定の閾値を超えたときに所定の処理を行うようになっていてもよい。ここでの所定の処理としては、例えば、警報音を出すとか、表示パネル1Hに表示されている映像の明るさを暗くするなどが挙げられる。
(音声バランス補正機能)
また、例えば、演算回路1Nは、カメラ1Rで取得した画像の中から顔を検出した場合に、検出した顔の方位、または、その方位に対応する数値を導出し、上記方位または上記数値に応じて所定の処理を行うようになっていてもよい。ここでの所定の処理としては、例えば、左右の音声バランスを調整するなどが挙げられる。
ところで、カメラ1Rの画角は、上述したように、例えば60度以上となっており、人感センサとしても使用することが十分に可能な大きさとなっている。本変形例では、VC機器1は、カメラ1Rをテレビ電話用のカメラとして使用する際には、カメラ1Rで撮像した画像に対して上述した「切り取り処理」を行うことによりカメラ1Rの画角を擬似的に狭くしている。さらに、VC機器1は、カメラ1Rを人感センサ用のカメラとして使用する際には、カメラ1Rの広角な画角を利用して、表示パネル1H正面の広域をカメラ1Rで撮像し、その撮像した画像を使って上述したような様々な処理を実行する。このように、本変形例では、狭い画角が要求されるテレビ電話用のカメラと、広い画角が要求される人感センサ用のカメラとが、1つのカメラ1Rで実現されている。これにより、人感センサ機能の追加による部品コストの増大をなくすることができる。
1,2…VC機器、1A…アンテナ端子、1B…デジタルチューナ、1C…デマルチプレクサ、1D,1T…デコーダ、1E…映像信号処理回路、1F…グラフィック生成回路、1G…パネル駆動回路、1H…表示パネル、1I…音声信号処理回路、1J…音声増幅回路、1K…スピーカ、1L…内部バス、1M…メモリ、1P…ネットワーク・インターフェース、1Q…ネットワーク端子、1R…カメラ、1S…マイク、1U…エンコーダ、1V…リモコン受信回路、1W…リモコン送信器、1X…筐体、3…取得映像、3A,3B,3C…切り抜き領域、3D,3E…顔映像、4…部分映像、5…センサ映像、11…放送映像、12,13…テレビ電話映像、100…オープンネットワーク。

Claims (8)

  1. 映像を取得するカメラと、
    前記カメラで取得した映像の中から顔を検出し、検出した顔を含む部分映像を生成する情報処理部と、
    前記部分映像をエンコードし、それによって生成されたデータを相手に送信する送信部と、
    相手から送信されてきたデータを受信し、デコードすることによってテレビ電話映像を生成する第1受信部と
    テレビ放送信号を受信し、デコードすることによって放送映像を生成する第2受信部と、
    映像を表示する表示部と、
    前記テレビ電話映像および前記放送映像の少なくとも1つに基づいて、前記表示部を駆動する駆動信号を生成し、前記表示部に出力する駆動部と
    を備え
    前記情報処理部は、前記カメラで取得した映像の中から複数の顔を検出した場合に、ユーザの指示に応じて、以下の(1),(2)のいずれかを選択する
    テレビ電話機能付きテレビジョン
    (1)全員の顔を含む部分映像を生成すること
    (2)個々の顔ごとに当該顔を含む顔映像を生成し、生成した複数の顔映像を合成することにより前記部分映像を生成すること
  2. 前記カメラは、60度以上の画角を有する
    請求項1に記載のテレビ電話機能付きテレビジョン
  3. 前記情報処理部は、ユーザからの指示に応じて、前記テレビ電話映像および前記放送映像のいずれか、または双方を表示部に表示させる
    請求項1または請求項2に記載のテレビ電話機能付きテレビジョン
  4. 前記情報処理部は、前記テレビ電話映像および前記放送映像の双方を同時に表示部に表示させる場合に、前記テレビ電話映像および前記放送映像を別々に表示部に表示させる
    請求項3に記載のテレビ電話機能付きテレビジョン
  5. 前記情報処理部は、前記カメラで取得した映像の中から顔を検出した場合に、検出した顔の方位、または前記方位に対応する数値を導出し、前記方位または前記数値に応じて所定の処理を行う
    請求項1ないし請求項のいずれか一項に記載のテレビ電話機能付きテレビジョン
  6. 前記カメラ、前記情報処理部、前記第1受信部、前記第2受信部および前記表示部を一括して収容する筐体をさらに備えた
    請求項1ないし請求項5のいずれか一項に記載のテレビ電話機能付きテレビジョン
  7. 前記カメラは、前記表示部の周縁に配置されている
    請求項に記載のテレビ電話機能付きテレビジョン
  8. 前記第1受信部は、前記第2受信部とは別体で形成されたものである
    請求項に記載のテレビ電話機能付きテレビジョン
JP2010070384A 2010-03-25 2010-03-25 テレビ電話機能付きテレビジョン Expired - Fee Related JP5483012B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2010070384A JP5483012B2 (ja) 2010-03-25 2010-03-25 テレビ電話機能付きテレビジョン
US12/932,895 US8570404B2 (en) 2010-03-25 2011-03-09 Communication device
CN201110065550.8A CN102202206B (zh) 2010-03-25 2011-03-18 通信设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010070384A JP5483012B2 (ja) 2010-03-25 2010-03-25 テレビ電話機能付きテレビジョン

Publications (3)

Publication Number Publication Date
JP2011205383A JP2011205383A (ja) 2011-10-13
JP2011205383A5 JP2011205383A5 (ja) 2013-04-11
JP5483012B2 true JP5483012B2 (ja) 2014-05-07

Family

ID=44656005

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010070384A Expired - Fee Related JP5483012B2 (ja) 2010-03-25 2010-03-25 テレビ電話機能付きテレビジョン

Country Status (3)

Country Link
US (1) US8570404B2 (ja)
JP (1) JP5483012B2 (ja)
CN (1) CN102202206B (ja)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9536046B2 (en) * 2010-01-12 2017-01-03 Microsoft Technology Licensing, Llc Automated acquisition of facial images
KR101308946B1 (ko) * 2012-02-02 2013-09-24 한국과학기술연구원 3차원 얼굴 형상 재구성 방법
KR101800617B1 (ko) * 2013-01-02 2017-12-20 삼성전자주식회사 디스플레이 장치 및 이의 화상 통화 방법
JP6332864B2 (ja) 2014-12-25 2018-05-30 カシオ計算機株式会社 画像処理装置、画像処理方法及びプログラム
KR102275707B1 (ko) * 2015-05-04 2021-07-09 삼성전자주식회사 디스플레이 드라이버, 디스플레이 장치 및 디스플레이 시스템
CN106303565B (zh) * 2016-08-12 2019-06-18 广州华多网络科技有限公司 视频直播的画质优化方法和装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0865649A (ja) * 1994-08-19 1996-03-08 Ricoh Co Ltd マルチメディア端末装置
KR0165403B1 (ko) * 1995-06-09 1999-03-20 김광호 더블 와이드 텔레비젼에서의 화면 정지 선택 장치 및 방법
JP2003283604A (ja) * 2002-03-20 2003-10-03 Oki Electric Ind Co Ltd 表情伝送機能付情報端末装置
US7184609B2 (en) * 2002-06-28 2007-02-27 Microsoft Corp. System and method for head size equalization in 360 degree panoramic images
US7453506B2 (en) * 2003-08-25 2008-11-18 Fujifilm Corporation Digital camera having a specified portion preview section
JP4472324B2 (ja) * 2003-12-25 2010-06-02 京セラ株式会社 テレビ電話装置
JP2005242502A (ja) * 2004-02-25 2005-09-08 Oki Electric Ind Co Ltd 顔画像処理装置
JP2006113742A (ja) * 2004-10-13 2006-04-27 Fuji Photo Film Co Ltd 画像処理装置、画像処理方法及び画像処理プログラム
JP4356663B2 (ja) 2005-08-17 2009-11-04 ソニー株式会社 カメラ制御装置および電子会議システム
JP4708948B2 (ja) * 2005-10-03 2011-06-22 富士フイルム株式会社 顔向き特定方法、顔判別方法および装置並びにプログラム
JP4845581B2 (ja) * 2006-05-01 2011-12-28 三菱電機株式会社 画像及び音声通信機能付テレビジョン放送受像機
JP2008011405A (ja) * 2006-06-30 2008-01-17 Toshiba Corp 音声・映像通信制御装置、放送受信端末
JP2008236679A (ja) * 2007-03-23 2008-10-02 Sony Corp テレビ会議装置、制御方法、およびプログラム
US8347339B2 (en) * 2007-07-05 2013-01-01 Coherent Logix, Incorporated Transmission of multimedia streams to mobile devices with variable training information
JP5171387B2 (ja) * 2008-05-19 2013-03-27 キヤノン株式会社 画像処理装置およびその制御方法およびプログラム
JP4623193B2 (ja) * 2008-09-29 2011-02-02 カシオ計算機株式会社 撮像装置、撮像方法、及びプログラム

Also Published As

Publication number Publication date
CN102202206B (zh) 2016-03-23
JP2011205383A (ja) 2011-10-13
CN102202206A (zh) 2011-09-28
US8570404B2 (en) 2013-10-29
US20110234831A1 (en) 2011-09-29

Similar Documents

Publication Publication Date Title
CN111338744B (zh) 图像显示方法及装置、电子设备、存储介质
JP4377886B2 (ja) 画像通信中の画像合成方法及び装置
JP5483012B2 (ja) テレビ電話機能付きテレビジョン
JP4677245B2 (ja) 画像表示方法、プログラム、画像表示装置及び画像表示システム
US8233027B2 (en) Video conference apparatus and method thereof
KR100689480B1 (ko) 휴대단말기의 영상크기 변환방법
US8749611B2 (en) Video conference system
US8743172B2 (en) Image capturing for video conference system
US20130088561A1 (en) Television system and control method thereof
KR20120059170A (ko) 휴대단말기의 화면전환 제어 장치 및 방법
US7737915B1 (en) Techniques for displaying information through a computer display
JP2013115527A (ja) テレビ会議システム及びテレビ会議方法
JP2007150452A (ja) テレビドアホン装置
JP2011205383A5 (ja)
JP2012173683A (ja) 表示制御装置、情報表示装置、及び表示制御方法
JP6409301B2 (ja) 電子機器
CN114667737B (zh) 基于用户输入的多路输出控制
KR101357158B1 (ko) 화상 통신용 디스플레이 장치 및 화상 통신 방법
US10142593B2 (en) Information processing device, information processing method, client device, server device, and information processing system
JP2009055094A (ja) 映像システム
JP2018082221A (ja) インターホンシステム
JP2014068193A (ja) テレビ受信機、及びテレビ受信機の画面表示方法
JP2010147939A (ja) 映像通信装置、映像通信方法及び映像通信システム
JP2009081514A (ja) テレビドアホン装置
JP2018078475A (ja) 制御プログラム、制御方法および制御装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130221

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131021

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131029

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140204

R151 Written notification of patent or utility model registration

Ref document number: 5483012

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees