JP2009194687A - 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム - Google Patents

画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム Download PDF

Info

Publication number
JP2009194687A
JP2009194687A JP2008034295A JP2008034295A JP2009194687A JP 2009194687 A JP2009194687 A JP 2009194687A JP 2008034295 A JP2008034295 A JP 2008034295A JP 2008034295 A JP2008034295 A JP 2008034295A JP 2009194687 A JP2009194687 A JP 2009194687A
Authority
JP
Japan
Prior art keywords
image
face
privacy
background
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008034295A
Other languages
English (en)
Other versions
JP5088161B2 (ja
Inventor
Koji Yoda
光二 依田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2008034295A priority Critical patent/JP5088161B2/ja
Priority to US12/378,090 priority patent/US8305448B2/en
Priority to CN2009100063584A priority patent/CN101510957B/zh
Publication of JP2009194687A publication Critical patent/JP2009194687A/ja
Application granted granted Critical
Publication of JP5088161B2 publication Critical patent/JP5088161B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

【課題】コスト増を招くことなく、処理や制御のおける遅延時間を短縮でき、リアルタイム性の向上を図れ、また、画像が流出したとしても真にプライバシーを保護できる画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラムを提供する。
【解決手段】マイクロコンピュータ19の制御の下、撮像した画像を元に顔検出器17にて顔を検出し、出力処理部18において、検出した顔、またはその背景の画像に対しモザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施すことによりプライバシーを保護する機能を有する。
【選択図】図1

Description

本発明は、撮像された画像から顔を検出する機能を有し、画像を用いる通信に適用可能な画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラムに関するものである。
撮像素子(イメージングセンサ)により撮像した画像から被写体の顔を検出する顔検出器を備えたカメラ装置が実用に供されている。
また、画像を用いた通信としては、テレビジョン(以下、テレビ)電話、テレビ会議システム、ビデオメール、ビデオチャット等、種々の形態のもが実用に供されている。
これらのいずれにおいても、被写体の顔およびその背景を撮像し、その撮像画像を通信先に送信するように構成される。
また、特許文献1には、公衆網を経由して多地点の間で映像データを交換するためのシステムであって、多地点に存在する有限個の通信装置と、有限個の通信装置の各々の間での映像データの交換を中継する通信制御装置を有し、有限個の通信装置の間に閉じて映像データが交換される通信システム等が提案されている。
特許3838506号
ところで、テレビ電話、テレビ会議、ビデオチャット等は、被写体が自分である場合、自分の顔を捉えた画像データが何ら処理されることなく通信相手に送信されて通信相手のディスプレイに表示されてしまう。
このため、自分の顔を通信相手に見られたくないことを希望する利用者にとっては、プライバシーを保護することができず、利用者に精神的な苦痛を与えていた。
また、このような装置を家庭やオフィスで用いる際に、家庭あるいはオフィス内の様子を送信したくない場合においても、自分の姿と共に通信相手に知られてしまい、プライバシー保護やオフィス内の機密を保護するという点で具合が悪いという問題があった。
また、特許文献1における通信装置(図1等)において、画像入力手段がカメラであった場合、撮像した画像を領域抽出手段により顔を検出することになるが、まず検出対象とする画像をキャプチャする必要がありそのための遅延が生じる。
また、画像から顔を検出する機能は一般的に処理に時間が掛かるため、その遅延時間も生じる。
また、顔検出した結果を元にメタデータとして加工し、その画像と共に送信データ処理を経て通信手段にて通信経路に送信するが、メタデータに加工する分、遅延時間が生じる。
以上のことから、特許文献1に開示された技術では、通信装置での処理による遅延時間が多大になり、かつ、通信装置の負荷は多大になる。
また、以上の処理を動画(30fps等)に対応し、かつ高画素の画像に対応するとなると、通信装置での処理による遅延時間や、負荷はいっそう膨大になる。
なお、この負荷を軽減するために高性能な通信装置を用いた場合、遅延時間や負荷は軽減できるが、システム的なコストが増大する。
また、以上の処理では画像をキャプチャするメモリを遅延時間分用意しなければならず、一般的に画像メモリは大容量となるため、システム的なコストが増大する。
また、以上を鑑みると、最悪、動画のフレームレートが低下し、かつリアルタイム性が損なわれ、視認に耐えなくなる可能性があり、実用的でなくなる可能性がある。
また、カメラで撮像したそのままの画像(いわゆるプライバシーマスク処理を施していない画像)が、通信装置、または通信経路中で、一時的にせよ何らかの記録手段に保存することになるが、この画像が悪意のあるユーザーにより盗み出されたり、またはネットワークからのハッキング行為により流出する可能性もあり、この観点でみた場合、真にプライバシーを保護できていない。
一方、多地点における複数ユーザーが、画像による通信を行う通信方法として、集中制御装置を用いたテレビ会議システムがある。
しかし、このような多地点におけるテレビ会議システムにおいて、プライバシーを保護する技術を適用する場合、プライバシー保護のために背景を除去若しくは顔領域を加工すると、会議に参加する全てのメンバーに対して、一様に背景を除去若しくは顔領域を加工した映像が送信されることになる。
また、多地点における複数ユーザーが、画像による通信を行うシステムには、WEBにおけるビデオチャットの様に不特定の利用者が参加する形態があるが、このような場合、背景を除去若しくは顔領域を加工した映像を通信相手に応じて制御したいという要求がある。たとえば、特定の画像通信端末の利用者に対しては顔を見せてもよいが、それ以外の利用者には顔を見せたくないという場合が考えられる。
同様に、ビジネス用途における多地点間のテレビ会議システムにおいても、社内の利用者と社外の利用者が混在する場合、社内の利用者には背景まで見せてもよいが社外の利用者には背景を除去して通信するということが考えられる。
特許文献1における通信システム(図16等)通信システムにおいて、通信制御装置がメタデータからプライバシーマスク処理を施す場合、まずパケット化された画像データ1枚分全てを受信しなければならず、そのための通信遅延が生じる。
次に取得した画像データは一般的に圧縮(mpeg、jpeg等)されており、それを元の画像に復元しなければプライバシーマスク処理を施すことができず、さらにプライバシーマスク処理を施した後は、同様の画像圧縮処理を行わなければならず、そのための処理遅延が生じる。
次に、プライバシーマスク処理を施し圧縮した画像データは、同様にパケット化し、画像データ1枚分全てを送信しなければならず、そのための通信遅延が生じる。
以上のことから、通信制御装置での処理による遅延時間が多大になり、かつ、通信制御装置の負荷は多大になる。
また、以上の処理を動画(30fps等)に対応し、かつ高画素の画像に対応し、かつ複数のユーザーからの通信に対応するとなると、通信制御装置での処理による遅延時間や、負荷はいっそう膨大になる。
なお、この負荷を軽減するために高性能な通信制御装置を用いた場合、遅延時間や負荷は軽減できるが、システム的なコストが増大する。
また、画像データの圧縮方式は一般的に多岐に渡り、かつ対応可能なその方式はユーザーやWEBサイトに依存するため、それらを包含した通信制御装置をサポートすることは、運営面においてもメンテナンスなど、コストが増大する。
また、通信制御装置において、プライバシーマスク処理を施していない画像、および顔にプライバシーマスク処理を施した画像、および背景にプライバシーマスク処理を施し画像など、オリジナルの画像と画素数で同容量(ファイル容量でほぼ同等)の画像データを何種類分も処理し、送信しなければならない場合がある。
この場合、通信トラフィック量が多大になることは明白であり、かつ以上を鑑みると、最悪、動画のフレームレートが低下し、かつリアルタイム性が損なわれ、視認に耐えなくなる可能性があり、実用的でなくなる可能性がある。
また、特許文献1における通信システム(図18等)において、通信装置Aから通信制御装置を経て通信網に接続した場合、ここで言う通信制御装置はいわゆる通信サーバーに相当するものであり、一般的に高価である。
このような高価な機器を全てのユーザーが購入することは極めて難しい。
また、一般的に通信サーバーを設置するには高度な技術が必要であり、一般的なユーザーが設置し稼動させることは困難である。
また、ある一定ユーザー数の割合にて、通信制御装置を設置することも考えられるが、上記と同様に通信サーバーは一般的に高価であり、それを何台も設置するのはコストが増大し、かつ稼動させるとなると運営面においてもメンテナンスなど、コストが増大する。
本発明は、コスト増を招くことなく、処理や制御のおける遅延時間を短縮でき、リアルタイム性の向上を図れ、また、画像が流出したとしても真にプライバシーを保護できる画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラムを提供することにある。
本発明の第1の観点の画像処理装置は、撮像した画像を元に顔を検出する顔検出器と、
上記顔検出器で検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す機能を有する出力処理部と、を有し、上記出力処理部は、上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記顔検出器で検出した顔とその背景の画像を別々に出力する機能を含む。
好適には、上記出力処理部は、検出した顔の領域を切り出した画像と、その背景の画像とに分離し、分離した画像を別々に出力可能である。
好適には、上記出力処理部は、プライバシーマスク処理を施した領域を切り出した画像、およびその背景の画像を、それぞれ別の画像として出力可能である。
好適には、上記出力処理部は、画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報を、該当する画像と同期して出力可能である。
好適には、上記出力処理部は、切り出された領域を任意の色に塗りつぶすことが可能で、画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報、または背景の画像における塗りつぶした領域情報を、該当する画像と同期して出力可能である。
本発明の第2の観点のカメラ装置は、撮像素子と、上記撮像素子に被写体像を結像する光学系と、上記撮像素子で撮像した画像に画像処理を施す画像処理装置と、を有し、上記画像処理装置は、撮像した画像を元に顔を検出する顔検出器と、上記顔検出器で検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す機能を有する出力処理部と、を有し、上記出力処理部は、上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記顔検出器で検出した顔とその背景の画像を別々に出力する機能を含む。
本発明の第3の観点の通信システムは、カメラ装置と、当該カメラ装置で撮像された画像データを送信する送信装置を含む送信系と、通信経路を介して上記送信系から送信された画像データを受信する受信装置を含む受信系と、を有し、上記送信系において、上記カメラ装置は、撮像素子と、上記撮像素子に被写体像を結像する光学系と、上記撮像素子で撮像した画像に画像処理を施す画像処理装置と、を有し、上記画像処理装置は、撮像した画像を元に顔を検出する顔検出器と、上記顔検出器で検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す機能を有する出力処理部と、を有し、上記出力処理部は、上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、検出した顔の領域を切り出した画像と、その背景の画像とに分離し、分離した画像を別々に出力可能であり、プライバシーマスク処理を施した領域を切り出した画像、およびその背景の画像を、それぞれ別の画像として出力可能であり、画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報を、該当する画像と同期して出力可能であり、上記送信装置は、少なくとも顔と同じタイミングで撮像し分離した背景の画像を送信し、上記受信系の受信装置は、少なくとも上記送信された背景の画像を受信する。
好適には、上記送信系の送信装置は、同じタイミングで撮像し分離した背景の画像と、その領域情報と、切り出した顔の画像を送信し、上記受信系の受信装置は、上記送信された背景の画像と、その領域情報と、切り出した画像を受信し、領域情報を基に背景の画像に、上記切り出した画像を合成することで、1枚の画像を作り出す。
好適には、上記受信系の受信装置は、上記送信された背景の画像と、その領域情報を受信し、領域情報を基に背景の画像にアバターを合成することで、1枚の画像を作り出す。
好適には、上記カメラ装置の出力処理部は、切り出された領域を任意の色に塗りつぶすことが可能で、上記送信装置は、上記背景の画像を送信し、上記受信系の受信装置は、上記送信された背景の画像を受信し、検出された当該背景の画像から切り出した画像の領域情報を基に背景の画像にアバターを合成するとで、1枚の画像を作り出す。
好適には、上記通信経路における所定の機器において、上記送信系の送信装置から送信された画像に対して所定の画像を合成して、受信装置に送信し、上記受信系の受信装置は、上記通信経路の所定の機器で合成された画像を受信する。
好適には、通信経路における所定の機器にて、上記領域情報を基に、プライバシーを保護する画像を受信装置に送信し、上記受信系の受信装置は、プライバシーマスク処理を施していない画像に合成、またはブレンド処理し、1枚の画像を作り出す。
好適には、通信経路における所定の機器にて、上記領域情報を基に、上記アバターの画像を受信装置に送信する。
好適には、通信経路における所定の機器にて、背景の画像から切り出した画像の領域を検出し、当該検出結果を基にアバターの画像を受信装置に送信する。
本発明の第4の観点は、少なくとも顔検出器で検出した顔の画像およびその背景の画像を出力する処理を行う画像処理方法であって、上記顔検出器で撮像した画像を元に顔を検出するステップと、上記検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施すステップと、上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記検出した顔とその背景の画像を別々に出力するステップとを有する。
本発明の第5の観点は、少なくとも顔検出機能において検出した顔の画像およびその背景の画像を出力する処理を行う画像処理であって、撮像した画像を元に顔を検出する処理と、検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す処理と、上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記検出した顔とその背景の画像を別々に出力する処理とをコンピュータに実行させるプログラムである。
本発明によれば、撮像した画像を元に顔検出器にて顔を検出し、検出した顔、またはその背景の画像に対しモザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施す。
そして、検出した顔、およびその背景の画像を別々に出力し、かつ背景に対する検出した顔の領域を出力する。
本発明によれば、コスト増を招くことなく、コスト増を招くことなく、処理や制御のおける遅延時間を短縮でき、リアルタイム性の向上を図れる。
また、画像が流出したとしても真にプライバシーを保護することができる。
以下、本発明の実施形態を図面に関連付けて説明する。
図1は、本発明の実施形態に係る画像処理装置を採用したカメラ装置の構成例を示すブロック図である。
本実施形態に係るカメラ装置10は、図1に示すように、光学系11、撮像素子(イメージングセンサ)12、カメラ信号処理部13、画像メモリ14、縮小回路15、顔検出用画像メモリ16、顔検出器17、出力処理部18、および制御部としてのマイクロコンピュータ(マイコン)19を有する。
本実施形態に係るカメラ装置10は、マイクロコンピュータ19の制御の下、撮像した画像を元に顔検出器17にて顔を検出し、出力処理部18において、検出した顔、またはその背景の画像に対しモザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施すことによりプライバシーを保護する機能を備え、かつ検出した顔、およびその背景の画像を別々に出力でき、かつ背景に対する検出した顔の領域を出力することが可能な装置として構成されている。
カメラ装置10は、検出した顔の領域を切り出した画像と、その背景(本実施形態においては、切り出された領域は任意の単色に塗り潰すことが可能)の画像とに分離し、それらを別々に出力することが可能に構成される。
無論、上記を分離せず別々に出力しないことも可能である。ここで言う別々に出力するは、別系統の出力でもよく、時分割に出力してもよい。
カメラ装置10は、モザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施した領域を切り出した画像、およびその背景(本実施形態においては、切り出された領域は任意の単色に塗り潰すことが可能)の画像を、それぞれ別の画像として出力することが可能に構成される。
無論、この場合も、上記を分離せず別々に出力しないことも可能である。ここで言うそれぞれの画像は、別系統の出力でもよく、時分割に出力してもよい。
カメラ装置10は、画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報(背景にプライバシーマスク処理を施した場合)、または、背景の画像における塗り潰した領域情報を、その画像に同期して出力することが可能に構成される。
ここで言う出力は、カメラ装置内の制御レジスタを外部から読み出してもよく、画像出力とは別の系から出力してもよく、デジタル画像データである場合、その領域情報をメタデータとして画像中に埋め込んでもよい。
また、この場合も上述したと同様に、画像を分離する/しないにかかわらない。
以下、本実施形態に係るカメラ装置10の具体的な構成および機能について説明する。
光学系11は、たとえばレンズ111を含み、レンズ111を通した被写体像を撮像素子12の撮像面に結像させる。
撮像素子12は、たとえばCCD(Charge Coupled Device)またはCMOS(Complymentary Metal Oxide Semiconductor)デバイスであるイメージングセンサにより構成される。
撮像素子12は、半導体基板上にマトリクス状に配列した光センサにより光学系11による被写体像を検出して信号電荷を生成し、同信号電荷を垂直信号線や水平信号線を介して読み出して被写体のデジタル画像信号をカメラ信号処理部13に出力する。
カメラ信号処理部13は、カラー補間、ホワイトバランス、YCbCr変換処理、圧縮、ファイリング等の処理を施した画像(以降、元画像という)IMORとして、画像メモリ14、および縮小回路15に出力する。
画像メモリ14には、元画像が格納される。
画像メモリ14に格納される元画像は、出力処理部18において元画像は画像メモリに格納され、プライバシーマスク処理、画像切り出し(分離)、フォーマット変換等を経て外部に出力される。
なお、元画像を格納する画像メモリ14はプライバシーマスク処理、画像切り出し(分離)、フォーマット変換等を時分割に複数回処理するためのものであり、必ずしも必要な訳ではない。
ここでは、あくまで例として示している。
縮小回路15は、カメラ信号処理部13による元画像IMOR(における全領域、または分割し切り出した領域を任意の縮小率にて縮小したり、分割し単に切り出した画像を顔検出用画像メモリ16に格納する。
縮小回路15は、たとえばマイクロコンピュータ19により設定される画像の分割、切り出し領域の設定情報や縮小率の情報を用いて、元画像IMORの全画像領域を分割(4/9/16/25/36分割等)し、その分割した画像をそれぞれ時分割に顔検出器17に与える。
なお、このとき、縮小後の画像サイズは顔検出器17が処理可能なサイズである。
顔検出器17は、マイクロコンピュータ19により設定される検出する顔サイズや領域などの情報を用いて、画像メモリ172内に格納された画像を元に顔を検出する。
顔検出器17における検出位置や顔サイズなどの検出結果はマイクロコンピュータに与えられる。
なお、顔検出器17はソフトウェア、ハードウェアどちらで実装してもよく、アルゴリズムや回路構成などは公知・既存のものでよい。
出力処理部18は、歪み補正回路14から出力された、元画像に歪み補正、切り出し、合成等が施された画像データにガンマ処理、マスク処理、フォーマット変換等を施して外部に出力する。
図1の出力処理部18は、プライバシーマスク処理部181、画像切り出し部182、およびフォーマット変換部183を有する。
プライバシーマスク処理部181は、顔検出結果に基づくマイクロコンピュータ19の制御の下、画像メモリ14に格納された元画像の検出された顔、またはその背景の画像に対しモザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施す。
画像切り出し部182は、マイクロコンピュータ19の制御の下、たとえば検出した顔の領域を切り出した画像、その背景の画像、モザイク・ぼかし・塗り潰し等のプライバシーマスク処理を施した領域を切り出した画像、その背景の画像を切り出ししてフォーマット変換部183に出力する。
フォーマット変換部183は、画像切り出し部182による切り出し画像に対してフォーマット変換処理を施し、その画像を領域情報と共に同期して出力する。
領域情報としては、画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報(背景にプライバシーマスク処理を施した場合)、または、背景の画像における塗り潰した領域情報が含まれる。
なお、プライバシーマスク処理はソフトウェア、ハードウェアどちらで実装してもよく、アルゴリズムや回路構成などは公知・既存のものでよい。
また、ここではプライバシーマスク処理部181の出力を2系統、および切り出し部182、およびフォーマット変換部183の出力を4系統としたが、系統数は何系統でもよく、また、それらを時分割に出力するような構成や制御をしてもよい。
マイクロコンピュータ19は、縮小回路15における画像の分割、切り出し領域の設定や縮小率の設定を行い、画像の分割、切り出し処理や縮小処理を制御する機能を有する。
マイクロコンピュータ19は、顔検出器17における検出する顔サイズや領域などの設定を行い、顔検出処理を制御する機能を有し、位置や顔サイズなどの検出結果を取得する。
マイクロコンピュータ19は、顔検出器17への制御を行い、顔の検出結果、すなわち元画像における顔を検出した領域を取得し、その結果を元にプライバシーマスク処理部181への制御を行い、場合によっては画像切り出し部182においてその画像を切り出し、または抜き出し(分離)し、それらの画像を別系統として出力するための制御を行う。
なお、本実施形態においては、元画像における顔を検出した領域、またはプライバシーマスク処理を施した領域、または抜き出した領域において、マイクロコンピュータ19との外部IF(インターフェース)にて出力することとしている。
ただし、この構成に限ることなく、別途出力を設けそこから画像データに同期して出力してもよく、またフォーマット変換部において画像データ内にメタデータとして、その情報を埋め込んでもよい。
以下、本実施形態に係る撮像した画像に対するプライバシーマスク処理、画像切り出し、抜き出し処理、領域情報、利用形態等について、より具体的に説明する。
まず、プライバシーマスク処理について図2に関連付けて説明する。
<プライバシーマスク処理>
図2(A)〜(M)は、元画像およびプライバシーマスク処理を施す画像の例を示す図である。
図2においては、図2(A)が元画像を示し、元画像において1つの顔を検出し、その領域にプライバシーマスク処理を施している例を示している。
図2(B)は顔にモザイク処理を施した例を、図2(C)は顔の背景にモザイク処理を施した例を、図2(D)は顔および背景の全てにモザイク処理を施した例を、図2(E)は顔にぼかし処理を施した例を、図2(F)は顔の背景にぼかし処理を施した例を、図2(G)は顔および背景の全てにぼかし処理を施した例を、図2(H)は顔に単色の塗り潰し処理を施した例を、図2(I)は顔の背景に単色の塗り潰し処理を施した例を、図2(J)は顔および背景の全てに単色の塗り潰し処理を施した例を、図2(K)は顔にブレンド処理を施した例を、図2(L)は顔の背景にブレンド処理を施した例を、図2(M)は顔および背景の全てにブレンド処理を施した例を、それぞれ示している。
本実施形態のプライバシーマスク処理部181は、図2(A)〜(M)に示すように、元画像IMORにおける顔を検出した領域、またはその背景の領域に対しプライバシーを保護するための画像処理(モザイク、ぼかし、塗り潰し、ブレンド(透過)処理等)を行う。
なお、図2の例では、元画像において1つの顔を検出し、その領域にプライバシーマスク処理を施しているが、プライバシーマスク処理を施す領域数は何個でもよく(複数の顔が検出された場合は複数の領域に対応してもよい)、その領域に対しプライバシーマスク処理を施さなくてもよく、元画像IMORの全てに対しプライバシーマスク処理を施してもよい。
また、図2ではプライバシーマスク処理を施す領域を、検出した顔とほぼ等しい大きさの四角形としたが、その形は円でも楕円でもよく、大きさも任意でよい。
また、モザイクの幅や、ぼかしの度合い、塗りつぶしの色、ブレンドの色や透過率は任意でよく、かつこれらを組み合わせてもよい。
次に、画像の切り出し、抜き出し処理について、図3〜図5に関連付けて説明する。
<画像切り出し・抜き出し処理>
図3は、本実施形態の画像切り出し部の第1の動作例を模式的に示す図である。
図4は、本実施形態の画像切り出し部の第2の動作例を模式的に示す図である。
図5は、本実施形態の画像切り出し部の第3の動作例を模式的に示す図である。
画像切り出し部はプライバシーマスク処理部から入力される画像に対し、任意の領域を切り出したり、または抜き出したり(分離)する。
なお、切り出す領域、または抜き出す領域は、元画像において顔を検出した領域、またはプライバシーマスク処理を施した領域でなくてもよく、大きさも任意でよく、切り出す領域数は何個でもよく(複数の領域に対応してもよい)、その領域を切り出し、または抜き出さなくてもよい。
また、領域の形は一般的な画像処理の都合上、四角形が望ましいが、処理が可能であれば任意である。
図3は、プライバシーマスク処理部181にて、元画像IMORにおいて顔を検出した領域に対しモザイクを施した後、画像切り出し部182では何もせず出力している例である。
また、図4は、プライバシーマスク処理部181の出力OT1は何の処理もせず、出力OT2は元画像IMORにおける全ての領域に対しモザイクを施し、その後、画像切り出し部182では元画像IMORにおいて顔を検出した領域に対しそれぞれの画像を切り出し、および抜き出した後、出力している例である。
なお、抜き出した領域は任意の色に塗り潰される。
また、図5は、プライバシーマスク処理部181では何の処理も行わず、画像切り出し部182では元画像において顔を検出した領域を抜き出した後、出力している例である。
なお、抜き出した領域は任意の色に塗り潰される。
<領域情報>
領域情報とは、元画像における顔を検出した領域、またはプライバシーマスク処理を施した領域、または抜き出した領域を示すための情報で、元画像における水平開始位置とその幅、および垂直開始位置とその幅、または水平開始位置とその終了位置、および垂直開始位置とその終了位置等を示している。
なお、出力する領域情報は以下で説明する利用形態により任意である。
次に、上記構成を有するカメラ装置10の利用形態について説明する。
<カメラ装置の利用形態>
本実施形態に係るカメラ装置10は、カメラ装置10を用いテレビ電話、テレビ会議、ビデオチャット等において、プライバシーを保護する場合、主に3つの利用形態を挙げることができる。
<第1の利用形態>
第1の利用形態は、全ての受信装置に対し送信者のプライバシーを保護する利用形態である。
これは図3の例のように、カメラ装置10自体からプライバシーマスク処理を施した画像を出力させ、その画像をそれぞれの受信装置に向け送信し、受信装置は単にその画像を受信し表示する。
なお、このとき、領域情報も同時に送信してもよい。
<第2の利用形態>
図6は、本実施形態に係るカメラ装置の第2の利用形態の通信システムの構成例を示す図である。
本通信システム100は、送信系200と、受信系300とがネットワーク400を介して通信可能に構成されている。
送信系200は、本実施形態に係るカメラ装置10と、カメラ装置10の出力をネットワーク400に対して送信する送信装置210を含んで構成される。
受信系300は、受信装置310、320,330,340を有し、各受信装置310〜340は、それぞれ画像合成機能を有する合成処理部311,321,331,341を含んで構成される。
送信系200の送信装置210は、同じタイミングで撮像し分離した背景の画像IM2,IM4と、その領域情報AI2,AI4と、切り出した画像IM1,IM3を、受信系300の受信装置310,320,330,340に向け送信する。
図6の例では、切り出し画像IM1はプライバシーマスク処理が施されていない顔の画像であり、切り出し画像IM3はプライバシーマスク処理としてモザイク処理が施された顔の画像である。
また、背景画像IM2は、顔の切り出し画像IM1を抜き出した画像であり、背景画像IM4は顔の切り出し画像IM3を抜き出した画像である。
受信装置310,320,330,340は、その背景の画像IM2,IM4と、その領域情報AR2,AR4と、切り出した画像IM1,IM3を受信し、領域情報を基に背景の画像に切り出した画像を合成処理部311,321,331,341で合成することで、1枚の画像を作り出す。
図6の例では、受信装置310で切り出し画像IM1と背景画像IM2が受信される。そして、合成処理部311で合成処理が行われ、プライバシーマスク処理なしの画像が生成される(復元される)。
受信装置320で切り出し画像IM3と背景画像IM2が受信される。そして、合成処理部321で合成処理が行われ、顔のみにモザイク処理が施された画像が生成される(復元される)。
受信装置330で切り出し画像IM1と背景画像IM4が受信される。そして、合成処理部331で合成処理が行われ、背景にモザイク処理が施された画像が生成される(復元される)。
受信装置340で切り出し画像IM3と背景画像IM4が受信される。そして、合成処理部341で合成処理が行われ、顔および背景の全てにモザイク処理が施された画像が生成される(復元される)。
このように本通信システム100は、真のプライバシーの保護を可能にすることが可能に構成されている。
背景の画像とその領域情報は画像データにメタデータとして埋め込んでもよい。
なお、本実施形態においては、背景の画像、切り出した画像、およびプライバシーマスク処理を施していない画像、プライバシーマスク処理を施した画像は、それぞれ別の通信データとなる。
ここで言う通信システムは、図6に示すように、ネットワーク400も含み、上記の通信データは既存の通信プロトコルに準拠してもよく、上記の画像データは既存の画像(圧縮)フォーマットでもよい。
このように、第2の利用形態は、任意の受信装置に対しては送信者のプライバシーを保護せず、任意の受信装置に対しては送信者のプライバシーを保護する、というような利用形態である。
これは図4のように、カメラ装置10からプライバシーマスク処理を施していない切り出し画像、およびプライバシーマスク処理を施していない抜き出し画像とその領域情報、およびカメラからプライバシーマスク処理を施した切り出し画像、およびプライバシーマスク処理を施した抜き出し画像とその領域情報を出力させる。
そして、図6のように、それらの画像および領域情報をそれぞれの受信装置310〜340に向け送信し、受信装置310〜340は、受信した抜き出し画像とその領域情報、および切り出した画像を受信し、領域情報を基に背景の画像に切り出した画像を合成し、表示する。
これにより、受信系300において、単に受信した切り出した画像と、抜き出し画像を合成するだけで、任意の受信装置毎に、送信者の意図したそれぞれのプライバシーの保護ができることになる。
なお、ここでは例として送信する画像データを4種類としたが、用途によって種類数は任意である。
たとえば受信装置310,320とだけ通信を行っている場合、図6の画像データIM1,IM2,IM3の3種類でよい。
また、送信装置から送信する画像データは、それぞれの受信装置に対しそれぞれ送信するのではなく、一般的に通信制御装置(通信サーバー)にて複数の受信装置に同報(ブロードキャスト)通信できるため、受信装置が何台であろうと、送信装置は必要種類数の画像データを1回分、送信すればよいことは言うまでもない。
<第3の利用形態>
図7は、本実施形態に係るカメラ装置の第3の利用形態の通信システムの構成例を示す図である。
第3の利用形態においては、送信装置210は撮像した背景の画像(この場合、切り出した領域は任意の単色に塗り潰される)IM2を受信装置310等に向け送信し、受信装置310等はその背景の画像を受信し、その背景の画像から切り出した画像の領域を検出し、それを元に背景の画像にアバター(アニメーションキャラクタ)ANMを合成処理部311等で合成することで、1枚の画像を作り出す。
本例では、領域情報や切り出した画像を通信しない。
また、上述したと同様に、通信システム100Aはネットワーク400も含み、上記の通信データは既存の通信プロトコルに準拠してもよく、上記の画像データは既存の画像(圧縮)フォーマットでもよい。
なお、アバターANMを用いることをプライバシーの保護と捕らえてもよく、アミューズメントと捕らえてもよい。
このように、第3の利用形態としては、全ての受信装置に対し、送信者をアバターとすることにより、送信者のプライバシーを保護する利用形態である。
これは図5のように、カメラ装置10から顔を検出した領域を抜き出した画像とその領域情報を出力させ、図7のように、その画像および領域情報をそれぞれの受信装置に向け送信し、受信装置は、受信した抜き出し画像とその領域情報を基に背景の画像にアバターANMの画像を合成し、表示する。
なお、カメラ装置10から顔を検出した領域を抜き出した画像のみを出力させ(領域情報を使わず)、その画像のみをそれぞれの受信装置に向け送信し、受信装置は、受信した抜き出し画像における抜き出した領域を、クロマキー(特定の色を検出する技術)等により検出し、それを元に背景の画像にアバター合成し、表示してもよい。
なお、クロマキーにより抜き出し領域を検出するアルゴリズムや回路構成などは任意である。
<利用形態の応用>
以上の利用形態は組み合わせて利用してもよい。
たとえば、第1の利用形態において、領域情報を送信し、ある受信装置はそのまま表示し、ある受信装置は領域情報を基にアバターにする、等が考えられる。
また、先にも述べたが、切り出す画像の数や、抜き出された領域の数は任意である。
なお、この場合、送信する画像の種類や数が多くなることや、合成する画像の数が多くなることは言うまでもない。
次に、画像の合成方法について述べる。
<画像の合成方法>
図8は、画像の合成方法を説明するための第1図である。
図9は、画像の合成方法を説明するための第2図である。
図10は、画像の合成方法を説明するための第3図である。
第2および第3の利用形態において、切り出した画像と、抜き出した画像を合成するには、図8のように抜き出した画像に対し、領域情報から得られる水平開始位置や垂直開始位置等を元に、切り出した画像を上書きすればよい。
ただし、通信により切り出した画像と、抜き出し画像を圧縮し、復元した結果、上記の方法ではそれぞれの画像の境界が目立ってしまう可能性がある。
このような場合、図9のように切り出す画像に任意の幅のマージン(余白)を設けて切り出し、合成時にその幅の領域を、抜き出し画像とブレンド(透過)処理すればよい。
なお、ブレンド(透過)処理のアルゴリズムや回路構成などは任意である。
また、この時、領域情報は、送受信装置ともあらかじめ決められた任意の幅のマージンを設けていることを、既知として処理してもよいし、送信装置から別途、幅のマージン情報を受信装置に向け、送信してもよく、メタデータとして画像データに埋め込んでもよい。
また、第3の利用形態において、アバターの画像と、抜き出し画像を合成するには、図10のように切り出した領域を包含する様な大きさのアバターの画像を、領域情報から得られる水平開始位置や垂直開始位置等を元に、アバターの画像の余白の領域は上書きせず、アバターの画像のキャラクタの領域は上書きすればよい。
なお、アバターの画像にα値(透過率)を設け、ブレンド(透過)処理してもよい。たとえば、余白の領域はαを100%とし、キャラクタの領域はαを0%とすればよい。
<画像を合成する機器について>
上述の利用形態においては、例として画像を合成する機器を受信装置としたが、通信経路におけるいずれかの機器(送信装置、パーソナルコンピュータ(PC)、通信制御装置(通信サーバー)、WEBサーバー等含む)にて画像(第3の利用形態の場合はアバター)を合成してもよい。
<アバターの画像について>
図11にWEBサーバーが、領域情報を基にアバターの画像を、受信装置に送信する例を示す図である。
第3の利用形態において、例としてアバターの画像は受信装置が用意し、それを合成するとしたが、通信経路におけるいずれかの機器(送信装置、パーソナルコンピュータ(PC)、通信制御装置(通信サーバー)、WEBサーバー等含む)が、領域情報AIを元に、アバターの画像を受信装置に送信し、受信装置はそれらの画像を合成してもよい。
すなわち、たとえば図11に示すように、WEBサーバー500が、領域情報AIを元にアバターANMの画像を、受信装置に送信することも可能である。
以上説明したように、本実施形態によれば、以下の効果を得ることができる。
カメラ装置自体がプライバシーを保護した画像を出力するため、たとえ通信システム内に記録装置があったとしても、保存される(一時的含む)画像は、プライバシーマスクを施した画像となるため、悪意のあるユーザーによる画像データの盗み出しや、ネットワークからのハッキング行為にて、画像が流出したとしても、真にプライバシーを保護できる。
カメラ装置自体から様々な種類の画像、およびその領域情報を出力するため、送信装置における顔検出機能が不要になり、システムコストを大幅に削減でき、および処理や制御における負荷を軽減でき、処理や制御における遅延時間を大幅に短縮できるため、リアルタイム性が向上する。
カメラ装置自体から切り出した画像、および抜き出した画像とその領域情報を、送信装置から送信し、受信装置にて、それらを合成することにより、プライバシーマスク処理を施した画像を表示する場合、通信制御装置(通信サーバー)がプライバシーマスク処理を施す機能が不要になり、かつ場合によっては複数種類のプライバシーマスク処理を施した画像をそれぞれの受信装置に対し、送信する必要もなくなり、システムコストを大幅に削減でき、および処理や制御における負荷を軽減でき、処理や制御における遅延時間を大幅に短縮できるため、リアルタイム性が向上する。
なお、本発明では上記の場合、通信制御装置(通信サーバー)は、単にパケットをルーティング、または同報(ブロードキャスト)するのみでよいため、負荷や遅延は従来の通信制御装置と変わらない。
また、画像を復元する必要がないので、様々な圧縮方式をサポートする必要もない。
カメラ装置自体から様々な種類の画像、およびその領域情報を出力させ、それらを送信装置から送信した場合、それぞれの受信装置は単に受信した画像を合成するだけで、受信者に応じた、送信者における様々なプライバシーの保護を簡易に実現できる。
カメラ装置自体から切り出した画像、および抜き出した画像を、送信装置から送信し場合、まず切り出した画像の画素数は少なくなるため、画像データの容量は小さくなり、かつ抜き出した画像は圧縮する際、一般的に画像中に単色の無地の領域があると圧縮効率が向上するため、結果、画像データの容量は小さくなる。
そのため、通信制御装置(通信サーバー)からプライバシーマスク処理を施したほぼ同容量の画像データを受信装置に送信する場合に比べ、大幅に通信トラフィックが低減するため、リアルタイム性が向上する。
また、カメラ装置自体から抜き出した画像、およびその領域情報を出力し、アバターで表示させる場合、上述したと同様に、大幅に通信トラフィックが低減するため、リアルタイム性が向上する。
また、領域情報を基にWEBサーバーからアバターの画像を受信装置に送信するような用途も、リアルタイム性も犠牲にせず、簡易に実現できる。
なお、この場合、受信装置内にアバターの画像を用意する必要がなくなる。
以上のことから、プライバシーを保護し、かつそれぞれの受信者に対し送信者が意図した様々なプライバシーの保護が可能になり、かつ送受信装置、パーソナルコンピュータ(PC)、通信制御装置:通信サーバー、WEBサーバー等含む通信システムの負荷が少なく、通信トラフィックも少なく、リアルタイム性の高い、通信システムを簡易に実現でき、そのコストも大幅に削減できる。
なお、本発明は、基本的に、一般的なDSCや監視カメラなど、光学ズームの有無や固定焦点等に関わらず、カメラ全般を対象とすることが可能であることはもとより、広角撮像が可能なカメラに対しても、適用可能である。
なお、以上詳細に説明した方法は、上記手順に応じたプログラムとして形成し、CPU等のコンピュータで実行するように構成することも可能である。
また、このようなプログラムは、半導体メモリ、磁気ディスク、光ディスク、フロッピー(登録商標)ディスク等の記録媒体、この記録媒体をセットしたコンピュータによりアクセスし上記プログラムを実行するように構成可能である。
本発明の実施形態に係る画像処理装置を採用したカメラ装置の構成例を示すブロック図である。 元画像およびプライバシーマスク処理を施す画像の例を示す図である。 本実施形態の画像切り出し部の第1の動作例を模式的に示す図である。 本実施形態の画像切り出し部の第2の動作例を模式的に示す図である。 本実施形態の画像切り出し部の第3の動作例を模式的に示す図である。 本実施形態に係るカメラ装置の第2の利用形態の通信システムの構成例を示す図である。 本実施形態に係るカメラ装置の第3の利用形態の通信システムの構成例を示す図である。 画像の合成方法を説明するための第1図である。 画像の合成方法を説明するための第2図である。 画像の合成方法を説明するための第3図である。 WEBサーバーが、領域情報を基にアバターの画像を、受信装置に送信する例を示す図である。
符号の説明
10・・・カメラ装置、11・・・光学系、111・・・レンズ、12・・・撮像素子、13・・・カメラ信号処理部、14・・・画像メモリ、15・・・縮小回路、16・・・顔検出用画像メモリ、17・・・顔検出器、18・・・出力処理部、181・・・プライバシーマスク処理部、182・・・画像切り出し部、183・・・フォーマット変換部、19・・・マイクロコンピュータ(マイコン)、100,100A,100B・・・通信システム、200・・・送信系、300・・・受信系、400・・・ネットワーク、500・・・WEBサーバー。

Claims (20)

  1. 撮像した画像を元に顔を検出する顔検出器と、
    上記顔検出器で検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す機能を有する出力処理部と、を有し、
    上記出力処理部は、
    上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記顔検出器で検出した顔とその背景の画像を別々に出力する機能を含む
    画像処理装置。
  2. 上記出力処理部は、
    検出した顔の領域を切り出した画像と、その背景の画像とに分離し、分離した画像を別々に出力可能である
    請求項1記載の画像処理装置。
  3. 上記出力処理部は、
    プライバシーマスク処理を施した領域を切り出した画像、およびその背景の画像を、それぞれ別の画像として出力可能である
    請求項1記載の画像処理装置。
  4. 上記出力処理部は、
    画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報を、該当する画像と同期して出力可能である
    請求項1記載の画像処理装置。
  5. 上記出力処理部は、
    切り出された領域を任意の色に塗りつぶすことが可能で、
    画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報、または背景の画像における塗りつぶした領域情報を、該当する画像と同期して出力可能である
    請求項2記載の画像処理装置。
  6. 撮像素子と、
    上記撮像素子に被写体像を結像する光学系と、
    上記撮像素子で撮像した画像に画像処理を施す画像処理装置と、を有し、
    上記画像処理装置は、
    撮像した画像を元に顔を検出する顔検出器と、
    上記顔検出器で検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す機能を有する出力処理部と、を有し、
    上記出力処理部は、
    上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記顔検出器で検出した顔とその背景の画像を別々に出力する機能を含む
    カメラ装置。
  7. 上記出力処理部は、
    検出した顔の領域を切り出した画像と、その背景の画像とに分離し、分離した画像を別々に出力可能である
    請求項6記載のカメラ装置。
  8. 上記出力処理部は、
    プライバシーマスク処理を施した領域を切り出した画像、およびその背景の画像を、それぞれ別の画像として出力可能である
    請求項6記載のカメラ装置。
  9. 上記出力処理部は、
    画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報を、該当する画像と同期して出力可能である
    請求項6記載のカメラ装置。
  10. 上記出力処理部は、
    切り出された領域を任意の色に塗りつぶすことが可能で、
    画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報、または背景の画像における塗りつぶした領域情報を、該当する画像と同期して出力可能である
    請求項7記載のカメラ装置。
  11. カメラ装置と、当該カメラ装置で撮像された画像データを送信する送信装置を含む送信系と、
    通信経路を介して上記送信系から送信された画像データを受信する受信装置を含む受信系と、を有し、
    上記送信系において、
    上記カメラ装置は、
    撮像素子と、
    上記撮像素子に被写体像を結像する光学系と、
    上記撮像素子で撮像した画像に画像処理を施す画像処理装置と、を有し、
    上記画像処理装置は、
    撮像した画像を元に顔を検出する顔検出器と、
    上記顔検出器で検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す機能を有する出力処理部と、を有し、
    上記出力処理部は、
    上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、検出した顔の領域を切り出した画像と、その背景の画像とに分離し、分離した画像を別々に出力可能であり、
    プライバシーマスク処理を施した領域を切り出した画像、およびその背景の画像を、それぞれ別の画像として出力可能であり、
    画像における顔を検出した領域情報、またはプライバシーマスク処理を施した領域情報、またはプライバシーマスクを施していない領域情報を、該当する画像と同期して出力可能であり、
    上記送信装置は、
    少なくとも顔と同じタイミングで撮像し分離した背景の画像を送信し、
    上記受信系の受信装置は、
    少なくとも上記送信された背景の画像を受信する
    通信システム。
  12. 上記送信系の送信装置は、
    同じタイミングで撮像し分離した背景の画像と、その領域情報と、切り出した顔の画像を送信し、
    上記受信系の受信装置は、
    上記送信された背景の画像と、その領域情報と、切り出した画像を受信し、領域情報を基に背景の画像に、上記切り出した画像を合成することで、1枚の画像を作り出す
    請求項11記載の通信システム。
  13. 上記受信系の受信装置は、
    上記送信された背景の画像と、その領域情報を受信し、領域情報を基に背景の画像にアバターを合成することで、1枚の画像を作り出す
    請求項11記載の通信システム。
  14. 上記カメラ装置の出力処理部は、
    切り出された領域を任意の色に塗りつぶすことが可能で、
    上記送信装置は、
    上記背景の画像を送信し、
    上記受信系の受信装置は、
    上記送信された背景の画像を受信し、検出された当該背景の画像から切り出した画像の領域情報を基に背景の画像にアバターを合成するとで、1枚の画像を作り出す
    請求項11記載の通信システム。
  15. 上記通信経路における所定の機器において、上記送信系の送信装置から送信された画像に対して所定の画像を合成して、受信装置に送信し、
    上記受信系の受信装置は、
    上記通信経路の所定の機器で合成された画像を受信する
    請求項11記載の通信システム。
  16. 通信経路における所定の機器にて、上記領域情報を基に、プライバシーを保護する画像を受信装置に送信し、
    上記受信系の受信装置は、
    プライバシーマスク処理を施していない画像に合成、またはブレンド処理し、1枚の画像を作り出す
    請求項12記載の通信システム。
  17. 通信経路における所定の機器にて、上記領域情報を基に、上記アバターの画像を受信装置に送信する
    請求項13記載の通信システム。
  18. 通信経路における所定の機器にて、背景の画像から切り出した画像の領域を検出し、当該検出結果を基にアバターの画像を受信装置に送信する
    請求項14記載の通信システム。
  19. 少なくとも顔検出器で検出した顔の画像およびその背景の画像を出力する処理を行う画像処理方法であって、
    上記顔検出器で撮像した画像を元に顔を検出するステップと、
    上記検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施すステップと、
    上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記検出した顔とその背景の画像を別々に出力するステップと
    を有する画像処理方法。
  20. 少なくとも顔検出機能において検出した顔の画像およびその背景の画像を出力する処理を行う画像処理であって、
    撮像した画像を元に顔を検出する処理と、
    検出した顔またはその背景の画像に対してプライバシー保護のためのプライバシーマスク処理を施す処理と、
    上記プライバシーマスク処理されたまたはプライバシーマスク処理がされていない、上記検出した顔とその背景の画像を別々に出力する処理と
    をコンピュータに実行させるプログラム。
JP2008034295A 2008-02-15 2008-02-15 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム Expired - Fee Related JP5088161B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2008034295A JP5088161B2 (ja) 2008-02-15 2008-02-15 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム
US12/378,090 US8305448B2 (en) 2008-02-15 2009-02-11 Selective privacy protection for imaged matter
CN2009100063584A CN101510957B (zh) 2008-02-15 2009-02-16 图像处理设备、方法、摄像机设备、通信***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008034295A JP5088161B2 (ja) 2008-02-15 2008-02-15 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JP2009194687A true JP2009194687A (ja) 2009-08-27
JP5088161B2 JP5088161B2 (ja) 2012-12-05

Family

ID=40954758

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008034295A Expired - Fee Related JP5088161B2 (ja) 2008-02-15 2008-02-15 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム

Country Status (3)

Country Link
US (1) US8305448B2 (ja)
JP (1) JP5088161B2 (ja)
CN (1) CN101510957B (ja)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011193115A (ja) * 2010-03-12 2011-09-29 Panasonic Corp 顔マスキング装置及び方法
JP2011203835A (ja) * 2010-03-24 2011-10-13 Konami Digital Entertainment Co Ltd 画像生成装置、画像加工方法、および、プログラム
JP2012090197A (ja) * 2010-10-22 2012-05-10 Nec System Technologies Ltd 画像配信システムおよび画像配信方法と画像配信プログラム
JP2012175136A (ja) * 2011-02-17 2012-09-10 Nec Corp カメラシステムおよびその制御方法
JP2012174186A (ja) * 2011-02-24 2012-09-10 Mitsubishi Electric Corp 監視用画像処理装置
JP2013074538A (ja) * 2011-09-28 2013-04-22 Casio Comput Co Ltd 画像処理装置及び画像処理方法、並びにプログラム
WO2013061505A1 (en) * 2011-10-25 2013-05-02 Sony Corporation Image processing apparatus, method and computer program product
JP2013092856A (ja) * 2011-10-25 2013-05-16 Sony Corp 画像処理装置およびプログラム
JP2013143752A (ja) * 2012-01-12 2013-07-22 Nippon Telegr & Teleph Corp <Ntt> 映像送信制御装置、方法及びプログラム
JP2014027522A (ja) * 2012-07-27 2014-02-06 Fujitsu Ltd 送信装置、通信装置、データ送信プログラム及びデータ送信方法
US9020255B2 (en) 2011-03-31 2015-04-28 Casio Computer Co., Ltd. Image processing apparatus, image processing method, and storage medium
WO2015136796A1 (ja) * 2014-03-10 2015-09-17 ソニー株式会社 情報処理装置、記憶媒体、および制御方法
JP2017126352A (ja) * 2012-01-31 2017-07-20 パナソニックIpマネジメント株式会社 画像表示装置及び画像表示方法
WO2019106956A1 (ja) 2017-11-29 2019-06-06 京セラドキュメントソリューションズ株式会社 監視システムおよび画像処理装置
JP2019092076A (ja) * 2017-11-15 2019-06-13 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
WO2019198452A1 (ja) * 2018-04-12 2019-10-17 パナソニックIpマネジメント株式会社 映像処理装置、映像処理システム及び映像処理方法
JP2019180027A (ja) * 2018-03-30 2019-10-17 株式会社リコー 通信端末、画像通信システム、表示方法、及びプログラム
WO2020049958A1 (ja) 2018-09-06 2020-03-12 ソニー株式会社 情報処理システム、情報処理方法、端末装置および情報処理装置
JP2020127194A (ja) * 2019-02-05 2020-08-20 株式会社ゼンリン コンピュータシステムおよびプログラム
JP2021050893A (ja) * 2019-09-26 2021-04-01 株式会社ノーリツ 浴室監視システム
WO2022014184A1 (ja) * 2020-07-14 2022-01-20 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム、およびシステム
JP7054492B2 (ja) 2017-01-23 2022-04-14 株式会社Revo 情報加工モジュール、情報加工方法、情報加工プログラム及び情報処理装置
JP7512488B2 (ja) 2019-11-13 2024-07-08 富士フイルム株式会社 画像処理装置、画像処理方法及び画像処理システム

Families Citing this family (90)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5352150B2 (ja) * 2008-08-01 2013-11-27 パナソニック株式会社 撮像装置
JP4952739B2 (ja) * 2009-04-01 2012-06-13 株式会社ニコン 画像ファイル生成装置および画像再生装置
CN101668157B (zh) * 2009-09-24 2011-09-21 中兴通讯股份有限公司 用于视频通话中隐私保护的方法、应用服务器及***
CN102028482B (zh) 2009-09-30 2012-11-14 同方威视技术股份有限公司 人体检查图像处理方法和人体检查设备
CN102111491A (zh) * 2009-12-29 2011-06-29 比亚迪股份有限公司 具有照相功能的移动设备及其人脸识别处理方法
JP5701007B2 (ja) * 2010-10-19 2015-04-15 キヤノン株式会社 監視カメラ装置及び監視カメラ装置の制御方法
CN102456232A (zh) * 2010-10-20 2012-05-16 鸿富锦精密工业(深圳)有限公司 人脸影像代换***以及方法
TWI420405B (zh) * 2010-10-20 2013-12-21 Hon Hai Prec Ind Co Ltd 人臉影像代換系統及方法
JP5791256B2 (ja) * 2010-10-21 2015-10-07 キヤノン株式会社 表示制御装置、表示制御方法
KR20120060549A (ko) * 2010-12-02 2012-06-12 전자부품연구원 사용자 단말 및 이를 이용한 영상 통화 방법
KR101760345B1 (ko) * 2010-12-23 2017-07-21 삼성전자주식회사 동영상 촬영 방법 및 동영상 촬영 장치
US10853856B2 (en) 2011-06-06 2020-12-01 Ncr Corporation Notification system and methods for use in retail environments
EP2727328B8 (en) * 2011-06-28 2020-02-26 NCR Corporation Image processing to prevent access to private information
US10924668B2 (en) * 2011-09-19 2021-02-16 Epilog Imaging Systems Method and apparatus for obtaining enhanced resolution images
WO2013081624A1 (en) * 2011-12-02 2013-06-06 Hewlett-Packard Development Company, L.P. Video clone for a display matrix
CN102567733B (zh) * 2011-12-30 2014-05-07 北京华航无线电测量研究所 一种微波图像非合作情况下人体隐私部位检测与遮挡方法
WO2013114454A1 (ja) * 2012-02-01 2013-08-08 日立コンシューマエレクトロニクス株式会社 コンテンツ受信装置、コンテンツ受信方法、及び、デジタル放送送受信システム
JP6259808B2 (ja) * 2012-03-14 2018-01-10 グーグル エルエルシー ビデオ会議中の参加者の風貌修正
US9582681B2 (en) 2012-04-27 2017-02-28 Nokia Technologies Oy Method and apparatus for privacy protection in images
US9892438B1 (en) 2012-05-03 2018-02-13 Stoplift, Inc. Notification system and methods for use in retail environments
JP2014021570A (ja) * 2012-07-12 2014-02-03 Sony Computer Entertainment Inc 動画像生成装置
KR101747219B1 (ko) * 2012-09-27 2017-06-15 한화테크윈 주식회사 프라이버시 마스크 생성하는 감시 카메라 및 감시 카메라의 제어 방법
US9124762B2 (en) * 2012-12-20 2015-09-01 Microsoft Technology Licensing, Llc Privacy camera
US9013536B2 (en) 2013-03-13 2015-04-21 Futurewei Technologies, Inc. Augmented video calls on mobile devices
JP2014182476A (ja) * 2013-03-18 2014-09-29 Fuji Xerox Co Ltd 操作履歴情報保存装置、画像処理装置、操作履歴情報保存制御プログラム
KR101443361B1 (ko) * 2013-04-08 2014-11-03 현대엠엔소프트 주식회사 네비게이션 장치의 사진지도 표시방법 및 네비게이션 장치
CN104239877B (zh) * 2013-06-19 2019-02-05 联想(北京)有限公司 图像处理的方法和图像采集设备
US9420168B2 (en) * 2013-09-20 2016-08-16 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
CN104469127B (zh) * 2013-09-22 2019-10-18 南京中兴软件有限责任公司 拍摄方法和装置
US9769368B1 (en) * 2013-09-25 2017-09-19 Looksytv, Inc. Remote video system
EP2876605B1 (en) 2013-11-22 2016-04-06 Axis AB Gradient privacy masks
CN104809417A (zh) * 2014-01-29 2015-07-29 北京三星通信技术研究有限公司 在显示屏上进行信息屏蔽的方法、装置及设备
JP2015210702A (ja) * 2014-04-28 2015-11-24 キヤノン株式会社 画像処理装置及び画像処理方法
CN105100671A (zh) * 2014-05-20 2015-11-25 西安中兴新软件有限责任公司 一种基于视频通话的图像处理方法和装置
US9990513B2 (en) 2014-12-29 2018-06-05 Entefy Inc. System and method of applying adaptive privacy controls to lossy file types
US9253443B1 (en) 2015-03-03 2016-02-02 International Business Machines Corporation Filtering video for video telephony and video conferencing
CN106296559A (zh) * 2015-05-26 2017-01-04 中兴通讯股份有限公司 图像处理方法及装置
EP3110161B1 (en) * 2015-06-23 2019-10-09 Nokia Technologies Oy Method, apparatus and computer program product for controlling access to concurrently captured images
CN104966067B (zh) * 2015-06-29 2018-05-18 福建天晴数码有限公司 保护隐私的图像处理方法及***
CN105550543B (zh) * 2015-06-30 2019-04-12 宇龙计算机通信科技(深圳)有限公司 一种虹膜信息处理方法及用户终端
US10284558B2 (en) 2015-08-12 2019-05-07 Google Llc Systems and methods for managing privacy settings of shared content
CN106484704A (zh) * 2015-08-25 2017-03-08 中兴通讯股份有限公司 一种图片处理方法及装置
US10846895B2 (en) * 2015-11-23 2020-11-24 Anantha Pradeep Image processing mechanism
CN106803877A (zh) * 2015-11-26 2017-06-06 西安中兴新软件有限责任公司 一种摄影摄像方法和装置
CN105513104A (zh) * 2015-12-01 2016-04-20 小米科技有限责任公司 图片拍摄方法、装置及***
WO2017129804A1 (en) * 2016-01-29 2017-08-03 Kiwisecurity Software Gmbh Methods and apparatus for using video analytics to detect regions for privacy protection within images from moving cameras
CN105681627B (zh) * 2016-03-03 2019-12-24 联想(北京)有限公司 拍摄图像方法及电子设备
CN107294915B (zh) * 2016-04-01 2020-11-10 宇龙计算机通信科技(深圳)有限公司 图像采集方法、***及终端
CN105847728A (zh) * 2016-04-13 2016-08-10 腾讯科技(深圳)有限公司 一种信息处理方法及终端
CN105956022B (zh) * 2016-04-22 2021-04-16 腾讯科技(深圳)有限公司 电子镜图像处理方法和装置、图像处理方法和装置
US11216569B2 (en) 2016-06-29 2022-01-04 Prosper Creative Co., Ltd. Data masking system
TWI607410B (zh) * 2016-07-06 2017-12-01 虹光精密工業股份有限公司 具有分區影像處理功能的影像處理設備及影像處理方法
CN106201275A (zh) * 2016-07-29 2016-12-07 北京小米移动软件有限公司 截屏图像处理方法及装置
EP3504071A4 (en) * 2016-08-26 2020-01-15 Netradyne Inc. VIDEO RECORDING OF AN OPERATOR AND OF THE SURROUNDING FIELD OF VISION
US10991397B2 (en) * 2016-10-14 2021-04-27 Genetec Inc. Masking in video stream
CN106550243A (zh) * 2016-12-09 2017-03-29 武汉斗鱼网络科技有限公司 直播视频处理方法、装置及电子设备
EP3340624B1 (en) * 2016-12-20 2019-07-03 Axis AB Encoding a privacy masked image
US10587585B2 (en) 2016-12-31 2020-03-10 Entefy Inc. System and method of presenting dynamically-rendered content in structured documents
US10169597B2 (en) * 2016-12-31 2019-01-01 Entefy Inc. System and method of applying adaptive privacy control layers to encoded media file types
US10395047B2 (en) 2016-12-31 2019-08-27 Entefy Inc. System and method of applying multiple adaptive privacy control layers to single-layered media file types
US10037413B2 (en) * 2016-12-31 2018-07-31 Entefy Inc. System and method of applying multiple adaptive privacy control layers to encoded media file types
US11076100B2 (en) * 2017-03-31 2021-07-27 Lenovo (Singapore) Pte. Ltd. Displaying images on a smartglasses device based on image data received from external camera
WO2018179555A1 (ja) * 2017-03-31 2018-10-04 パナソニックIpマネジメント株式会社 撮像装置
CN107292345A (zh) * 2017-07-03 2017-10-24 贵州大学 隐私情境检测方法
EP3454254B1 (en) * 2017-09-07 2023-11-08 Canon Kabushiki Kaisha Image processing apparatus, image providing apparatus, control methods thereof, and program
CN107623817B (zh) * 2017-09-11 2019-08-20 Oppo广东移动通信有限公司 视频背景处理方法、装置和移动终端
CN107493440A (zh) * 2017-09-14 2017-12-19 光锐恒宇(北京)科技有限公司 一种在应用中显示图像的方法和装置
CN109886864B (zh) * 2017-12-06 2021-03-09 杭州海康威视数字技术股份有限公司 隐私遮蔽处理方法及装置
US10305683B1 (en) 2017-12-29 2019-05-28 Entefy Inc. System and method of applying multiple adaptive privacy control layers to multi-channel bitstream data
US10410000B1 (en) 2017-12-29 2019-09-10 Entefy Inc. System and method of applying adaptive privacy control regions to bitstream data
JP7030534B2 (ja) 2018-01-16 2022-03-07 キヤノン株式会社 画像処理装置および画像処理方法
CN108366196B (zh) * 2018-01-25 2020-09-01 西安中科创达软件有限公司 一种保护图片隐私的方法
CN110390189A (zh) * 2018-04-19 2019-10-29 上海擎感智能科技有限公司 基于移动终端的隐私保护方法、操作***、及车辆
EP3564900B1 (en) * 2018-05-03 2020-04-01 Axis AB Method, device and system for a degree of blurring to be applied to image data in a privacy area of an image
CN109035167B (zh) * 2018-07-17 2021-05-18 北京新唐思创教育科技有限公司 对图像中的多个人脸进行处理的方法、装置、设备和介质
JP2020022054A (ja) * 2018-07-31 2020-02-06 ソニーセミコンダクタソリューションズ株式会社 撮影装置、電子機器及び通知方法
US20210392116A1 (en) * 2018-10-02 2021-12-16 Ncs Pte. Ltd. Privacy Protection Camera
CN111179299A (zh) * 2018-11-09 2020-05-19 珠海格力电器股份有限公司 一种图像处理方法及装置
EP3691277A1 (en) * 2019-01-30 2020-08-05 Ubimax GmbH Computer-implemented method and system of augmenting a video stream of an environment
CN111614959B (zh) * 2019-02-26 2023-02-03 北京嘀嘀无限科技发展有限公司 一种视频打码方法、装置以及电子设备
JP6748793B1 (ja) * 2019-03-22 2020-09-02 Sppテクノロジーズ株式会社 保守支援システム、保守支援方法、プログラム及び加工画像の生成方法
CN110400315B (zh) * 2019-08-01 2020-05-05 北京迈格威科技有限公司 一种缺陷检测方法、装置及***
CN110719402B (zh) * 2019-09-24 2021-07-06 维沃移动通信(杭州)有限公司 图像处理方法及终端设备
CN110648382B (zh) * 2019-09-30 2023-02-24 北京百度网讯科技有限公司 图像生成方法和装置
EP3910545A1 (en) 2020-05-15 2021-11-17 Koninklijke Philips N.V. Ambient light suppression
EP3923587B1 (en) * 2020-06-09 2022-03-30 Axis AB Method and device for partially unmasking an object in a video stream
US12013968B2 (en) 2020-10-22 2024-06-18 Robert Bosch Gmbh Data anonymization for data labeling and development purposes
TWI757940B (zh) * 2020-10-29 2022-03-11 宏碁股份有限公司 視訊會議系統及其排除打擾的方法
US11838684B2 (en) * 2021-01-26 2023-12-05 Dell Products, Lp System and method for operating an intelligent videoframe privacy monitoring management system for videoconferencing applications
US11094042B1 (en) 2021-03-12 2021-08-17 Flyreel, Inc. Face detection and blurring methods and systems

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0690446A (ja) * 1992-09-09 1994-03-29 Toshiba Corp テレビ電話装置
JP2003219383A (ja) * 2001-11-13 2003-07-31 Matsushita Electric Ind Co Ltd 画像を用いる通信方法及びその装置
JP2004172862A (ja) * 2002-11-19 2004-06-17 Megachips System Solutions Inc 画像合成方法および合成画像配信システム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002281486A (ja) * 2001-03-16 2002-09-27 Dd Marketing:Kk 画像取得システム
EP1311124A1 (en) 2001-11-13 2003-05-14 Matsushita Electric Industrial Co., Ltd. Selective protection method for images transmission
JP2009239718A (ja) * 2008-03-27 2009-10-15 Toshiba Corp 動画像分離装置、動画像結合装置および動画像分離・結合システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0690446A (ja) * 1992-09-09 1994-03-29 Toshiba Corp テレビ電話装置
JP2003219383A (ja) * 2001-11-13 2003-07-31 Matsushita Electric Ind Co Ltd 画像を用いる通信方法及びその装置
JP2004172862A (ja) * 2002-11-19 2004-06-17 Megachips System Solutions Inc 画像合成方法および合成画像配信システム

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011193115A (ja) * 2010-03-12 2011-09-29 Panasonic Corp 顔マスキング装置及び方法
JP2011203835A (ja) * 2010-03-24 2011-10-13 Konami Digital Entertainment Co Ltd 画像生成装置、画像加工方法、および、プログラム
JP2012090197A (ja) * 2010-10-22 2012-05-10 Nec System Technologies Ltd 画像配信システムおよび画像配信方法と画像配信プログラム
JP2012175136A (ja) * 2011-02-17 2012-09-10 Nec Corp カメラシステムおよびその制御方法
JP2012174186A (ja) * 2011-02-24 2012-09-10 Mitsubishi Electric Corp 監視用画像処理装置
US9020255B2 (en) 2011-03-31 2015-04-28 Casio Computer Co., Ltd. Image processing apparatus, image processing method, and storage medium
JP2013074538A (ja) * 2011-09-28 2013-04-22 Casio Comput Co Ltd 画像処理装置及び画像処理方法、並びにプログラム
US10311323B2 (en) 2011-09-28 2019-06-04 Casio Computer Co., Ltd. Image processing apparatus for converting image in characteristic region of original image into image of brushstroke patterns
WO2013061505A1 (en) * 2011-10-25 2013-05-02 Sony Corporation Image processing apparatus, method and computer program product
JP2013092856A (ja) * 2011-10-25 2013-05-16 Sony Corp 画像処理装置およびプログラム
JP2013143752A (ja) * 2012-01-12 2013-07-22 Nippon Telegr & Teleph Corp <Ntt> 映像送信制御装置、方法及びプログラム
US10366477B2 (en) 2012-01-31 2019-07-30 Panasonic Intellectual Property Management Co., Ltd. Image processing apparatus and image processing method
JP2017126352A (ja) * 2012-01-31 2017-07-20 パナソニックIpマネジメント株式会社 画像表示装置及び画像表示方法
JP2019017069A (ja) * 2012-01-31 2019-01-31 パナソニックIpマネジメント株式会社 画像処理装置及び画像処理方法
JP2014027522A (ja) * 2012-07-27 2014-02-06 Fujitsu Ltd 送信装置、通信装置、データ送信プログラム及びデータ送信方法
JPWO2015136796A1 (ja) * 2014-03-10 2017-04-06 ソニー株式会社 情報処理装置、記憶媒体、および制御方法
US10282619B2 (en) 2014-03-10 2019-05-07 Sony Corporation Processing apparatus, storage medium, and control method
WO2015136796A1 (ja) * 2014-03-10 2015-09-17 ソニー株式会社 情報処理装置、記憶媒体、および制御方法
JP7054492B2 (ja) 2017-01-23 2022-04-14 株式会社Revo 情報加工モジュール、情報加工方法、情報加工プログラム及び情報処理装置
JP7122815B2 (ja) 2017-11-15 2022-08-22 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP2019092076A (ja) * 2017-11-15 2019-06-13 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JPWO2019106956A1 (ja) * 2017-11-29 2020-11-19 京セラドキュメントソリューションズ株式会社 監視システムおよび画像処理装置
WO2019106956A1 (ja) 2017-11-29 2019-06-06 京セラドキュメントソリューションズ株式会社 監視システムおよび画像処理装置
US11050978B2 (en) 2017-11-29 2021-06-29 Kyocera Document Solutions, Inc. Monitoring system and image processing apparatus
JP2019180027A (ja) * 2018-03-30 2019-10-17 株式会社リコー 通信端末、画像通信システム、表示方法、及びプログラム
US11244488B2 (en) 2018-04-12 2022-02-08 Panasonic Intellectual Property Management Co., Ltd. Video processing device, video processing system, and video processing method
JP2019186777A (ja) * 2018-04-12 2019-10-24 パナソニックIpマネジメント株式会社 映像処理装置、映像処理システム及び映像処理方法
WO2019198452A1 (ja) * 2018-04-12 2019-10-17 パナソニックIpマネジメント株式会社 映像処理装置、映像処理システム及び映像処理方法
WO2020049958A1 (ja) 2018-09-06 2020-03-12 ソニー株式会社 情報処理システム、情報処理方法、端末装置および情報処理装置
JP2020127194A (ja) * 2019-02-05 2020-08-20 株式会社ゼンリン コンピュータシステムおよびプログラム
JP7419080B2 (ja) 2019-02-05 2024-01-22 株式会社ゼンリン コンピュータシステムおよびプログラム
JP2021050893A (ja) * 2019-09-26 2021-04-01 株式会社ノーリツ 浴室監視システム
JP7512488B2 (ja) 2019-11-13 2024-07-08 富士フイルム株式会社 画像処理装置、画像処理方法及び画像処理システム
WO2022014184A1 (ja) * 2020-07-14 2022-01-20 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム、およびシステム

Also Published As

Publication number Publication date
US20090207269A1 (en) 2009-08-20
JP5088161B2 (ja) 2012-12-05
US8305448B2 (en) 2012-11-06
CN101510957A (zh) 2009-08-19
CN101510957B (zh) 2012-08-08

Similar Documents

Publication Publication Date Title
JP5088161B2 (ja) 画像処理装置、カメラ装置、通信システム、画像処理方法、およびプログラム
US8681859B2 (en) Systems and methods for multi-stream image processing
TWI495346B (zh) A moving picture photographing apparatus, an information processing apparatus, an information processing apparatus, an image data processing method, a computer program and a recording medium
JP4377886B2 (ja) 画像通信中の画像合成方法及び装置
US10244168B1 (en) Video system for real-time panoramic video delivery
JP2009188792A (ja) 画像送信装置、画像受信装置、画像送受信システム、画像送信プログラムおよび画像受信プログラム
WO2012109831A1 (zh) 一种可视电话中拍照的方法及移动终端
WO2018040577A1 (zh) 图像采集过程中实现自适应屏幕旋转的方法及***
CN107211081B (zh) 基于独立编码的背景更新的视频传输
US9007531B2 (en) Methods and apparatus for expanding a field of view in a video communication session
KR100713531B1 (ko) 영상데이터에 특정효과 표시방법
US20150109436A1 (en) Smart Dual-View High-Definition Video Surveillance System
JP7231825B2 (ja) 映像処理装置、映像処理方法及び映像処理プログラム
KR101552070B1 (ko) 영상 신호 전송 방법 및 장치
JP2006129152A (ja) 撮像装置および画像配信システム
TWI538519B (zh) 視訊影像之擷取裝置
JP2009038627A (ja) 撮像装置
EP2495972A1 (en) Monitoring device and method for monitoring a location
CN114286002B (zh) 图像处理电路、方法、装置、电子设备及芯片
JP2006165664A (ja) 画像送受信システム
JP2023157347A (ja) 画像処理装置、画像処理装置の制御方法、プログラム、及び画像処理システム
JP2004356814A (ja) テレビ電話装置、外部接続モジュール、及びテレビ電話システム
TW200906181A (en) Method of transmitting image
JP2006304182A (ja) ストリームデータの生成方法、ならびにテレビ会議システム、ストリームデータの生成装置、およびストリームデータの合成装置
JP2011182365A (ja) 画像処理装置、画像保存方法、画像表示方法、画像保存プログラム、画像表示プログラム、画像処理システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120423

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120501

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120628

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120814

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120827

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150921

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150921

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees