JP2014085796A - 情報処理装置およびプログラム - Google Patents
情報処理装置およびプログラム Download PDFInfo
- Publication number
- JP2014085796A JP2014085796A JP2012233709A JP2012233709A JP2014085796A JP 2014085796 A JP2014085796 A JP 2014085796A JP 2012233709 A JP2012233709 A JP 2012233709A JP 2012233709 A JP2012233709 A JP 2012233709A JP 2014085796 A JP2014085796 A JP 2014085796A
- Authority
- JP
- Japan
- Prior art keywords
- face image
- image
- person
- natural
- face
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Bioethics (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
【課題】人物の顔画像を違和感が無いよう変換してプライバシーを保護することが可能な情報処理装置およびプログラムを提供する。
【解決手段】画像内の顔画像領域を検出する検出部と、前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部と、を備える、情報処理装置。
【選択図】図１
【解決手段】画像内の顔画像領域を検出する検出部と、前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部と、を備える、情報処理装置。
【選択図】図１
Description
本開示は、情報処理装置およびプログラムに関する。
近年、通信技術の発展に伴って、大量のデータを高速に送信することが可能となり、様々な情報通信サービスが提供されている。例えば、ＳＮＳ（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ）等の交流サイトに、ユーザが撮影した画像を公開したり、通信対戦ゲーム等において、ユーザが撮影した画像を所定のネットワークを介して送信先に送信したりすることができる。ここで、ユーザ本人の顔を知られたくない場合等、プライバシー保護のために、撮影した画像を一部加工してネットワーク上に送信することも行われている。
このような画像に写る個人の肖像権を守るプライバシー保護に関する技術として、例えば下記特許文献１が提案されている。特許文献１では、撮像した人物画像を実時間で所望の送信先へ送信する場合に、画像中の人物と背景とを画像認識装置で個別のオブジェクトに分解し、画像加工処理部でオブジェクト毎に他の画像へ変換する技術が開示されている。他の画像とは、例えば似顔絵やマンガキャラクターの画像であることが明記されている。
また、下記特許文献２では、監視カメラの映像配信システムにおいて、人物とそれ以外の領域を分離し、商品の映像を含みながら、来店者の姿を含まない映像（人物をモザイク処理した映像）を配信する技術が開示されている。これにより、来店者の肖像権やプライバシーを保護しながら、来店状況を認識できる映像配信が可能となる。
しかしながら、上記各特許文献に記載の技術では、プライバシー保護はできても、実写映像内にモザイク部分や似顔絵、マンガキャラクター等が含まれるので、不自然な映像になってしまい、違和感が生じる。
そこで、本開示では、人物の顔画像を違和感が無いよう変換してプライバシーを保護することが可能な、新規かつ改良された情報処理装置およびプログラムを提案する。
本開示によれば、画像内の顔画像領域を検出する検出部と、前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部と、を備える、情報処理装置を提案する。
本開示によれば、コンピュータを、画像内の顔画像領域を検出する検出部と、前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部、として実行させるための、プログラムを提案する。
以上説明したように本開示によれば、人物の顔画像を違和感が無いよう変換してプライバシーを保護することが可能となる。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
また、説明は以下の順序で行うものとする。
１．本開示の一実施形態による画像処理システムの概要
２．サーバの内部構成例
３．顔画像置換処理
３−１．第１の顔画像置換処理
３−２．第２の顔画像置換処理
３−３．第３の顔画像置換処理
４．まとめ
１．本開示の一実施形態による画像処理システムの概要
２．サーバの内部構成例
３．顔画像置換処理
３−１．第１の顔画像置換処理
３−２．第２の顔画像置換処理
３−３．第３の顔画像置換処理
４．まとめ
＜１．本開示の一実施形態による画像処理システムの概要＞
まず、本開示の一実施形態による画像処理システムの概要について図１を参照して説明する。図１に示すように、本開示の一実施形態による画像処理システムは、サーバ１およびユーザ端末２を含む。また、サーバ１およびユーザ端末２は、ネットワーク３を介して接続することが可能である。
まず、本開示の一実施形態による画像処理システムの概要について図１を参照して説明する。図１に示すように、本開示の一実施形態による画像処理システムは、サーバ１およびユーザ端末２を含む。また、サーバ１およびユーザ端末２は、ネットワーク３を介して接続することが可能である。
ユーザ端末２は、ユーザが利用する通信端末であって、ネットワーク３に無線／有線接続することが可能である。また、ユーザ端末２は、図１に示すスマートフォンの他、携帯電話端末、デジタルカメラ、ビデオカメラ、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、携帯用ゲーム機器等であってもよい。ユーザは、ユーザ端末２で撮影した実写画像（撮影画像）やユーザ端末２が有する撮影画像を、ネットワーク３を介してＳＮＳやブログサービス等のサービスサイトにアップロードすることが可能である。
ここで、通常、ユーザは、撮影画像に写る自分の顔を知られたくない場合や、撮影画像に他人の顔が写り込んでいる場合、顔が分からないように加工した上でアップロードしてプライバシーを保護している。例えば、図２に示すように、撮影画像６０に写る人物のプライバシーを保護するために、加工画像６２のように人物の目の部分に黒線を入れたり、加工画像６４のように人物の顔をモザイク処理したりすることが知られている。
しかしながら、黒線やモザイクでプライバシー保護はできても、実写画像内にこのような加工が施されると、画像が不自然になり、違和感が生じる。
そこで、上記事情を一着眼点にして本開示の各実施形態による画像処理システムを創作するに至った。本開示の各実施形態による画像処理システムによれば、人物の顔画像を違和感が無いよう変換してプライバシーを保護することができる。
より具体的には、図１に示すように、サーバ１において、ユーザ端末２から送信された撮影画像３０に写る人物の顔領域を、当該人物の人物属性に応じた他の自然顔画像に置換した画像３６を生成する。人物属性とは、例えば人物の年齢や性別であって、サーバ１は、撮影画像３０に写る人物の性別と同じ性別の他の自然顔画像に置換することで、違和感が無い自然な画像３６を生成することができる。このように、人物の顔画像を、人物属性に応じた他の自然顔画像に置換することで、撮影画像に写る人物のプライバシーを保護しつつ、かつ、不自然さを生じさせない画像を生成することができる。
なお、本明細書において、自然顔画像とは、実在の人物の顔をそのまま写した実写画像（自然画像）や、複数の実在する人物の顔の実写画像から生成された平均顔画像（合成画像）である。
以上、本開示の一実施形態における画像処理システムの概要について説明した。続いて、画像処理システムに含まれるサーバ１の内部構成例について図３を参照して詳細に説明する。
＜２．サーバの内部構成例＞
図３は、本実施形態によるサーバ１の構成を示すブロック図である。図３に示すように、サーバ１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２、自然顔画像ＤＢ（データベース）１３、顔領域検出部１４、判断部１６、顔画像置換部１８、およびネットワークインターフェース（Ｉ／Ｆ）１９を有する。以下、各構成について説明する。
図３は、本実施形態によるサーバ１の構成を示すブロック図である。図３に示すように、サーバ１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１２、自然顔画像ＤＢ（データベース）１３、顔領域検出部１４、判断部１６、顔画像置換部１８、およびネットワークインターフェース（Ｉ／Ｆ）１９を有する。以下、各構成について説明する。
（自然顔画像ＤＢ１３）
自然顔画像ＤＢ１３は、自然顔画像を記憶する記憶部である。上述したように本明細書において、自然顔画像とは、実写画像であってもよいし、複数の実写画像から生成された平均顔画像（合成画像）であってもよい。実写画像の場合、自分の顔を一般公開することを許可した人物の顔を撮影した撮影画像となる。また、平均顔画像は、性別、年齢、人種、肌の色、髪の色、眼の色、および体型等の各人物属性毎に生成された平均顔画像であってもよい。また、眼鏡、帽子、耳当て、ヘッドホンまたはイヤホン等の装着物着用の有無（以下、眼鏡等着用の有無とも称す）を各人物属性に付け加えてもよい。このような顔や頭に装着する装着物は、人物の顔の印象に影響を及ぼすためである。
自然顔画像ＤＢ１３は、自然顔画像を記憶する記憶部である。上述したように本明細書において、自然顔画像とは、実写画像であってもよいし、複数の実写画像から生成された平均顔画像（合成画像）であってもよい。実写画像の場合、自分の顔を一般公開することを許可した人物の顔を撮影した撮影画像となる。また、平均顔画像は、性別、年齢、人種、肌の色、髪の色、眼の色、および体型等の各人物属性毎に生成された平均顔画像であってもよい。また、眼鏡、帽子、耳当て、ヘッドホンまたはイヤホン等の装着物着用の有無（以下、眼鏡等着用の有無とも称す）を各人物属性に付け加えてもよい。このような顔や頭に装着する装着物は、人物の顔の印象に影響を及ぼすためである。
また、自然顔画像には、置換画像であることを示す表示がマーキングされていてもよい。例えば、顔画像の所定の位置に、ホクロを付けることで、置換画像であることを示してもよい。
また、自然顔画像とは、顔の一部を少なくとも含む画像であればよく、例えば、目や鼻、または口のみといった顔部品の自然画像であってもよい。
なお、自然顔画像ＤＢ１３に記憶される自然顔画像の一例については、後述の図５において説明する。
（顔領域検出部１４）
顔領域検出部１４は、ユーザ端末２から送信された画像内の顔画像領域を検出する。具体的には、例えば顔領域検出部１４は、画像を解析して顔認識を行い、少なくとも顔の一部を含む画像領域を検出する。また、顔領域検出部１４は、予め設定された所定の大きさ以上の大きさで写っている顔を、顔画像領域として検出してもよい。また、顔領域検出部１４は、画像内のうち、ユーザに指定されたエリアから顔画像領域を検出してもよい。
顔領域検出部１４は、ユーザ端末２から送信された画像内の顔画像領域を検出する。具体的には、例えば顔領域検出部１４は、画像を解析して顔認識を行い、少なくとも顔の一部を含む画像領域を検出する。また、顔領域検出部１４は、予め設定された所定の大きさ以上の大きさで写っている顔を、顔画像領域として検出してもよい。また、顔領域検出部１４は、画像内のうち、ユーザに指定されたエリアから顔画像領域を検出してもよい。
（判断部１６）
判断部１６は、顔領域検出部１４により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する。具体的には、判断部１６は、顔画像に基づいて人物属性を判断してもよいし、画像全体（顔画像を含む身体画像）に基づいて人物属性を判断してもよい。ここで、人物属性とは、人物の性別、年齢（年代）、人種、肌の色、髪の色、眼の色、国籍または体型等であり、眼鏡等着用の有無を付け加えてもよい。また、判断部１６は、画像から顔や身体の画像を抽出し、予め登録されている属性判断用のパターンとパターンマッチングを行い、顔や服装等を解析して人物属性を判断してもよい。
判断部１６は、顔領域検出部１４により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する。具体的には、判断部１６は、顔画像に基づいて人物属性を判断してもよいし、画像全体（顔画像を含む身体画像）に基づいて人物属性を判断してもよい。ここで、人物属性とは、人物の性別、年齢（年代）、人種、肌の色、髪の色、眼の色、国籍または体型等であり、眼鏡等着用の有無を付け加えてもよい。また、判断部１６は、画像から顔や身体の画像を抽出し、予め登録されている属性判断用のパターンとパターンマッチングを行い、顔や服装等を解析して人物属性を判断してもよい。
（顔画像置換部１８）
顔画像置換部１８は、顔領域検出部１４により検出された顔画像領域を、判断部１６により判断された人物属性に応じた他の人物の自然顔画像に置換する。具体的には、例えば顔画像置換部１８は、判断部１６により判断された人物属性と同じ属性の人物（例えば、性別が同じ、年代が同じ、人種が同じ、または肌の色、髪の色、眼の色が同じ等）の自然顔画像を、自然顔画像ＤＢ１３から抽出し、画像内の顔画像領域と置換する。このように、画像内の顔画像領域を他の自然顔画像に変換することで、画像内の人物を特定できないようにするので、自然顔画像は、匿名顔（アノニマスフェイス）画像とも称する。また、判断部１６により判断された人物属性と同じ属性の人物の自然顔画像に置換することで、顔画像置換部１８は、より自然な違和感の無い置換画像を生成することができる。なお、顔画像置換部１８は、画像内の顔画像が眼鏡等を着用している場合には、眼鏡等着用の顔画像に置換してもよいし、眼鏡等を着用していない顔画像に置換した後に眼鏡等を着用させる画像処理を行ってもよい。
顔画像置換部１８は、顔領域検出部１４により検出された顔画像領域を、判断部１６により判断された人物属性に応じた他の人物の自然顔画像に置換する。具体的には、例えば顔画像置換部１８は、判断部１６により判断された人物属性と同じ属性の人物（例えば、性別が同じ、年代が同じ、人種が同じ、または肌の色、髪の色、眼の色が同じ等）の自然顔画像を、自然顔画像ＤＢ１３から抽出し、画像内の顔画像領域と置換する。このように、画像内の顔画像領域を他の自然顔画像に変換することで、画像内の人物を特定できないようにするので、自然顔画像は、匿名顔（アノニマスフェイス）画像とも称する。また、判断部１６により判断された人物属性と同じ属性の人物の自然顔画像に置換することで、顔画像置換部１８は、より自然な違和感の無い置換画像を生成することができる。なお、顔画像置換部１８は、画像内の顔画像が眼鏡等を着用している場合には、眼鏡等着用の顔画像に置換してもよいし、眼鏡等を着用していない顔画像に置換した後に眼鏡等を着用させる画像処理を行ってもよい。
また、顔画像置換部１８による置換処理は、ユーザ端末２から送信された画像データ（元画像）に、自然顔画像を上書きする方法でもよいし、顔領域に重畳する自然顔画像を元画像の別レイヤーとして管理する方法でもよい。
また、顔画像置換部１８は、人物属性に加えて、元画像の撮影時の照明状況や、撮影場所、画質等に応じて、置換した際に、より自然に見えて違和感のない自然顔画像を抽出してもよい。具体的には、例えば顔画像置換部１８は、撮影時の照明が自然光であって、とても明るい状況であった場合、同様に自然光でとても明るい状況で撮影された自然顔画像を抽出する。
また、顔画像置換部１８は、自然顔画像で置換した画像がより違和感なく見えるよう、元画像（撮影画像）に写る顔画像の大きさ、向き、および表情等の少なくともいずれかに合った自然顔画像に置換する。
また、顔画像置換部１８は、撮影場所に多く住む人種（撮影場所の国籍）に応じて、同じ人種（国籍）の自然顔画像を抽出してもよい。これにより、例えば観光で訪れたＢ国で撮影した撮影画像に、母国のＡ国人が写り込んでいる場合に、Ａ国人をＢ国人の自然顔画像に置換することで、写っている人物のプライバシーを保護できるとともに、観光先のＢ国で撮影したことがより明確な画像となる。この場合、顔画像置換部１８は、画像に写るＡ国人の性別・年齢等の人物属性が同じＢ国人の自然顔画像を抽出して置換することで、より自然に見えて違和感が少ない画像を生成することができる。
なお、撮影時の照明状況や、撮影場所、画質等の情報は、元画像を解析して判断してもよいし、元画像に付加されたメタデータから判断してもよい。
（ネットワークＩ／Ｆ１９）
ネットワークＩ／Ｆ１９は、ネットワーク３を通じてユーザ端末２との間でデータの送受信を行うための通信モジュールである。例えば、本実施形態によるネットワークＩ／Ｆ１９は、ユーザ端末２から撮影画像を受信する。また、ネットワークＩ／Ｆ１９は、サーバ１により顔画像の置換処理がされた画像を、ネットワーク３を通じて所定のサービスサイトにアップロードすることも可能である。
ネットワークＩ／Ｆ１９は、ネットワーク３を通じてユーザ端末２との間でデータの送受信を行うための通信モジュールである。例えば、本実施形態によるネットワークＩ／Ｆ１９は、ユーザ端末２から撮影画像を受信する。また、ネットワークＩ／Ｆ１９は、サーバ１により顔画像の置換処理がされた画像を、ネットワーク３を通じて所定のサービスサイトにアップロードすることも可能である。
（ＣＰＵ１０、ＲＯＭ１１、およびＲＡＭ１２）
ＣＰＵ１０は、サーバ１の各構成を制御する制御部である。ＣＰＵ１０は、ＲＯＭ１１に記憶されているソフトウェアプログラムに従って、各構成を制御する。より具体的には、ＣＰＵ１０は、例えば顔画像置換部１８により置換処理された画像を、所定のサービスサイトにアップロードするよう制御する。また、ＲＯＭ１１には、ＣＰＵ１０が各制御を実行するためソフトウェアプログラム等が記憶されている。また、ＲＡＭ１２は、ＣＰＵ１０がＲＯＭ１１に記憶されているソフトウェアプログラムに従って各制御を実行する際に、ワークエリアとして用いられる。
ＣＰＵ１０は、サーバ１の各構成を制御する制御部である。ＣＰＵ１０は、ＲＯＭ１１に記憶されているソフトウェアプログラムに従って、各構成を制御する。より具体的には、ＣＰＵ１０は、例えば顔画像置換部１８により置換処理された画像を、所定のサービスサイトにアップロードするよう制御する。また、ＲＯＭ１１には、ＣＰＵ１０が各制御を実行するためソフトウェアプログラム等が記憶されている。また、ＲＡＭ１２は、ＣＰＵ１０がＲＯＭ１１に記憶されているソフトウェアプログラムに従って各制御を実行する際に、ワークエリアとして用いられる。
以上、本実施形態によるサーバ１の構成について詳細に説明した。続いて、本実施形態による顔画像置換処理について複数の例を挙げて説明する。
＜３．顔画像置換処理＞
（３−１．第１の顔画像置換処理）
図４は、本実施形態による第１の顔画像置換処理を示すフローチャートである。図４に示すように、ステップＳ１０３において、サーバ１は、ユーザ端末２から画像データを取得（受信）する。
（３−１．第１の顔画像置換処理）
図４は、本実施形態による第１の顔画像置換処理を示すフローチャートである。図４に示すように、ステップＳ１０３において、サーバ１は、ユーザ端末２から画像データを取得（受信）する。
次に、ステップＳ１０６において、サーバ１の顔領域検出部１４は、画像データから顔画像領域を検出する。この際、顔領域検出部１４は、個人を特定することが困難な小さい顔画像は検出せず、所定の大きさ以上の顔画像領域を検出してもよい。ここで、図５に本実施形態による顔画像置換を具体的に説明するための図を示す。図５に示すように、顔領域検出部１４は、ユーザ端末２から送信された撮影画像３０内で、顔画像領域３２を検出する。
次いで、ステップＳ１０９において、サーバ１のＣＰＵ１０は、自然顔画像に置き換えるか否かを判断する。具体的には、ＣＰＵ１０は、ユーザから置換指示がある場合や、画像をアップロードする先のサービスサイトの秘匿性が低い場合に、自然顔画像に置き替えると判断してもよい。
次に、置換しないと判断された場合（Ｓ１０９／ＮＯ）、ステップＳ１１２において、サーバ１は自然顔画像の置換を行わず、続くステップＳ１１９において、サーバ１は、ユーザ端末２から送信された画像をそのまま所定のサービスサイトにアップロードする。
一方、自然顔画像に置き替えると判断された場合（Ｓ１０９／ＹＥＳ）、ステップＳ１１５において、判断部１６は、顔領域検出部１４により検出された顔画像領域の人物の人物属性を判断する。具体的には、判断部１６は、図５に示すように、撮影画像３０から検出された顔画像領域３２の人物４の人物属性を判断する。この場合、判断部１６は、例えば人物４の顔や身体の画像を抽出し、予め登録されている属性判断用のパターンとパターンマッチングを行い、「Ａ国」、「女性」、「大人」といった人物属性を判断することができる。
次いで、ステップＳ１１８において、顔画像置換部１８は、判断部１６により判断された人物属性に応じた自然顔画像ＤＢ１３から抽出し、抽出した自然顔画像を、顔領域検出部１４により検出された顔画像領域と置換する。具体的には、図５に示すように、自然顔画像ＤＢ１３に記憶される複数の自然顔画像データ１３１から、判断部１６により判断された人物属性と同じ属性の自然顔画像を抽出する。自然顔画像データ１３１は、図５に示すように各人物属性毎に分類され、顔画像置換部１８は、人物４の人物属性「Ａ国」、「女性」、および「大人」の全ての属性を満たす自然顔画像３４を抽出する。そして、顔画像置換部１８は、抽出した自然顔画像３４を、撮影画像３０の顔画像領域３２に置換して画像３６を生成する。顔画像の置換は、図５に示すように、頭部（髪型全体）は元画像（撮影画像３０）に写る人物４のままで、顔のみを自然顔画像３４に置換してもよいし、頭部（髪型全体）も含めて、髪型全体を含む自然顔画像に置換してもよい。
さらに、顔画像置換部１８は、身体も含めて写る人物４の全てを、顔および身体を含む自然人物画像に置換してもよい。例えば、撮影画像３０の撮影場所がＢ国である場合、人物４がＡ国人であると属性判断されると、顔画像置換部１８は、人物４の全てを、Ｂ国人の自然人物画像に置換してもよい。
次に、ステップＳ１１９において、サーバ１は、顔画像置換部１８により自然顔画像に置換された画像を、所定のサービスサイトにアップロードする。
（３−２．第２の顔画像置換処理）
上述した第１の顔画像置換処理では、判断部１６が顔画像領域の人物の人物属性を自動判断しているが、本実施形態による顔画像置換処理はこれに限定されず、例えばユーザが任意で人物属性を指定してもよい。以下、このようなユーザが任意で人物属性を指定できる顔画像置換処理について、図３を参照して具体的に説明する。
上述した第１の顔画像置換処理では、判断部１６が顔画像領域の人物の人物属性を自動判断しているが、本実施形態による顔画像置換処理はこれに限定されず、例えばユーザが任意で人物属性を指定してもよい。以下、このようなユーザが任意で人物属性を指定できる顔画像置換処理について、図３を参照して具体的に説明する。
図６は、本実施形態による第２の顔画像置換処理を示すフローチャートである。図６に示すように、ステップＳ１２３において、サーバ１は、顔画像を含む画像をユーザ端末２に提示する。
次に、ステップＳ１２６において、サーバ１は、ユーザによる単数または複数の特定の顔画像の選択を受け付ける。すなわち、ユーザは、ユーザ端末２を操作し、提示された顔画像を含む画像のうち、顔画像を置換したい顔画像領域を選択する。
次いで、ステップＳ１２９において、サーバ１は、自然顔画像に置換するか否かを判断する。具体的には、ＣＰＵ１０は、ユーザから置換指示があった場合に自然顔画像に置き替えると判断してもよい。
次に、置換しないと判断された場合（Ｓ１２９／ＮＯ）、ステップＳ１３２において、サーバ１は自然顔画像の置換を行わず、続くステップＳ１４２において、サーバ１は、顔画像を含む画像をそのまま所定のサービスサイトにアップロードする。
一方、自然顔画像に置き替えると判断された場合（Ｓ１２９／ＹＥＳ）、ステップＳ１３５において、ＣＰＵ１０は、自動置換か否かを判断する。具体的には、ＣＰＵ１０は、ユーザから何ら指示がなかった場合は自動置換と判断し、ユーザから手動置換の指示があった場合手動置換と判断する。
次いで、自動置換と判断された場合（Ｓ１３５／ＹＥＳ）、ステップＳ１３８において、判断部１６は、上記Ｓ１２６でユーザに選択された顔画像領域の人物の人物属性を自動判断する。
次に、ステップＳ１４１において、顔画像置換部１８は、判断部１６により判断された人物属性に応じた自然顔画像ＤＢ１３から抽出し、抽出した自然顔画像を、顔領域検出部１４により検出された顔画像領域と置換する。
そして、ステップＳ１４２において、サーバ１は、顔画像置換部１８により自然顔画像に置換された画像を、所定のサービスサイトにアップロードする。
一方、手動置換と判断された場合（Ｓ１３５／ＮＯ）、ステップＳ１４４において、ＣＰＵ１０は、ユーザによる人物属性の選択を受け付ける。すなわち、ユーザは、ユーザ端末２を操作し、選択した顔画像領域を置換するための人物属性として、例えば国籍、年齢、性別等を選択する。
次に、ステップＳ１４７において、顔画像置換部１８は、ユーザに選択された人物属性に応じた自然顔画像ＤＢ１３から抽出し、抽出した自然顔画像を、ユーザに選択された顔画像領域と置換する。
そして、ステップＳ１４２において、サーバ１は、顔画像置換部１８により自然顔画像に置換された画像を、所定のサービスサイトにアップロードする。
以上説明したように、画像内の顔画像領域を置換する自然顔画像は、ユーザが手動で人物属性を選択することにより指定することができる。
（３−３．第３の顔画像置換処理）
上述した第１、第２の顔画像置換処理では、顔画像置換部１８が、人物属性に応じた自然顔画像を自動的に抽出して置換しているが、本実施形態による顔画像置換処理はこれに限定されない。例えば、顔画像置換部１８は、人物属性に応じた複数の自然顔画像を抽出してユーザに提示し、ユーザに選択された自然顔画像で置換するよう処理してもよい。以下、このような複数の自然顔画像をユーザに提示する自然顔画像置換処理について、図７〜図８を参照して具体的に説明する。
上述した第１、第２の顔画像置換処理では、顔画像置換部１８が、人物属性に応じた自然顔画像を自動的に抽出して置換しているが、本実施形態による顔画像置換処理はこれに限定されない。例えば、顔画像置換部１８は、人物属性に応じた複数の自然顔画像を抽出してユーザに提示し、ユーザに選択された自然顔画像で置換するよう処理してもよい。以下、このような複数の自然顔画像をユーザに提示する自然顔画像置換処理について、図７〜図８を参照して具体的に説明する。
図７は、本実施形態による第３の顔画像置換処理を示すフローチャートである。図７に示すように、ステップＳ１５３において、サーバ１は、顔画像を含む画像をユーザ端末２に提示する。
次に、ステップＳ１５６において、サーバ１は、自然顔画像への置換エリアの切り出しを行う。具体的には、サーバ１は、ユーザの指示に応じて、提示した顔画像を含む画像のうち、顔画像を置換するエリアの選択を受け付けてもよいし、自動的に顔画像を含むエリアを切り出し部分として提示してもよい。ここで、図８に本実施形態によるサーバ１からユーザ端末２に提示される各画像の表示例の図を示す。まず、サーバ１は、図８の画面４０に示すように、ユーザに提示した顔画像を含む画像のうち、顔画像を置換するエリアとして切り出したエリア４２をユーザ端末２に提示する。
次いで、ステップＳ１５９において、サーバ１は、ユーザ操作に応じて、切り出したエリア４２でＯＫか否かを判断する。例えば、ユーザは、図８に示すエリア４２でＯＫの場合、ユーザ端末２に表示されるＯＫボタン（不図示）をクリックして決定処理を行う。
次に、切り出したエリアでＯＫの場合（Ｓ１５９／ＹＥＳ）、ステップＳ１６０において、顔領域検出部１４は、エリア４２から２つの顔画像領域を検出する。
次いで、ステップＳ１６１において、判断部１６は、顔領域検出部１４が検出した２つの顔画像領域の各人物の人物属性を判断する。
次に、ステップＳ１６２において、顔画像置換部１８は、判断部１６により判断された各人物の人物属性に応じた１以上の各自然顔画像を自然顔画像ＤＢ１３から抽出し、置換候補パターン群としてユーザ端末２に提示する。具体的には、図８の画面４４に示すように、ユーザ端末２において、自然顔画像の置換候補パターン群４６が表示される。
次いで、ステップＳ１６５において、顔画像置換部１８は、置換候補パターン群４６のうちユーザに選択された置換候補パターンを拡大して提示する。具体的には、図８の画面４８に示すように、置換候補パターン群４６のうち置換候補パターン４６ａが選択されると、サーバ１は、置換候補パターン４６ａを拡大してユーザ端末２に提示する。なお、置換候補パターン４６ａは、図８に示すように、少なくとも性別、年齢（年代）といった人物属性に応じた自然顔画像であって、さらに、顔の向きも、エリア４２の各顔画像と合った自然顔画像の候補となっている。
続いて、ステップＳ１６８において、サーバ１は、ユーザ操作に応じて、提示した置換候補パターンでＯＫか否かを判断する。例えば、ユーザは、図８の画面４８に示す置換候補パターン４６ａでＯＫの場合、ユーザ端末２に表示されるＯＫボタン（不図示）をクリックして決定処理を行う。
次に、置換候補パターンが決定した場合（Ｓ１６８／ＹＥＳ）、ステップＳ１７１において、顔画像置換部１８は、図８の画面５０に示すように、自然顔画像の置換候補パターン４６ａで置換した画像を生成し、ユーザ端末２に提示する。
そして、ステップＳ１７２において、サーバ１は、顔画像置換部１８により自然顔画像に置換された画像を、所定のサービスサイトにアップロードする。
以上説明したように、本実施形態による顔画像置換処理では、複数の自然顔画像が、置換候補パターン群として提示され、ユーザは任意の置換候補パターンを選択することができる。
＜４．まとめ＞
上述したように、本実施形態による画像処理（顔画像置換処理）システムでは、画像から検出した顔領域をその顔領域の人物の人物属性に応じた自然顔画像に置換することで、プライバシーを保護しつつ、かつ違和感が無い自然な置換画像を生成できる。
上述したように、本実施形態による画像処理（顔画像置換処理）システムでは、画像から検出した顔領域をその顔領域の人物の人物属性に応じた自然顔画像に置換することで、プライバシーを保護しつつ、かつ違和感が無い自然な置換画像を生成できる。
特に、ＳＮＳやブログサービス等のサービスサイトに顔画像を含む撮影画像をアップロードすることが多い昨今では、このようなプライバシーの保護が重要となる。
また、至るところに監視カメラが設置されるようになったり、道の実写画像を表示する地図サービスが普及したりすることで、自分が気付かないうちに撮影されてしまう可能性が高くなった。このような場合にも、顔画像領域を他の自然顔画像に置換することで、プライバシーを保護しつつ、かつ違和感が無い自然な置換画像を生成することが有益となる。
さらに、大量のイメージセンサ、マイク、スピーカ等が世界中に配され、これらをユーザの身体拡張を実現する手段として用い、個人が所持する通信端末が不要となる新たなコミュニケーションシステムの実現も想定される。かかるコミュニケーションシステムが実現された場合にも、広範囲に配されたイメージセンサ（カメラ）で自分が気付かないうちに撮影されてしまう可能性が高くなる。したがって、この場合にも、顔画像領域を他の自然顔画像に置換することで、プライバシーを保護しつつ、かつ違和感が無い自然な置換画像を生成することが有益となる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
例えば、顔画像置換部１８は、置換する元画像（撮影画像）の画質、解像度に合った自然顔画像を抽出してもよい。
また、顔画像置換部１８は、顔画像領域が検出された人物の人物属性に応じた自然顔画像が抽出できなかった場合、その人物の画像を画像内から削除、またはその人物の画像を、全て他の自然人物画像に置換してもよい。
また、自然顔画像への置換処理が行われた画像は、所定の条件を満たせば、置換前の元画像（撮影画像）に戻せるようにしてもよい。所定の条件とは、例えば撮影画像に写っている本人により置換前に戻すよう指示があった場合等である。
また、自然顔画像は、上述したように、自分の顔を一般公開することを許可した人物の顔を撮影した撮影画像（実写画像）であってもよい。したがってサーバ１は、自分の顔を使って欲しいという人物の実写顔画像を受け付け、自然顔画像ＤＢ１３に蓄積していってもよい。
また、本実施形態では、顔画像置換処理を実行する情報処理装置としてサーバ１を用いたが、本実施形態による情報処理装置はサーバ１に限定されず、例えばユーザ端末２であってもよい。具体的には、ユーザ端末２が、図３に示すサーバ１の各構成に相当する構成を有することにより、本実施形態による顔画像置換処理を実行することが可能である。
なお、本技術は以下のような構成も取ることができる。
（１）
画像内の顔画像領域を検出する検出部と、
前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、
前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部と、
を備える、情報処理装置。
（２）
前記人物属性は、人物の性別、年齢、人種、肌の色、および体型のうち少なくともいずれか一つである、前記（１）に記載の情報処理装置。
（３）
前記人物属性は、人物の眼鏡、帽子、耳当て、ヘッドホン、またはイヤホンを含む装着物の着用の有無である、前記（１）に記載の情報処理装置。
（４）
前記顔画像置換部は、前記少なくとも一の顔画像の人物の顔の大きさ、向き、および表情のうち少なくともいずれか一つに応じた他の人物の自然顔画像に置換する、前記（１）〜（３）のいずれか１項に記載の情報処理装置。
（５）
前記顔画像置換部は、前記画像が撮像された際の照明状況に応じた他の人物の自然顔画像に置換する、前記（１）〜（３）のいずれか１項に記載の情報処理装置。
（６）
前記顔画像置換部は、前記画像が撮像された場所に応じた他の人物の自然顔画像に置換する、前記（１）〜（５）のいずれか１項に記載の情報処理装置。
（７）
前記顔画像置換部は、前記少なくとも一の顔画像と、予め記憶された自然顔画像とを比較し、前記人物属性が同じ他の人物の自然顔画像に置換する、前記（１）〜（６）のいずれか１項に記載の情報処理装置。
（８）
前記自然顔画像は、撮像画像または合成画像である、前記（１）〜（７）のいずれか１項に記載の情報処理装置。
（９）
前記合成画像は、複数人の顔画像に基づいて生成された平均顔画像である、前記（８）に記載の情報処理装置。
（１０）
前記撮像画像は、顔の公開を許可した人物の実写顔画像である、前記（８）に記載の情報処理装置。
（１１）
前記自然顔画像は、顔の一部を少なくとも含む画像である、前記（１）〜（１０）のいずれか１項に記載の情報処理装置。
（１２）
前記情報処理装置は、前記自然顔画像を記憶する記憶部をさらに備える、前記（１）〜（１１）のいずれか１項に記載の情報処理装置。
（１３）
前記情報処理装置は、前記顔画像置換部により自然顔画像に置換した画像を、所定のサービスサイトにアップロードするよう制御する制御部をさらに備える、前記（１）〜（１２）のいずれか１項に記載の情報処理装置。
（１４）
前記検出部は、前記画像内のユーザに指定されたエリアから顔画像領域を検出する、前記（１）〜（１３）のいずれか１項に記載の情報処理装置。
（１５）
前記検出部は、前記画像内の所定の大きさ以上の顔画像領域を検出する、前記（１）〜（１４）のいずれか１項に記載の情報処理装置。
（１６）
前記自然顔画像は、置換画像であることを示す表示がマーキングされる、前記（１）〜（１５）のいずれか１項に記載の情報処理装置。
（１７）
前記顔画像置換部は、前記判断部により前記人物属性が判断できなかった場合、顔画像の置換は行わない、前記（１）〜（１６）のいずれか１項に記載の情報処理装置。
（１８）
コンピュータを、
画像内の顔画像領域を検出する検出部と、
前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、
前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部、
として実行させるための、プログラム。
（１）
画像内の顔画像領域を検出する検出部と、
前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、
前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部と、
を備える、情報処理装置。
（２）
前記人物属性は、人物の性別、年齢、人種、肌の色、および体型のうち少なくともいずれか一つである、前記（１）に記載の情報処理装置。
（３）
前記人物属性は、人物の眼鏡、帽子、耳当て、ヘッドホン、またはイヤホンを含む装着物の着用の有無である、前記（１）に記載の情報処理装置。
（４）
前記顔画像置換部は、前記少なくとも一の顔画像の人物の顔の大きさ、向き、および表情のうち少なくともいずれか一つに応じた他の人物の自然顔画像に置換する、前記（１）〜（３）のいずれか１項に記載の情報処理装置。
（５）
前記顔画像置換部は、前記画像が撮像された際の照明状況に応じた他の人物の自然顔画像に置換する、前記（１）〜（３）のいずれか１項に記載の情報処理装置。
（６）
前記顔画像置換部は、前記画像が撮像された場所に応じた他の人物の自然顔画像に置換する、前記（１）〜（５）のいずれか１項に記載の情報処理装置。
（７）
前記顔画像置換部は、前記少なくとも一の顔画像と、予め記憶された自然顔画像とを比較し、前記人物属性が同じ他の人物の自然顔画像に置換する、前記（１）〜（６）のいずれか１項に記載の情報処理装置。
（８）
前記自然顔画像は、撮像画像または合成画像である、前記（１）〜（７）のいずれか１項に記載の情報処理装置。
（９）
前記合成画像は、複数人の顔画像に基づいて生成された平均顔画像である、前記（８）に記載の情報処理装置。
（１０）
前記撮像画像は、顔の公開を許可した人物の実写顔画像である、前記（８）に記載の情報処理装置。
（１１）
前記自然顔画像は、顔の一部を少なくとも含む画像である、前記（１）〜（１０）のいずれか１項に記載の情報処理装置。
（１２）
前記情報処理装置は、前記自然顔画像を記憶する記憶部をさらに備える、前記（１）〜（１１）のいずれか１項に記載の情報処理装置。
（１３）
前記情報処理装置は、前記顔画像置換部により自然顔画像に置換した画像を、所定のサービスサイトにアップロードするよう制御する制御部をさらに備える、前記（１）〜（１２）のいずれか１項に記載の情報処理装置。
（１４）
前記検出部は、前記画像内のユーザに指定されたエリアから顔画像領域を検出する、前記（１）〜（１３）のいずれか１項に記載の情報処理装置。
（１５）
前記検出部は、前記画像内の所定の大きさ以上の顔画像領域を検出する、前記（１）〜（１４）のいずれか１項に記載の情報処理装置。
（１６）
前記自然顔画像は、置換画像であることを示す表示がマーキングされる、前記（１）〜（１５）のいずれか１項に記載の情報処理装置。
（１７）
前記顔画像置換部は、前記判断部により前記人物属性が判断できなかった場合、顔画像の置換は行わない、前記（１）〜（１６）のいずれか１項に記載の情報処理装置。
（１８）
コンピュータを、
画像内の顔画像領域を検出する検出部と、
前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、
前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部、
として実行させるための、プログラム。
１ サーバ
２ ユーザ端末
３ ネットワーク
１０ ＣＰＵ
１１ ＲＯＭ
１２ ＲＡＭ
１３ 自然顔画像ＤＢ
１４ 顔領域検出部
１６ 判断部
１８ 顔画像置換部
１９ ネットワークＩ／Ｆ
２ ユーザ端末
３ ネットワーク
１０ ＣＰＵ
１１ ＲＯＭ
１２ ＲＡＭ
１３ 自然顔画像ＤＢ
１４ 顔領域検出部
１６ 判断部
１８ 顔画像置換部
１９ ネットワークＩ／Ｆ
Claims (18)
- 画像内の顔画像領域を検出する検出部と、
前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、
前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部と、
を備える、情報処理装置。 - 前記人物属性は、人物の性別、年齢、人種、肌の色、髪の色、眼の色、および体型のうち少なくともいずれか一つである、請求項１に記載の情報処理装置。
- 前記人物属性は、人物の眼鏡、帽子、耳当て、ヘッドホン、またはイヤホンを含む装着物の着用の有無である、請求項１に記載の情報処理装置。
- 前記顔画像置換部は、前記少なくとも一の顔画像の人物の顔の大きさ、向き、および表情のうち少なくともいずれか一つに応じた他の人物の自然顔画像に置換する、請求項１に記載の情報処理装置。
- 前記顔画像置換部は、前記画像が撮像された際の照明状況に応じた他の人物の自然顔画像に置換する、請求項１に記載の情報処理装置。
- 前記顔画像置換部は、前記画像が撮像された場所に応じた他の人物の自然顔画像に置換する、請求項１に記載の情報処理装置。
- 前記顔画像置換部は、前記少なくとも一の顔画像と、予め記憶された自然顔画像とを比較し、前記人物属性が同じ他の人物の自然顔画像に置換する、請求項１に記載の情報処理装置。
- 前記自然顔画像は、撮像画像または合成画像である、請求項１に記載の情報処理装置。
- 前記合成画像は、複数人の顔画像に基づいて生成された平均顔画像である、請求項８に記載の情報処理装置。
- 前記撮像画像は、顔の公開を許可した人物の実写顔画像である、請求項８に記載の情報処理装置。
- 前記自然顔画像は、顔の一部を少なくとも含む画像である、請求項１に記載の情報処理装置。
- 前記情報処理装置は、前記自然顔画像を記憶する記憶部をさらに備える、請求項１に記載の情報処理装置。
- 前記情報処理装置は、前記顔画像置換部により自然顔画像に置換した画像を、所定のサービスサイトにアップロードするよう制御する制御部をさらに備える、請求項１に記載の情報処理装置。
- 前記検出部は、前記画像内のユーザに指定されたエリアから顔画像領域を検出する、請求項１に記載の情報処理装置。
- 前記検出部は、前記画像内の所定の大きさ以上の顔画像領域を検出する、請求項１に記載の情報処理装置。
- 前記自然顔画像は、置換画像であることを示す表示がマーキングされる、請求項１に記載の情報処理装置。
- 前記顔画像置換部は、前記判断部により前記人物属性が判断できなかった場合、顔画像の置換は行わない、請求項１に記載の情報処理装置。
- コンピュータを、
画像内の顔画像領域を検出する検出部と、
前記検出部により検出された顔画像領域内の少なくとも一の顔画像の人物属性を判断する判断部と、
前記少なくとも一の顔画像を、前記判断部により判断された前記人物属性に応じた他の人物の自然顔画像に置換する顔画像置換部、
として実行させるための、プログラム。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012233709A JP2014085796A (ja) | 2012-10-23 | 2012-10-23 | 情報処理装置およびプログラム |
| CN201310484914.5A CN103778376A (zh) | 2012-10-23 | 2013-10-16 | 信息处理装置和存储介质 |
| US14/055,009 US9298969B2 (en) | 2012-10-23 | 2013-10-16 | Information processing device and storage medium, for replacing a face image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012233709A JP2014085796A (ja) | 2012-10-23 | 2012-10-23 | 情報処理装置およびプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2014085796A true JP2014085796A (ja) | 2014-05-12 |
Family
ID=50485370
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012233709A Pending JP2014085796A (ja) | 2012-10-23 | 2012-10-23 | 情報処理装置およびプログラム |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US9298969B2 (ja) |
| JP (1) | JP2014085796A (ja) |
| CN (1) | CN103778376A (ja) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105118024A (zh) * | 2015-09-14 | 2015-12-02 | 北京中科慧眼科技有限公司 | 人脸交换方法 |
| JP2017212693A (ja) * | 2016-05-27 | 2017-11-30 | 株式会社フォトロン | 映像編集装置 |
| CN108376236A (zh) * | 2018-01-18 | 2018-08-07 | 新开普电子股份有限公司 | 人脸识别显示装置 |
| JP2019212205A (ja) * | 2018-06-08 | 2019-12-12 | トヨタ自動車株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
| JP2020087399A (ja) * | 2018-11-29 | 2020-06-04 | 株式会社 ジーワイネットワークス | 顔面領域を処理する装置および方法 |
| CN111260756A (zh) * | 2018-11-30 | 2020-06-09 | 百度在线网络技术（北京）有限公司 | 用于发送信息的方法和装置 |
| WO2022009652A1 (ja) * | 2020-07-07 | 2022-01-13 | ソニーグループ株式会社 | データ収集システム、センサ装置、データ収集装置、及びデータ収集方法 |
| WO2024005073A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| WO2024005051A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| WO2024005074A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| WO2024005160A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| JP7498534B1 (ja) | 2023-11-24 | 2024-06-12 | ハイパーダイン株式会社 | コンピュータプログラム、画像処理方法及び画像処理装置 |
Families Citing this family (50)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015002423A (ja) * | 2013-06-14 | 2015-01-05 | ソニー株式会社 | 画像処理装置、サーバ及び記憶媒体 |
| US9799036B2 (en) | 2013-10-10 | 2017-10-24 | Elwha Llc | Devices, methods, and systems for managing representations of entities through use of privacy indicators |
| US20150104004A1 (en) | 2013-10-10 | 2015-04-16 | Elwha Llc | Methods, systems, and devices for delivering image data from captured images to devices |
| US20150106195A1 (en) | 2013-10-10 | 2015-04-16 | Elwha Llc | Methods, systems, and devices for handling inserted data into captured images |
| US10013564B2 (en) | 2013-10-10 | 2018-07-03 | Elwha Llc | Methods, systems, and devices for handling image capture devices and captured images |
| US10289863B2 (en) | 2013-10-10 | 2019-05-14 | Elwha Llc | Devices, methods, and systems for managing representations of entities through use of privacy beacons |
| US10346624B2 (en) * | 2013-10-10 | 2019-07-09 | Elwha Llc | Methods, systems, and devices for obscuring entities depicted in captured images |
| WO2016019976A1 (en) * | 2014-08-04 | 2016-02-11 | Quividi | Process for monitoring the audience in a targeted region |
| CN104282031A (zh) * | 2014-09-19 | 2015-01-14 | 广州三星通信技术研究有限公司 | 处理待输出图片的方法、装置和终端 |
| US9990513B2 (en) | 2014-12-29 | 2018-06-05 | Entefy Inc. | System and method of applying adaptive privacy controls to lossy file types |
| EP3224757B1 (en) * | 2014-12-30 | 2020-07-15 | Deutsche Telekom AG | In-device privacy framework for smart glasses and smart watches |
| KR102407133B1 (ko) | 2015-08-21 | 2022-06-10 | 삼성전자주식회사 | 전자 장치 및 이의 콘텐트 변형 방법 |
| US9858696B2 (en) * | 2015-09-18 | 2018-01-02 | International Business Machines Corporation | Image anonymization using analytics tool |
| CN105227891A (zh) * | 2015-10-23 | 2016-01-06 | 小米科技有限责任公司 | 一种视频通话方法及装置 |
| WO2017088340A1 (zh) | 2015-11-25 | 2017-06-01 | 腾讯科技（深圳）有限公司 | 图像信息处理方法、装置和计算机存储介质 |
| CN106023063A (zh) * | 2016-05-09 | 2016-10-12 | 西安北升信息科技有限公司 | 一种视频移植换脸的方法 |
| US10593085B2 (en) * | 2016-07-06 | 2020-03-17 | Facebook, Inc. | Combining faces from source images with target images based on search queries |
| CN106791091B (zh) * | 2016-12-20 | 2020-03-27 | 北京安云世纪科技有限公司 | 图像生成方法、装置和移动终端 |
| US10446189B2 (en) * | 2016-12-29 | 2019-10-15 | Google Llc | Video manipulation with face replacement |
| US10169597B2 (en) * | 2016-12-31 | 2019-01-01 | Entefy Inc. | System and method of applying adaptive privacy control layers to encoded media file types |
| US10037413B2 (en) * | 2016-12-31 | 2018-07-31 | Entefy Inc. | System and method of applying multiple adaptive privacy control layers to encoded media file types |
| US10587585B2 (en) | 2016-12-31 | 2020-03-10 | Entefy Inc. | System and method of presenting dynamically-rendered content in structured documents |
| US10395047B2 (en) | 2016-12-31 | 2019-08-27 | Entefy Inc. | System and method of applying multiple adaptive privacy control layers to single-layered media file types |
| US11010947B2 (en) | 2017-01-23 | 2021-05-18 | Ntt Docomo, Inc. | Information processing system and information processing apparatus |
| US10552500B2 (en) * | 2017-03-02 | 2020-02-04 | International Business Machines Corporation | Presenting a data instance based on presentation rules |
| JP6931290B2 (ja) * | 2017-03-03 | 2021-09-01 | キヤノン株式会社 | 画像生成装置およびその制御方法 |
| CN107169329B (zh) * | 2017-05-24 | 2021-01-08 | 维沃移动通信有限公司 | 一种隐私信息保护方法、移动终端及计算机可读存储介质 |
| CN107330408B (zh) * | 2017-06-30 | 2021-04-20 | 北京乐蜜科技有限责任公司 | 视频处理方法、装置、电子设备及存储介质 |
| CN107613235B (zh) * | 2017-09-25 | 2019-12-27 | 北京达佳互联信息技术有限公司 | 视频录制方法和装置 |
| US11010944B2 (en) * | 2017-12-28 | 2021-05-18 | Facebook, Inc. | Systems and methods for swapping faces and face components based on facial recognition |
| US10305683B1 (en) | 2017-12-29 | 2019-05-28 | Entefy Inc. | System and method of applying multiple adaptive privacy control layers to multi-channel bitstream data |
| US10410000B1 (en) | 2017-12-29 | 2019-09-10 | Entefy Inc. | System and method of applying adaptive privacy control regions to bitstream data |
| US20200036909A1 (en) * | 2018-07-27 | 2020-01-30 | BriefCam Ltd. | System and method allowing simultaneous viewing of live and recorded video content |
| CN109101806A (zh) * | 2018-08-17 | 2018-12-28 | 浙江捷尚视觉科技股份有限公司 | 一种基于风格迁移的隐私人像数据标注方法 |
| CN112585646A (zh) | 2018-09-03 | 2021-03-30 | 三星电子株式会社 | 用于对媒体执行编辑操作的方法与*** |
| CN109215007B (zh) * | 2018-09-21 | 2022-04-12 | 维沃移动通信有限公司 | 一种图像生成方法及终端设备 |
| US11089238B2 (en) * | 2019-01-18 | 2021-08-10 | Snap Inc. | Personalized videos featuring multiple persons |
| CN110708596A (zh) * | 2019-09-29 | 2020-01-17 | 北京达佳互联信息技术有限公司 | 生成视频的方法、装置、电子设备及可读存储介质 |
| US11275972B2 (en) * | 2019-11-08 | 2022-03-15 | International Business Machines Corporation | Image classification masking |
| CN111160092A (zh) * | 2019-11-25 | 2020-05-15 | 广州富港万嘉智能科技有限公司 | 带隐私保护的用户意思表达实时判断***及智能居室*** |
| CN111083352A (zh) * | 2019-11-25 | 2020-04-28 | 广州富港万嘉智能科技有限公司 | 带隐私保护的摄像头工作控制方法、计算机可读存储介质及摄像终端 |
| CN111031236A (zh) * | 2019-11-25 | 2020-04-17 | 广州富港万嘉智能科技有限公司 | 带隐私保护的摄像头工作控制方法、计算机可读存储介质及摄像终端 |
| CN111159751A (zh) * | 2019-12-03 | 2020-05-15 | 深圳博脑医疗科技有限公司 | 三维影像的去隐私化处理方法、装置和终端设备 |
| EP4073682B1 (en) | 2019-12-11 | 2023-11-08 | QuantiFace GmbH | Generating videos, which include modified facial images |
| DE102020203473A1 (de) * | 2020-03-18 | 2021-09-23 | Robert Bosch Gesellschaft mit beschränkter Haftung | Anonymisierungseinrichtung, Überwachungsvorrichtung, Verfahren, Computerprogramm und Speichermedium |
| CN111402271A (zh) * | 2020-03-18 | 2020-07-10 | 维沃移动通信有限公司 | 一种图像处理方法及电子设备 |
| CN111556335A (zh) * | 2020-04-15 | 2020-08-18 | 早安科技(广州)有限公司 | 一种视频贴纸处理方法及装置 |
| US11704851B2 (en) * | 2020-05-27 | 2023-07-18 | Snap Inc. | Personalized videos using selfies and stock videos |
| IT202000020227A1 (it) * | 2020-08-18 | 2022-02-18 | Davide Righini | Procedimento e sistema per rimuovere dati sensibili da immagini o videogrammi |
| US11869125B2 (en) * | 2020-09-30 | 2024-01-09 | Adobe Inc. | Generating composite images with objects from different times |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001127990A (ja) | 1999-11-01 | 2001-05-11 | Mega Chips Corp | 情報通信システム |
| JP4479267B2 (ja) | 2004-02-18 | 2010-06-09 | 株式会社日立製作所 | 監視カメラ映像配信システム |
| US8208764B2 (en) * | 2006-01-21 | 2012-06-26 | Elizabeth Guckenberger | Photo automatic linking system and method for accessing, linking, and visualizing “key-face” and/or multiple similar facial images along with associated electronic data via a facial image recognition search engine |
| JP5476955B2 (ja) * | 2009-12-04 | 2014-04-23 | ソニー株式会社 | 画像処理装置および画像処理方法、並びにプログラム |
| US8836777B2 (en) * | 2011-02-25 | 2014-09-16 | DigitalOptics Corporation Europe Limited | Automatic detection of vertical gaze using an embedded imaging device |
-
2012
- 2012-10-23 JP JP2012233709A patent/JP2014085796A/ja active Pending
-
2013
- 2013-10-16 CN CN201310484914.5A patent/CN103778376A/zh active Pending
- 2013-10-16 US US14/055,009 patent/US9298969B2/en not_active Expired - Fee Related
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105118024A (zh) * | 2015-09-14 | 2015-12-02 | 北京中科慧眼科技有限公司 | 人脸交换方法 |
| JP2017212693A (ja) * | 2016-05-27 | 2017-11-30 | 株式会社フォトロン | 映像編集装置 |
| CN108376236A (zh) * | 2018-01-18 | 2018-08-07 | 新开普电子股份有限公司 | 人脸识别显示装置 |
| CN108376236B (zh) * | 2018-01-18 | 2022-02-22 | 新开普电子股份有限公司 | 人脸识别显示装置 |
| JP7006515B2 (ja) | 2018-06-08 | 2022-01-24 | トヨタ自動車株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
| CN110580272A (zh) * | 2018-06-08 | 2019-12-17 | 丰田自动车株式会社 | 信息处理装置、***、方法及非暂时性存储介质 |
| JP2019212205A (ja) * | 2018-06-08 | 2019-12-12 | トヨタ自動車株式会社 | 情報処理装置、情報処理システム、情報処理方法及びプログラム |
| US11758375B2 (en) | 2018-06-08 | 2023-09-12 | Toyota Jidosha Kabushiki Kaisha | Information processing apparatus, information processing system, information processing method, and non-transitory storage medium |
| JP2020087399A (ja) * | 2018-11-29 | 2020-06-04 | 株式会社 ジーワイネットワークス | 顔面領域を処理する装置および方法 |
| CN111260756A (zh) * | 2018-11-30 | 2020-06-09 | 百度在线网络技术（北京）有限公司 | 用于发送信息的方法和装置 |
| CN111260756B (zh) * | 2018-11-30 | 2023-09-26 | 百度在线网络技术（北京）有限公司 | 用于发送信息的方法和装置 |
| WO2022009652A1 (ja) * | 2020-07-07 | 2022-01-13 | ソニーグループ株式会社 | データ収集システム、センサ装置、データ収集装置、及びデータ収集方法 |
| WO2024005073A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| WO2024005051A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| WO2024005074A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| WO2024005160A1 (ja) * | 2022-06-30 | 2024-01-04 | 本田技研工業株式会社 | 画像処理装置、画像処理方法、画像処理システム、およびプログラム |
| JP7498534B1 (ja) | 2023-11-24 | 2024-06-12 | ハイパーダイン株式会社 | コンピュータプログラム、画像処理方法及び画像処理装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US9298969B2 (en) | 2016-03-29 |
| US20140112534A1 (en) | 2014-04-24 |
| CN103778376A (zh) | 2014-05-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2014085796A (ja) | 情報処理装置およびプログラム | |
| JP6574937B2 (ja) | 通信システム、制御方法、および記憶媒体 | |
| JP6439788B2 (ja) | 情報処理装置、制御方法、プログラム、およびシステム | |
| US11336968B2 (en) | Method and device for generating content | |
| JP4424364B2 (ja) | 画像処理装置、画像処理方法 | |
| JP6250819B2 (ja) | 画像キャプチャフィードバック | |
| JP6992761B2 (ja) | サーバ、クライアント端末、制御方法、記憶媒体、およびプログラム | |
| JP6397416B2 (ja) | 拡張現実感を伴う存在の粒度に関連する方法 | |
| US9571726B2 (en) | Generating attention information from photos | |
| US9443307B2 (en) | Processing of images of a subject individual | |
| US20150104103A1 (en) | Surveillance camera that respects privacy | |
| CA3010141A1 (en) | Authenticating or registering users of wearable devices using biometrics | |
| JP2017526079A (ja) | 眼信号を識別するためのシステムおよび方法、ならびに連続バイオメトリック認証 | |
| JP2014092941A (ja) | 情報処理装置及び情報処理方法、並びにコンピューター・プログラム | |
| JPWO2014128773A1 (ja) | ジェスチャ登録装置、ジェスチャ登録プログラムおよびジェスチャ登録方法 | |
| JP5915457B2 (ja) | 制御システムおよびプログラム | |
| JP2014067131A (ja) | 画像処理装置、画像処理システム、画像処理方法およびコンピュータプログラム | |
| CN117561719A (zh) | 取景器环形闪光灯 | |
| KR20240027043A (ko) | 적응형 전방 플래시 뷰 | |
| WO2018092378A1 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
| JP2019074938A (ja) | 通信中継装置、システム、方法及びプログラム | |
| WO2014100448A1 (en) | Collecting and selecting photos | |
| JP2013114236A (ja) | 画像編集装置、画像編集方法および画像編集プログラム | |
| KR20120087265A (ko) | 패턴 복사를 이용한 가상 피팅 시스템 및 그 방법 | |
| US20160148117A1 (en) | Attribute estimation system |