JP6537608B2 - 撮像装置及び画像処理方法 - Google Patents
撮像装置及び画像処理方法 Download PDFInfo
- Publication number
- JP6537608B2 JP6537608B2 JP2017524553A JP2017524553A JP6537608B2 JP 6537608 B2 JP6537608 B2 JP 6537608B2 JP 2017524553 A JP2017524553 A JP 2017524553A JP 2017524553 A JP2017524553 A JP 2017524553A JP 6537608 B2 JP6537608 B2 JP 6537608B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- person
- processing unit
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 title claims description 139
- 238000003672 processing method Methods 0.000 title claims description 5
- 239000000203 mixture Substances 0.000 claims description 44
- 239000002131 composite material Substances 0.000 claims description 34
- 238000000034 method Methods 0.000 claims description 33
- 230000015572 biosynthetic process Effects 0.000 claims description 14
- 238000003786 synthesis reaction Methods 0.000 claims description 14
- 238000010586 diagram Methods 0.000 description 16
- 238000001514 detection method Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 238000003825 pressing Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000001454 recorded image Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 230000003213 activating effect Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2625—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of images from a temporal image sequence, e.g. for a stroboscopic effect
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
- Image Processing (AREA)
Description
第一実施形態は、表示中の画像データと撮像装置が選択した画像データとを、手動合成モード(ユーザによる合成指示後に合成する動作モード)、又は自動合成モード(撮像装置が自動で合成する動作モード)により合成する実施形態である。
図1Aは、本発明の第一実施形態に係る撮像装置の構成例を示すブロック図である。
図1Bは、第一実施形態に係る撮像装置のソフトウェア構成図を示す図であり、ROM102、RAM103およびストレージ部104におけるソフトウェアの構成を示す。
図2A、及び図2Bを参照して第一実施形態に係る撮像装置の外観について説明する。
図3は第一実施形態に係る撮像装置の全体の動作例を示すフローチャートである。図3では、手動モード、すなわち画像合成の指示をユーザが入力操作、より具体的には以下の例における「画像合成ボタンの押下げ(S312;Yes)」を契機として画像合成処理(S313)が実行される場合の動作の流れについて説明する。
次に、S313とS411の画像合成処理について説明する。
第二実施形態は、ユーザが選択した画像データを用いて合成を行う実施形態である。
図11は第二実施形態に係る撮像装置の全体の動作例を示すフローチャートである。
次に、S1113の画像合成処理について説明する。図12は第二実施形態に係る合成処理部の動作例を示すフローチャートである。
第三実施形態は、登録人物のみを合成後の画像に加え、未登録人物を合成後の画像から削除する実施形態である。
図16は第三実施形態に係る撮像装置の全体の動作例を示すフローチャートである。
次に、S1613の画像合成処理について説明する。
第四実施形態は、人物が撮像されていない背景のみの画像(以下「背景画像」という)を撮像した場合はその背景画像を、背景画像が無い場合はネットワーク上で公開されている背景が撮像された画像データを検索し、それらの背景画像を用いて未登録人物を削除する実施形態である。
図20Aにおいて、図1Aと同じ処理部分には同じ符号を付し、説明を省略する。
図20Bは本実施例の撮像装置1のソフトウェア構成図であり、図1Bと同じ処理部分には同じ符号を付し、説明を省略する。
次に、画像合成処理について説明する。図21は第四実施形態に係る合成処理部の動作例を示すフローチャートである。
Claims (5)
- 被写体を撮像して画像データを生成する撮像処理部と、
前記画像データの顔認識処理を実行する顔認識処理部と、
前記画像データを記録する画像記録部と、
複数の画像データの其々に撮像された人物が、一つの画像データに含まれるように合成処理を実行して合成データを生成する合成処理部と、
前記画像記録部に記録された画像データをユーザが選択する選択操作部と、を備え、
前記顔認識処理部は、第一の画像データに対して前記顔認識処理を実行して第一の人物の顔を認識し、
前記第一の画像データの撮影タイミングとは異なる任意の撮影タイミングで撮影されると共に、前記第一の画像データの背景と同一の背景を有し、かつ前記第一の人物とは異なる第二の人物が撮像された第二の画像データが前記画像記録部に記録されている場合に、前記合成処理部は前記第一の画像データ及び前記第二の画像データを用いて前記同一の背景上に前記第一の人物及び前記第二の人物が重畳された前記合成データを生成し、
前記合成処理部は、前記選択された画像データを前記第二の画像データとして用い、前記合成処理を実行する、
ことを特徴とする撮像装置。 - 被写体を撮像して画像データを生成する撮像処理部と、
前記画像データの顔認識処理を実行する顔認識処理部と、
前記画像データを記録する画像記録部と、
複数の画像データの其々に撮像された人物が、一つの画像データに含まれるように合成処理を実行して合成データを生成する合成処理部と、
前記撮像処理部が前記画像データを生成すると、前記合成処理部に前記合成処理を実行させる自動合成モードに設定するためのモード設定部と、を備え、
前記顔認識処理部は、第一の画像データに対して前記顔認識処理を実行して第一の人物の顔を認識し、
前記第一の画像データの撮影タイミングとは異なる任意の撮影タイミングで撮影されると共に、前記第一の画像データの背景と同一の背景を有し、かつ前記第一の人物とは異なる第二の人物が撮像された第二の画像データが前記画像記録部に記録されている場合に、前記合成処理部は前記第一の画像データ及び前記第二の画像データを用いて前記同一の背景上に前記第一の人物及び前記第二の人物が重畳された前記合成データを生成し、
前記自動合成モードに設定されている場合、前記撮像処理部が前記画像データを生成すると、前記顔認識処理部は、前記撮像処理部が生成した画像データに対して前記顔認識処理を開始する、
ことを特徴とする撮像装置。 - 請求項2に記載の撮像装置において、
前記撮像処理部により生成された画像データにおいて、当該画像データの画像中心から所定の割合以上ずれた位置に人物が撮像された被写体領域がある場合に、前記顔認識処理部は前記撮像処理部が生成した画像データに対して前記顔認識処理を開始する、
ことを特徴とする撮像装置。 - 被写体を撮像して画像データを生成する撮像処理部と、
前記画像データの顔認識処理を実行する顔認識処理部と、
前記画像データを記録する画像記録部と、
複数の画像データの其々に撮像された人物が、一つの画像データに含まれるように合成処理を実行して合成データを生成する合成処理部と、
前記被写体を撮像した位置に対応する位置情報を取得する位置情報取得部と、を備え、
前記顔認識処理部は、第一の画像データに対して前記顔認識処理を実行して第一の人物の顔を認識し、
前記第一の画像データの撮影タイミングとは異なる任意の撮影タイミングで撮影されると共に、前記第一の画像データの背景と同一の背景を有し、かつ前記第一の人物とは異なる第二の人物が撮像された第二の画像データが前記画像記録部に記録されている場合に、前記合成処理部は前記第一の画像データ及び前記第二の画像データを用いて前記同一の背景上に前記第一の人物及び前記第二の人物が重畳された前記合成データを生成し、
前記画像記録部は、前記画像データに付加して前記位置情報を記録し、
前記合成処理部は、前記第一の画像データに付加された位置情報と同じ位置情報が付加されていることを検索条件として前記画像記録部に記録された画像データから前記第二の画像データの候補を抽出する、
ことを特徴とする撮像装置。 - 被写体を撮像して画像データが生成されると、当該画像データを用いた合成処理の実行を開始させる動作モードを設定するステップと、
第一の人物が撮像された第一の画像データを生成するステップと、
前記第一の画像データに対して顔認識処理を実行し、前記第一の人物を認識するステップと、
前記第一の画像データとは異なる画像データが記録された画像記録部から、前記第一の画像データの背景と同一の背景を有し、かつ前記第一の人物とは異なる第二の人物が撮像された第二の画像データを検索して読み出すステップと、
前記同一の背景上に前記第一の人物及び前記第二の人物が重畳された合成データを生成するステップと、
を含むことを特徴とする画像処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/068535 WO2016208070A1 (ja) | 2015-06-26 | 2015-06-26 | 撮像装置及び画像処理方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019104703A Division JP6703361B2 (ja) | 2019-06-04 | 2019-06-04 | 撮像装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016208070A1 JPWO2016208070A1 (ja) | 2018-03-08 |
JP6537608B2 true JP6537608B2 (ja) | 2019-07-03 |
Family
ID=57585226
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017524553A Active JP6537608B2 (ja) | 2015-06-26 | 2015-06-26 | 撮像装置及び画像処理方法 |
Country Status (4)
Country | Link |
---|---|
US (5) | US10542224B2 (ja) |
JP (1) | JP6537608B2 (ja) |
CN (3) | CN113099118B (ja) |
WO (1) | WO2016208070A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3515057B1 (en) * | 2016-09-16 | 2024-02-21 | Sony Semiconductor Solutions Corporation | Image pickup device and electronic apparatus |
CN110140152B (zh) * | 2017-10-20 | 2020-10-30 | 三菱电机株式会社 | 数据处理装置、可编程显示器及数据处理方法 |
CN109089045A (zh) * | 2018-09-18 | 2018-12-25 | 上海连尚网络科技有限公司 | 一种基于多个摄像装置的摄像方法及设备及其终端 |
US11513669B2 (en) * | 2020-02-28 | 2022-11-29 | Micron Technology, Inc. | User interface for modifying pictures |
US11776237B2 (en) * | 2020-08-19 | 2023-10-03 | Adobe Inc. | Mitigating people distractors in images |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11136568A (ja) | 1997-10-31 | 1999-05-21 | Fuji Photo Film Co Ltd | タッチパネル操作式カメラ |
US7221395B2 (en) * | 2000-03-14 | 2007-05-22 | Fuji Photo Film Co., Ltd. | Digital camera and method for compositing images |
CN100388277C (zh) * | 2002-11-06 | 2008-05-14 | 佳能株式会社 | 通信装置以及通信装置的控制方法 |
JP4508596B2 (ja) | 2002-11-06 | 2010-07-21 | キヤノン株式会社 | 通信装置、画像記憶装置およびそれらの制御方法 |
JP2004248020A (ja) | 2003-02-14 | 2004-09-02 | Fuji Photo Film Co Ltd | 画像処理装置および画像処理システム |
JP2005033532A (ja) * | 2003-07-14 | 2005-02-03 | Noritsu Koki Co Ltd | 写真処理装置 |
JP2011118694A (ja) | 2009-12-03 | 2011-06-16 | Sony Corp | 学習装置および方法、認識装置および方法、並びにプログラム |
JP2010108475A (ja) | 2008-10-03 | 2010-05-13 | Sony Corp | 画像処理装置および方法、プログラム、並びに記録媒体 |
JP4670976B2 (ja) | 2008-10-03 | 2011-04-13 | ソニー株式会社 | 学習装置および方法、認識装置および方法、プログラム、並びに記録媒体 |
JP5105550B2 (ja) * | 2009-03-19 | 2012-12-26 | カシオ計算機株式会社 | 画像合成装置及びプログラム |
JP4752941B2 (ja) * | 2009-03-31 | 2011-08-17 | カシオ計算機株式会社 | 画像合成装置及びプログラム |
JP5267279B2 (ja) | 2009-03-31 | 2013-08-21 | カシオ計算機株式会社 | 画像合成装置及びプログラム |
JP5182352B2 (ja) | 2010-11-16 | 2013-04-17 | カシオ計算機株式会社 | 撮像装置、画像合成方法、及びプログラム |
CN102075675A (zh) * | 2010-12-24 | 2011-05-25 | 富泰华工业(深圳)有限公司 | 便携式电子装置及其拍照方法 |
US20150009359A1 (en) * | 2013-03-19 | 2015-01-08 | Groopic Inc. | Method and apparatus for collaborative digital imaging |
JP5761323B2 (ja) | 2013-12-17 | 2015-08-12 | カシオ計算機株式会社 | 撮像装置、撮像方法、及びプログラム |
CN103747180A (zh) | 2014-01-07 | 2014-04-23 | 宇龙计算机通信科技(深圳)有限公司 | 照片拍摄方法及拍照终端 |
KR20160057867A (ko) * | 2014-11-14 | 2016-05-24 | 삼성전자주식회사 | 디스플레이 장치 및 그에 의한 이미지 처리 방법 |
-
2015
- 2015-06-26 CN CN202110381252.3A patent/CN113099118B/zh active Active
- 2015-06-26 US US15/739,097 patent/US10542224B2/en active Active
- 2015-06-26 WO PCT/JP2015/068535 patent/WO2016208070A1/ja active Application Filing
- 2015-06-26 CN CN202110381333.3A patent/CN113099119B/zh active Active
- 2015-06-26 JP JP2017524553A patent/JP6537608B2/ja active Active
- 2015-06-26 CN CN201580079346.8A patent/CN107710731B/zh active Active
-
2019
- 2019-12-10 US US16/709,476 patent/US11159714B2/en active Active
-
2021
- 2021-10-12 US US17/499,275 patent/US11528432B2/en active Active
-
2022
- 2022-11-11 US US18/054,600 patent/US11870944B2/en active Active
-
2023
- 2023-12-04 US US18/527,950 patent/US20240106972A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2016208070A1 (ja) | 2016-12-29 |
CN113099118A (zh) | 2021-07-09 |
US11528432B2 (en) | 2022-12-13 |
US20240106972A1 (en) | 2024-03-28 |
US20180241951A1 (en) | 2018-08-23 |
JPWO2016208070A1 (ja) | 2018-03-08 |
CN107710731B (zh) | 2021-05-04 |
CN113099119B (zh) | 2023-08-22 |
US20200112694A1 (en) | 2020-04-09 |
US20230075223A1 (en) | 2023-03-09 |
CN107710731A (zh) | 2018-02-16 |
US11159714B2 (en) | 2021-10-26 |
CN113099118B (zh) | 2023-08-22 |
US20220046167A1 (en) | 2022-02-10 |
CN113099119A (zh) | 2021-07-09 |
US11870944B2 (en) | 2024-01-09 |
US10542224B2 (en) | 2020-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8599251B2 (en) | Camera | |
JP6537608B2 (ja) | 撮像装置及び画像処理方法 | |
KR101720774B1 (ko) | 디지털 촬영 장치 및 그의 사진 제공 방법 | |
KR101901910B1 (ko) | 선택 영역을 변화시키는 결과 영상을 생성 또는 저장하는 장치 및 방법 | |
JP5837922B2 (ja) | カメラ位置に基づくキービデオフレームのランク付け | |
US8525913B2 (en) | Digital photographing apparatus, method of controlling the same, and computer-readable storage medium | |
JP2010199633A (ja) | 再生装置および再生方法 | |
JP2003274263A (ja) | 電子カメラ及び撮影記録方法 | |
US9767587B2 (en) | Image extracting apparatus, image extracting method and computer readable recording medium for recording program for extracting images based on reference image and time-related information | |
JP2012084052A (ja) | 撮像装置、制御方法及びプログラム | |
JP6703361B2 (ja) | 撮像装置及び画像処理方法 | |
JP7362696B2 (ja) | 撮像装置 | |
JP6916342B2 (ja) | 撮像装置及び画像処理方法 | |
JP6265621B2 (ja) | 表示制御装置およびプログラム | |
JP2010097449A (ja) | 画像合成装置、及び画像合成方法、画像合成プログラム | |
JP2008271239A (ja) | カメラ、コンテンツ作成方法、及びプログラム | |
JP2008072675A (ja) | 撮像装置 | |
JP2010109634A (ja) | 画像表示装置及び撮像装置 | |
JP2012134864A (ja) | 情報処理装置とその処理方法及びプログラム | |
JP2015122686A (ja) | 情報処理装置、撮影装置、制御方法、及びプログラム | |
JP2016032242A (ja) | 撮像装置、撮像制御方法およびプログラム | |
JP2015159511A (ja) | 撮影機器及び画像記録方法 | |
JP2013211861A (ja) | 撮像装置、撮像方法、再生表示装置および再生表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190329 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190604 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6537608 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |