JP5198192B2 - 映像復元装置および方法 - Google Patents
映像復元装置および方法 Download PDFInfo
- Publication number
- JP5198192B2 JP5198192B2 JP2008234795A JP2008234795A JP5198192B2 JP 5198192 B2 JP5198192 B2 JP 5198192B2 JP 2008234795 A JP2008234795 A JP 2008234795A JP 2008234795 A JP2008234795 A JP 2008234795A JP 5198192 B2 JP5198192 B2 JP 5198192B2
- Authority
- JP
- Japan
- Prior art keywords
- edge
- red
- channel
- video
- effective value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 44
- 238000012937 correction Methods 0.000 claims description 14
- 238000001514 detection method Methods 0.000 claims description 7
- 230000006837 decompression Effects 0.000 claims 1
- 230000006870 function Effects 0.000 description 43
- 238000010586 diagram Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 7
- 230000004075 alteration Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 238000009792 diffusion process Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000006866 deterioration Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000005304 optical glass Substances 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/142—Edging; Contouring
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/20—Circuitry for controlling amplitude response
- H04N5/205—Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic
- H04N5/208—Circuitry for controlling amplitude response for correcting amplitude versus frequency characteristic for compensating for attenuation of high frequency components, e.g. crispening, aperture distortion correction
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Color Television Image Signal Generators (AREA)
Description
(式3)
Red ES Compensation(x, y) = W × ES of Red(x, y)
Blue ES Compensation(x, y) = W × ES of Blue(x, y)
110 映像入力部
120 エッジ強度検出部
130 エッジ強度補正部
140 有効値生成部
150 点拡散関数推定部
160 映像復元部
200 映像キャプチャーシステム
205 レンズ
210 絞り
215 イメージセンサ
220 ADC
225 メモリ
230 駆動回路
235 CPU
240 操作手段
Claims (19)
- 入力映像から赤、緑および青チャネル別にエッジ強度を検出して、前記赤、緑および青チャネル別にエッジマップを生成するエッジ強度検出部と、
前記検出された緑チャネルのエッジ強度を用いて前記検出された赤および青チャネルのエッジ強度を補正するエッジ強度補正部と、
前記補正された赤および青チャネルのエッジ強度からブラーレベルを示す有効値を生成する有効値生成部と、
前記有効値に対応する点拡散関数を推定する点拡散関数推定部、および
前記点拡散関数を用いて前記入力映像を復元する映像復元部を含む映像復元装置。 - 前記エッジ強度検出部は、ハイパスフィルタを適用してチャネル別にエッジ強度を検出する、請求項1に記載の映像復元装置。
- 前記ハイパスフィルタはラプラシアンフィルタである、請求項2に記載の映像復元装置。
- 前記エッジ強度補正部は、前記緑チャネルのエッジ強度によって形成されたウェイトを用いて前記赤または青チャネルのエッジ強度を補正する、請求項1に記載の映像復元装置。
- 前記補正された赤または青チャネルのエッジ強度は、前記検出された赤または青チャネルのエッジ強度と前記緑チャネルのエッジ強度によって形成されたウェイトを乗じて算出する、請求項4に記載の映像復元装置。
- 前記有効値は前記補正された赤チャネルのエッジ強度の全体の合計と前記補正された青チャネルのエッジ強度の全体の合計の比で算出する、請求項1に記載の映像復元装置。
- 前記点拡散関数推定部は、前記有効値を多様な距離で撮影された映像の有効値と比較することによって、前記有効値とマッチされる被写体からイメージセンサまでの距離を算出し、前記算出した距離に応じる鮮明度が最も高いチャネルとこれに該当する点拡散関数を推定する、請求項1に記載の映像復元装置。
- 前記映像復元部は、前記点拡散関数にデコンボリューションフィルタを適用してブラーを除去することによって前記入力映像を復元する、請求項1に記載の映像復元装置。
- 前記デコンボリューションフィルタはWienerフィルタまたはLucy−Richardsonフィルタである、請求項8に記載の映像復元装置。
- 被写体から映像を撮影する撮像素子と、
前記撮影のためのレンズおよび絞りを調節する駆動回路、および
前記撮影された映像に含まれたブラーを除去する映像復元装置を含む映像キャプチャーシステムにおいて、
前記映像復元装置は、
入力映像から赤、緑および青チャネル別にエッジ強度を検出し、前記赤、緑および青チャネル別にエッジマップを生成するエッジ強度検出部と、
前記検出された緑チャネルのエッジ強度を用いて、前記検出された赤および青チャネルのエッジ強度を補正するエッジ強度補正部と、
前記補正された赤および青チャネルのエッジ強度からブラーレベルを示す有効値を生成する有効値生成部と、
前記有効値に対応する点拡散関数を推定する点拡散関数推定部、および
前記点拡散関数を用いて、前記入力映像を復元する映像復元部を含む映像キャプチャーシステム。 - 入力映像から赤、緑および青チャネル別にエッジ強度を検出して、前記赤、緑および青チャネル別にエッジマップを生成する段階と、
前記検出された緑チャネルのエッジ強度を用いて、前記検出された赤および青チャネルのエッジ強度を補正する段階と、
前記補正された赤および青チャネルのエッジ強度からブラーレベルを示す有効値を生成する段階と、
前記有効値に対応する点拡散関数を推定する段階、および
前記点拡散関数を用いて、前記入力映像を復元する段階を含む映像復元方法。 - 前記チャネル格別にエッジ強度を検出する段階は、ハイパスフィルタを適用して、チャネル別にエッジ強度を検出する、請求項11に記載の映像復元方法。
- 前記ハイパスフィルタはラプラシアンフィルタである、請求項12に記載の映像復元方法。
- 前記検出された赤および青チャネルのエッジ強度を補正する段階は、前記緑チャネルのエッジ強度によって形成されたウェイトを用いて、前記赤または青チャネルのエッジ強度を補正する、請求項11に記載の映像復元方法。
- 前記補正された赤または青チャネルのエッジ強度は、前記検出された赤または青チャネルのエッジ強度と前記緑チャネルのエッジ強度によって形成されたウェイトを乗じて算出する、請求項14に記載の映像復元方法。
- 前記有効値は前記補正された赤チャネルのエッジ強度の全体の合計と前記補正された青チャネルのエッジ強度の全体の合計の比で算出する、請求項11に記載の映像復元方法。
- 前記点拡散関数を推定する段階は、前記有効値を多様な距離で撮影された映像の有効値と比較することによって、前記有効値とマッチされる被写体からイメージセンサまでの距離を算出し、前記算出した距離に応じる鮮明度が最も高いチャネルとこれに該当する点拡散関数を推定する、請求項11に記載の映像復元方法。
- 前記入力映像を復元する段階は、前記点拡散関数にデコンボリューションフィルタを適用してブラーを除去することによって前記入力映像を復元する、請求項11に記載の映像復元方法。
- 前記デコンボリューションフィルタはWienerフィルタまたはLucy−Richardsonフィルタである、請求項18に記載の映像復元方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2007-0092745 | 2007-09-12 | ||
KR1020070092745A KR101399012B1 (ko) | 2007-09-12 | 2007-09-12 | 영상 복원 장치 및 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009070384A JP2009070384A (ja) | 2009-04-02 |
JP5198192B2 true JP5198192B2 (ja) | 2013-05-15 |
Family
ID=40431434
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008234795A Active JP5198192B2 (ja) | 2007-09-12 | 2008-09-12 | 映像復元装置および方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8159552B2 (ja) |
JP (1) | JP5198192B2 (ja) |
KR (1) | KR101399012B1 (ja) |
CN (1) | CN101388952B (ja) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2009128798A1 (en) * | 2008-04-16 | 2009-10-22 | Nikon Corporation | Method for deblurring an image that produces less ringing |
KR100990791B1 (ko) * | 2008-12-31 | 2010-10-29 | 포항공과대학교 산학협력단 | 영상의 블러 제거 방법 및 블러 제거 방법이 기록된 기록매체 |
JP2010288150A (ja) * | 2009-06-12 | 2010-12-24 | Toshiba Corp | 固体撮像装置 |
US20110044554A1 (en) * | 2009-08-21 | 2011-02-24 | Konica Minolta Systems Laboratory, Inc. | Adaptive deblurring for camera-based document image processing |
JP4762336B2 (ja) * | 2009-09-15 | 2011-08-31 | 株式会社東芝 | 映像処理装置及び映像処理方法 |
CN102203827B (zh) | 2009-10-02 | 2013-05-29 | 香港中文大学 | 用于编辑图像的方法和装置 |
JP5528139B2 (ja) | 2010-02-02 | 2014-06-25 | キヤノン株式会社 | 画像処理装置、撮像装置および画像処理プログラム |
CN102388402B (zh) * | 2010-02-10 | 2015-08-19 | 杜比国际公司 | 图像处理装置及图像处理方法 |
JP5757099B2 (ja) * | 2010-02-15 | 2015-07-29 | 株式会社ニコン | 焦点調節装置、及び焦点調節プログラム |
CN102422632B (zh) * | 2010-04-23 | 2014-04-30 | 松下电器产业株式会社 | 摄像装置以及图像复原方法 |
EP2386997A1 (en) * | 2010-05-12 | 2011-11-16 | Sony Corporation | Radiometric imaging device and corresponding method |
CN101937561A (zh) * | 2010-09-19 | 2011-01-05 | 华中科技大学 | 一种天基大视场成像点源/斑状目标的图像恢复增强方法 |
US9319578B2 (en) * | 2012-10-24 | 2016-04-19 | Alcatel Lucent | Resolution and focus enhancement |
US9344736B2 (en) | 2010-09-30 | 2016-05-17 | Alcatel Lucent | Systems and methods for compressive sense imaging |
JP5183715B2 (ja) * | 2010-11-04 | 2013-04-17 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US8655096B2 (en) | 2011-09-30 | 2014-02-18 | Apple Inc. | Automatic image sharpening using entropy-based blur radius |
CN103971319B (zh) * | 2013-05-13 | 2017-06-09 | 段然 | 一种由计算机执行的图像处理方法 |
CN103491296B (zh) * | 2013-07-30 | 2016-05-25 | 宁波迪吉特电子科技发展有限公司 | 一种高速摄像的实现方法 |
CN104243837B (zh) * | 2014-08-28 | 2017-06-16 | 浙江大学 | 基于单次曝光视频重建的颤振探测和遥感图像恢复方法 |
CN104794727B (zh) * | 2015-05-05 | 2016-06-08 | 中国人民解放军国防科学技术大学 | 一种基于对称性的单透镜计算成像psf快速标定方法 |
US10250782B2 (en) * | 2015-10-08 | 2019-04-02 | Samsung Electro-Mechanics Co., Ltd. | Camera module, electronic device, and method of operating the same using pre-estimated lens-customized point spread function (PSF) |
KR20180033367A (ko) | 2016-09-23 | 2018-04-03 | 삼성전자주식회사 | 패턴 측정 방법 및 그를 포함하는 반도체 소자의 제조 방법 |
CN109002805A (zh) * | 2018-07-25 | 2018-12-14 | 朱丽萍 | 基于区块链分析的现场滤波架构 |
CN111696064B (zh) * | 2020-06-15 | 2023-08-18 | 北京金山云网络技术有限公司 | 图像处理方法、装置、电子设备及计算机可读介质 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2951461B2 (ja) | 1991-12-16 | 1999-09-20 | 日本電気ホームエレクトロニクス株式会社 | カラービデオカメラ |
JPH0984031A (ja) | 1995-09-19 | 1997-03-28 | Sony Corp | 撮像信号処理回路 |
JPH10327422A (ja) | 1997-05-23 | 1998-12-08 | Nippon Samusun Kk | 色情報補間方法及びその補間回路 |
KR100247938B1 (ko) * | 1997-11-19 | 2000-03-15 | 윤종용 | 영상처리 시스템의 디지탈 초점 조절방법 및 장치 |
JP3980799B2 (ja) * | 1999-08-19 | 2007-09-26 | 株式会社リコー | 自動合焦装置およびその合焦方法 |
US6628330B1 (en) | 1999-09-01 | 2003-09-30 | Neomagic Corp. | Color interpolator and horizontal/vertical edge enhancer using two line buffer and alternating even/odd filters for digital camera |
KR100311482B1 (ko) | 1999-10-21 | 2001-10-18 | 구자홍 | 보간 영상의 화질 개선을 위한 필터링 제어방법 |
JP2002077644A (ja) * | 2000-08-24 | 2002-03-15 | Minolta Co Ltd | 画像読取装置 |
JP2003018407A (ja) * | 2001-07-02 | 2003-01-17 | Konica Corp | 画像処理方法及び画像処理装置 |
JP2003172873A (ja) | 2001-09-28 | 2003-06-20 | Olympus Optical Co Ltd | 補正データ作成方法及び撮像装置 |
KR101043101B1 (ko) | 2004-06-25 | 2011-06-20 | 엘지전자 주식회사 | 광 픽업 액츄에이터 |
US7728844B2 (en) * | 2004-07-09 | 2010-06-01 | Nokia Corporation | Restoration of color components in an image model |
US20060093234A1 (en) * | 2004-11-04 | 2006-05-04 | Silverstein D A | Reduction of blur in multi-channel images |
KR100708465B1 (ko) * | 2005-02-03 | 2007-04-18 | 삼성전자주식회사 | 컬러 상관 유사도와 다방향 에지 정보를 이용한 컬러 필터보간 방법 |
KR100639164B1 (ko) * | 2005-03-12 | 2006-10-26 | 전재춘 | 영상 장치의 흔들림에 의한 영상 블러링 제거 방법 |
JP4945943B2 (ja) * | 2005-07-14 | 2012-06-06 | 株式会社ニコン | 画像処理装置 |
JP2009235681A (ja) * | 2008-03-26 | 2009-10-15 | Toray Ind Inc | ユニット床材 |
-
2007
- 2007-09-12 KR KR1020070092745A patent/KR101399012B1/ko active IP Right Grant
-
2008
- 2008-08-25 US US12/230,166 patent/US8159552B2/en active Active
- 2008-09-12 CN CN2008102131168A patent/CN101388952B/zh active Active
- 2008-09-12 JP JP2008234795A patent/JP5198192B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
CN101388952A (zh) | 2009-03-18 |
JP2009070384A (ja) | 2009-04-02 |
CN101388952B (zh) | 2012-03-28 |
KR20090027488A (ko) | 2009-03-17 |
US8159552B2 (en) | 2012-04-17 |
US20090066818A1 (en) | 2009-03-12 |
KR101399012B1 (ko) | 2014-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5198192B2 (ja) | 映像復元装置および方法 | |
JP6327922B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
US8483504B2 (en) | Digital auto-focusing apparatus and method | |
JP5709911B2 (ja) | 画像処理方法、画像処理装置、画像処理プログラムおよび撮像装置 | |
US8830351B2 (en) | Image processing method and image processing apparatus for image restoration to reduce a detected color shift | |
US8531545B2 (en) | Image processing apparatus, including a filter acquisition part, and image pickup apparatus | |
US9324153B2 (en) | Depth measurement apparatus, image pickup apparatus, depth measurement method, and depth measurement program | |
US10097802B2 (en) | Image processing technique for reducing moire | |
US20090067742A1 (en) | Image restoration apparatus and method | |
US20180182075A1 (en) | Image processing apparatus, image capturing apparatus, method of image processing, and storage medium | |
WO2013031102A1 (ja) | 画像処理装置、撮像装置および画像処理方法 | |
KR101341101B1 (ko) | 영상 복원 장치 및 복원 방법 | |
US9262833B2 (en) | Methodology for performing depth estimation with defocused images under extreme lighting conditions | |
CN106993111B (zh) | 摄像装置、摄像方法及记录介质 | |
US10235742B2 (en) | Image processing apparatus, image capturing apparatus, image processing method, and non-transitory computer-readable storage medium for adjustment of intensity of edge signal | |
JP4818956B2 (ja) | 撮像装置およびその方法 | |
JP6333076B2 (ja) | 撮像装置、撮像装置の制御方法、プログラム、および、記憶媒体 | |
JP2015109681A (ja) | 画像処理方法、画像処理装置、画像処理プログラムおよび撮像装置 | |
JP6486076B2 (ja) | 画像処理装置および画像処理方法 | |
JP6452389B2 (ja) | 画像処理装置および画像処理方法 | |
JP2016174263A (ja) | 動画撮影に好適な画像処理機能とそれを有する撮像装置、画像処理装置、画像処理方法、画像処理プログラム | |
KR20160112183A (ko) | 포커스 제어 장치 및 포커스 측정 방법 | |
JP6604737B2 (ja) | 画像処理装置、撮像装置、画像処理方法、画像処理プログラム、および、記憶媒体 | |
JP2019022002A (ja) | 画像処理装置および画像処理プログラム | |
JP2017224906A (ja) | 画像処理方法およびそれを用いた撮像装置、画像処理装置、画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110830 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120828 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130122 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130206 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160215 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5198192 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |